自我介绍
医美妃械字号医用面膜好用吗《合作微信:bk4392》 直销,零售,批发,招代理,一手货源直供,现货批发零售广招实力代理,现货批发零售,接受代发!
来源：数据实战派
让机器可以通过自然语言和人类自由地交流，是人工智能领域的重要目标和重大挑战之一。近年来，在深度学习技术的支持下，聊天机器人生成与聊天内容相关回复的能力与日俱增，甚至可以以假乱真，让人类无从分辨。
不过，现存的开放式对话系统的在训练阶段仅仅模仿人类产生回复。然而，不同的人类的回复在聊天场景中产生的效果存在很大差别：有些回复能吸引他人与之互动；而有些回复则十分平淡，不能激起其他人与之讨论交流的兴致。因此，一个优秀的聊天机器人应该在‘类人’的基础上更进一步，成为吸引人的谈话者，能够积极主动的推进对话进程。
在今年的自然语言处理顶会EMNLP上，微软的研究人员向这一新的目标进发。他们从社交网络现存的数据中提取人类反馈信息。通过基于这些反馈信息的训练，让聊天机器人在选择回复时，可以在考虑回复内容相关性的基础上，同时考虑人类的偏好：即选出那些可以收获积极回应的回复。
寻找合适的人类反馈数据
想要得这样的机器人，首先需要通过合适的数据了解人类的偏好。这样的数据应该是一对多的聊天形式，即在同一个聊天场景下有多条回复，每个回复有反应其受欢迎程度的指标，表示该回复所收到的反馈的热烈程度。
然而，直接收集一对多的聊天数据并雇佣人类进行标注费时耗力。况且反馈热烈程度的标注不是一位标注者就可以的，而需要多人进行投票。同时，其他常规的可以自动计算的质量评测指标，如词语多样性等，也并不能反映人类的偏好程度。
因此，研究者从社交网络寻找合适的人类反馈数据。
如图1所示，社交网络上的帖子和回复评论可以组成一个树状结构。每个节点表示一条评论，包含它的内容，点赞/反对数目信息。每个节点的父节点是它所回复的评论，每个节点的子节点是回复它的评论。对一个节点来说，从根节点到其父节点的路径定义它产生的语境C（上文信息），这条评论也就是针对该语境C的回复r。在这样的设定下，就可以得到一条对话数据（C， r）。由于一条评论可以获得多条回复，即一个父节点可以拥有多个子节点，正是一对多形式的对话数据。
每一条评论的反馈数据包含三种：（1）宽度：获得评论的数目，即子节点的数目。（2）深度：在此之后评论回复的轮数，即子孙节点的最大深度。（3）赞同数，包含点赞数和反对数。作者利用Reddit网站上的数据对这三个指标进行根据相关性研究。
结果如图2所示，宽度和深度具有较强的相关性，但与点赞数的相关性却比较弱。作者猜测可能的原因是人们点赞表示赞同后就不再评论了。值得注意的是，此处的Updown指标为点赞数和反对数的差值。也许有争议的帖子更能激起人们的讨论，那么点赞数和反对数都比较多或者差距较小的帖子反而会引起激烈的讨论，宽度和深度更大。
这三个指标均可以从一些方面反映人类反馈的热烈程度。但根据相关研究，尽管点赞数和受欢迎程度大体相关，但也受许多其他因素的影响。首先，这些指标均表现出长尾分布的特性，少量的回复收到了绝大多数的回复和点赞。此外，这些指标还与帖子所在的板块，评论发布的时间和发布者在社交网络的影响力有关。因此在使用这些数据训练模型时，需要仔细进行规范化。
DIALOGRPT：基于GPT2的12层transformer模型
接下来，研究者利用这些数据将人类的对回复的偏好信息注入模型。给定一个聊天场景C和一系列回复，模型需要根据这些回复收到的反馈的热烈程度，即宽度、深度、点赞数三个指标，分别对它们进行排序。
现存的聊天系统主要回复相关性（如困惑度perplexity和互信息）或人工设计的特征来衡量候选集中回复的合适程度。这种方式无法以端到端的形式直接利用现实世界中的人类反馈数据进行训练。
前文提及过，众多因素均可能对一条评论的收到反馈的情况产生影响，因此作者将排序问题转换为比较问题。在训练过程中，模型不再单独预测一条评论的分数，而是每次比较两条具可比性的回复：训练模型对正例（获得的回复或点赞更多）赋予更高的分数。
为了使正负例具有可比性，作者对数据对做了严格的限制：（1）正负例两条回复产生于同一聊天场景，即它们的C相同。也就是在社交网络回复树中，两条评论的父节点相同。（2）两条评论产生的时间间隔不超过确定的阈值（本文中为一小时）。避免时间差过大对反馈情况带来的影响。（3）正例的回复数需超出负例某一阈值以上，以减小噪声。由于三个衡量回复的指标具有长尾特性，作者同时使用了绝对值阈值和百分比阈值对数据进行筛选，同时去掉反对数大于点赞数的数据。在多指标训练过程中，为了防止只有某一个指标产生作用，模型对它们进行加权组合。
在考虑了人类喜好程度的基础上，模型仍要可以同时评价回复的和聊天场景的内容相关性。因此，研究者引入了human-vs-fake任务，即给定语境和评论，判断该评论是否来自此聊天场景。
研究者从Reddit网站上爬取了2011-2012年的帖子和组成的1.47亿聊天数据（数据集已开源）。再学习人类偏爱信息的任务中，按照前文体积的处理方法共得到1.33亿对数据。
在学习内容相关性信息的任务中，负例通过两种途径得到：（1）检索式（Sampled）：随机从训练集中抽取。（2）生成式（Generated）：使用对话生成模型DialoGPT生成回复作为负例。由于DialoGPT模仿人类生成回复的能力非常强，因此作者只选择5.30万高反馈值的回复作为正例，以此和机器生成的结果进行区分。
利用这些数据，作者训练了基于GPT2的12层transformer模型DIALOGRPT（Dialog Ranking Pretrained Transformer），并使用DIaloGPT-medium初始化部分参数。作者将模型和BoW（词袋模型），Dialog perplexity（对话困惑度），BM2.5（关键词相似度衡量指标），ConvRT（Reddit数据上预训练的基于transformer模型）和长度等基准方法在不同实验设定下进行比较。
从词袋模型的分析结果中可以发现，包含较少信息量的回复收到的回应和点赞数目也比较少。而问题形式的回复（what/who/why/how）引起的对话更长（更深），受众更广的评论（anyone，everyone）会收到更多的直接评论（更宽）。如图4所示，DIALOGRPT模型也捕捉到了这样的信息。
接下来，作者通过两种排序方式对模型的能力进行定量测评。（1）与训练阶段的目标相同，给定正负两个样例，测试模型能否赋予正例更高的分数。（2）给定一组相同聊天场景下的回复，通过Spearman系数衡量模型排序结果与人类实际喜好程度的差异。
在两种不同的设定下，DIALOGRPT的效果均显著超过其他方法。
作者还将在Reddit上训练的模型直接应用于DailyDialog，Twitter，PersonaChat等数据集，根据聊天的场景检索合适的回复。如图6，该模型未曾在这些数据集上训练仍取得了最佳的结果。在Reddit数据集中，每个聊天场景下有多条正确的回复（k>5），因此作者引入了BLEU等基于参考的测评指标进行比较。DIALOGRPT模型并不能看到这些参考数据，但它显著超过了使用这些参考回复的方法。
接下来，作者对模型生成与内容相关回复的能力进行测评。他将利用不同数据和任务训练的模型进行比较。结果如图7所示。左上的实验结果显示和前文三个指标的相关性研究结果一致。根据右上的实验结果，利用人类偏好信息训练的模型区分正例人类回复和随机抽取的人类回复的能力较弱，但是却可以更好的区分机器生成的结果。
这说明，尽管DialogGPT可以生成内容相关的类人回复，但并不能收获较多的人类反馈。结果也表明，类人和符合人类偏好这两个任务的目标间还存在着一定的差距，因此在最后一行，作者将两个任务融合在一起训练模型，最终获得在这两方面都取得出色的结果。这样，模型就可以在选择回复时同时权衡两个指标。
在聊天机器人说话越来越像人的今天，如何生成高质量的回复就成为了新的研究方向。本文提出的，回复获得反馈的激烈程度正是高质量的一种具体表现。该目标在许多应用方向上都很有价值。例如在人们寄予厚望的心理干预领域，聊天机器人不仅需要产生内容相符的回复，同样需要让对话者保持交流的意愿，同时引导他转变为积极的心理状态。
稀土被誉为“万能之土”，广泛应用于新能源、新材料、航空航天、电子信息等领域。截至目前，已被多国列为“关键矿产”。
生产第一、出口第一、应用第一……我国稀土产业拥有资源与市场两大优势。近年来，通过加强资源保护，创新体系建设，我国努力推动稀土产业高质量发展。与此同时，私挖盗采、“黑矿”走私等乱象依然存在，影响稀土资源价值体现。
位于内蒙古自治区的白云鄂博矿，是世界公认的最大稀土矿。由于家底长期不清，基础研究“断档”，交易“恶性竞争”等原因，白云鄂博稀土矿长期被当成铁矿开采，核心技术被“卡脖子”，稀土价格偏离真实价值。
专家建议，应尽快摸清白云鄂博矿家底，补上基础研究短板，建立统一的国家交易平台，努力建设稀土强国，助推高质量发展。
60多年一直被当成铁矿开采
稀土是重要的战略资源，也是不可再生资源。美、日等发达国家也都将稀土列入战略矿产资源。
内蒙古自治区白云鄂博矿，是全球唯一一个同时包含17种稀土元素的矿。然而，在长达60多年的时间里，这个矿一直被当成铁矿开采。
中国稀土学会副理事长、白云鄂博稀土资源研究与综合利用国家重点实验室主任杨占峰表示，目前业界所采纳的白云鄂博矿稀土储量数据，仍是20世纪50年代的评估结果。因受限于当时铁矿石的需求和勘探手段，整个矿床并未完全探清，铁矿体外围和地表500米以下未做详细勘探。
中国科学院地质与地球物理研究所研究员范宏瑞说，起初认为矿体是一个倒扣的碗状型，后来认为矿体像一口大铁锅，但现在发现主矿富含稀土的矿脉，呈两个“大板子”状向下延伸，不知道它有多深。
范宏瑞认为，白云鄂博的稀土，实际上不止目前普遍认为的占我国83.7%的储量，“它可能超过世界目前探明储量1.2亿吨的总量”。
白云鄂博矿轻稀土储量巨大是业界共识，但重稀土也不容忽视。“白云鄂博中重稀土虽然比例很低，但因其稀土总含量高、总储量大，中重稀土总量仍然是百万吨级。”北方稀土集团董事长赵殿清说。
此外，内蒙古科技大学白云鄂博矿稀土及铌资源高效利用实验室研究发现，白云鄂博矿里作为核工业重要原料的铌和钍的含量，目前均居世界第二位。
多位专家说，由于历史原因，对白云鄂博矿的开采比较粗放，铁矿石中所含的其他矿产资源，都随着选矿废渣、废水进入到尾矿库里，未被有效利用。
白云鄂博矿开采之初，就有“以铁为主”还是“以稀土为主”的定位之争。“当时稀土研究水平有限，而国家对钢铁需求紧迫，于是在1965年确定‘以铁为主，综合利用’的方针。”杨占峰说。
不过，自1957年白云鄂博铁矿正式投产，距今已过去63年，早已超出铁矿开采的50年设计年限。目前已进入深部露天开采，开采成本越来越高，经济价值日趋降低，且产能不断下降。
业界认为，经过60多年的开采，白云鄂博铁矿的历史使命已经结束。依托白云鄂博矿发展起来的包钢集团，也在谋求战略转型。
“2016年以来，包钢实施以稀土为重心的战略转型，稀土产业规模不断扩大，2019年稀土营业收入达到180亿元。”包钢集团主要负责人表示，60多年来，包钢命运始终与共和国建设发展相连，新中国成立之初急需钢材，包钢作为首批钢铁企业而诞生，如今国内钢铁产能已经过剩，包钢也应积极转型，寻找新的历史使命。
杨占峰等认为，随着铁矿开采期限的结束，应对白云鄂博矿进行重新定位和再认识，并助力包钢转型升级为世界一流的稀土行业领军企业、全球最优稀土钢生产基地。
“不能再当铁去采了。”一位受访专家坦言，“白云鄂博矿是上天赐给我们的独特宝库，在全球空前重视战略矿产的大背景下，国家有必要组织专家队伍，重新开展白云鄂博矿地质勘探研究，摸清家底，重新定位其矿产价值，提升白云鄂博矿资源战略地位。”
“随着全球新的稀土矿床及深海潜在稀土资源的相继发现，我国现有的稀土资源优势面临严峻挑战。”杨占峰说，亟须摸清白云鄂博矿床稀土、铌等战略性矿产资源的准确家底，为国家制定长期战略政策提供科学依据。
中国科学院包头稀土研发中心主任池建义等人建议，立足白云鄂博矿产资源，制定全国稀土资源利用及应用发展规划，区别对待重稀土与轻稀土管控政策，将重稀土资源作为国家战略资源，将轻稀土资源依据市场供需规律运作，保证国家战略需求和稀土下游应用市场的平衡发展。
杨占峰等建议，依托白云鄂博矿产资源“大上项目，上大项目”，形成十万吨级稀土提取加工、万吨级铌金属冶炼等有用成分综合回收利用示范产业，让世界级宝山——白云鄂博矿更好地服务于国家战略。
人才匮乏制约我国稀土科技研发
“当今世界每六项新技术的发明，就有一项离不开稀土。”范宏瑞说。
记者采访发现，目前我国稀土研发，特别是基础研究层面，出现了不同程度的“断档”，核心技术被“卡脖子”，多年来难以摆脱“挖土卖土”、稀土卖成“白菜价”的尴尬。
“根本原因在于研发落后，特别是基础研究更是少有人问津，核心技术专利大量向国外购买。”池建义坦言。
中国工程院院士李卫表示，当前我国供应着全世界90%的稀土，生产着全球70%的稀土磁性材料，“但专利大多在日本和美国企业手中，出口产品还得向人家付专利费。生产的许多稀土材料部件，都不知道人家用在了什么地方”。
在杨占峰等人看来，我国稀土整体研究水平与国外大约相差20年，许多方面只知其然，不知其所以然。
由徐光宪院士率领的科研团队，20世纪70年代研发的稀土串级萃取理论工艺，是我国在稀土领域少有的国际领先技术，正是靠这一优势，我国在稀土分离方面抢占了制高点。
之后，我国在稀土技术研发上并无大的建树。据杨占峰介绍，直到2020年初，我国在江西赣州成立中科院稀土研究院。目前，各大院校没有稀土专业，沾边的也仅有中南大学和东北大学等高校的冶金工程专业。
人才匮乏已经成了我国稀土科技研发的瓶颈。目前，全国20余位与稀土研究相关的院士中，专门研究稀土的几乎没有。
内蒙古包头市有一所白云鄂博稀土资源研究与综合利用国家重点实验室，仅有13人建制，其中11位是从外面临时聘请的专家。
池建义等认为，由于人才匮乏、力量分散，我国很难就统一的稀土研究课题进行合作攻关，更难形成共同的稀土理论研究成果，使得我国稀土基础研究不连贯，核心技术研发乏力，难抢制高点。
被誉为“稀土之父”的徐光宪先生曾说，目前人类对稀土的认识不足四千分之一，探究空间巨大。
“现在我们像在‘蒸馒头’，只知道放‘碱面’，不知道背后的化学反应是什么。”杨占峰说，基础研究滞后制约着技术研发和产业应用，亟须数、理、化等多学科交叉，攻克稀土元素的内在机理。此类“烧钱”、费时费力的事情，需国家顶尖研究团队才能完成。
专家建议，在有一定基础的高校设立稀土专业，培养后续人才；同时，可由科技部牵头在稀土科研力量、设施设备、产业较集中的内蒙古包头市，组建一个国家级稀土综合研究院所。
他们认为，新组建院所决不能走老路，一定要创新体制机制，打造产、学、研、政、企共同参与的稀土研究应用国家平台，让稀土在国民经济中发挥“四两拨千斤”的作用。
盗采偷卖“黑稀土”仍屡禁不止
位于包头市黄河大街上的包头稀土产品交易所（简称“包头稀交所”），是国内稀土“明码标价”的交易所。
记者在这里看到，大屏幕上实时滚动着各种稀土产品的交易量和价格，展现着稀土系列指数和价格走势。
包头稀交所董事长李振宏颇为感慨地说，国内稀土企业交易绝大部分通过双方协商交易完成，真实成交价格就像“袖筒里掰手腕”——只有他们自己知道。
国内一家稀土生产企业负责人坦言，公司一直采用传统贸易方式，稀土定价由公司领导内部开会决定，“就是靠低价竞争，维持自己的市场份额”。
记者调查发现，国内六大稀土集团及下属企业，在销售环节仍各自为战，贸易方式传统，成交价格不透明，行业内部竞争混乱。
“国外都是大买家，而我们是上百家企业分散对外销售，国外买家在低价时大量买进，价格上涨时则停止采购、使用库存，逼着国内企业竞相降价出售。”李振宏说。
“黑稀土”交易是稀土市场另一乱象。尽管近几年，国家持续整治打击“黑稀土”，但假借废料回收、进口稀土名义盗采偷卖的“黑稀土”仍屡禁不止。
2019年全国稀土开采量配额控制在13.2万吨，但实际产量大大超出。据业内估计，目前市场上流通的稀土中，来源不明、生产指令性计划外的“黑稀土”，已经超过一半以上，导致供过于求，加剧稀土低价外销现象。
数据显示，近年来国内六大稀土集团的销售毛利率也明显下降。其中，北方稀土集团的销售毛利率，从2011年最高72.8%，下降到2019年的10%左右。
我国是全球最大的稀土生产国、出口国、消费国，拥有稀土资源与市场两大优势地位，但一直没有取得相应的稀土定价权。
“原因之一在于没有形成全国统一的稀土产品交易市场，缺乏客观价格形成机制。”李振宏说。
其实早在2011年5月，在国家有关部门的指导下，内蒙古就批准成立了包头稀土产品交易所，由北方稀土、中铝稀土、五矿稀土、国储中心等13家稀土骨干企业、机构共同出资组建，当时此举被视为中国稀土产业谋求国际定价权的关键之举。此后，国内相继设立湖南南方稀贵金属交易所、江西赣州稀有金属交易所等平台。
然而9年过去了，国内稀土交易依然是线上线下“两张皮”。目前，全国稀土企业在公开交易平台上的交收量微乎其微。2019年，包头稀交所的实际交收额仅13.3亿元，交收量仅0.3万吨。
李振宏分析，除本身交易机制不够成熟外，平台级别低、指令性生产和市场化交易相矛盾等因素叠加，严重制约稀土交易平台发挥作用。
一方面，交易制度的设计空间不足。2011年以来，我国对非国家级交易所制定了很多限制措施，包头稀交所等几大交易平台，都是省区级交易平台，服务稀土行业的功能难以发挥。
另一方面，行业客户参与度不高。多家下游稀土应用企业反映，稀土产品生产是计划性管理，而下游应用是市场化行为，造成计划管理和市场行为的不协调。
稀土与黄金、石油一样都是国家战略资源，理应像黄金、石油一样有国家设立的交易所。业内人士和专家建议，必须尽快建立国家级统一交易平台，避免“区自为战”，形成公平、公开、公正的稀土定价机制，将稀土定价权牢牢掌控在自己手中。
业内专家认为，统一的国家级交易平台可以通过商业收储调节市场供需，实现供应稳定、开采销售可控，并建立出口可追溯机制，解决行业偷逃税问题，堵住“黑稀土”交易，避免稀土卖个“白菜价”。
包头市市长赵江涛表示，一个公开透明的全国统一市场，既可以通过价格形成机制理顺产业，也能成为实施国家战略和产业政策的抓手。
池建义等人指出，市场应用较多的轻稀土储量并不低，而且随着澳大利亚、美国、越南等国外稀土企业的投产，多元化的全球供应格局逐渐形成，轻稀土的开放竞争已经不可避免。因此，我国稀土调控政策不能轻重不分，应适时放开轻稀土，管住重稀土，促进轻稀土交易进入公开透明的市场化交易平台。
电商巨头亚马逊结束首款高预算射击视频游戏Crucible的开发工作，凸显出该公司仍然难以在游戏市场取得进展。
亚马逊10月9日表示，该公司未曾看到Crucible能有一个健康而可持续的未来，从事该项目的团队将被调往未来的游戏项目、消费者将获得退款。
Crucible被视为亚马逊2012年成立的游戏部门的一个关键考验。这款游戏在5月的发行时充斥着负面评论。一个月后，亚马逊推出了该游戏的封闭测试版，只有受邀者才能玩。在发布Crucible之前，该公司已经取消了之前发布的一款游戏，并在游戏部门裁员。
亚马逊方面表示：“这是一项充满爱的工作，我们很感激能和你们一起在克鲁斯堡星球度过这段时光。”
Crucible开发团队现在将专注于另一款名为《新世界（New World）》的原创游戏。今年早些时候，亚马逊表示将在8月份发布这款游戏，但后来将其推迟到2021年春季发布。
开发原创游戏是亚马逊进军电子游戏市场的战略之一。2014年，该公司收购了游戏玩家主导的直播服务Twitch。今年9月，亚马逊推出了一款名为Luna的订阅视频游戏流媒体服务，玩家无需像游戏机这样昂贵的硬件就可以玩游戏。
