预训练语言模型及其应用（英文）

预训练语言模型（pre-trained languages model, PTLM）在自然语言处理（natural language processing,NLP）领域取得了令人瞩目的成功,并由此引发了下游任务从监督学习到预训练-微调范式的转变。在此之后,一系列预训练模型的创新研究涌现出来。本文系统性、全面的回顾了自然语言处理的代表性工作和最新进展,并按照类别系统性的介绍了自然语言处理领域的预训练模型。首先我们简要介绍了预训练模型,以及不同的模型特点和框架。之后,我们介绍并分析了预训练模型的影响和挑战以及下游任务中的应用。最后,我们简要总结并阐述了预训练模型未来的研究方向。     

混料含水率对电解锰渣免烧砖性能的影响

以电解锰渣、水泥、骨料和水为主要原料制备电解锰渣免烧砖,在成型压力为10 MPa,水泥、骨料添加量分别为23％和25％的条件下,研究混料含水率对电解锰渣免烧砖各项性能的影响.结果 表明:混料含水率从20％增加至40％时,电解锰渣免烧砖抗压、抗折强度均先增大后减小,体积密度基本保持不变,线收缩率先减小后增大最后趋于稳定,吸水率和饱和系数总体先减小后增大.最适宜混料含水率为30％,此时砖样抗压、抗折强度均满足国家免烧砖MU10标准规定,其他性能参数均符合国家免烧砖一等品要求.     

碳化反沉淀法去除硫酸锰浸出液中钙、镁的研究

采用碳化沉锰法去除硫酸锰溶液中的钙、镁离子。以CO₂为碳化剂, 将硫酸锰溶液中的Mn²⁺以碳酸锰沉淀的形式从原溶液中分离出来, 然后用硫酸将沉淀物溶解, 从而达到除杂的目的。考查了CO₂流量、反应温度、pH值及反应时间对钙、镁离子去除效果的影响, 结果表明, 最适宜条件为反应温度45 ℃、溶液pH值7.0、CO₂流量2.7 L/min、反应时间60 min, 此时碳化产物中钙、镁离子含量分别为0.03%和0.01%, 达到了HG/T 2836-2011高纯碳酸锰Ⅰ型品的标准。     

基于IMC-PID的主动式太阳房温度控制系统

针对主动式太阳房采暖房间系统的温度控制问题,具有非线性、大滞后、参数整定复杂等特点,在研究主动式太阳房的工艺基础上,利用内膜控制(IMC)调节参数简单、鲁棒性强与传统PID易于实现相结合的特点,设计了控制系统,实验仿真表明,该算法控制参数整定简单,具有良好的抗干扰性和鲁棒性,能有效提高系统的控制品质,实现主动式太阳房的最佳控制,不仅能优化生产采暖过程,而且可提高太阳能能源利用率、达到节能的目的,具有重要的实用价值与推广价值     

气相色谱-质谱法测量有机溶剂的水分含量

水分是有机溶剂的主要杂质之一,需要快速准确的测定,以保证产品质量合格。采用气相色谱-质谱仪(GC-MS)测量11种有机溶剂中的水分含量。采用重量法配制水的辛醇标准溶液来校准GC-MS,使得水分含量溯源到纯水质量的SI单位;采用标准加入法测定空白辛醇的水分含量,使GC-MS成为一种完全独立的水分测量方法。11种有机溶剂的水分含量在200～3 300 mg/kg范围内,测量结果的相对标准偏差在0.6%～22%范围内,测量方法的检出限为85 mg/kg。水分含量在160～1 500 mg/kg范围内的8种有机溶剂,相对误差在-8.5%～27%范围内,准确度较好。该方法适用于中低水分含量的有机溶剂的测量,可以广泛应用在水分快速筛查和生产工艺控制等领域。     

电化学水处理中碳酸钙结晶形态的研究

研究在电化学水处理中,电场对Ca CO3结晶形态的影响。正常情况下,Ca CO3形成稳定方解石型,其晶型通常为排列整齐、结构致密、质地坚硬的方解石型,难以去除。但在电场效应作用下,电流为0.3 A、极板间距为50 mm时,电场力能有效地促使Ca CO3结晶形式转变为较为疏松的纹石型和球霰石型晶体,使其不容易附着在管道壁上且便于剥离去除。     

黄体酮纯度标准物质的研究

通过定性分析、定值分析、杂质分析、均匀性检验、稳定性考察和不确定度评定,研制了黄体酮纯度标准物质,并且成功申报成为国家标准物质(编号GBW100119).其中采用高效液相色谱法与差示扫描量热法对黄体酮纯度标准物质进行了定值分析.准确的定值结果为99.2%,相对扩展不确定度为0.5%.对于临床检验中黄体酮的准确测定及相关...     

平果赤泥综合利用现状和开发研究展望

介绍了平果赤泥铁、稀有金属含量高，因而综合利用价值大的特性。对平果赤泥综合利用的现状作了简要述评，提出了开发研究的方案和建议。     

聚己二酸-1,2-环己二醇酯的合成

聚酯多元醇是合成聚氨酯的主要原料,该文对1,2-环己二醇的衍生物聚己二酸-1,2-环己二醇酯的合成进行了较为详细的研究。考察了醇酸摩尔比、反应温度、反应升温方式、反应时间、减压时间、催化剂的用量和稳定剂的用量等因素对所合成的聚酯多元醇的酸值、羟值、相对分子质量和反应程度的影响。采用单因素优选法对合成工艺条件进行了优化,得到了合成聚己二酸-1,2-环己二醇酯的较佳工艺条件:缩聚反应温度180℃,反应时间3 h,n(1,2-环己二醇)∶n(己二酸)=1.6∶1,催化剂的用量为己二酸投料质量的0.8%,稳定剂用量为己二酸投料质量的0.3%。在此条件下合成出的聚己二酸-1,2-环己二醇酯为淡黄色、透明黏稠液体,酸值<9.3 mg/g,羟值50~70 mg/g,相对分子质量1 000~2 000。     

WBC250稳定土厂拌设备粉料系统的改造

针对WBC250稳定土厂拌设备粉料系统在现场施工存在的水泥流失量大，污染重的问题，并通过对改进后的进料不畅导致电机烧坏等新问题的分析，以理论为根据提出了在出料口处加装节流槽装置降低水泥的超量喷射，在料斗内加设第二层钢板增大水泥流动活性的解决方案，并在实践中逐步完善，对现有WBC250粉料系统的故障提出了彻底的改进方案。