近红外光谱建模标准

仪器信息网近红外光谱建模标准专题为您提供2024年最新近红外光谱建模标准价格报价、厂家品牌的相关信息, 包括近红外光谱建模标准参数、型号等,不管是国产,还是进口品牌的近红外光谱建模标准您都可以在这里找到。 除此之外,仪器信息网还免费为您整合近红外光谱建模标准相关的耗材配件、试剂标物,还有近红外光谱建模标准相关的最新资讯、资料,以及近红外光谱建模标准相关的解决方案。
当前位置: 仪器信息网 > 行业主题 > >

近红外光谱建模标准相关的仪器

  • 无线近红外光谱仪来了。MicroNIR OnSite-W无线手持近红外光谱仪产品设计符合人体工程学原理,结构紧凑,坚固抗震。无论生产现场还是野外应用,OnSite-W均是理想的近红外解决方案,其软件功能强大,用户界面直观,可在平板电脑或笔记本电脑上方便使用。操作人员仅需极少的培训即可在现场完成快速检测及分析。MicroNIR OnSite-W是目前世界上最小的全集成近红外光谱仪,该产品的核心技术是美国VIAVI Solutions公司的线性渐变技术(LVF),其优势是整机无任何移动部件,符合IP65 / IP67防尘防水等级要求。MicroNIR OnSite-W可广泛应用于食品,农业,医药和安防领域的现场快速检测。技术特点? 快速,实时,无损的近红外光谱分析技术;? 无线传输,超紧凑,符合人体工程学的手持式近红外光谱仪;? 具有用于一键式数据采集的多功能按钮;? 内置可充电电池,工作时间大于10小时;? IP65和IP67等级,适用于潮湿和多尘的复杂环境;? 可通过蓝牙或USB接口与平板电脑或者笔记本电脑连接,操作方便;? 与原装MicroNIR OnSite配件兼容;? 用户界面直观,方便用户使用。
    留言咨询
  • 谱育科技面对油品快速分析领域日益增长的检测需求,在近红外光谱技术平台基础上,研制了创新的油品全自动高精度分析仪(EXPEC 1360A),同时满足对油品中常规理化指标的定量分析和定性判别,可作为实验室、车载以及在线检测使用。产品概述性能特点快:自动进样分析,可以连续在线监测物料;准:汽油辛烷值分析误差小于0.3;选配U型管震荡密度计,密度检测精度可达到0.0005 g/cm3;稳:车载使用,抗震性能好。操作简单,测量快速自动进样分析,可以连续在线监测物料;全中文显示和操作软件界面直观、操作简单,将仪器操作、建模和数据处理融合一体;可加入近红外网络系统,实现数据传输,仪器维护,远程诊断,模型升级服务等功能。选配电池,续航能力8h应用领域石油化工炼厂质检中心、油库质检中心
    留言咨询
  • FI-RXT-TS傅里叶变换近红外光谱仪产品介绍FI-RXT-TS 是专用于分析实验室液体和固体样品的双通道近红外光谱仪。该套设备共用同一个干涉仪和检测器,通过光路的切换实现对两种不同状态样品进行透射和反射测量。其中透射通道主要用于透明液体的测量,该通道可以使用不同光程的样品瓶及比色皿,同时样品腔带有温控功能,确保样品在稳定的环境中进行测试; 反射通道主要配备了积分球模块和内置镀金反射背景板,用于检测固体样品的漫反射信号。双通道模块集成在一台主机上,满足用户同时需要液体和固体测量的场景。配合 S-Cal和S-Seq软件,可对各种类型的样品进行快速分析检测。产品特点傅里叶技术高分辨,近红外全谱区覆盖适合液体透射和固体漫反射测量方式内置积分球,内置自动切换镀金背景液体透射模块包含温控功能自动优化功能的S-Cal建模软件自动采谱及预测功能的S-Seq软件应用领域该套配置适合透明液体或固体样品的检测,用于分析原料、产品及过程样的日常指标化工行业:聚醚多元醇的羟值、碘值、皂化值和水分等聚氨酯行业:NCO、粘度等醋酸合成行业:碘甲烷、醋酸和水分等石化行业:汽油调和中辛烷值、烯烃、芳烃、和馏程等制药行业:中药提取浓缩过程中有效组份及溶剂含量油品行业:食用油中水分、蛋白、碘值、不饱和脂肪酸等食品行业:水分、蛋白、脂肪、氨基酸、脂肪酸等含量分析乳品行业:蛋白质、脂肪、碳水化合物、能量等成分分析饲料行业:饲料原料,成品中水分、蛋白、碘值和氨基酸等纺织行业:纺织品中棉、麻、氨纶和锦纶等含量分析可选配件样品瓶及插槽: 6mm/8mm外径比色皿及插槽: 1mm/2mm/5mm光程自动旋转台+大样品杯:用于测量大颗粒及不均匀的样品,如大豆,玉米和小麦;自动旋转台+培养皿:用于测量酸奶等糊状样品;小样品杯:用于测量白糖、中药粉末等均匀或量少的样品主要技术参数项目标准配置特点光谱范围12,500~4,000cm⁻ ¹ (800~2500nm)近红外全波段光谱分辨率优于2cm-¹ 高分辨波长准确度0.1cm⁻ ¹ 光源卤钨灯使用寿命5年干涉仪立体角镜干涉仪恒久准直分束器氟化钙CaF₂ 检测器电制冷铟镓砷InGaAs激光器固态激光器使用寿命10年
    留言咨询

近红外光谱建模标准相关的方案

  • 近红外光谱结合人工神经网络分析蔗汁的锤度和旋光度
    本文采用中波近红外光谱结合BP-ANN 建模的方法,建立了蔗汁锤度和旋光度的定量分析模型。对未知样品的预测结果显示, 该方法可满足糖业生产管理的分析要求。与全波段近红外仪器相比, 中波近红外光谱仪具有较佳的性价比, 可以快速分析蔗汁的多个指标, 操作简便, 分析结果准确, 可用于甘蔗收购的按质论价、糖厂生产过程的分析与控制。
  • 班菲尔脐橙可溶性固形物近红外光谱特征谱区选择
    利 用多元散射校正法(MSC)对脐橙近红外光谱进行了预处理,然后分别采用偏最小二乘法、区间偏最小二乘法和联合区间偏最小二乘法(siPLS)建立了可溶 性固形物(TSS)预测模型。结果表明,通过联合区间偏最小二乘法优选了班菲尔脐橙TSS的特征光谱区间(1267~1355nm、 1356~1443nm、1708~1795nm、2236~2323nm)进行建模,不仅能有效地剔除噪声过大谱区和冗余信息,减少建模所用的变量数,缩短运算时间,而且提高了脐橙TSS近红外光谱检测模型的预测能力和精度。
  • 瑞士步琦:近红外光谱分析检测鱼丸弹性的可行性研究
    本实验探讨利用近红外光谱分析技术(NIRS)测定鱼丸弹性的可能性,并建立数学模型。以质构仪采用一次压缩法测定鱼丸的弹性,取最大力作为建模数据。以定标集和验证集的相关系数及其预测标准误差作为模型好坏的判定依据。结果表明,采用偏最小二乘法(PLs)建立的数学模型,具有较高的相关系数和较低的预测误差。其中定标集的相关系数(Rc)为0.9709,定标集预测标准误差(SEc)为O.0203;验证集的相关系数(Rv)为O.9697,验证集预测标准误差(SEP)为O.0206。该研究说明利用近红外技术对鱼丸弹性进行预测是可行的。

近红外光谱建模标准相关的论坛

  • 【资料】近红外光谱分析中建模样品优选方法的研究

    [url=https://insevent.instrument.com.cn/t/1p][color=#3333ff]近红外光谱[/color][/url]分析中建模样品优选方法的研究 作者:王丽杰,郭建英,徐可欣 摘要:结合牛奶成分[url=https://insevent.instrument.com.cn/t/1p][color=#3333ff]近红外光谱[/color][/url]测量系统的实例,在已定的浓度范围内针对牛奶中脂肪、蛋白质、乳糖三成分采用正交设计法优选参与建模的样品。研究中首次利用正交表的“正交性”原理优选建模样品,并针对牛奶中脂肪浓度的测量采用偏最小二乘(PLS)回归方法交互验证方式建立模型。在此基础上,将正交设计样品集与常规方法选择的样品集的脂肪PLS模型的预测结果进行了对比。实验结果表明:采用正交设计样品集与常规样品集分别建立的PLS模型的预测偏差之差低于0.02g/100g,上述两种方法PLS模型的实际预测浓度与参考浓度之差均集中在0.1g/100g,而后者样品数量约为前者的七倍。进一步的实验结果表明:从常规样品集的样品中随机抽取与正交设计样品集的样品数量相同的样品作为随机样品集并建模,其PLS模型的预测偏差高于常规方法的两倍、相关系数相对较低,并且其实际预测浓度与参考浓度之差集中在0.4g/100g。关键词:近红(NIR)光谱分析;正交设计法;正交性;牛奶;偏最小二乘(PI )回归引言 [url=https://insevent.instrument.com.cn/t/1p][color=#3333ff]近红外光谱[/color][/url]的数据处理分析通常由三部分构成:建模样品(校正集样品)的选择及光谱的预处理、定性或定量模型的建立、未知样品组成或性质的预测。由于校正集样品的选择及其基础数据测量的准确性直接关系到所建模型的适用性和测试结果的准确性,因此,校正集样品的选择是[url=https://insevent.instrument.com.cn/t/1p][color=#3333ff]近红外光谱[/color][/url]数据处理及分析的关键环节。 校正集样品的选择过程中,样品的光谱特征及其性质范围应能涵盖以后未知样品的光谱特征。为保证校正模型的稳健性,校正集的样品数一般不应低于50个,且在所测的浓度或性质范围内,样品的个数应该是均匀分布的【l】。通常校正集样品的确定有常规选择和计算机识别两种方法【l】。常规选择是根据样品光谱的积累和性质或组成数据的分布来选择建立校正集的样品,并通过部分样品进行验证。计算机识别则是纯粹通过确定的计算模型,用计算机来识别所采集样品的光谱间差距,确定适合校正集的样品。依照常规方法建立校正样品集,其最大缺点是必须积累大量的样品以供选择。而计算机识别方法在很大程度上减少了常规方法测量基础数据的样品数,降低了建模费用,但仍然存在一定的缺陷:1)仍然要收集大量的样品谱图以便于判断选择;2)有些光谱的差异并非完全由所测样品的组成或性质差异引起,可能是某些随机因素如样品的温度、粒径大小、物粒形态等因素的差异造成;3)对不同的性质在最佳样品集的选择上可能存在差异,而仅从光谱的差异上有时难以体现;4)对那些含量较低的成分,其量的变化对整个谱图而言往往并不明显,此时如光谱处理方法不合理,也难以选出合适的样品集。 针对上述情况,研究中首次提出了一种利用正交表的“正交性”原理优选校正集样品的方法,并结合牛奶的[url=https://insevent.instrument.com.cn/t/1p][color=#3333ff]近红外光谱[/color][/url]测量的实例对其可行性进行了探讨,该方法的研究对于光谱分析中校正集样品的优化选择具有重要的研究价值。1 校正样品集选择方法 正交设计法是以相关专业知识及概率论和数理统计为基础,利用数学上的“正交性”原理编制并已标准化的表格——正交表来科学安排试验方案、并对试验结果进行计算、分析、找出最优或较优的条件的数学方法。 利用正交表安排试验方案搭配均衡具有代表性,因为对全体因素而言,正交设计是一种部分试验,但对于其中任何两个因素而言确是带有等重复的全面试验。由于正交试验设计要求任何两个因素是全面试验,因此试验点在优选区的分布是均匀分布的,每个试验点都有强烈的代表性,能够比较全面地反映优选区内的大致情况,并能保证主要因素的各种可能搭配都不会漏掉。 研究中采用正交表的“正交性”原理选择校正集样品。结合牛奶成分[url=https://insevent.instrument.com.cn/t/1p][color=#3333ff]近红外光谱[/color][/url]测量系统的开发(系统测量原理图见图1所示),采用L8l 9 3正交表进行校正集样品优选。根据牛奶中脂肪、蛋白质及乳糖等成分浓度的常规范围确定相应浓度(单位:g/100g)范围分别为:脂肪:2.5~5.5,蛋白质:2.8~4.8,乳糖:4.4~5.4。在上述浓度范围内,根据典型样品浓度特性设计脂肪、蛋白质及乳糖3因素、9水平(脂肪:2.5、2.87、3.24、3.61、3.98、4.35、4.72、5.09、5.46,蛋白质:2.8、3.05、3.3、3.55、3.8、4.05、4.3、4.55、4.8,乳糖:4.4、4.52、4.64、4.76、4.88、5、5.12、5.24、5.36)浓度分配方案,共计81个样品。不考虑成分因素间的交互作用,采用上述方案选择校正样品集样品的脂肪、蛋白质及乳糖三成分浓度空间散点图见图2,其中脂肪与蛋白质两成分散点图见图3。(图略)2 实验与数据分析 采用自制系统样机,针对不同区域、不同种类、不同季节及不同哺乳时期奶牛的牛奶漫反射光谱进行收集整理,共得407个样品光谱。将其作为备用样品集,从中选取与正交设计方案中的样品浓度最接近的样品共计61个(以脂肪为准)作为正交设计校正样品集。然后,针对正交设计校正样品集和全校正样品集(将407个样品全部作为校正集样品)采用偏最d'-乘(PLS)方法交互验证方式分别建立脂肪的校正模型,并应用这两种模型分别对全部407个样品的脂肪浓度进行实际预测,交互验证及实际预测参数见表1,407个样品中脂肪浓度的实际预测值与参考值间的对比结果见表2。 从表l可以看出:正交设计校正样品集与全校正样品集的交互验证结果中,交互验证相关系数 相差0.0038、交互验证均方根偏差(Root Mean Square Error ofCross Validation,RMSECV)相差0.0195,预测相关系数 相差o.0032、预测均方根偏差(Rot Mean Square Error ofPrediction,RMSEP)相差0.0173。采用PLS校正模型分别对全部407个样品进行实际预测时,相关系数 相差0.0015、RMSEP相差0.0112。从表2可以看出:正交设计校正样品集与全校正样品集对所有407个样品的实际预测浓度与参考浓度间的偏差均集中在O.1g/100g左右。表l、表2同时列出了全部样品中随机选取的61个样品作为校正集(称为随机校正样品集)的PLS1模型的交互验证结果及其对全部407个样品的实际预测结果,从中可以看出随机校正样品集的预测偏差是全校正样品集的预测偏差的两倍、相关系数相对降低,并且随机校正样品集对所有407个样品的实际预测浓度与参考浓度间的偏差集中在0.4左右。3 小结 实验结果表明:正交设计校正样品集与全校正样品集的预测偏差之差在0.02g/100g以内,实际预测浓度与参考浓度间的偏差均集中在O.1g/100g左右,而正交设计校正样品集中样品数量是全校正样品集的样品数量的七分之一。进一步的实验结果表明:随机校正样品集的预测偏差是全校正样品集预测偏差的两倍、且相关系数相对降低,其实际预测浓度与参考浓度间的偏差集中在0.4g/100g左右。 可见,正交设计校正集样品(61个)在全部样品中具有代表性,如果将81个样品光谱全部收集作为正交设计校正样品集,预计预测偏差将会进一步缩小。因此,利用正交表的“正交性”原理进行建模过程中校正集样品的优选具有实用性,该方法的研究不仅为[url=https://insevent.instrument.com.cn/t/1p][color=#3333ff]近红外光谱[/color][/url]分析中校正集样品的优选提供了可参考的方法,而且对于校正模型的优化及提高测试结果的准确性等方面均具有重要的意义。

  • 近红外光谱分析仪建模后重复性差

    购买国产[url=https://insevent.instrument.com.cn/t/1p][color=#3333ff]近红外光谱仪[/color][/url],用于测定油料作物中含油、脂肪酸组成,使用一组样品建模后,测试样品,重复性较差,达到10%

近红外光谱建模标准相关的耗材

  • 中红外和近红外光谱积分球(PIKE) | L1272405
    产品特点:中红外和近红外光谱积分球(PIKE)中红外和近红外光谱的球形样品室用于进行反射测定。样品被直接放在朝上球体的样品通道中或者放在细薄红外透射窗的上方。漫透射测定也可通过将样品放在载玻片支架处的光束输入通道而进行。相关的产品套装包括基础光学部件、MCT 检测器(MIR) 或InGaAs 检测器(NIR) 和底座架。订货信息:中红外和近红外光谱积分球(PIKE)产品描述Frontier中红外光谱积分球及 ZnSe 窗L1272405近红外光谱积分球及 KBr 窗L1272406
  • 中红外和近红外光谱积分球(PIKE)L1272405
    中红外和近红外光谱积分球(PIKE)中红外和近红外光谱的球形样品室用于进行反射测定。样品被直接放在朝上球体的样品通道中或者放在细薄红外透射窗的上方。漫透射测定也可通过将样品放在载玻片支架处的光束输入通道而进行。相关的产品套装包括基础光学部件、MCT检测器(MIR)或InGaAs检测器(NIR)和底座架。订货信息:产品描述Frontier中红外光谱积分球及ZnSe窗L1272405近红外光谱积分球及KBr窗L1272406
  • 用于紫外-可见-近红外光谱附件消耗品
    用于紫外-可见和紫外-可见-近红外光谱仪附件的工具包与备件订货信息:附件消耗品说明部件号温度探头附件备件探头支架 提供长方形头的探头(4 个),适用于标准的 10 毫米长方形比色池9910066800探头支架,锥形头 提供锥形头探头(4 个),适用于微量池9910066900探头支架的短延长线 要求把探头安装在样品室内110381100探头支架的长延长线 要求把探头安装在样品室外110380500用于探头支架的 O 形环工具包9910067000Cary 50/60 固体样品支架附件备件底架 用于 Cary 50/60 固体样品支架的侧面安装支架,用于安装偏振器/消偏器或其它附件810137000固体样品架备件包 #2 包括 2 个 V 形架 3 x 45 毫米,2 个 V 形架 6 x 45 毫米和螺钉、螺帽用于将样品固定到样品支架上9910056200Cary 100/300 固体样品支架附件备件膜支架备件包 #1 包括 4 条磁力条,20 个 V 形架,凝胶板支架,2 个样品架,8 个遮光板和 4 个夹子9910064600固体样品架备件包 #1 包括 10 毫米光阑样品支架,5 毫米光阑样品支架,1 毫米光阑样品支架,2 个 V 形架3 x 45 毫米,2 个 V 形架 6 x 45 毫米和螺钉、螺帽用于将样品固定到样品支架上9910059400固体样品架备件包 #2 包括 2 个 V 形架 3 x 45 毫米,2 个 V 形架 6 x 45 毫米和螺钉、螺帽用于将样品固定到样品支架上9910056200Cary 4000/5000/6000 固体样品支架附件备件膜支架备件包 #1 包括 4 条磁条,20 个 V 形支架,凝胶板支架,2 个样品架,8 个遮光板和 4 个夹子9910064600固体样品底架 Cary 4000/5000/6000 标准固体样品支架,用于安装偏振器、消偏器或光阑5810008100固体样品遮光板,1 毫米 具有 1 毫米光阑的可换检测孔盘410204100固体样品遮光板,5 毫米 具有 5 毫米光阑的可更换检测孔盘41020430010 毫米固体样品遮光板 具有 10 毫米光阑的可更换检测孔盘410203900固体样品安装盘 提供固体样品支撑点410204500固体样品架备件包 #1 包括 10 毫米光阑样品支架,5 毫米光阑样品支架,1 毫米光阑样品支架,2 个 V 形架 3 x 45 毫米,2 个 V 形架 6 x 45 毫米和一套螺钉、螺帽用于将样品固定到样品支架上9910059400固体样品架备件包 #2 包括 2 个 V 形架 3 x 45 毫米,2 个 V 形架 6 x 45 毫米和螺钉、螺帽用于将样品固定到样品支架上9910056200漫反射附件(DRA)备件Cary 100/300 内部 DRA 备件粉末样品池支架组件 包括一个预装有 PTFE 粉末的比色池作为反射标样和粉末样品池支架。石英窗盖住样品,使固体样品支架可以放置在积分球口7910036600用于 DRA-CA-30I 的 10 毫米光程比色池支架 适用于在透射口定位 10 毫米光程池7910028200用于 DRA-CA-30I 的 50 毫米光程比色皿支架 适用于在透射口定位 50 毫米光程池7910028300用于 DRA-CA-30 I 的纤维样品支架 包括 UG11 滤光片7910027900光阱(用于进行 0% 透射率基线校正)7910028100用于 DRA-CA-30I 的透明样品支架7910028000按照 DRA-CA-30I 标准用反射率为 99% 的 1 英尺大小标准白板来做校正7910036900漫反射附件(DRA)备件Cary 100/300 外部 DRA 备件用于 DRA-CA-30 的粉末样品池支架组件 包括一个预装有 PTFE 粉末的比色池作为反射标样和粉末样品池支架。石英窗盖住样品,使固体样品支架可以放置在积分球口7910037000用于 DRA-CA-30 的透射比色皿支架 适用于在透射口定位 10 毫米光程池7910037100用于 DRA-CA-30 的反射比色皿支架 适用于在反射口定位 10 毫米光程池7910037200可变角球体中心样品架,弹簧夹类型 可将样品放置在 DRA 中心以进行测量。弹簧夹型支架适用于安装薄且可弯曲的样品。支架配有一个旋转刻度盘,因此用户能够快速设定所需的入射角度精确到 1 度7910037400可变角球体中心样品架,弹簧夹类型 可将样品放置在 DRA 中心以进行测量。弹簧夹型支架适用于安装坚固、不透明样品如镜子和喷漆的样品。支架配有一个旋转刻度盘,因此用户能够快速设定所需的入射角度精确到 1 度7910037300可变角度比色池支架,装于积分球中央 适合在积分球体内安装一个标准的 10 毫米光程比色池支架配有一个旋转刻度盘,因此用户能够快速设定所需的入射角度精确到 1 度7910037500Cary 4000/5000/6000 内置 DRA 配件小参比盘 填充 PTFE 漫反射盘 ,直径 2 英寸410198890比色池支架 10 毫米光程池适用于透过率和反射率测量210187900粉末样品池组件 包括一个预装有 PTFE 粉末的比色池作为反射标样、粉末样品池支架、漏斗和小样品9910111400大参比板 填充 PTFE 漫反射盘 ,直径 2 英寸410143990积分球中心比色池支架 适合在积分球内安装一个标准的 10 毫米光程比色池,用于通常的入射光,是测量浑浊样品的理想选择,如蛋白质和其它生物学溶液7910038700外部固定比色池支架 适合使用标准 10 毫米光程比色池测量液态样品的透光度或吸收率。安装在透光支架上,并且可在样品或参考光束中进行定位7910038300积分球体中心安装支架夹类型 可将样品放置在 DRA 中心以进行测量。弹簧夹型支架适用于安装薄且可弯曲的样品。支架配有一个旋转刻度盘,因此用户能够快速设定所需的入射角度精确到 1 度7910047600积分球中心支架弹簧夹类型 可将样品放置在 DRA 中心以进行测量。弹簧夹型支架适用于安装坚固、不透明样品,如镜子和喷漆的样品。支架配有一个旋转刻度盘,因此用户能够快速设定所需的入射角度精确到 1 度7910047500粉末样品池支架 可以对粉末样品和其它样品进行反射测量安装在对着反射口的标准附件支架上。包括一个预装有 PTFE 粉末的比色池作为反射标样和用于样品的空粉末样品池支架。通过推杆保留样品7910047700小光斑组件 包括一个光阑,镜面组件和 3 个聚光镜,用于将光束聚焦成小光斑并投射到选定测量位置上光束的尺寸——在传输位置直径 3 毫米,在反射位置高 3.5 毫米,宽 1.5 毫米7910047200其它附件备件用于反射附件的粉末样品池支架 具有可拆卸石英窗的不锈钢池用于承装松散粉末以进行漫反射测量110374900测试孔面罩组件用于可变角度镜面反射附件 包含 2,10 和 20 毫米的样品支架各 2 个,及 2 个 2 x 1 英寸的盘支架9910064700用于可变角度镜面反射附件的衰减滤光片组件9910047700

近红外光谱建模标准相关的资料

近红外光谱建模标准相关的资讯

  • 首届“创和亿杯全国近红外光谱数据建模竞赛”活动总结及建议
    中国仪器仪表学会近红外光谱分会举办的首届“创和亿杯全国近红外光谱数据建模竞赛”成功举办,本网特邀请我国分析化学和化学计量学专家南开大学邵学广教授,本届竞赛的组织者中石化石油化工科学研究院褚小立教授级高工,以及本届竞赛支持单位上海创和亿电子科技发展有限公司的张军工程师对本届竞赛进行评述,并对未来竞赛活动提出一些设想。  一、基本情况  开展近红外光谱建模竞赛是中国仪器仪表学会近红外光谱分会计划已久的一项工作,但因各种原因一直未举办,直到遇到这套建模数据。这套数据来源于真实的应用现场,是便携式近红外光谱仪器,采用漫反射方式测量烟草烟碱的数据集,样品数量多,烟碱浓度分布也相对较宽,具备较好的光谱与浓度定量统计意义。首次进行建模竞赛,选一套稳健的数据集至关重要。这套数据集的稳健之处在于建模算法(线性或非线性)对预测结果的影响较小,光谱变量选取方法影响较小,采用常规的预处理方法便可在很大程度上提高模型的预测能力。可以说,只要参赛者的建模步骤规范,具备基本的建模技巧,通过细心和耐心选择常用的建模算法(包括光谱预处理方法、波长选择方法和定量校正方法)及其参数,采用商品化的化学计量学软件,不需要自己编程,就可以得到优秀的成绩。  从来自70多个单位,100多名参赛者的结果来看,达到了这个基本目标,尤其是一些来自应用企业一线工程师的建模结果非常优秀,这是近红外光谱技术应用落地的重要基础。本次比赛共收到109个模型的预测结果,通过对200个预测集光谱的预测结果与参考值之间的偏差,即MAE(平均绝对误差)和SEP(预测集均方根误差),进行计算,采用了二者的均值进行了模型评价。小于0.30的76个,小于0.25的54个,小于0.22的19个,本届的参赛模型大都具有较好的预测结果。  开展竞赛之前,近红外光谱分会曾小范围对这套数据组织了盲测,数据提供方(上海创和亿)也长时间在公司内部进行盲测,这次竞赛的最优结果已接近了前期盲测的最优值,但没有预想的“实质性”突破。在竞赛前,曾有预想出现“黑马”,把这套数据的MAE降低到0.15以下,把SEP降低到0.20以下,这一目标尚没有实现,希望有兴趣的同行,继续尝试新的建模策略和算法,进一步提高建模能力。  二、定量建模算法  多数参赛者的模型采用的建模方法是最常用的PLS回归,部分模型采用了SVM和神经网络等,神经网络方法还包括BP、CNN,但CNN方法的模型并不很多,与当前的人工智能研究热潮有点不符。当然与这套数据集的特点有很大关系,据了解有不少参赛者尝试了很多算法,但PLS效果好,所以只提交了PLS结果。也有采用自行提出的一些算法,预测结果也较好。  值得说明的是,PLS模型采用的算法和实现方式不尽相同,多数采用了普通的NIPALS和SIMPLS算法,也有人采用了MATLAB系统中的plsregression,或使用了Python scikit-learn包中的PLSRegression,也有采用商业化学计量学软件或仪器公司配套的软件。这些不同的计算方法会导致结果上稍有不同。  在模型参数的确定与模型验证方面,多数模型采用了各种形式的交叉验证,也有采用K-S分组的方式划分了验证集进行模型验证。不同验证方式的结果都具有合理性和科学性,但也都有各自的局限性。某些模型采用了不同的多种方式同时进行验证,但由于篇幅的限制,提交的报告中几乎没有系统的讨论。  校正集光谱的考察是建模的首要步骤,如奇异样本的识别与删除,但只有少数模型在建模前进行了数据的考察。模型的适用性考察几乎没有讨论,极少有人对预测集的奇异光谱给予关注。  三、光谱数据处理方法  数据处理是建模的关键步骤之一,本次参赛模型几乎全部采用了信号处理技术对光谱进行了散射校正和背景扣除处理,MSC、SNV、SG/CWT求导(1阶、2阶)等常用方法都得到了尝试。某些模型采用了光谱变量选择方法,如MC-UVE、CARS、SPA、波段选择(iPLS)等。对于这套竞赛数据,从预测结果来看,变量选择的作用没有得到体现。上述这些结果具有理论和实践上的合理性。漫反射光谱的散射校正一般认为是必要的,但背景信号是否对模型具有贡献一直没有得到确切答案。对于大多数校正集,当校正集光谱数量大于光谱变量数时,变量选择应该不再是影响模型准确性的关键因素,但变量选择对精简模型和提高模型的解释性等仍具有意义。  四、建议  此次建模比赛的参与积极性很高,对促进建模技术的交流与提高具有积极作用,很多专家和同行都建议把这项竞赛持续办下去。由于是首次进行建模比赛,还有许多值得提高改进的地方,例如,本次竞赛只把预测结果的“MAE”和“SEP”作为准确性评判标准,没有考虑界外样本的影响,也没有考虑预测值与参考值的相关性(散点图)、预测结果的相对偏差(包括除奇异点以外的最大偏差)等参数。另外,建议进一步完善参赛文档的完整性,例如建模方法的描述要尽量详细,从原理到计算过程和相关参数,保证模型的可重复性。建议以后竞赛对建模过程的描述赋予一定的权值(例如占20%),专家小组对此进行评审打分。此外,竞赛方式也有待进一步改进,目前是以个人的形式参赛,存在同一个研究小组多人(5人以上)同时参赛的情况,这是值得鼓励的,但如果其预测水平基本相当且都较为优秀,就会影响所有参赛者的排名,有失竞赛的公平性和多元化,如何规避有待商榷。建议采用初赛和复赛的方式进行,同时进一步提高竞赛的奖金,吸引更多行业高手参与。  一套合适的数据集是竞赛成功的关键,也是共同提升建模能力的重要生产资料,在此呼吁业内人士积极提供近红外光谱数据集,逐步形成中国近红外光谱竞赛集数据库,公开公布相关信息,供国内外同行开展相关研究工作长期下载使用。
  • ​2022年度“创和亿杯全国近红外光谱数据建模竞赛”活动总结和建议
    2022年7月25日-8月20日,中国仪器仪表学会近红外光谱分会成功举办了2022年度“创和亿杯全国近红外光谱数据建模竞赛”,得到广大近红外光谱和化学计量学等相关研究和应用领域同仁的积极响应。本网特邀请我国分析化学和化学计量学专家、南开大学邵学广教授对本届竞赛进行评述,并对未来竞赛活动提出一些设想。南开大学邵学广教授以下为邵学广教授对本次活动的总结:在算法方面,75位参赛选手尝试了多种方法,包括PLS-DA、SVM、LDA、随机森林、SIMCA、KNN、Logistic回归等等。几乎所有参赛选手都采用了信号处理和变量选择,方法包括中心化、标准化、MSC、SNV、SG、小波变换、PCA(降维)、CARS、遗传算法、biPLS、模拟退火等等,也有个别选手根据经验进行了波段选择。但是,很难看出建模方法和信号处理方法对模型预测效果的显著性影响。在排名前24位(预测准确率在60%以上)的参赛选手主要采用了常用的PLS-DA、SVM和LDA,部分选手采用了多个方法的组合,如LDA+SVM、PLS-DA+SVM等。值得一提的是,某些参赛选手采用了基于多模型的投票机制进行预测,取得了不错的效果。本次比赛的数据是烟草样品的光谱数据,其类别是人工判定的。由于类别之间的差异本来就不是很明显,近红外光谱之间相似性很高,很难建立很好的判别模型。从光谱的主成分分布图上可以看出,除第7类(G)外,其他类别的样品严重重叠。采用单一的建模方法很难得到满意的结果。尽管通过模型的优化可以提高预测正确率(真阳性TP样品数),但假阳性(FP)样品数也会随之增加。因此,本次参赛的多数选手已经得到了很好的建模效果,值得庆贺。获得一、二等奖的三位选手预测准确率达到了75%以上,值得特别点赞。但也有三分之一的模型预测准确率在40%以下,说明我们还要加强定性建模方面的学习和训练。中国仪器仪表学会近红外光谱分会拟邀请部分取得优异成绩的选手在全国第九届近红外光谱学术会议期间分享建模经验,值得关注和积极参加。建议:与去年定量建模比赛一样,建议进一步完善参赛文档的完整性,例如建模方法的描述要尽量详细,从原理到计算过程和相关参数,保证模型的可重复性,有利于建模技术的推广应用。
  • 关于开展2023年度“创和亿杯近红外光谱数据建模竞赛”的通知
    中国仪器仪表学会近红外光谱分会文件近学分字[2023] 第003号关于开展2023年度“创和亿杯近红外光谱数据建模竞赛”的通知近红外光谱行业专家、学者、研究生及相关单位:近些年,近红外光谱技术在我国得到了快速发展,其中化学计量学方法的深入研究和应用功不可没。分析模型是近红外光谱分析技术的核心之一,为了共同提升我国本领域人员的建模水平,中国仪器仪表学会近红外光谱分会举办2023年度“创和亿杯近红外光谱数据建模竞赛”,现将有关事宜通知如下:(1)本竞赛提供一套光谱数据,来源于实际应用场景,校正集由126个样本的紫外-可见-近红外光谱及对应的某种成分含量构成,预测集由20个样本的光谱构成。上述文件包含在本通知附件的压缩文件“竞赛数据2023.rar”。本届竞赛选择了样本较少的校正集,鼓励尝试数据增强策略建立校正模型。(2)任何人均可参赛,每位参赛人员仅限提交一套预测结果。(3)根据参赛者提交预测结果的准确性,本竞赛将评选出一等奖1名,二等奖2名,三等奖5名,优秀奖10名。颁发电子版获奖证书和奖金,其中一等奖奖金2000元,二等奖奖金1500元,三等奖奖金1000元,优秀奖只颁发获奖证书。(4)本竞赛采用以下两个参数评价预测结果的准确性:(5)请参赛者于2023年10月30日前将完成的“参赛附表”,发送至邮箱:cxlyuli@sina.com ,若有疑问请微信联系13501215398(微信号)。(6)请参赛者认真填写“参赛附表”的个人信息和建模信息(在预测结果准确性相同的情况下,优先奖励建模叙述详细的参赛者),本竞赛不对外公开参赛人员的信息。(7)本竞赛将在2023年11月5日前向参赛者公布预测集的实际浓度值,2023年11月15日前公布获奖名单。(8)本竞赛不收取任何费用。(9)本套近红外光谱数据版权归属中国仪器仪表学会近红外光谱分会,任何个人或单位不得将其用于商业或其他用途。中国仪器仪表学会近红外光谱分会2023年9月19日 附件1:参赛附表.docx 附件2:竞赛数据2023.rar 参赛附表 一、参赛人员基本信息姓 名性 别年 龄专 业学 历国 籍移动电话E-mail单 位 二、采用的建模方法(请尽可能详细说明采用的方法)建模过程的描述(不限字数,可附图表)光谱预处理方法及其参数光谱变量筛选方法建模方法及参数选择其他需要说明的方法 三、预测集样本的预测结果预测集样本序号预测值1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20
Instrument.com.cn Copyright©1999- 2023 ,All Rights Reserved版权所有,未经书面授权,页面内容不得以任何形式进行复制