在类别语义信息处理层面探索人脑和计算机自然语言模型中的计算机制及两系统间的关系

来源 :华东师范大学 | 被引量 : 0次 | 上传用户:sdggertretfdhghdfh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在人脑中的神经系统里存储的语义表征一直是认知神经研究领域的热点。研究发现人脑中的语义表征是按照特征信息分类存储。而在计算机领域中,自然语言处理的各种计算机语言模型也试图采用不同的算法模拟出最接近人脑的语义表征。此前,我们课题的研究初步粗略发现在计算机和人脑这两个复杂系统中,二者的语义表之间存在相似性。但是在具体的语义特征层级(比如类别语义信息),脑与计算机这双复杂系统中的表征、计算机制及其之间的关系还不十分清楚。我们是否可以就类别语义信息为主要分析参照,探究不同计算机语言模型中哪个模型最接近人脑的语义表征,以及哪些类别语义信息的表征在计算机模型能做出最好预测?为了探究这些问题,本研究从类别从属关系角度,进一步深入探索人脑及计算机模型的语义表征存储。首先,我们选择了11种类别词和每个类别下的20个示例词,类别词和示例词可以组成的相关和不相关条件下两种词对。根据这些词对,我们设计并执行了一组脑电语义启动实验。数据处理中,我们选择不同的时间窗口得到不同脑电成分,即可以得到一个人脑的不同类别语义信息距离的表征指标,其中N400成分和语义分析最为相关。然后,我们选择了三个计算机语义模型,每个词对都可以在相应的计算机模型中找到相应的相对语义距离的指标-由两个单词各自的词向量之间的余弦值表征,通过和脑电数据相同的计算方式,我们得到了每个计算机模型表征每个类别语义信息的指标。最后,我们结合计算机模型指标和脑电数据指标,对比出这三个计算机模型的类别语义信息的表征的拟合情况以及不同类别语义信息的神经语义表征在这两个系统之间相似度差异。研究结果表明,CBOW和CWE模型能更好的表征人脑的类别语义信息,Glo Ve模型预测表现稍差。进一步就不同词语类别分析发现,不同计算机语言模型和脑电数据呈现不同的表现模式。病症、节气、情感和体育等语义类别计算机模型和人脑拟合的更好,但是器官、乐器和职业等语义类别有较大的区别。结合为获取实验刺激而进行的问卷数据结果,我们猜测是不同示例词的日常使用频次及类别词和示例词在语料库中同时出现的概率产生了特定的实验结果。本研究以不同类别语义信息为中介联系了人脑和计算机这两个复杂系统,深化了之前的研究,开拓了评估计算机语义模型的分析角度。
其他文献
亚洲基础设施投资银行(以下简称“亚投行”)是2013年10月习近平主席倡议筹建的区域性多边开发银行,于2016年1月16日正式投入运营。通过与国际复兴开发银行(也叫世界银行)、欧洲投资银行、美洲开发银行、非洲开发银行、亚洲开发银行、欧洲复兴开发银行、金砖国家新开发银行等现有多边开发银行的对比,笔者发现亚投行在运行机制的设计上有很多创新。亚投行定位的创新在于它侧重于基础设施投资,同时强化了自身的商业
伴随着开放式创新模式的兴起以及“位空间”(space of places)向“流空间”(space of flows)转变,创新主体活动不断突破组织与地理边界以寻求外部合作,技术创新要素以及技术自身在城市间流动与转移,促进了城市间创新网络关联。创新合作与技术转移既为提升区域自主创新能力提供了新路径,同时也强化了城市间联系、促进要素跨区域流动、优化产业分工与创新分工,从而推动中国经济形成以“内循环”
结构轻量化是一个永恒的主题,重量越轻,承载越重的结构与材料一直是航空航天,汽车制造甚至是海洋船舶等领域的研究重点。其中以金字塔点阵为代表的三维点阵结构,被认为是最具轻质高强潜力的结构之一,轻质高强的连续碳纤维增强热塑性树脂基复合材料成为航空航天材料的不二之选。复合材料点阵结构就是轻结构与轻材料的组合产物,它将结构轻量化水平推到了全新的高度。但是因其结构复杂性,复合材料点阵结构相关成型技术却成为制约
碳材料具有结构稳定、化学稳定性强、力学性能好、比表面积大及反应活性位点多等特点,广泛应用于储能、气体吸附、催化等领域。碳材料存在理论比容量低、循环稳定性差、电导率低及电化学性能差等缺点,制约了碳材料在储能领域的应用,新型负极材料成为当前储能领域的研究热点。过渡金属氧化物材料具有理论比容量大、安全性高等优点倍受研究者关注,但其结构不稳定,比表面积小、反应活性位点少和电导率低的问题限制了其发展。针对上
精准扶贫的完成使中国社会迈入了新的发展阶段,巩固脱贫成果,实现可持续发展成为了新的时代要求。因此,对传统扶贫方式进行创新就摆在了突出位置。与此同时,中国政府立足未来,着眼信息化建设,新媒体为扶贫方式的改变带来了新的方向。电商扶贫作为信息扶贫的具体实践,结合新媒体强大的赋权作用,对于改变弱势群体的精神面貌,提升乡村振兴质量具有重要的参考价值和现实意义。本文选取利川农旅电商基地为研究对象,从新媒体赋权
轴列式为B0B0-B0B0的动力车具有更小的轮轨作用力,具备八个动轴以限制轴重、提高黏着重量,能够实现在既有客、货运线路上的高速运输任务,保障铁路运输的安全和效率,实现对线路资源的充分利用。轴箱定位装置是影响车辆稳定性和车辆安全性的关键结构,其主要作用是给车辆提供足够的一系定位刚度,缓冲车辆的有害振动。B0B0-B0B0轴式动力车的轮对轴箱采用转臂式定位,它是由两个螺旋圆弹簧、一个橡胶关节及一个垂
自从Fama、French1993年针对美国股票市场异象提出三因子模型以来,各派学者基于不同经济理论的因子模型层出不穷。一个有效的资产定价模型,不仅有利于广大投资者更好地构建投资策略,也能够为市场监管者的决策提供支持。目前国外大多数对Fama-French五因子模型的实证研究都是基于欧美、日本等成熟股市。但鉴于国外成熟股市与国内股市在投资者构成、市场基础设施建设等方面存在较大差异,因此有必要对Fa
学位
汽车A柱指的是汽车前挡风玻璃两侧连接引擎盖和车顶的立柱,该立柱的结构强度直接影响汽车受到正前方强烈冲击时驾驶员的生命安全,因此,汽车A柱有非常严格的设计规范,不能设计过细。但一定宽度的A柱的存在会遮挡驾驶员视线,产生A柱盲区,造成严重安全隐患。本论文将在不降低A柱结构强度的前提下,设计汽车A柱盲区监控与可视化系统,帮助驾驶员看到A柱盲区内的场景,大大降低由A柱盲区带来的安全事故风险。本文的研究内容
线粒体功能依赖于线粒体和核基因组间的相互作用。这种相互作用在自然选择压力下,促使线粒体与核DNA发生共进化,从而在不同隔离类群或物种中形成共适应的线粒体-核基因型。但当之前隔离类群或物种第二次接触时,它们间发生线粒体DNA渐渗,导致发生渐渗的个体拥有线粒体与核基因不匹配的基因型。以往在多个模式生物(如小鼠和果蝇)中的研究表明,破坏线粒体与核基因间相互作用(线粒体与核基因不匹配)可影响核基因的表达。