视觉场景描述效果的客观评价方法研究

来源 :陕西师范大学 | 被引量 : 0次 | 上传用户:yuxume
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
自动理解视觉场景内容是计算机视觉领域最重要的目标之一。随着深度网络模型研究的深入,视觉场景自动描述方法日益增多,如何合理评价场景描述语句的质量变得至关重要。现有的场景描述指标往往存在一定偏面性,且在语义级内容评价中常常出现与人的感知不一致的结果。针对此问题,本文探讨场景描述效果评价的新指标或方法,并从性能评价的综合性和合理性两个角度尝试改善现有场景描述客观评价效果。主要创新性工作包括:(1)现有场景描述评价指标多为单一性能指标,不利于场景描述生成中全面描述算法的性能。为此我们提出一种基于灰色关联分析的主、客观评价相结合的视觉场景生成效果评价指标。该指标以计算机或机器为评价主体,根据传统评价指标对不同场景描述算法提供的生成语句给出各单一指标分值,形成各描述算法对应的比较序列,并从各类指标中选优形成参考序列,主观评价的先验知识映射设为权值,对两类序列进行带权值的灰色关联分析,实现对各个描述生成算法的性能优劣排序。实验结果表明,所提评价指标有效解决了现有单一评价指标的偏面性问题。(2)现有评价指标多未充分利用生成语句中的语义信息,导致“因句子表达不同而语义相同”或“句子n元组相同但语义不同”时的语句间评价结果与人的主观感知不相符。为此,我们提出一种基于同义词匹配的视觉场景描述生成效果评价指标。该指标引入互联网同义词库,对原始图像对应的参考语句和场景描述算法提供的生成语句之间进行三类词集合的匹配,突出语义评估在场景描述效果评价中的重要性。MS COCO数据集上的仿真实验结果表明,所提评价指标在一定程度上解决了两类语句之间的语义匹配问题,有效地完成了场景描述效果的语义级评价。
其他文献
全球各种文明包括印度文明、希腊文明、基督教文明、中国文明,各种文明对世界都有着或多或少的贡献。而随着时势递迁,希腊文明与基督教文明合流,伴随着工业革命以及科学主义
在城镇化建设的影响下,近年来我国乡村得到了很大发展。然而在以城市化、现代化为指标的评价体系中,乡村及其文化往往被视为落后、改造的对象,以致于其真正的价值和意义往往
采用快淬NdFeB磁粉和铁氧体磁粉复合,流动温压成型制备出各向同性粘结钕铁硼/铁氧体复合磁体,研究了流动温压工艺对磁体密度和磁性能的影响。结果表明,随着流动温压成型时间的延
目的:探讨银杏叶提取物(EGB)对高糖环境中新生大鼠心肌细胞凋亡和线粒体凋亡途径中线粒体分裂蛋白1(Drp-1)、融合蛋白2(Mfn-2)、Bax、Bcl-2和Caspase-3表达的影响。方法:体外
今天,我们怀着无比崇敬的心情,参加纪念叶飞同志诞辰100周年座谈会,缅怀他的光辉业绩和不朽功勋,追思他的高尚品格和崇高风范。在此,我谨代表150万家乡人民,向叶飞同志表示深
以丙烯酸类单体、乙烯基硅油为主要原料,过硫酸钾为引发剂,甲基丙烯酸类羰基化合物(TM-200)或N-羟甲基丙烯酰胺或甲基丙烯酸类化合物(CX-600)为交联单体,采用阴-非离子复合型
目的:对比用血清胃蛋白酶原检测与胃镜检查诊断慢性萎缩性胃炎的效果。方法:选取2017年1月至12月在新疆库尔勒解放军第九五一医院接受诊疗的46例慢性萎缩性胃炎(CAG)患者和46
“划小核算单元”是目前电信企业深化改革工作中重要的一环,做好财务支撑,准确核算各级经营单元的利润,建立全省统一的经营单元评价体系是各级财务工作者面临的重要问题,本文
随着我国城市化的快速发展,环境污染已成为社会关注的问题之一,由于环境污染,自然资源受到很大的威胁。我国一些城市对环境治理过程并不重视,从而造成城市垃圾污染、水污染和
【正】8月16日,东阿阿胶披露了2013年半年报。数据显示,今年上半年东阿阿胶实现归属于上市公司股东的净利润5.42亿元,同比增长超过16%。尽管业绩出现了一定幅度的增长,但多项