AI模型训练和开放服务平台的研究与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:biantaitai
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
AI模型训练和开放服务平台是面向企业的、易用的一站式AI应用开发工具,通过简化AI应用开发流程,屏蔽技术实现细节,提供数据管理、模型管理和服务管理等功能,帮助企业可以快速、高效、低成本地进行AI产品的开发与应用。但是由于AI应用开发存在着训练数据来源及格式复杂、训练依赖于多类型资源、开发流程繁琐等特性,现今公开的AI解决方案和相关平台仍然存在模型训练数据管理不规范、多类型训练资源调度不公平和没有形成AI应用开发的完整闭环等问题与挑战:1)当前模型训练数据管理存在数据格式混乱、不同数据整合利用繁琐和数据重复利用率低等问题,影响了数据质量和训练效率;2)目前多类型训练资源调度存在分配不公平、资源浪费和作业饥饿等问题,降低了任务执行效率和资源利用率;3)数据侧和服务侧的功能仍存在不足,缺乏数据标注和服务监控等功能,没有形成AI应用开发的完整闭环,降低了开发效率。针对以上问题与挑战,本文重点围绕模型训练数据管理、多种异构资源公平调度策略和AI应用开发解决方案进行研究与分析,完成了 AI模型训练和开放服务平台的研究与实现,主要研究内容包括以下三个部分:1)提出并实现了一种基于JSON的模型训练数据管理方案,用于统一不同模型训练数据格式规范,整合不同的模型训练数据,进行数据的全生命周期管理和版本管理,提高了数据利用率和模型训练效率;2)提出并实现了一种分配均衡的多资源调度策略,该策略整合了所有资源,分别均衡了主资源和非主资源的分配,保证了资源的公平分配和充分利用,提高了任务执行效率和资源利用率;3)研究并实现了 AI模型训练和开放服务平台,该平台集数据上传与标注、模型训练、模型评估、模型测试和服务发布于一体,形成了 AI应用开发的完整闭环,提高了 AI应用开发效率。基于上述研究内容,本文设计并实现了一站式的端到端的AI模型训练和开放服务平台,覆盖全工作流程,帮助企业加速智能化转型。并将其应用于重点研发课题“科技咨询数据资源体系研究与资源建设”中,对平台的功能完整性进行了验证,确保了平台的有效性、可用性和可靠性。
其他文献
网络攻击效果评估技术作为一种主动防御技术,通过模拟渗透实验的方式,通过对收集到的指标值进行有效计算,从而对系统的安全性或攻击的有效性得到一个全面准确的评价。网络攻击效果评估技术一方面可用于评估系统的安全性,并针对评估结果进行系统修复或防御决策的制定;另一方面可用于网络攻击工具能力的评估,在投入实际使用前,对工具的信息对抗能力作出评估,从而指导其不断改进。当前网络攻击效果评估系统多使用单体架构进行设
近年来,城市道路景观提升类项目不断涌现,该类项目通常是将某个区域或某条道路作为整体统筹规划实施,具有涉及空间范围广、专业繁杂、接口多、技术集约化程度高、工期紧、施工风险高等特点.EPC工程总承包管理模式在应对城市精细化管理能力提升,持续改善空间资源环境和基础设施,提升城市的适应能力和韧性发展能力方面显示出了独特的优势.基于此,文章对EPC管理模式在城市道路景观提升工程中的应用展开了研究,并提出了精细化管控施工措施.
目前阶段,我国正致力于中小河流水电梯级开发建设,并以河流区域内的整体开发效益为目标,进一步发掘中小河流水资源的相关潜力.因此,文章对中小河流水电梯级水量优化调度技术进行了研究,建立了优化调度模型,设计了梯级粒子群调度算法,实现了多约束条件的优化调度,并对梯级水量优化调度技术进行分析.测试结果表明,文章的设计极大地节约了调度时间和成本,梯级水量调度组的优化调度方法更好.
装配式施工技术不仅能解放生产力,还能促进建造产业化的发展.基于此,文章对装配式建筑全现浇外墙快速建造穿插施工技术进行了研究,通过装配式+铝模+全现浇外墙+爬架+全穿插施工工艺能够明显起到降本增效的作用.
针对和若铁路的特殊气候与地质条件,文章在分析铁路路基基床底层包芯土填筑施工技术原理及特点的基础上,详细介绍了该技术的施工工艺流程.现场应用证明,该技术解决了不同性质填料填筑施工的难题,提高了施工效率,值得参考.
隧道施工中隐蔽工程较多,公路隧道建设受到诸多因素的制约,质量、安全控制难度较大.在高速公路隧道交工验收检测过程中,经常发现隧道普遍存在二次衬砌开裂、渗水等质量缺陷,个别项目隧道存在二衬厚度合格率偏低的现象.基于此,文章主要针对交工验收阶段发现的隧道质量缺陷进行原因分析,并结合个人经验提出缺陷处理措施,以供参考.
有砟轨道是现代高速铁路建设中较为主流的轨道形式,为了保证线路的平顺性和车辆通行的安全性,文章围绕有砟轨道精调的相关技术要点展开探讨,首先阐述了有砟轨道精调施工的准备工作,然后详细分析了有砟轨道精调施工的具体操作要点,并指出了施工中的注意事项,旨在为类似项目提供参考.
文章结合洛溪大桥旧桥加固工程案例,简要介绍了该工程的实际情况,并结合案例桥梁实际病害问题进行加固方案的设计,然后针对碳纤维板加固技术在该旧桥加固工程中的实际应用要点和相应技术措施展开详细分析,最后总结并提出了碳纤维板加固技术的施工质量控制要点,旨在为相似工程提供参考.
南京长江第五大桥为中央双索面斜拉桥,主梁采用含粗骨料活性粉末混凝土桥面板的钢混组合梁,采用过索式桥面吊机悬臂吊装,梁段间连接采用焊接结合的方式.主梁结构新颖,连接方式方便、快捷.基于此,文章重点介绍了南京长江第五大桥主桥上构组合梁安装过程中的桥面吊机行走、梁段吊装、梁段连接、湿接缝浇筑、斜拉索施工工艺.
文章采用有限差分方法分析了苏州某地区地铁隧道周边基坑降水对地铁盾构隧道的影响,数值模拟中考虑在两种不同的基坑降水深度时,基坑降水后以及基坑开挖后隧道的位移场和盾构管片的变形错动量.结果 表明,随着基坑降水深度的增加,隧道的变形逐渐增大;基坑降水时,隧道竖直位移为沉降变形,并由于沉降抛物线原理,管片环远离基坑侧的拱顶及拱腰位置处的沉降值大于靠近基坑侧隧道底部的沉降值;同时,管片间张开错动量较小,均满足规范要求.文章结论能为相关研究提供参考.