随着中小企业信息化进程的推进,网络营销的比重将越来越大。中小企业将更多的选择第三方B2B电子商务平台作为营销手段。B2B电子商务平台上的信息越来越大,面对大量的信息,普通用户需要花费大量时间成本投入到搜索和信息选择上。用户需要电子商务平台把最相关的的结果排在前面,这样能节约用户在搜索筛选上的时间。国内的电子商务提供商中,谁能把信息排序做的好,谁就能吸引更多的用户。所以,提高电子商务平台的搜索质量,建立质量评价体系,已经成为电子商务平台商迫切要解决的问题。本文基于搜索引擎理论和B2B用户特点,构建了适用于B2B电子商务平台的质量评价体系。质量评价体系含两种评价方法:单项测试法和比较测试法。这两种方法采用的理论是搜索引擎中的DCG评价法和模糊综合评价法。这两种方法都采用了人工标注的方法。单项测试法是对用户搜索词和每一条搜索结果之间的相关性评价。这种方法优点是能查看一个搜索词和它对应的每个结果之间的相关质量;缺点是只能查看每个词之间的关系,不能查看每个搜索结果页之间的相关性。比较测试法,经常应用在算法升级前后的综合对比。比较测试法的优点是能从整体上做相关性的判断。是对单项测试法的一个补充本文深入研究了B2B用户的行为方式,根据用户的行为方式,制定了评测方法中的权重。把用户行为放在评测的首位。本文选择国内知名的B2B电子商务平台阿里巴巴电子商务公司做研究对象。对B2B电子商务网站的质量评价进行了实证分析。为了验证单项测试法中的权值,通过分析阿里巴巴用户点击日志,证实权值的合理性和可用性。通过在阿里巴巴公司的实证证明,这套质量评价体系能够满足电子商务平台的质量评价需求;能提供准确的数据指导搜索质量的改进,有很强的实用性。