随着网络技术的高速发展与电子客票系统的全面推广应用,各大航空公司都已经利用各自的网站销售电子客票,同时也出现了许多机票代售网站。这种面向互联网的机票销售,使得机票市场存在非常激烈的竞争。各个航空公司为了使总体利润最大化,通常采用一些低价策略吸引客户,从而使得票价调整非常频繁,也导致了航空公司之间出现了恶性竞争。当前民航监管部门的监控手段存在重大问题:由于航线多,销售网站多,数据量大,同时采用人工方式,致使自动化程度低,效率极其低下,准确度难以保证,不能全面而实时的监控票价和预警。本文针对上述问题,采用深度网络爬虫技术设计实现了一个互联网的机票数据抓取与票价预警系统。该系统有很强的机票数据抓取能力,并能对未来票价预测预警,可以实时监控互联网上机票价格并实时预警。本系统的核心在于两个部分:机票数据的深度抓取和票价预警。首先设计实现了一个机票主题爬虫,该爬虫根据主题相关性判断,在网页中识别出与机票主题相关的HTML表单,自动填充查询条件并提交,进而抓取含有丰富机票数据的结果页。再对结果页通过模板匹配的方法抽取有效的机票数据,结构化存储到数据库。最后对抓取到的数据去错去重,分析其特征,采用移动加权平均时间序列预测算法处理近期和历年同一时期票价数据进行未来机票价格预测,得出价格走势图,当预测到某一机票价格低于预设阈值时发出警报。最后,对系统进行了测试与结果分析。本课题来源于中国民航研究院的预研项目,完成了互联网的机票数据抓取与票价预警系统的设计与实现。通过测试,验证了系统可以有效的抓取深层网络机票数据,并能分析预测未来价格走势,准确预警;解决了民航监管部门现有的问题,达到了预期的目标,具有重大的实用价值。