论文部分内容阅读
搜索引擎机器人的自动采集行为可能会引起信息安全问题,机器人排除协议(REP)可以将全部或部分网站内容排除在机器人的采集范围之外。通过国内外政府网站应用REP协议的调查,发现国内政府网站很少使用REP协议限制机器人的行为。通过科学合理的利用REP协议设置排除规则,可以在一定程度上保护政府网站的信息安全。