当前标签:qihoobot

Google, Yahoo 的搜寻引擎之所以可以搜寻到很多资料，是因為他们时时刻刻都派著 “robot” 在网路上巡逻，Google 的叫 googlebot, MSN 叫 msnbot, Yahoo! 叫 Yahoo Slurp 等等，任务就是捉新的网页或更新的网页回去资料中心. 為了隐私之类的原因，国际组织订有规则，规范 robot 的行為 — 基本上是 robot 要先参考网站根目录的一个