User-agent: * # 阻擋所有帶有問號的動態查詢(這能有效擋掉大部分爬蟲) Disallow: /index.php? Disallow: /load.php? Disallow: /api.php # 針對 MediaWiki 特殊路徑 Disallow: /Special: Disallow: /Special:Log Disallow: /Special:Search Disallow: /Special:UserLogin Disallow: /Special:WhatLinksHere # 阻擋列印版頁面(這是你 Log 裡消耗 CPU 的大戶) Disallow: /*printable=yes # 增加爬取延遲(對部分守規矩的爬蟲有效) Crawl-delay: 10