#
# robots.txt for Discuz! Board
# Version 7.0.0
#

User-agent: * 

#先禁止所有內容
Disallow: /

#開放主頁。不支持Allow將不能收錄主頁；如不支持$，大概會全部開放
Allow: /$

#開放所有.html頁，對DZ來說有 列表面、帖子、archiver

#將來TAG內容豐富後，後台設置將TAG頁面靜態畫自然也就允許收錄TAG了
Allow: /*.html 

Allow: /viewthread.php #開放帖子的各種動態形式
Allow: /redirect.php #開放帖子的跳轉形式
Allow: /forumdisplay.php #開放列表面的各種動態形式
Allow: /archiver/ #只有放開這個目錄,robots並能進入抓取*.html的東西