HTTP 狀態碼、robots.txt、Meta 標籤
HTTP 狀態碼查詢
產生 robots.txt 檔案
產生 HTML Meta 標籤
檢查 HTTP 回應標頭
解析和分析 User Agent 字串