自主代理程式
ChatGPT Agent 是由 OpenAI 營運的機械人,會自行瀏覽網絡以完成多步驟任務。ChatGPT Agent 是 OpenAI 開發的 AI 代理,能夠使用網頁瀏覽器。此機械人遵守 robots.txt;如請求聲稱來自 ChatGPT Agent,可用的核實依據為已公布的 IP 範圍檔案。
請求聲稱
"ChatGPT Agent"
核對依據
OpenAI 的已公佈的 IP 範圍
即時檢查
貼上日誌記錄中的地址,系統會與營運者公布的資料核對。
參考資料
| User agent | ChatGPT Agent僅為標記:以子字串比對。 |
|---|---|
| 營運者 | OpenAI |
| 用途 | 自主代理程式 |
| 遵守 robots.txt | 遵守 |
| 驗證方法 | IP 範圍已公布的 IP 範圍檔案 OpenAI 為每個機械人分別公佈一個地址範圍檔案。請使用機械人文件中為此代理列出的檔案,而非 GPTBot 的檔案。 |
| 爬取模式 | 未公布 |
| robots.txt 標記 | ChatGPT Agent |
| 營運者文件 | https://platform.openai.com/docs/bots |
ChatGPT Agent 是 OpenAI 開發的 AI 代理,能夠使用網頁瀏覽器。它可以智能地瀏覽網站並與之互動,代為完成多步驟任務……
robots.txt
選擇其中一項,貼到網域根目錄。規則按標記分別設定。
User-agent: ChatGPT Agent
Disallow: /User-agent: ChatGPT Agent
Allow: /User-agent: ChatGPT Agent
Allow: /
Disallow: /account/
Disallow: /checkout/
Disallow: /search請修改 Disallow 路徑,使其符合你的網址。
封鎖 ChatGPT Agent 可阻止自動化工作階段像已登入用戶一樣填寫表格、逐步完成流程及閱讀網頁。在此情況下,速率限制和驗證挑戰通常比 robots.txt 規則更有效。
為所有爬蟲建立檔案FAQ
ChatGPT Agent 是由 OpenAI 營運的機械人,會自行瀏覽網絡以完成多步驟任務。ChatGPT Agent 是 OpenAI 開發的 AI 代理,能夠使用網頁瀏覽器。此機械人遵守 robots.txt;如請求聲稱來自 ChatGPT Agent,可用的核實依據為已公布的 IP 範圍檔案。
是。營運者的文件說明 ChatGPT Agent 會讀取 robots.txt,並遵守針對其標記的 Disallow 規則。規則會在下次擷取該檔案時生效,可能是發布後數小時或數天。
OpenAI 為每個機械人分別公佈一個地址範圍檔案。請使用機械人文件中為此代理列出的檔案,而非 GPTBot 的檔案。參考資料發布於 https://platform.openai.com/docs/bots。
在 robots.txt 中為標記 ChatGPT Agent加入 Disallow: /。如該爬蟲不遵守 robots.txt,請改為在 CDN 或反向代理伺服器比對 user agent,並在該處回傳 403。
封鎖 ChatGPT Agent 可阻止自動化工作階段像已登入用戶一樣填寫表格、逐步完成流程及閱讀網頁。在此情況下,速率限制和驗證挑戰通常比 robots.txt 規則更有效。