自主代理程式

ChatGPT Agent

ChatGPT Agent 是由 OpenAI 營運的機械人,會自行瀏覽網絡以完成多步驟任務。ChatGPT Agent 是 OpenAI 開發的 AI 代理,能夠使用網頁瀏覽器。此機械人遵守 robots.txt;如請求聲稱來自 ChatGPT Agent,可用的核實依據為已公布的 IP 範圍檔案。

OpenAIIP 範圍robots.txt:遵守

即時檢查

驗證自稱為 ChatGPT Agent 的 IP

貼上日誌記錄中的地址,系統會與營運者公布的資料核對。

參考資料

ChatGPT Agent 概覽

ChatGPT Agent 爬蟲的參考資料
User agentChatGPT Agent

僅為標記:以子字串比對。

營運者OpenAI
用途自主代理程式
遵守 robots.txt遵守
驗證方法IP 範圍已公布的 IP 範圍檔案

OpenAI 為每個機械人分別公佈一個地址範圍檔案。請使用機械人文件中為此代理列出的檔案,而非 GPTBot 的檔案。

https://platform.openai.com/docs/bots

爬取模式未公布
robots.txt 標記ChatGPT Agent
營運者文件https://platform.openai.com/docs/bots

ChatGPT Agent 是 OpenAI 開發的 AI 代理,能夠使用網頁瀏覽器。它可以智能地瀏覽網站並與之互動,代為完成多步驟任務……

robots.txt

允許或封鎖 ChatGPT Agent

選擇其中一項,貼到網域根目錄。規則按標記分別設定。

封鎖 ChatGPT Agent
User-agent: ChatGPT Agent
Disallow: /
允許 ChatGPT Agent
User-agent: ChatGPT Agent
Allow: /
允許,但排除不希望被引用的頁面
User-agent: ChatGPT Agent
Allow: /
Disallow: /account/
Disallow: /checkout/
Disallow: /search

請修改 Disallow 路徑,使其符合你的網址。

封鎖的實際代價

封鎖 ChatGPT Agent 可阻止自動化工作階段像已登入用戶一樣填寫表格、逐步完成流程及閱讀網頁。在此情況下,速率限制和驗證挑戰通常比 robots.txt 規則更有效。

為所有爬蟲建立檔案

FAQ

ChatGPT Agent 常見問題

ChatGPT Agent 是甚麼?

ChatGPT Agent 是由 OpenAI 營運的機械人,會自行瀏覽網絡以完成多步驟任務。ChatGPT Agent 是 OpenAI 開發的 AI 代理,能夠使用網頁瀏覽器。此機械人遵守 robots.txt;如請求聲稱來自 ChatGPT Agent,可用的核實依據為已公布的 IP 範圍檔案。

ChatGPT Agent 是否遵守 robots.txt?

是。營運者的文件說明 ChatGPT Agent 會讀取 robots.txt,並遵守針對其標記的 Disallow 規則。規則會在下次擷取該檔案時生效,可能是發布後數小時或數天。

如何核實請求確實來自 ChatGPT Agent?

OpenAI 為每個機械人分別公佈一個地址範圍檔案。請使用機械人文件中為此代理列出的檔案,而非 GPTBot 的檔案。參考資料發布於 https://platform.openai.com/docs/bots。

如何封鎖 ChatGPT Agent?

在 robots.txt 中為標記 ChatGPT Agent加入 Disallow: /。如該爬蟲不遵守 robots.txt,請改為在 CDN 或反向代理伺服器比對 user agent,並在該處回傳 403。

封鎖 ChatGPT Agent 會否影響我的搜尋排名?

封鎖 ChatGPT Agent 可阻止自動化工作階段像已登入用戶一樣填寫表格、逐步完成流程及閱讀網頁。在此情況下,速率限制和驗證挑戰通常比 robots.txt 規則更有效。

    ChatGPT Agent(OpenAI):User Agent、IP 核實及 robots.txt | IPScanner