機械人與 AI 爬蟲管控

AI 代理與機械人偵測, 擋住抓取程式,放行 Googlebot。

Agentscan 把每位訪客分為真人、已驗證爬蟲、AI Agent 及機械人腳本,再對每一類套用你的規則。可作為 WordPress 外掛、Cloudflare Worker 安裝,或安裝在你的代理上。

已驗證爬蟲一律放行無需信用卡

傳入請求
真人12
已知機械人4
AI 代理3
惡意自動化5

速度

訪客眨眼之前,判定已經完成。

每次檢查在 50 至 100 毫秒內回應,您的頁面和註冊流程從不需要等待。

IPScanner 檢查中位數,在您的邊緣節點
約 85 毫秒
一次眨眼人眼
300 毫秒
一次快速頁面載入Google 的「良好」標準
2.5 秒

運作方式

安裝、觀察,然後決定

  • 01

    安裝在流量進入之處

    WordPress 外掛、Cloudflare Worker,或 Traefik、Caddy、nginx 外掛。無需改動你的應用程式。

  • 02

    看清誰在瀏覽

    控制台把流量分為真人、已驗證爬蟲、AI Agent 及腳本,並顯示其來源網絡。

  • 03

    按類別訂立規則

    允許、標記或封鎖。封鎖使用額度,開始時由免費額度支付。

使用案例

何處能體現 Agentscan 的價值

  • 內容與 SEO 保護

    允許你想被索引的答案引擎並封鎖訓練用抓取程式,同時不會誤殺 Googlebot。

  • 防抓取與防搶購

    阻止無頭自動化猛攻定價、庫存與門票端點。

  • 帳戶安全

    為來自遭遮蔽 IP 的自動化所驅動的撞庫與註冊濫用增添阻力。

  • AI 流量政策

    逐一決定 GPTBot、ClaudeBot、Perplexity 等爬蟲可否讀取你的頁面。

每個請求,分門別類

分清哪些訪客是真人

真人、已驗證爬蟲、AI 代理及腳本,按網絡、瀏覽器以及各營運者公佈的資料加以區分。

Safari 18 · iPhone放行
Googlebot放行
GPTBot標記
HeadlessChrome/141攔截
ClaudeBot標記
Chrome 141 · Windows放行
python-requests/2.32攔截
Bingbot放行
Safari 18 · iPhone放行
Googlebot放行
GPTBot標記
HeadlessChrome/141攔截
ClaudeBot標記
Chrome 141 · Windows放行
python-requests/2.32攔截
Bingbot放行

判定

四個類別,每個對應一項動作

每個請求都會準確落入一個類別,並帶有信心度與建議動作。

  • 真人

    使用真實瀏覽器的真實用戶,因此請求獲准。

  • 已知 Bot

    Googlebot 或 Bingbot 等已驗證的良性 bot,獲准通過且絕不會被誤封。

  • AI Agent

    GPTBot 或 ClaudeBot 等已識別的 AI 抓取程式,由你按政策標記並作決定。

  • 惡意自動化

    沒有良性身份的無頭自動化,往往來自遭遮蔽的來源,因此請求遭封鎖。

技術原理

由網絡層一直到請求層的身份識別

Agentscan 將共用 IP 引擎與請求層級的指紋及已驗證白名單融合在一起。

  • IP 來源類別

    由引擎對數據中心、VPN、proxy 或乾淨住宅的判定開始,因為遭遮蔽的來源會改變一切。

  • 無頭瀏覽器與自動化特徵

    從 User-Agent 加上 webdriver 等客戶端訊號偵測 HeadlessChrome、Playwright、Puppeteer、Selenium 與腳本化客戶端。

  • JA4 TLS 指紋

    一種即使 User-Agent 遭偽造仍能存活的 TLS 客戶端指紋,將真實瀏覽器與冒充者區分開來。

  • 標頭一致性

    評估標頭組合有多像瀏覽器,因為真實瀏覽器會同時送出 Accept、Accept-Language 與 Accept-Encoding。

  • 已驗證白名單

    Googlebot、Bingbot 等是透過正向確認反向 DNS 來確認,而非靠可偽造的 User-Agent 字串。

  • AI 爬蟲識別

    認得 GPTBot、ClaudeBot、PerplexityBot、Google-Extended 等,讓你能按名稱允許或封鎖它們。

給你的開發團隊

給開發團隊的一次呼叫

從邊緣節點以程式碼片段收集的訊號進行呼叫。判定會經 Redis 快取以達低延遲。

POST/v1/agentscan/check
curl -X POST 'https://ipscanner.io/v1/agentscan/check' \
  -H 'Authorization: Bearer YOUR_API_KEY' \
  -H 'Content-Type: application/json' \
  -d '{"ip":"198.51.100.7","user_agent":"Mozilla/5.0 HeadlessChrome/120","ja4":"t13d1516h2_8daaf6152771_...","headless_flags":{"webdriver":true},"headers":{"Accept":"*/*"}}'
回應

你的 25,000 免費額度足夠 2,500 次檢測。請從你的伺服器呼叫:金鑰不應出現在瀏覽器中。

提供 Node.js、Python、Go、PHP、Ruby 及 Rust SDK

常見問題

為你解答疑問

Agentscan 採用正向確認反向 DNS。它查找該 IP 的 PTR 記錄,檢查其是否以 googlebot.com 等官方網域結尾,再將該主機名稱反向解析並確認其與該 IP 相符。一個來自錯誤網絡、偽造的 Googlebot User-Agent 無法通過這項檢查,因此不會被視為已知 bot。

看清哪些訪客是真人

安裝後按類別查看你的流量,再選擇封鎖甚麼。

起步無需信用卡

    Agentscan:AI 代理與機械人偵測 API | IPScanner