What is Crawly?
從網站上獲取結構化資訊或清晰的視覺資料,往往需要操作複雜的工具或投入大量的人工。Crawly 簡化了整個流程。它是一個簡單易用的網路資料提取 API,旨在幫助您精準地提取所需的資訊——從特定細節到完整的網站分析——並擷取高品質的螢幕截圖,所有這些都只需透過一個簡單的 API 呼叫即可完成。
無論您是追蹤競爭對手的價格、收集研究資料,還是僅僅需要網頁的視覺快照,Crawly 都提供了一種可靠的方式,透過程式化的方式存取網路資訊。
主要功能
🎯 提取目標資料: 使用簡單的鍵和描述,明確指定您需要的內容。定義您期望的資料類型——例如,文字使用
string、數值使用number、多個項目使用list,以及真/假標記使用boolean——Crawly 將提供結構化的 JSON 輸出,隨時可供您的應用程式使用。🤖 運用 AI 見解: 使用可選的
prompt參數來引導資料提取。要求 Crawly 扮演特定的角色(例如行銷專家),或以某種方式解讀頁面內容,根據頁面的內容為您提供更量身定制且具有上下文意識的結果。🔍 掃描整個網站: 超越單一頁面。將
scan參數設定為"full",Crawly 會智慧地發現初始 URL 上的相關連結,爬取這些連結,並編譯全面的資料,讓您更廣泛地了解整個網站的內容。📸 擷取高解析度螢幕截圖: 每次爬取時自動獲取全頁面的高解析度螢幕截圖。API 回應包含螢幕截圖檔案的直接連結,非常適合用於存檔、分析或視覺文件。
⚙️ 簡單的 API 整合: 使用單一的
POST請求與 Crawly 互動,發送到明確的端點 (https://api.crawly.dev/crawl)。傳送您的目標url、提取data需求,以及可選的參數,如scan或prompt,並直接接收結果。
您可以如何使用 Crawly
競爭對手監控: 需要隨時掌握競爭對手的產品詳細資訊嗎?設定 Crawly 請求,定期從其主要產品頁面提取名稱、價格 (
type: "number") 和功能列表 (type: "list")。您將獲得結構化的資料,非常適合用於分析或儀表板。市場研究資料收集: 研究新市場?結合
scan: "full"選項和prompt,從多個產業網站收集描述、主要服務和聯絡資訊,將原本需要花費數小時的手動瀏覽,縮短到幾分鐘。網站存檔與變更追蹤: 想要以視覺方式追蹤合作夥伴網站上的變更,或在網站重新設計之前記錄網站?安排定期的 Crawly 請求,以擷取全頁面螢幕截圖並提取關鍵文字區段 (
type: "string"),以便輕鬆比較不同時間點的版本。
開始使用網路資料提取
Crawly 提供了一條直接的路徑,讓您可以存取所需的網路資料和視覺資料,而無需管理複雜的爬取基礎設施。它能夠處理特定的資料點、執行完整的網站掃描、使用 AI 提示解讀內容,並擷取高品質的螢幕截圖,使其成為開發人員、分析師和企業的多功能工具。簡單明瞭的 API 和隨用隨付的定價,意味著您可以高效且經濟地整合網路資料提取功能。





