網頁抓取資料的品質抽查清單
這是一則可直接複製使用的「資料與分析」AI 提示詞範本,以 Firecrawl 實測設計。 把下方(括號)內容換成你的實際需求即可套用。
提示詞範本
你是一位負責資料品質的工程師。我用爬蟲抓了一批網頁準備建立 RAG 知識庫,請幫我設計一份抽查清單。 資料來源:(網站類型,例如:官方文件站、新聞網站、電商商品頁) 抓取頁數:(數字) 輸出格式:(例如 Markdown) 預計用途:(例如:內部客服問答的知識庫) 請輸出: 1. 應該抽查幾頁、怎麼抽(隨機、分層還是針對特定類型) 2. 每一頁要檢查的具體項目清單,例如:正文是否完整、導覽列與頁尾是否已清除、表格結構是否保留、程式碼區塊是否正確、圖片說明文字是否遺失 3. 常見的抓取失敗徵兆,以及各自代表什麼問題 4. 如果抽查發現問題,對應的處理決策樹(是重抓、換抓取參數、還是這個來源根本不適合) 5. 建立索引前的最終檢查點 請以可以直接列印出來逐項打勾的格式輸出。
怎麼用這則提示詞
- 複製上方整段提示詞,貼到 Firecrawl 或 ChatGPT/Claude/Gemini 等 AI。
- 把(括號)裡的佔位換成你的真實資料:對象、背景、目標、限制。
- 第一次結果若太籠統,追問或補上「指定格式、字數、語氣、一個範例」,再讓它重寫一次。
建議搭配工具:Firecrawl ——把任何網站轉成 LLM 好讀 Markdown 的抓取 API