AI能干爬蟲干的事嗎?也就是搜集數(shù)據(jù)?
作者: 發(fā)布日期:2025-06-28 22:10:11
剛安裝好 Gemini CLI,測試用 AI Agent 來寫個爬蟲試試。
我本來想寫復(fù)雜一點,比如告訴 AI 列表頁的 URL 構(gòu)造,告訴 AI HTML 頁面里的 DOM 構(gòu)造,告訴 AI 我都需要哪些數(shù)據(jù)等等。
后來想,既然都智能體了,干脆讓 AI 自主到底,所以用了最簡單的 Prompt: 爬取完整的知識庫 [鏈接],將結(jié)果保存在一個 txt 文檔里。
AI 的第一步:訪問鏈接,獲取 HTML(由于不那么信任 AI,所以我選的單次同意執(zhí)行): 第二步:安裝需要的庫(其實…。









