Crawl4AI

一款面向 LLM 流程的開源網頁爬蟲與擷取工具。它把抓到的頁面整理成語言模型可以直接使用的結構化 Markdown，Python API 從單一網址到大規模非同步抓取都用同一套寫法。