类库
› scraperai
scraperai/scraperai
ScraperAI是一个开源、AI驱动的网页抓取工具，旨在简化所有技能水平用户的网络爬取过程。它利用大型语言模型（如ChatGPT）从网页中提取数据，并生成可重复使用和共享的抓取配置方案。
技术栈
网络
Requests
查看全部依赖 (23)
依赖
NumPy
Pandas
Pillow
Pydantic
appdirs
beautifulsoup4
click
htmlmin
langchain
langchain_community
langchain_openai
langchain_text_splitters
lxml
openai
openpyxl
packaging
python-dotenv
retry
selenium
tabulate
tiktoken
tqdm
webdriver-manager
