dasouche_scraper.py): 采集 souche.com 二手车列表和详情
dongchedi_scraper.py): 采集 dongchedi.com 二手车数据(API + SSR 双模式)
autohome_scraper.py): 采集 che168.com 二手车数据(含字体反爬处理)
openclaw_export.py): 统一格式输出 JSON/JSONL/CSV
# 单平台采集
from dasouche_scraper import DasoucheScraper
scraper = DasoucheScraper()
result = scraper.scrape(pages=3)
# OpenClaw 导出
from openclaw_export import export_scrape_result
files = export_scrape_result(result, output_format="json")
所有车辆数据统一为 VehicleInfo (见 data_models.py),包含:
编辑 config.py 调整请求间隔、代理池、目标页数等参数。
共 1 个版本