CoolBotDataSys/crawlers
caibotmini 1c0f74ccb6 feat: v0.0.2 - 帖子正文爬取优化
- extract_post_content 新增免责声明截断逻辑:只保留到"免责声明及风险提示: 所有交易人员,凡未采用本站中介交易的,被骗后果自负。"为止
- 爬虫脚本 crawl_cron_s1/s2/s3 支持 instance_id 日志记录
- crawler_monitor.py 监控脚本:检查三台服务器爬虫运行状态
- 修复 crawl_today 日志写入 crawl_logs 表的问题
2026-04-06 16:42:43 +08:00
..
__init__.py refactor: 重构 API 架构,规范化命名和响应格式 2026-04-04 18:23:00 +08:00
backfill_special.py feat: v0.0.1 - CoolBotDataSys 完整版本 2026-04-06 14:41:01 +08:00
base.py feat: 完成一尘数据采集模块 2026-04-04 18:54:15 +08:00
crawl_today.py feat: v0.0.2 - 帖子正文爬取优化 2026-04-06 16:42:43 +08:00
yichens_spider.py feat: v0.0.1 - CoolBotDataSys 完整版本 2026-04-06 14:41:01 +08:00