Appearance
支持:哔哩哔哩 | 抖音 | 小红书 | 贴吧 | 微博 | 知乎 | 快手;根据:关键词 | 详情页 | 创作者 进行爬取 (Based on 'MediaCrawler')
支持哔哩哔哩、抖音、小红书、贴吧、微博、知乎、快手等多个媒体平台,用户可以根据关键词、详情页链接、创作者id进行数据爬取。
使用 FastAPI 构建了支持异步高并发的 API 服务器,所有功能均可通过 API 接口进行调用,提升了系统的可扩展性和集成能力。
增加了 SQLite 数据库作为默认存储数据库,并编写了相应的数据库事务脚本,以兼容 MySQL 存储。同时,这种设计也更利于对其他关系型数据库的适配,为用户提供了更多数据存储选择。
构建了前端服务,提供了 "数据爬取" 和 "数据展示" 两个核心界面,使得操作更加便捷直观,充分对齐了项目的核心功能,提升了用户体验。
70%+的改动代码是通过AI编程实现的,包括但不限于:数据爬取、数据清洗、数据存储、数据展示等。