Skip to main content

xianyu_spider - 闲鱼商品搜索 API

  1. xianyu_spider - 闲鱼商品搜索 API

    https://github.com/superboyyy/xianyu_spider

    基于 FastAPI 构建的闲鱼商品搜索接口,支持异步并发请求和自动化数据去重存储。

    关键词商品搜索(支持分页)
    异步高性能爬取(Playwright 无头浏览器)
    智能数据去重(基于链接特征哈希值)
    数据持久化存储(关系数据库)
    返回新增记录统计信息

    #GitHub #Tool GitHub - superboyyy/xianyu_spider: 闲鱼爬虫,基于闲鱼网页端开发,使用 FastAPI 构建的闲鱼商品搜索接口,支持异步并发请求和自动化数据去重存储。
OKHK