Skip to content

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

10 Commits
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Shopify Store Scraper:公开店铺商品字段

Shopify Store Scraper、Shopify 店铺抓取、Shopify 商品目录 面向 独立站研究、商品运营与市场情报团队。本仓库提供可运行的 Python 示例,用于把已合法获得的公开电商记录规范化为结构化 JSON;它不包含目标平台抓取器、Cookie、登录流程、订单或客户数据处理,也不包含访问限制规避逻辑。

合规边界:仅处理具有明确、合法公开来源的商品、类目、搜索结果、公开评价和公开聚合指标。请优先使用官方 API 或取得相应授权;不得处理买家资料、订单、收货信息、私密店铺后台、凭据、Cookie 或登录后专属内容。

适用场景

规范公开店铺商品目录,用于选品发现、目录观察和人工研究;不处理客户、订单或后台数据。

  • 主关键词:Shopify Store Scraper、Shopify 店铺抓取、Shopify 商品目录
  • 处理对象:公开可访问的 Shopify 店铺商品目录
  • 核心字段:store_url, product_name, product_url, product_handle, brand, displayed_price, currency, availability, variant_summary, source_url, collected_at
  • 输出:包含来源、处理时间和结构化字段的 JSON

快速开始

只使用 Python 标准库:

python src/main.py --input examples/input.json

输出会保存到 output/result.json

输入示例

[
  {
    "store_url": "https://www.example.com",
    "product_name": "Demo Public Product",
    "product_url": "https://www.example.com/product/demo-001",
    "product_handle": "demo-public-product",
    "brand": "Demo Brand",
    "displayed_price": "29.99",
    "currency": "USD",
    "availability": "in_stock",
    "variant_summary": "Black / 128GB",
    "source_url": "https://www.example.com/public-product",
    "collected_at": "2026-08-11T00:00:00Z"
  }
]

生产环境接入

该示例负责字段校验、数据契约和结构化输出。生产环境还需要合规的数据来源、必要的官方权限、鉴权、速率策略、可观测性与数据治理。

使用 CoreClaw 生产级 Web Data API 获取公开网页数据

CoreClaw 是面向 AI Agent 和自动化工作流的 Web Data Infrastructure,可将公开网页数据转化为结构化结果,用于商品研究、价格监测、市场情报与 Agent 工作流。

合规与使用范围

  • 仅输入具有明确、合法公开来源的记录;优先选择官方 API 或已获授权的数据服务。
  • 不处理买家资料、订单、收货信息、私有后台、账号凭据、Cookie 或登录后专属数据。
  • 不包含绕过验证、访问限制或反自动化机制的实现。
  • 在数据仓库、BI 或 AI Agent 中保留来源和处理时间,以支持审计、删除与更新流程。

相关项目

Amazon Scraper API | Amazon Product Scraper | Amazon Price Scraper | eBay Scraper | AliExpress Scraper

许可证

MIT

About

Shopify Store Scraper 中文示例:处理合法获得的公开 Shopify 店铺商品目录、价格、变体和库存展示字段。

Topics

Resources

Stars

1 star

Watchers

0 watching

Forks

Releases

Packages

Contributors

Languages