Universal E-Commerce Scraper

✨ Universal E-Commerce Scraper：您的智能电商数据捕手！

厌倦了手动整理产品数据？Universal E-Commerce Scraper 来啦！我们致力于为您自动识别并抓取干净、结构化的产品数据，让您的工作更高效、数据更精准。

---

💡 产品亮点一览

Universal E-Commerce Scraper 是一款智能、通用的电商爬虫工具，专为 Apify 平台打造。它能自动检测主流电商系统，通过智能策略发现产品链接，并将数据规范化为整洁的结构化格式。

• 自动平台识别： 智能检测包括 Shopify, WooCommerce, Magento, PrestaShop, BigCommerce, Shopware 在内的六大电商系统，以及其他通用系统。
• 智能产品发现：
  • 网站地图分析： 快速高效地通过 sitemap.xml 发现产品 URL。
  • 深度产品爬虫： 采用“Screaming Frog”式深度爬取，智能识别产品页面。
• 强大数据提取： 结合 API（WooCommerce, Shopify）、GraphQL、JSON-LD 和 HTML 解析，确保数据最大限度准确。
• 数据标准化： 清理并标准化价格、货币、库存和 URL，输出始终如一的格式。
• 伦理爬取： 可选遵守 robots.txt 规则、爬取延迟（Crawl-Delay）及机器人身份识别，确保合规。
• 代理与用户代理管理： 完全集成 Apify 代理与用户代理轮换，有效防止 IP 封锁。
• 反市场保护： 设有黑名单，主动规避 Amazon, eBay 等大型电商平台，专注于独立站。
• 灵活输出格式： 支持将数据导出为标准的 JSON, CSV 或 XLSX 格式。

🌐 完美满足您价格监控、市场调研以及产品数据生成等各类需求！

---

🎯 为什么选择 Universal E-Commerce Scraper？

我们不仅提供数据，更提供干净、准确、易于使用的数据。无论是市场分析师、电商运营者，还是数据科学家，都能从我们的Scraper中获得巨大的价值。

• 📈 价格监控： 实时获取竞品价格，保持市场竞争力。
• 🔍 市场调研： 深入分析产品趋势，洞察行业动态。
• 🛠️ 产品数据生成： 轻松为您的电商网站或应用生成丰富、结构化的产品数据。
• 🚀 快速上手： 在 Apify 平台上点击“Try actor”，简单配置即可开始爬取。

---

⚙️ 主要输入参数（快速入门）

以下是一些您在 Apify 平台运行 Scraper 时常用的关键参数：

1. startUrls： 您想要爬取的网店 URL (例如：https://your-shopify-store.com/)。
2. maxProducts： 设置要提取的最大产品数量，非常适合快速测试。
3. enableDeepCrawler： （注意：可能产生较高费用！）当网站地图分析不足时，激活智能深度爬虫。
4. outputFormat： 选择您希望的输出格式：json, csv 或 xlsx。
5. includeDescription, includeImages, includeSKU： 指定结果中应包含哪些可选字段。

所有详细参数说明，请参考 .actor/input_schema.json。

---

📊 示例输出 (JSON)

您将获得如下所示的清洗和标准化的产品数据：

[
  {
    "name": "Stylish T-Shirt - Blue",
    "description": "A comfortable and stylish t-shirt made from 100% organic cotton. Perfect for everyday wear.",
    "price": 29.99,
    "currency": "USD",
    "sku": "TS-BL-M-01",
    "availability": "InStock",
    "image": "https://your-store.com/images/stylish-t-shirt-blue.jpg",
    "url": "https://your-store.com/products/stylish-t-shirt-blue",
    "platform": "shopify",
    "variants": [
      {
        "name": "Color",
        "value": "Blue"
      },
      {
        "name": "Size",
        "value": "M"
      }
    ]
  }
]

📌 请注意：attributes 字段（用于详细规格）主要支持 WooCommerce 和 Magento 商店。