电商爬虫API快速入门指南

​电子商务爬虫API​是一个公共数据爬虫API，旨在通过大多数电子商务网站收集大量实时本地化数据并搜索信息。这个数据收集工具作为一个值得信赖的解决方案，实现通过最复杂的电子商务网站收集公共信息。电子商务爬虫API适用于商业用例，诸如价格监控、产品目录映射、竞争对手分析。

这份快速入门指南解释了电子商务爬虫API的运作方式。我们还将介绍如何无忧地开始使用这个数据收集工具。

您能够通过电商爬虫API获得什么?

• 高成功率 – 有效地获得您的抓取结果。实施了基于ML的已获专利代理轮换工具，采用人工智能技术的指纹识别 ，以及自动重试系统帮助您达到100%的成功率。您的网络抓取操作几乎不会遭到IP封锁，过程畅通无阻。
• 代理池管理 – 将代理管理交给我们，您只需专注于收集并分析所需的公共数据。电子商务爬虫API由市场上最大的代理池之一支持，在全球范围内有超过1.02亿个的IP。 
• JavaScript渲染 – 即使从最复杂的网站收集电子商务公共数据。我们的专业团队为您自动运行无头浏览器，通过最先进的电子商务目标获取公共数据。
• 结构化的电子商务数据 – 不用担心不断变化的电子商务网站布局。基于ML的自适应解析功能可以适应变化，自动检测任何电子商务目标中的产品属性，并以JSON提供已解析的数据。 
• 各种集成选项 - 从异步（push-pull）、同步（realtime）或类似代理（super API）集成选项中进行选择。通过REST API获得您的公共数据，或选择所需的数据交付到云（S3 或 GCP）。Oxylabs的专业团队确保99.9%的正常运行时间，实现24/7全天候一致数据流。
• 24/7全天候支持 – 无论什么时候都能获得您所有问题的解答。我们的支持团队或您的专职客户经理将确保您的网络抓取过程不会因为意外问题或错误遭到中断。

数据来源

通过电子商务爬虫API，您可以通过各种来源获得JSON格式的已解析数据。有效地获得所需的电子商务数据，并确保您拥有便于分析所需的一切内容。

 世界领先的电子商务市场 

搜索页面中的公共数据来源：

• 产品名称
• 价格
• 位置
• URL
• 赞助产品
• 分页

产品页面中的公共数据来源： 

• 名称和描述
• 价格
• 类别
• 折扣和优惠券
• 图片和可用性
• 经销商信息

 额外的1,000多家电子商务网站 

产品页面中的公开数据： 

• 名称和描述
• 折扣价
• 正常价
• 货币
• 可用性
• 图片网址
• 产品ID

*所有数据来源将在购买产品后提供。

电商爬虫API-它是如何运作的？

电商爬虫API是一个易于使用的工具，无需任何特殊的基础设施或资源。

• 选择产品ID、链接或搜索短语
• 提交GET或POST请求
• 通过REST API直接接收所需的公共数据或上传到云

您会在仪表板上发现什么?

如果您选择使用电子商务爬虫API，您将获得一个简便的仪表板。您可以关注您的数据使用统计并对您的订阅细节进行跟踪。不仅如此，您还可联系客户服务团队，无论什么时候都能获得帮助。

身份验证

电商爬虫API采用需要用户名和密码的基本HTTP身份认证。这是开始掌握该工具的最简单的方法。以下代码示例展示如何使用实时交付方法向books.toscrape.com发送GET请求，我们将在本指南后面的内容中讨论这种方法：

集成方法

电子商务爬虫API提供了多种集成方法，包括Push-pull、Realtime和SuperAPI，每一种都有独特的好处。您可以选择一个最适合您需求的方法，并有效地获得所需的电子商务数据。

— — 总结​— —

电子商务爬虫API是一个高级工具，使您能够从大多数电子商务网站收集大量的实时本地化数据和搜索信息。为了简化集成，我们提供了多种集成和数据交付方式，所有这些方式均确保无缝的数据交付。电子商务爬虫API还能够为客户提供一个简单的仪表板和24/7全天候支持。