Scraper API 是一种用于网络搜刮的代理 API。他们提供的 API 可处理代理、浏览器和验证码,因此您只需调用简单的 API 就能从任何网页中获取 HTML。您可以访问由 2000 多万个住宅 IP 组成的池。他们提供无限带宽,只计算您发出的 API 请求数量。
速度极快、功能齐全的代理 API
- 池中有 2000 多万个住宅 IP
- 管理使用和计费的简单仪表板
- 地理定位:瞄准全球 12 个以上国家
- 包含 1000 个请求和所有功能的免费计划
- 七天无条件退款政策
- 全天候支持和优质客户服务
- 轮流和粘性 IP 会话
- 轻松设置
- 能够呈现 JavaScript 页面
- 自定义浏览器标题
- 高级代理池
- 从热门网站自动提取数据
Scraper API 提供一种代理服务,设计用于 网页爬取.凭借遍布 12 个国家/地区的 2,000 多万个住宅 IP,以及能够处理 JavaScript 渲染和解决验证码问题的软件,您可以快速完成大型搜索工作,而无需担心被任何服务器屏蔽。
实施非常简单,而且提供无限带宽。代理会自动轮换,但如果需要,用户可以选择保留会话。您只需调用 API,输入您要搜刮的 URL,它就会返回原始 HTML。有了 Scraper API,你只需专注于解析数据,其余的事情都由他们来处理。
Scraper API 概述
Scraper API 的服务非常适合抓取大型网站,尤其是亚马逊和 eBay 等电子商务网站以及企业名录。它可以轻松从搜索引擎抓取结果。它们使用 住宅 IP 网络这意味着他们的 IP 很难被检测和阻止,即使出现验证码,他们的软件也能解决。您甚至不会注意到,只需专注于处理收到的 HTML!
有一个用于测试的免费层,包含 1000 个请求和所有功能。之后是兴趣层($29)、创业层($99)和商业层($249)。每个层级允许不同数量的 API 调用,从业余爱好层级的每月 250,000 次到商业层级的每月 3,000,000 次不等。
如果您需要更多,或有不同的要求,只需给团队发一条信息,他们就会为您量身定制适合您的计划。
Scraper API 是一款适合您的工具吗?我们将在本评论中深入探讨它们的功能,以便您做出决定。
第一个月享受 10% 折扣:输入优惠代码" "。SCRAPE38698"来查看!
Scraper API 解决方案
- Scraper API 会自动从十几个 ISP 的 2,000 多万个住宅 IP 池中轮换 IP 地址,并自动重试失败的请求。如果页面存在,您就可以访问它。
- Scraper API 上的高级软件可以解决出现的任何验证码。
- 它可用于抓取用 Javascript 渲染的页面--只需在 API 调用中设置 "render=true",它就会用无头浏览器渲染页面,并将数据返回给您。
- 您可以设置自定义标题,这样网站就无法将您的活动与正常浏览活动区分开来。
- 他们的服务器分布在 12 个以上不同的国家,您可以轻松设置您希望从哪个地方发出请求。
- 无限带宽--与其他代理服务不同,Scraper API 不会向您收取带宽费用,而是根据您所需的请求数量和选项收费。
- 服务器速度很快,最高可达 100Mb/s,并保证 99.9% 的正常运行时间。
- 他们提供专业支持,周转时间快
Scraper API 如何工作
注册 Scraper API 时,您将获得一个访问密钥。您只需使用密钥和要抓取的 URL 调用 API,就会收到原始 HTML 页面的结果。就这么简单
curl "http://api.scraperapi.com?api_key=3ff1f5e972791859ac9960827414be23&url=http://httpbin.org/ip"
在后端,当 Scraper API 收到您的请求时,他们的服务会通过其中一个代理服务器访问 URL,获取数据,然后发送回给您。
IP 旋转 是自动执行的,所以除非您有特殊需求,例如 Javascript 渲染、要求来自特定位置的 IP 或额外的标头,否则除了调用 API 之外,您不需要做任何事情。如果您需要这些功能,只需在 API 调用的末尾添加一些额外的文本即可,不过我们稍后会详细介绍。
所有计划都有一定数量的并发请求,因此您可以更快地搜索到内容。如果同时发送的请求过多,Scraper API 会返回 429 状态代码,这只是意味着你需要稍微放慢请求速度,但他们不会因此惩罚你。
返回菜单 ↑Scraper API 的定价套餐
Scraper API 有三种标准定价方案和一种免费方案,您还可以申请定制方案。
提供 7 天无条件退款政策。免费计划不需要输入任何付款信息,因此完全免费。
兴趣爱好计划每月 $29,可在其标准代理服务器上获得 250,000 次 API 调用,最大并发请求数为 10。在启动计划中,您可以在其标准代理服务器上获得 1,000,000 次 API 调用,最多 25 次并发请求。您还可以选择将 IP 设置为仅来自美国或德国服务器。每月费用为 $99。
商业计划每月 $249,每月提供 3,000,000 次 API 调用。您可以从 12 个国家选择您的 IP 来源。该计划还允许 Javascript 渲染和高级代理,最多允许 50 个并发请求。
如果您每月需要更多并发请求或 API 调用,可以联系销售团队安排企业定制计划。
商业和企业客户可优先获得电子邮件支持。
返回菜单 ↑如何使用 Scraper API
Scraper API 的免费计划每月可为您提供 1000 个请求,并提供所有可用功能,您可以亲自测试。
登录 Scraper API 账户后,您将看到一个仪表板,显示您已使用的请求数、本月剩余请求数以及失败请求数(不计入请求上限)。
主页还将显示您的 API 密钥和一个示例链接,您可以直接复制并粘贴到您的代码中。
在左侧边栏,你会看到一个指向文档页面的链接,该页面对每项功能都有清晰的说明。其中包含可直接复制粘贴到 Bash、Node、Python/Scrapy、PHP 和 Ruby 脚本中的代码。
默认情况下,每次请求都会自动轮换 IP - 验证码在服务器端自动解决。
基本用法
访问应用程序接口的基本方法是
http://api.scraperapi.com/?api_key=[yourAPIkey]&url=[URL]
您甚至可以尝试通过浏览器访问密钥。然后,服务器将返回网页的 HTML,您可以将其存储为变量:
<html> <head> </head> <body> 世界你好 </body> </html>
其实就这么简单。
渲染 Javascript
例如,如果需要渲染 Javascript,只需在 API 调用的末尾添加"&render=true "即可:
http://api.scraperapi.com/?api_key=[yourAPIkey]&url=[URL]&render=true
Scraper API 服务器将使用无头 Chrome 浏览器实例访问页面、渲染页面并将代码返回给您。
定制页眉
如果需要保留原始请求头以保持相同的用户代理、cookie 等,只需在结果中添加"&keep_headers=true "即可。这只是为了获得定制的结果,而不是为了避免区块,因为 Scraper API 的软件会在内部处理区块。
http://api.scraperapi.com/?api_key=[yourAPIkey]&url=[URL]&keep_headers=true
会话
您可以多次使用同一个代理。会话将在最后一次使用 60 秒后过期。您只需在请求中添加"&session_number=[数字]" - 数字可以是任意整数。例如
http://api.scraperapi.com/?api_key=[yourAPIkey]&url=[URL]&session_number=123
地理位置
可以使用"&country_code=[flag]"将代理设置为来自特定地区。启动计划及以上的用户可以将代理位置设置为美国。商业计划用户可以访问加拿大(代码=ca)、英国(代码=uk)、德国(代码=de)、法国(代码=fr)、西班牙(代码=es)、巴西(代码=br)、墨西哥(代码=mx)、印度(代码=in)、日本(代码=jp)、中国(代码=cn)和澳大利亚(代码=au)的代理。例如
http://api.scraperapi.com/?api_key=[yourAPIkey]&url=[URL]&country_code=us
高级代理池
有些网站可能比较难搜刮,因此 Scraper API 保留了一个私人内部住宅和移动 IP 池,供商业或企业计划的用户使用。这些 IP 的收费标准是普通 IP 的 10 倍(即它们将计入 10 个请求而不是 1 个请求),如果需要 Javascript 渲染,则每个请求将计入 25 个请求。要使用高级 IP,只需在请求中添加"&premium=true "即可:
http://api.scraperapi.com/?api_key=[yourAPIkey]&url=[URL]&premium=true
账户信息
账户信息您可以编写一个程序来自动监控您的账户。只需向 API 发送请求,无需任何 URL 或额外设置,它就会返回您当前的账户状态:
http://api.scraperapi.com/?api_key=[yourAPIkey]
结果示例 { "concurrentRequests":553、 "requestCount":6655888, "failedRequestCount":1118、 "requestLimit":10000000, "并发限制":1000 }返回菜单 ↑
Scraper API ISP 测试
Scraper API 只提供代理 API 来抓取数据,因此很难测试它们的速度。
所以你知道他们使用的是真正的住宅 IP。
我们的结论
Scraper API 是目前市场上最好的代理 API 服务,可用于网络搜刮。他们的服务易于集成和使用,并能为搜刮机器人解决一系列问题,包括 Javascript 渲染、代理旋转和验证码解析。
它们能够满足各种级别/规模的刮擦项目。Scraper API 在多个国家/地区拥有快速代理,您可以指定从哪里发送请求。如果你有任何严肃的搜索项目,那么 Scraper API 绝对值得考虑。即使你只是一个普通用户,也可以从免费计划中获益。
感谢您花时间阅读本评论!如果您过去曾购买过 Scraper API 的计划,并有评论要与大家分享,请随时在下面的评论中留言。我们很乐意听取您的意见!
第一个月享受 10% 折扣:输入优惠代码" "。SCRAPE38698"来查看!
Scraper API 功能
- Scraper API 拥有一个由 2000 多万个地址组成的住宅 IP 网络。任何网站都无法检测到您的请求来自何处。您在一个网站上两次使用同一个 IP 的可能性微乎其微,而且由于这些地址都是住宅地址,它们看起来就像来自真人。
- 地理定位功能可确保您的 IP 地址来自特定国家,这样您在访问封锁或限制某些地区的网站时就不会遇到任何问题。
- 专业的客户支持团队全天候通过电子邮件和即时聊天为您提供帮助。
- Scraper API 的代理服务器可提供高达 100 Mb/s 的速度,并保证 99.9% 的正常运行时间。
- 他们提供 7 天无条件退款保证,因此您可以放心使用他们的服务。
- 您可以将刮擦器设置为高速并发连接。
- 使用 Javascript 呈现的页面将不再是问题,因为 Scraper API 将为您呈现页面。
- 再也不会遇到任何验证码 - Scraper API 可为您解决任何验证码问题。
- 为阻止某些浏览器或根据浏览器显示不同信息的网站设置自定义标题。
- 轻松维护会话--只需更改设置,即可保留 IP
- 使用 Scraper API 简单易用的仪表板监控和跟踪您的使用情况。
- 您只需将脚本设置为调用应用程序接口,然后解析收到的数据即可,简单易用。
- 将网页自动提取为亚马逊、谷歌、Instagram 等热门网站上的有用数据。
[/wpsm_box]