电商与零售 · 应用场景
真实票价,来自正确的销售地,来自专为阻止你而建的网站
穿透网络上最严格的反爬虫,采集机票和酒店价格,按你销售的市场本地化,新鲜到可以直接预订。
失败请求免费流量永不过期未使用套餐 24 小时内可退款
MXP → JFK · Wed 14 Oct · 1 adult · Economysearched 12 min ago
last 24 hEUR equivalent
GB €662
IT €612
US €599
−24 hnow
POST /tasktype: unlockerproxy_country: IT | US | GBjs_rendering: true3 queries15 credits
同一个座位,同样的日期。哪个票价是真实的,取决于客户身在何处。
要点
旅行票价聚合取决于本地旅客看到的票价。住宅代理和移动代理让你自己的采集器使用本地 IP;Unlocker API 以结构化 JSON 返回票价页面,并处理反爬虫检查。失败的请求免费。
为什么旅行票价聚合难以规模化
旅行网站是互联网上防护最严密的网站之一,而这些防护只针对一件事:票价抓取。航空公司和预订引擎部署最严格的反爬虫体系,并且经常更换。
票价还高度本地化。同一个座位的价格会因搜索发起的国家、币种和销售地而不同。在错误的地方采集,你得到的是一个谁也订不到的数字。
而且票价往往不在某个 URL 上。它只在一次搜索之后才出现:出发地、目的地、日期、乘客人数。只会抓取页面的采集器根本拿不到它。
Datafuel 如何处理旅行票价聚合
Unlocker API 专为旅行网站使用的防护而打造。它在请求内部处理渲染、指纹和验证码,并返回票价数据,所用的网络让航空公司无法与真实旅客区分。
住宅代理和移动代理支持国家级定位,让每次搜索都落在正确的销售地,因此你采集到的票价就是该市场客户会支付的票价。对于结果只在搜索流程之后才出现的引擎,Cloud Browser 将执行搜索并捕获结果。Cloud Browser 即将推出。
选择一条路径2 个入口,1 个出口
即将推出
位于 URL 上的票价Unlocker API · 抓取页面
搜索表单之后的票价Cloud Browser · 执行搜索即将推出
你有什么?
被拦截的抓取程序
住宅代理城市与 ASN 定位粘性会话流量永不过期
你的解析器
一组 URL
Unlocker API已处理反爬虫Markdown 或 JSON失败请求免费
你的数据管道
干净的页面,只为成功付费
保留你的采集器并修复网络,或者把 URL 交给我们。同样的 IP,同样的计费规则。
| 住宅代理 | Unlocker API | |
|---|---|---|
| 你提供 | 你自己的抓取程序和解析器 | 一个 URL,如需 JSON 再加一个 schema |
| 你得到 | 来自本地住宅 IP 的原始页面 | Markdown 或结构化 JSON,可穿透任何防护 |
| 定位 | 国家 · 地区 · 城市 · ASN · 操作系统 | 国家和城市,按请求设置 |
| 验证码 | 由你的抓取程序处理 | 在请求内部处理 |
| 计费 | 按 GB 计费,流量永不过期 | 按成功请求计费,额度永不过期 |
| 适用场景 | 你已有可用的抓取程序 | 你想获取页面而无需维护解析器 |
许多团队两者并用:API 用于会拦截的页面,代理用于已在运行的采集器。
适用于旅行票价聚合的产品
所有应用场景价格相同。失败请求免费,已购流量永不过期。
如果你运行自己的采集器Residential Proxies原价 $4.50,现价 $3.15 $4.50每 GB4,600万+ 个基于同意的家庭 IP,覆盖 195+ 个国家,支持城市和 ASN 定位。
- 4,600万+ 个基于同意的家庭 IP
- 轮换或粘性会话,最长 24 小时
- 地区、城市、ASN 定位
- HTTP(S) 与 SOCKS5
- 流量永不过期
工作原理
- 01定义航线、日期、销售地和采集频率。
- 02Datafuel 从目标市场的 IP 执行每次搜索,通过 Unlocker 完成。需要填写搜索表单的引擎将由即将推出的 Cloud Browser 处理。
- 03票价、余位和票价规则按你的计划以结构化数据返回。
在你自己的目标上试试。失败请求免费。免费开始
注意事项
- 票价几分钟内就会失效。在接近使用数据的时间采集,而不是靠夜间批处理。
- 票价规则和票价同样重要。要采集条件,而不只是价格。
- 旅行网站经常更新防护。成功率会有波动;按域名的仪表板会显示何时发生变化。
旅行票价聚合:常见问题
你们能访问哪些旅行网站?
Unlocker 能处理旅行网站使用的反爬虫体系。每个域名的成功率可在仪表板中查看。
我可以从特定国家搜索吗?
可以。住宅和移动网络支持国家级定位,部分地区支持城市级定位。
票价只在搜索之后才出现的网站怎么办?
这由即将推出的 Cloud Browser 负责,它将执行搜索流程并返回结果。
数据有多新?
取决于你的采集频率。按需实时获取;计划任务最短可到几分钟一次。
这样做是允许的吗?
票价聚合是一种成熟的做法;我们的合规文档和可接受使用政策说明了我们的运营方式。
最后更新:。