当你花在修爬虫上的时间多过用它数据的时间，就该停止维护自家的亚马逊爬虫了。这是 r/thewebscrapingclub 一个帖子反复落到的那条线，也是对的判断标准。自托管爬取不是免费的，它是一条工资支出。问题在于它耗掉你的工作，是否值过一个托管 API。
自跑亚马逊爬虫的隐藏成本
爬虫的标价是"免费的呀，我自己写的"。真正的账单是经常性的：
- **代理。**亚马逊很快就封数据中心 IP，于是你买住宅代理，往往是最大一笔支出，而且它们照样被标记。
- **验证码识别。**你加一个识别服务，然后盯着它的失败率。
- **选择器漂移。**亚马逊改 DOM，你的解析器悄悄返回空值，等你发现时已经是下游某份报表看着不对劲。
- **无头浏览器维护。**Playwright 或 Puppeteer 跟机器人检测缠斗，吃内存，版面一变就崩。
有个评论一句话概括了这场打地鼠：不停地更新加代理问题，没完没了。另一个人专门转去用托管爬虫，就为了不再跟代理封禁和 Playwright 头疼事打交道。
盈亏平衡算账
上真实数字。假设维护每周吃掉一个工程师一天。按全成本计算，单这一项每月就轻松好几千美元，还没算一笔代理账单。再看托管 API 这边，2026 年 6 月核实：
- **ScrapingBee：**49 美元/月含 250,000 个 API 额度，解析还得你自己写。
- **Bright Data：**其 scraper API 按用量每 1,000 次请求 1.50 美元，按成功计费。
- **Scavio：**每次请求 0.005 美元（1 额度）返回结构化亚马逊产品 JSON，注册送 50 个免费额度，没有代理或验证码要管。
假设你每月拉 50,000 条产品记录，一个结构化 API 每条 0.005 美元就是 250 美元，零维护。对上每周一个工程师日的维护加代理成本，单论成本 API 就赢了，还没算你拿回来的可靠性。
什么时候自托管仍然胜出
对例外要诚实。这些情况留着自家爬虫：
- 你要的数据在登录之后，或在某个没有 API 暴露的流程里。
- 你要爬一长串产品 API 不返回的冷门字段。
- 你的量大到按请求计费超过了你的基础设施成本（很少见，真到了你会知道）。
对常见情况，公开的产品数据，价格、标题、卖家、评分，一个结构化 API 直接把它返回为 JSON，不用陷进机器人检测的军备竞赛。
一次结构化 API 调用，没有代理栈
Python
import os, requests
H = {"Authorization": f"Bearer {os.environ['SCAVIO_API_KEY']}", "Content-Type": "application/json"}
r = requests.post("https://api.scavio.dev/api/v1/amazon",
headers=H, json={"query": "B08N5WRWNW"}).json() # ASIN as query
print(r["data"]) # structured product fields, no parsing同一把 key 还能拉 Google、Walmart、Reddit、YouTube 和 TikTok，所以跨平台价格监控是一次集成，而不是每个站点一个爬虫。
决策规则
盯一个数字盯一个月：花在维护爬虫上的小时数，对上花在用它数据上的小时数。维护第一次在这个比值里赢的时候，你就有答案了。爬取是拿到数据的手段，不是爱好，当手段的成本超过了目的，就换。