价格币种不对
检查 出口国家可能和站点不一致。
处理 用 ipinfo.io 查出口,并使用同一国家的域名。
各平台按国家开站,采到的价格取决于请求从哪个国家发出。
Shopee、Lazada、AliExpress 的价格、币种、配送和卖家列表按国家或站点显示。从错误的国家发请求,可能返回另一个站点或另一种价格,存下来的数字对你的市场就是错的。
所以把代理国家设成你分析的市场,开跑之前先确认。做跨国比价,一个国家一个连接。
| 项目 | 我们读到的内容 | 对脚本意味着什么 |
|---|---|---|
| Shopee(shopee.sg) | 其他爬虫(*):crawl-delay 1 秒;禁止 /cart/、/checkout/、/user/、/me/、/order/ | 每秒不超过一个请求,不碰账号和结算路径 |
| AliExpress | 所有爬虫(*):禁止 /search/*、/items/*、/product/*、/productdetail/*、/api/*;部分点名爬虫被整站禁止 | 按该文件,搜索和商品路径不允许爬虫访问;请看官方接口或授权数据 |
| Lazada(lazada.sg) | 所有爬虫(*):只禁止一个 login-signup 路径和几个 "undefined" 路径;没有 crawl-delay | 列出的限制很少,但使用条款和礼貌的访问节奏仍然适用 |
来源:shopee.sg、aliexpress.com、lazada.sg 的 robots.txt,2026 年 11 月 17 日打开。文件会变,每个项目开始前读当前版本。这不是法律意见。
只采公开页面。不要登录不属于你的账号,不要采个人信息。如果你在平台上开店,自己的数据用平台的卖家或开放平台接口。
控制节奏、设 timeout;开始出现 429 或反复验证就停下来,加更多 IP 硬冲不是解法。怎么正确放慢见 429 指南。
import time
import requests
# One proxy per country, copied from My assets (HTTP port 2222, same login for HTTP and SOCKS5).
PROXIES = {
"SG": "http://LOGIN:[email protected]:2222",
"MY": "http://LOGIN:[email protected]:2222",
}
URLS = {
"SG": "https://www.lazada.sg/",
"MY": "https://www.lazada.com.my/",
}
for country, url in URLS.items():
p = {"http": PROXIES[country], "https": PROXIES[country]}
ip = requests.get("https://ipinfo.io/json", proxies=p, timeout=(5, 20)).json()
print(country, "exit country:", ip.get("country"))
r = requests.get(url, proxies=p, timeout=(5, 20))
print(url, r.status_code, len(r.text))
time.sleep(2) # keep the pace slow示例:把 LOGIN、PASSWORD 和两个页面换成你自己的。SOCKS5 线路要先装 requests[socks],用 socks5h:// 和 3333 端口。
打开动态住宅代理。低价线路 US$1.50 每 GB,优质线路 US$5 每 GB,流量不过期。价格任务要多少 GB 见流量指南。
地区分别设成你要读的市场(新加坡、马来西亚等),各生成一个连接,在「我的资产」复制主机、端口、用户名、密码。
运行上面的脚本,或打开 ipinfo.io。预期:每个连接显示你设的国家。
只取需要的公开页面,请求之间留间隔,每个价格都记下日期。
检查 出口国家可能和站点不一致。
处理 用 ipinfo.io 查出口,并使用同一国家的域名。
检查 请求太多太快,或出口有问题。
处理 放慢速度、减少并发;若出口本身看着有问题,带订单号提交工单。
检查 没有安装 requests[socks]。
处理 运行 python -m pip install "requests[socks]",或改用 2222 端口的 HTTP 线路。
目标 Shopee 站点所在国家的动态住宅;低价线路 US$1.50 每 GB。
它的 robots.txt 对所有爬虫禁止搜索和商品路径,网站条款可能还有规定,请两者都看,并考虑官方或授权数据。
不用。每个新连接换一个 IP,复用的连接保持 IP。要控制节奏,而不是追着换 IP。
取决于页面大小和量,见价格监控流量指南。
官方文档 · 确认日期:
2026 年 11 月 17 日打开:针对其他爬虫(*)的规则设了 1 秒 crawl-delay,禁止 /cart/、/checkout/、/user/、/me/、/order/ 等路径;点名的搜索引擎爬虫另有更长的禁止列表。
robots.txt 是爬虫礼仪文件,可能变更;它不是法律意见,网站条款可能另有规定。
官方文档 · 确认日期:
2026 年 11 月 17 日打开:对所有爬虫(*),文件禁止 /search/*、/items/*、/product/*、/productdetail/*、/api/* 以及账号、购物车路径,并对若干点名的爬虫禁止整站。
robots.txt 是爬虫礼仪文件,可能变更;它不是法律意见,网站条款可能另有规定。
官方文档 · 确认日期:
2026 年 11 月 17 日打开:针对所有爬虫(*)的规则只禁止一个 login-signup 路径和几个 "undefined" 路径,没有写 crawl-delay;OAI-SearchBot、GPTBot、ChatGPT-User 另有单独规则。
robots.txt 是爬虫礼仪文件,可能变更;它不是法律意见,网站条款可能另有规定。
官方文档 · 确认日期:
2026 年 11 月 17 日打开:代理用字典传给 proxies 参数;user:password 写在网址里;SOCKS 需要 pip install requests[socks];socks5 在本机解析 DNS,socks5h 在代理端解析;不设 timeout 就没有超时。
产品观察 · 确认日期:
站内产品信息表(2026 年 11 月 10 日版),11 月 17 日读取:按 GB 价格、按 IP 价格与租期、协议与端口、国家数、无免费试用。
注册账号、充值一次,就能选动态住宅、静态 ISP 或数据中心 IP,几分钟配进你的浏览器。