Цены приходят в другой валюте
Проверьте Страна выхода может не совпадать с витриной.
Решение Проверьте выход через ipinfo.io и используйте домен той же страны.
У маркетплейсов отдельные сайты по странам, поэтому собранная цена зависит от страны, из которой идёт запрос.
Shopee, Lazada и AliExpress показывают цены, валюту, доставку и список продавцов по стране или витрине. Запрос не из той страны может вернуть другую витрину или другую цену, и сохранённое число окажется неверным для вашего рынка.
Поэтому задайте страну прокси по рынку, который анализируете, и проверьте её до первого запуска. Для сравнения цен между странами держите по одному подключению на страну.
| Пункт | Что мы прочитали | Что это значит для скрипта |
|---|---|---|
| Shopee (shopee.sg) | Остальные боты (*): crawl-delay 1 секунда; запрещены /cart/, /checkout/, /user/, /me/, /order/ | Не чаще одного запроса в секунду и не заходить в аккаунт и оформление |
| AliExpress | Все краулеры (*): запрещены /search/*, /items/*, /product/*, /productdetail/*, /api/*; часть названных краулеров заблокирована целиком | По этому файлу поиск и товары закрыты для краулеров; смотрите официальные API или лицензированные данные |
| Lazada (lazada.sg) | Все краулеры (*): запрещены только путь login-signup и несколько путей «undefined»; crawl-delay нет | Явных ограничений мало, но условия использования и аккуратный темп остаются в силе |
Источники: robots.txt сайтов shopee.sg, aliexpress.com и lazada.sg, открыты 17 ноября 2026. Файлы меняются: перед проектом читайте актуальный. Это не юридическая консультация.
Собирайте только открытые страницы. Не входите в чужие аккаунты и не собирайте персональные данные. Если вы продаёте на площадке, свои данные берите через API продавца или открытой платформы.
Выдерживайте темп, ставьте timeout и останавливайтесь, если пошли 429 или повторные проверки: больше IP не решает проблему. Как правильно замедлиться, см. руководство по 429.
import time
import requests
# One proxy per country, copied from My assets (HTTP port 2222, same login for HTTP and SOCKS5).
PROXIES = {
"SG": "http://LOGIN:[email protected]:2222",
"MY": "http://LOGIN:[email protected]:2222",
}
URLS = {
"SG": "https://www.lazada.sg/",
"MY": "https://www.lazada.com.my/",
}
for country, url in URLS.items():
p = {"http": PROXIES[country], "https": PROXIES[country]}
ip = requests.get("https://ipinfo.io/json", proxies=p, timeout=(5, 20)).json()
print(country, "exit country:", ip.get("country"))
r = requests.get(url, proxies=p, timeout=(5, 20))
print(url, r.status_code, len(r.text))
time.sleep(2) # keep the pace slowПример: замените LOGIN, PASSWORD и две страницы. Для линии SOCKS5 установите requests[socks] и используйте socks5h:// с портом 3333.
Откройте ротационные резидентные прокси. Бюджетная — $1,50 за ГБ, Премиум — $5 за ГБ, трафик не сгорает. Сколько ГБ нужно для задачи по ценам, см. руководство по трафику.
Поставьте регион по каждому читаемому рынку (Сингапур, Малайзия и т. д.) и создайте по одному подключению. В «Мои активы» скопируйте хост, порт, логин и пароль.
Запустите скрипт выше или откройте ipinfo.io. Ожидается: страна, заданная для каждого подключения.
Берите только нужные открытые страницы, делайте паузы между запросами и сохраняйте дату рядом с каждой ценой.
Проверьте Страна выхода может не совпадать с витриной.
Решение Проверьте выход через ipinfo.io и используйте домен той же страны.
Проверьте Слишком много запросов слишком быстро или проблемный выход.
Решение Замедлитесь, уменьшите параллельность; если выход выглядит неисправным, создайте тикет с номером заказа.
Проверьте Не установлен requests[socks].
Решение Выполните python -m pip install "requests[socks]" или используйте HTTP-линию на порту 2222.
Ротационные резидентные в стране читаемого сайта Shopee; на Бюджетной линии $1,50 за ГБ.
Его robots.txt запрещает всем краулерам поиск и страницы товаров, а условия сайта могут говорить больше; проверьте оба и подумайте об официальных или лицензированных данных.
Нет. Новый IP выдаётся на каждое новое соединение, переиспользуемое соединение сохраняет IP. Следите за темпом, а не за сменой IP.
Зависит от размера страниц и объёма; см. руководство по трафику для мониторинга цен.
Официальная документация · Проверено:
Открыто 17 ноября 2026: для остальных ботов (*) задана задержка crawl-delay 1 секунда и запрещены пути вроде /cart/, /checkout/, /user/, /me/, /order/; для названных поисковых ботов список запретов длиннее.
robots.txt — файл этикета для краулеров, он может меняться; это не юридическое заключение, а условия сайта могут говорить больше.
Официальная документация · Проверено:
Открыто 17 ноября 2026: для всех краулеров (*) файл запрещает /search/*, /items/*, /product/*, /productdetail/*, /api/* и пути аккаунта и корзины, а ряд названных краулеров блокирует на всём сайте.
robots.txt — файл этикета для краулеров, он может меняться; это не юридическое заключение, а условия сайта могут говорить больше.
Официальная документация · Проверено:
Открыто 17 ноября 2026: для всех краулеров (*) запрещены только путь login-signup и несколько путей «undefined», crawl-delay не указан; для OAI-SearchBot, GPTBot и ChatGPT-User есть отдельные группы.
robots.txt — файл этикета для краулеров, он может меняться; это не юридическое заключение, а условия сайта могут говорить больше.
Официальная документация · Проверено:
Открыто 17 ноября 2026: прокси передаются словарём в аргумент proxies; user:password пишется в URL; для SOCKS нужен pip install requests[socks]; схема socks5 разрешает DNS на клиенте, socks5h — на прокси; без timeout запросы не прерываются по времени.
Наблюдение за продуктом · Проверено:
Файл фактов о продуктах сайта (от 10 ноября 2026), прочитан 17 ноября 2026: цены за ГБ и за IP, сроки аренды, протоколы и порты, страны, бесплатного теста нет.
Создайте аккаунт, пополните баланс и выберите ротируемый резидентный, статический ISP или дата-центр IP — настроить его в браузере можно за несколько минут.