Как перестать вечно искать светофоры на капче от Google?

🏳️‍🌈При парсинге поисковых запросов через Гугл вы часто можете встретить Google reCAPTCHA — систему защиты, которая может усомниться в том, человек ли вы, и подкинуть пару проверок. Справедливости ради, такую систему можно встретить не только на сервисах Google, это одна из самых распространённых анти-бот систем.

🚦А заставляет вас этот сервис искать машины, мотоциклы и гидранты потому, что не доверяет вам. Такой вывод он сделал, проанализировав ваш сетевой трафик. Один из факторов, на который reCAPTCHA обращает внимание, — IP-адрес, с которого вы отправляете запросы. Если этот айпишник в прошлом уже использовали для автоматизации или другой массовой активности, Гугл может бояться, что его вновь используют для тех целей, которые ему не очень нравятся.

🔏 Часто такие IP берутся из дата-центров. На них всегда почти сразу накладываются ограничения. Совсем другое дело — резидентские прокси. Они используют адреса, выданные обычным интернет-пользователям, поэтому такой трафик для reCAPTCHA выглядит более естественно. Поэтому гугловская защита и другие антибот-системы будут куда реже требовать дополнительного подтверждения личности.

🌐 Node Proxy
Бот | Сайт | Поддержка

Чем выгодна оплата по трафику

💰 Наши резидентские прокси можно оплачивать только по трафику, а не по количеству IP-адресов. На первый взгляд может показаться, что это не слишком удобно, но это далеко не так.

🗂При покупке трафика вы получаете доступ сразу ко всему пулу адресов, а не к фиксированному набору. Вы можете создавать огромное количество списков с любой стратегией ротации и GEO.

💻 Заранее не нужно думать, хватит ли под вашу задачу тысяча или десять тысяч адресов. Плюсом вы не будете переплачивать за те адреса, которые не использовали.

При этом вы вольны «закрепиться» только за одним адресом, использую Sticky стратегию ротации.

🌐 Node Proxy
Бот | Сайт | Поддержка

👩‍💻 Как пользоваться нашими прокси на Android?

🎮 Для подключения к прокси на андроиде, можно установить приложения Super Proxy или V2Box. Они бесплатны, а скачать их можно в Google Play.

Сперва нужно создать список прокси на нашем сайте, либо в боте. Если испытываете сложности на этом моменте — ознакомьтесь с нашим постом, где мы подробно разбирали, как работать со списками.

1️⃣ Как настроить Super Proxy:

Нажмите на кнопку «Add Proxy» и введите данные: имя (начинается с «api»), пароль, адрес сервера (gate.node-proxy.com) и порт (например, 10000). Также выберите протокол, в котором будет работать прокси, — SOCKS5 или HTTPS. Нажмите «Start».

2️⃣ Как настроить V2Box:

Перейдите во вкладку «Конфигурации», нажмите на бирюзовый значок «+» —> «добавить ручную конфигурацию». Выберите формат socks5, заполните данные: имя, пароль, адрес, порт и так далее. Нажмите на кнопку «save», а после выберите созданную конфигурацию и нажмите кнопку «Auto-connect».

✅Андроид может попросить подтвердить подключение. После успешного подключения в верхнем меню должен появиться значок VPN. Проверить работу прокси можно на сайте 2ip.ru (или 2ip.io).

🌐 Node Proxy
Бот | Сайт | Поддержка

Как выбрать GEO-локацию прокси

📋 При создании нового списка нужно выбрать локацию, к которой будут относиться прокси. В нашем распоряжении более 195 локаций из разных стран и регионов мира. На сайте можно просто выбрать нужную локацию из списка, а в боте GEO задаётся в формате двух символов (пример: RU, KZ, DE). С полным списком локаций можно ознакомиться тут.

🤩 В первую очередь нужно обращать внимание на то, из какой страны вас должен видеть тот или иной сайт. Если вам нужно спарсить поисковые запросы, которые показываются пользователям из России, то нужно выбрать российский прокси. Ведь из-за IP-адреса может меняться сам контент на сайте: цены, реклама, поисковые запросы, доступность товаров и многое другое.

🔑 Стоит учитывать, что чем дальше выбранная локация от вашего реального местоположение, тем больше будет задержка соединения. Однако при обычном просмотре сайтов, работе с аккаунтами или парсинге данных эта разница чаще всего остаётся практически незаметной. Обращать внимание на пинг стоит только в том случае, где задержка — это критически важный параметр: гейминг, стриминг и другие сервисы, работающие в реальном времени.

🌐 Node Proxy
Бот | Сайт | Поддержка

Почему любой прокси не может гарантировать полное отсутствие блокировок?

🌐 Качественный резидентский прокси и правда помогает реже сталкиваться с капчей, ограничениями и блокировками. Но не стоит считать, что прокси — это панацея, способная избавить вас от любых проблем.

🤖 Современные антибот-системы давно анализируют не только один айпи. Они смотрят на то, как пользователь ведёт себя на сайте, на частоту запросов, fingerprint браузера, куки и многое другое.

💻 Поэтому если вы будете отправлять сотни запросов на один и тот же сайт в минуту, система в любом случае заблокирует вас. И ей совершенно будет неважно, насколько хороший прокси вы используете. Прокси не делает вас неуязвимым для антибот-систем, но он значительно снижает шанс того, что сайт заподозрит вас в чём-то неладном.

Для того, чтобы совсем забыть про блокировки, помимо правильно подобранного прокси, нужно настроить подходящую стратегию ротации и скорость запросов, заручиться правильным антидетект-браузером и так далее.

🌐 Node Proxy
Бот | Сайт | Поддержка

Как обойти Yandex SmartCaptcha

📈 Согласно статистике, около 14 процентов всех российских сайтов, которые подключили капчу, используют Yandex SmartCaptcha. В ру-сегменте этот сервис уступает только reCAPTCHA от Google.

🔨 Принцип работы этой антибот-системы почти ничем не отличается от зарубежных аналогов. Когда пользователь заходит на сайт, система может заподозрить в нём бота и выдать этому пользователю проверку на человечность в виде капчи.

Чтобы вынести свой вердикт, SmartCaptcha анализирует множество параметров: поведение пользователя на сайте, fingerprint его браузера, частоту отправляемых им запросов и многое другое.

🪖 Среди этих параметров «человечности» мы можем помочь с одним — с IP-адресом. Если ваша задача предполагает автоматизированную работу с сайтом, то без прокси обычно не обойтись. Но использовать дата-центровые прокси — не лучший вариант, система со старта будет меньше доверять им.

Лучшим вариантом будет использовать резидентские прокси. Каждый такой айпишник принадлежит реальному пользователю, поэтому для антибот-систем такой трафик выглядит более естественно. Это позволяет значительно реже сталкиваться с капчами и прочими дополнительными проверками.

🌐 Node Proxy
Бот | Сайт | Поддержка

📱 Как пользоваться нашими прокси на iOS?

💙 Для того, чтобы подключиться к прокси на айфоне, можно воспользоваться любыми приложениями, которые поддерживают такую функцию. В этом посте речь пойдет про Potatso и Anywhere. Оба приложения можно бесплатно скачать в App Store.

Для начала нужно создать список прокси на нашем сайте, либо в боте. Если на этом этапе возникли сложности — ознакомьтесь с нашим постом, где мы подробно разбирали, как работать со списками.

1️⃣ Подключение с приложением Potatso:

На главной странице нажмите на «Добавить серверы» —> «Импортировать ссылку». Вставьте в появившееся поле ссылку формата «http://api[имя]:[пароль]@gate.node-proxy.com:10000». После этого на главной странице нажмите «Подключиться».

2️⃣ Подключение с приложением Anywhere:

Нажмите «Добавить» и выберите опцию «Вручную». Задайте любое имя, выберите протокол SOCKS5. В графе адрес впишите «gate.node-proxy.com», введите порт (например, 10000), имя пользователя (начинается с api) и пароль. После этого нажмите «Подключиться».

⚙️ В обоих случаях айфон попросит подтвердить добавление нового подключение и ввести пароль. После успешного подключения в верхней части экрана должен появиться значок VPN.

Проверить работу прокси можно на сайтах по типу 2ip.ru (или 2ip.io).

🌐 Node Proxy
Бот | Сайт | Поддержка

🪙 В боте доступна оплата рублями!

Прокси в боте теперь можно оплачивать при помощи российских карт и СБП.

Просто выберите соответствующую опцию в разделе «Купить трафик».

Пересчёт из долларов в рубли будет выполнен по текущему курсу.

🌐 Node Proxy
Бот | Сайт | Поддержка

Антидетект-браузеры — хорошие друзья для резидентских прокси

В прошлых постах мы не раз упоминали, что антибот-системы смотрят не только на IP-адрес. Они наблюдают за поведением пользователя на сайте, проверяют частоту отправляемых запросов и fingerprint браузера.

🖐 Фингерпринт — это «цифровой отпечаток браузера». Он формируется из множества параметров: языка системы, разрешения экрана, часового пояса, используемых шрифтов, характеристик устройств и многого другого. Так сайт может узнать пользователя, даже если он сменит IP.

☝️Скрыть свой fingerprint от антибот-систем могут помочь антидетект-браузеры. Они позволяют создавать отдельные браузерные профили с собственными настройками и параметрами фингерпринта. В каждом профиле можно изолировать куки, локальное хранилище и другие данные.

😈 Но и одного только антика тоже будет недостаточно. Если заходить на один и тот же сайт с разных профилей, но с одного айпишника, система всё равно может заподозрить что-то неладное. Поэтому антидетект-браузеры часто используют в связке с прокси.

А наши резидентские прокси круты тем, что используют IP-адреса настоящих пользователей. А к таким айпишникам у антибот-систем, как правило, куда больше доверия.

🌐 Node Proxy
Бот | Сайт | Поддержка

Аутентификация резидентских прокси

💻В некоторых случаях для подключения к прокси-серверу достаточно знать всего две переменные: адрес хоста и порт. Для наших резидентских прокси этого будет недостаточно.

Адрес у каждого нашего резидентского хоста всегда один и тот же — gate.node-proxy.com. А порт всегда варьируется в значениях от 10000 до 10999.

🔐 Поэтому для подключения к нашим резидентских прокси требуется аутентификация — при попытке подключения сервер запросит логин и пароль. Эти данные генерируются при создании каждого списка.

🌐 Логин и пароль всегда идентичны для каждого прокси из списка. Логин начинается с «api» и выглядит примерно так: «api70b0b7b84fa6166c». После «_c_» в логин при надобности можно добавить дополнительные параметры. Например, «_c_RU_s_3_ttl_300s» означает, что прокси будут работать как РУ-регион, третью сессию, а IP будет меняться раз в 300 секунд.

🤫 Думаем, не стоит напоминать о том, что эти данные нельзя ни с кем делиться. Иначе какой-то негодяй может подключиться к прокси и натратить вам трафика.

🌐 Node Proxy
Бот | Сайт | Поддержка