XMLstock
225 subscribers
11 photos
46 links
Инструменты для парсинга поисковой выдачи Яндекс и Google в реальном времени. Новости сервиса и обновления.

Сайт: https://xmlstock.com
Поддержка: @hh_developer
Download Telegram
⚡️ 26.02 Обновление Яндекс SearchAPI и изменение стоимости с 1 марта

Уважаемые пользователи!

С 1 марта 2025 года Яндекс вносит глобальные изменения в работу SearchAPI, разделяя его на два формата выдачи:

👉 Синхронный (в реальном времени)
👉 Асинхронный (с задержкой)

Стоимость синхронных запросов составит 480 рублей за 1000 запросов, независимо от объемов потребления, что выходит за рамки нашего понимания и здравого смысла. В связи с этим мы приняли решение полностью отказаться от этого формата и перейти на асинхронный режим.


❗️Что изменится для пользователей?
Мы сделали всё возможное, чтобы для наших пользователей переход был максимально комфортным.
В течение месяца мы обновляли систему и подготовили два варианта работы с нашим API:

👉 Гибридный режим (начнет работать с 1 марта)
👉 Асинхронный режим (работает уже сейчас)

❗️Новая стоимость ЯндексXML с 1 марта 2025 года
ТП Базовый — 24 рубля за 1000 запросов
ТП Оптимальный — 22 рубля за 1000 запросов
ТП Максимум — 20 рублей за 1000 запросов

Индивидуальные тарифные планы для оптовых клиентов будут пересмотрены. Также отменяются скидки на ночные запросы.


❗️Описание режимов работы

Гибридный режим:
Этот режим максимально близок к синхронному и в большинстве случаев не потребует доработки вашего софта, программы такие как Key Collector, Top-Site и другие также будут с ним работать. Включен по умолчанию в инструменте Яндекс XML Proxy на основном URL для совершения запросов. Все запросы кешируются в течение 3-х часов, поэтому повторный запрос данных из кеша - бесплатный. При необходимости кеш можно сбросить вручную.

1) Отправляете запрос, как обычно.
2) В течение 2-5 секунд получаете либо сразу готовый результат, либо ошибку 210 (запрос поставлен в очередь).
3) Через 5–10 секунд отправляете повторный запрос (делаете перепроверку запроса): Если данные готовы, то моментально получаете результат. Если нет — ошибку 202 (запрос еще не обработан).
4) Повторяете запрос с интервалом 5–10 секунд, пока не получите результат.
5) Тарификация происходит в момент первой отправки запроса на наше API, независимо от того получили вы ответ сразу или отправили запрос в очередь.
6) Повторный запрос результатов из кеша в течение 3-х часов - бесплатный

Асинхронный режим:
Процесс поиска выполняется в два этапа.

1) Отправляете запрос с параметром &delayed=1.
2) Получаете req_id в ответе.
3) Через 5–10 секунд запрашиваете результат по этому req_id.
4) Если данные еще не готовы, повторяете запрос с интервалом 10–60 секунд.
5) Тарификация происходит в момент отправки запроса на наше API.
6) Запрос результатов через req_id - бесплатный. Он хранится в течение 3-х часов

❗️Будущее Яндекс SearchAPI
Яндекс пока что снизил задержку асинхронной выдачи: вместо заявленных 5 минут, она варьируется в зависимости от загрузки сервисов, и запрос может быть обработан уже через несколько секунд. Однако в будущем задержка получения результатов может быть увеличена.

К сожалению, Яндекс SearchAPI как приемник Яндекс XML перестает быть надежным и быстрым инструментом получения поисковой выдачи:
- Вводятся жесткие требования к объему потребления
- Ужесточаются лимиты и ограничения
- Повышаются тарифы

По итогам марта мы проанализируем работу нового формата и примем решение о дальнейшей судьбе этого инструмента в рамках нашего сервиса. Также из-за роста затрат на парсинг живой выдачи, с 1 апреля планируется пересмотр стоимости и других инструментов.

По всем вопросам пишите в наш чат или телеграм, мы поможем вам с переходом на новое API. Спасибо, что остаётесь с нами!
😢7😡1
⚡️ 20.03 Медленная скорость сбора Google

Сегодня Google обновил верстку, из-за чего многие сервисы временно вышли из строя. В результате наблюдается большой приток пользователей и повышенная активность, что влияет на скорость работы системы.

⚠️ Не переживайте – всё работает, просто нагрузка высокая. Просим набраться терпения. Спасибо за понимание!
⚠️ 17.04 Проблемы с парсингом Google (мобильная выдача)

Сегодня зафиксированы массовые сбои при парсинге Google, по большей части мобильной версии. Десктопная выдача пока работает более менее стабильно. Предположительно, Google внедрил новые механизмы защиты от автоматизированных запросов. Мы анализируем изменения и ищем рабочее решение.
⚡️ 15.07 Небольшое обновление в Яндекс SearchAPI

👉 Обновлены доменные зоны (типы поиска), параметр &domain=.

Теперь доступны:
ru — Российский
by, be — Белорусский
kz, kk — Казахский
com — Международный
com.tr, tr — Турецкий
uz — Узбекский

👉 Также добавлен необязательный параметр &noreask= — режим обработки опечаток в поисковом запросе:

0 (по умолчанию) - опечатки автоматически исправляются.
1 - поиск выполняется строго по переданному запросу, без исправлений.
⚡️ 21.07 Проблемы с работой API.

Сегодня ночью наблюдались проблемы с работой API Google и ЯндексLive.
На данный момент работа систем полностью восстановлена. Приносим извинения за неудобства.
🔧 Технические работы с 21:00 до 22:00 (по МСК)

Сегодня, 28.07 с 21:00 до 22:00 по московскому времени, на сайте будут проводиться плановые технические работы. Возможны кратковременные перерывы в работе сервиса продолжительностью от 5 до 20 минут.

Благодарим за понимание!
🚨 Возможны проблемы с доступом к сайту

У некоторых провайдеров наблюдаются сбои в работе DNS, сайт может открываться не у всех пользователей. Ситуация глобальная, следим за развитием.

❗️При недоступности с ПК, попробуйте в c:\Windows\System32\drivers\etc\hosts добавить запись: 31.131.254.170 xmlstock.com

❗️При недоступности с сервера - попробуйте временно сменить IP-адрес, использовать прокси
🚨 Проблемы с GoogleXML. Сервис временно отключен

Возникли проблемы с парсингом Google. В данный момент работаем над устранением. Сроки восстановления пока неизвестны.

Приносим извинения за неудобства.
👍1
🚨 Проблемы с GoogleXML Mobile

Десктоп-версия Google снова работает
Мобильная версия пока недоступна

Мы продолжаем работать над устранением неполадок.
👍3
Работа GoogleXML полностью восстановлена

Все функции доступны и работают в штатном режиме.
Если заметите какие-либо проблемы - пожалуйста, сообщите в поддержку.
❗️Google ограничил выдачу до 10 результатов на странице

Случилось то, чего мы давно опасались! В поисковой системе Google больше нельзя получить ТОП-100 результатов за один запрос. Это также совпало с усложнением парсинга, которое мы наблюдали два дня назад. Теперь для съёма позиций до ТОП-100 необходимо парсить 10 страниц поиска.

Напоминаем: в нашей системе отчёт начинается с 0-й страницы.
👉 &page=0 — первая страница,
👉 &page=1 — вторая,
👉 и так далее.

🚨 Кроме того, мы зафиксировали баг в пагинации самого Google.

❗️Параметр &num=100, который используется в Google для отображения 100 результатов, сейчас показывает лишь 10. При этом навигация внизу страницы выглядит так, будто на странице 100 результатов, но при переходе на «вторую страницу» пользователь фактически попадает сразу на 11-ю (start=100).

Есть надежда что это временный глюк, хотя все последние тенденции говорят об обратном. Следим за ситуацией.
Please open Telegram to view this post
VIEW IN TELEGRAM
😱2😢1
🚨 Сервис Яндекс XML временно недоступен.

Проблемы с сетью на стороне Яндекс, ожидаем устранения.

UPD. Работа сервиса восстановлена.
🚨 Проблемы с GoogleXML. Сервис работает в ограниченном режиме

Возникли проблемы с парсингом Google. Работаем над устранением. Сроки восстановления пока неизвестны. Приносим извинения за неудобства.

UPD: Работа инструмента восстановлена. Ведутся мероприятия по увеличению скорости парсинга.
😱1
Полностью восстановили работу GoogleXML

❗️Последнюю неделю Google серьёзно усложнил жизнь нашим парсерам - из-за этого некоторое время мобильная выдача не работала. Мы починили сбор мобильной выдачи, но общая скорость ниже чем была до введения новой защиты.

Тем, кому необходимо - продлим срок действия тарифного плана на 10 дней.
Просто напишите в поддержку 💬
🔥3
⚡️ 15.12 Изменение стоимости услуг с 1 января 2026 года

С 1 января 2026 года будет пересмотрена стоимость всех услуг XMLStock.

Мы длительное время сохраняли фиксированные цены и не поднимали их, несмотря на внешние изменения. За этот период выросли затраты на инфраструктуру и обслуживание, а требования к стабильности, скорости и надёжности сервиса существенно увеличились. Дополнительно с 2026 года возрастёт налоговая нагрузка. Поддерживать текущий уровень качества в прежних условиях без корректировок стало невозможно. Повышение цен - всегда непростое решение, и в данном случае это вынужденная мера.

Спасибо что остаетесь с нами!
👌5👎4🤷‍♂2🙈2🔥1
⚡️ 22.12 Зеркало нашего API при проблемах с доступом

Последние дни к нам стали поступать обращения от пользователей о нестабильном доступе к нашему API с зарубежных серверов, расположенных на Hetzner, AWS и др. Запросы не проходят или проходят с огромными задержками.

Как нам объяснили, эта проблема известна и не связана с нашей сетевой инфраструктурой. Возникает из-за проблем связности дата центров, расположенных в РФ, с зарубежными ресурсами.

В качестве временного решения мы сделали зеркало нашего API в Нидерландах. Если у вас возникают проблемы с доступом к API, необходимо в своем URL для совершения запросов заменить домен на xmlstock-mirror.ru
👍1
🎄 01.01 Поздравляем с Новым 2026 годом!

Друзья,

Спасибо, что весь этот год вы были с нами. Вместе мы развивали сервис, усиливали инфраструктуру и делали его стабильнее и быстрее - несмотря на непростые условия.

Желаем вам в новом году спокойной работы, предсказуемых результатов, роста проектов и уверенности в завтрашнем дне. Пусть данные будут точными, интеграции - надежными, а решения - эффективными.

Спасибо за доверие и сотрудничество. В 2026 году продолжаем двигаться дальше.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍4🔥2
🚨 02.01 Проблемы с зеркалом

В настоящий момент зафиксированы проблемы с системой охлаждения на площадке, где расположен наш сервер с зеркалом xmlstock-mirror.ru. Часть серверов перешла в защиту от перегрева. Для сохранения целостности инфраструктуры и данных клиентов, их временно остановили.

Оборудование находится под наблюдением. Сейчас мы ожидаем официальной информации по срокам восстановления работы от технической службы Дата-Центра.

Основной сайт работает в штатном режиме.

Приносим свои извинения за доставленные неудобства.

❗️UPD. Работа зеркала полностью восстановлена