Знакомый создает инструмент для краулинга, и для теста ставит себе интересные задачки. Сначала спарсил Розетку с её 1.64 млн страниц, чтобы посмотреть статистику кодов ответа, потом взялся за 5.5 млн. доменов в зоне RU. Вот немного статистики:
- Мертвых доменов (без ответа) - 21%
- Сайтов на HTTPS - 20%
- Лидер по числу входящих редиректов - reg.ru

Из интересного есть 2800 доменов редиректящих на vk, 500 доменов на букинг.ком через цепочку 302 редиректов, 493 домена у сайта прокладки apycomm.com, который льет траф на доминопиццу, карпрайс и прочие популярные сайты. Есть даже на бурж виагру с 329 ру-доменов.

Подробнее здесь: https://ln2.in/Im8g5no

Интернет-гиганты стали монстрами — они бесконтрольно собирают информацию о пользователях и, как наркотики, могут дать людям кратковременное чувство счастья, нанося ущерб им в долгосрочной перспективе. Так считает один из первых инвесторов Google и Facebook Роджер Макнейми, который теперь призывает общество задуматься об этом

https://vc.ru/p/mcnamee-protest

Убойные стратегии линкбилдинга от западных специалистов. Осторожно, лонгрид!
http://referr.ru/12-strategij-linkbildinga-2017/

Объявлены победители в статейном конкурсе от Serpstat и SEOnews: https://ln2.in/2saNjaY

Десятка выигравших статей по SEO:

1. Реальный кейс по продвижению в англоязычном Google: пошаговая инструкция, основные требования
https://ln2.in/fygZr7D

2. Каннибализация фраз: что такое и как избавиться от нее?
https://ln2.in/VGl9xQK

3. Чек-лист по аудиту сайта: самое подробное руководство
https://ln2.in/rPhdY5t

4. Безопасность сайта. Профилактические методы защиты и практические способы чистки после заражения
https://ln2.in/earxfHa

5. Кейс: как безопасно перейти на безопасный протокол https
https://ln2.in/l1zDJz1

6. Топ-20 SEO-ошибок, которые убивают ваш блог
https://ln2.in/TzzZN6Y

7. 3 верных способа собрать ссылки для внутренней перелинковки
https://ln2.in/eeCaKNA

8. Оптимизация контента для YouTube
https://ln2.in/iDvnECA

9. Китай: посторонним вход воспрещен? Или Тайвань и Гонконг как SEO-альтернатива
https://ln2.in/KuBVLa9

10. Чек-лист для оптимизации мобильного сайта
https://ln2.in/5zazP0y

via @devakatalk

На pr-cy сегодня вышло продолжение темы про проведение аудита сайта. Хорошая статья, отличные иллюстрации:
https://ln2.in/SnAb4qW

Во второй части:
- Оптимизация тегов h1 - h6
- Минимизация уровня вложенности страниц
- Работа с внутренними и внешними ссылками
- Настройка микроразметки
- Оценка качества контента
- SSL-сертификат must have

По традиции, каждую среду выпускаем новый полезный видео-ролик про работу с семантикой. Сегодня Игорь рассказывает, почему выбор низкоконкурентных запросов по мутагену и создание под них контента — не очень хорошая идея для информационников:
https://www.youtube.com/watch?v=VPZ45pxHDi4

Хорошие новости! Спустя несколько лет, ребята из Нетпик все-таки заканчивают разрабатывать MacOS версию программы Netpeak Spider. Жду ещё Люстика с KeyCollector. Официальный комментарий:
https://devaka.ru/pr/netpeak-spider#comment-40859

Если кто-то из вас занимается разработкой софта — делайте его мультиплатформенным уже при рождении. Это хорошая практика и гарантированный успех!

SeoProfy продолжает работу над новыми частями NaZapad. 30 августа выпуск 7й серии:
https://devaka.ru/events/nazapad-7

Основные темы дискуссии:
— Стратегии продвижения на запад для контентных проектов.
— Как находить и анализировать ниши.
— Что самое важное в создании контентного проекта под Amazon.
— SEO в Дубаи и ОАЭ, Австралии и Турции.
— Как делать линкбилдинг на запад без бюджета.
— Как массово анализировать топы, искать дропы и чужие наработки.
— Что можно автоматизировать при работе с сетками web 2.0
— Как использовать дроп-домены для построения сетки сайтов.
— Как получать органический трафик в Yelp.

Хорошая возможность прокачаться в зарубежном SEO. Участие бесплатное!

B2B и B2C - разные секторы, с разным поведением пользователей. Соответственно, seo-стратегии для этих секторов также должны разниться. В чем именно разница SEO для B2B и B2C? Кратко рассказать сложно, поэтому читайте подробно в новой статье от гостевого автора, Елены Колесник, специалиста Penguin-Studio:
https://devaka.ru/articles/b2b-vs-b2c

Ответы на любые ваши вопросы по SEO: https://devaka.ru/qa

Через 5 минут будет мой доклад на SEODay про рабочие и нерабочие seo-стратегии.
Трансляция: https://webpromoexperts.com.ua/seoday/
Презентация: https://www.slideshare.net/sevasjack/seo-78949585/

Пока вы измеряете эффективность рекламных каналов, другие договариваются с лидерами мнений, например, чтобы те добавили в название своего продукта нужный бренд. Причем, лидеры мнений это не только блоггеры, но также актеры или другие бренды. Так недавно произошло с Oreo и Android: https://vc.ru/n/android-oreo-present
Не удивлюсь, если сегодня Яндекс анонсирует новый алгоритм, названный в честь своего партнера.

Мир никогда не будет прежним. Бренды повсюда, и даже в emoji 🍟 Скоро нас ждут социальные льготы, если своих детей будем называть Редбул, Айфон или Мегафон. )) Люди всегда работали с лидерами мнений, чтобы иметь влияние на нужную группу людей, но сейчас это особый тренд в маркетинге. А тренды грех не использовать в бизнесе!

Только что в Яндеке запустили новый алгоритм — Королёв. Своеобразное продолжение "Палеха", только теперь учитываются не только связанные слова в загловках, но и весь текст.

Трансляцию смотрите по ссылке: https://www.youtube.com/watch?v=7rCKBf2dBwc

Когда работаю со структурой сайта, обязательно использую формат интеллект-карт. Это помогает лучше визуализировать дерево, согласовывать узлы и продумывать для каждого его свойства, и как связать узлы между собой перелинковкой. Держите краткий вебинар про mindmap для работы со структурой:
https://www.youtube.com/watch?v=avZzeyhdFPo

Devaka Digest #8 — свежая подборка полезных ссылок.
https://devaka.ru/articles/digest-8

🤖 Как Яндекс научил искусственный интеллект понимать смысл документов
https://ln2.in/uOqv1uI

✡️ Как Китай строит цифровую диктатуру
https://ln2.in/mQrmfdN

🆒 Обзор сервисов проверки уникальности текста
https://ln2.in/OmvHdcz

☄️ 13 неочевидных и практически применимых SEO-фишек
https://ln2.in/mbUGZFa

См. полный дайджест: https://devaka.ru/articles/digest-8

via @devakatalk #digest #дайджест

Маженто выпустили бесплатный инструмент для кластеризации запросов (по топу Яндекса), аналог известного KeyAssort с возможностью импорта данных из KeyCollector. Нужны лишь лимиты yandex.xml. Обещают скластеризировать ядра любых объемов. Подробности и сама программа для скачивания здесь: https://ln2.in/KduWpHU

via @devakatalk

Хрестоматийный пример, что такое современный крауд-маркетинг: http://ifoxy.ru/viewtopic.php?p=84592

Там же можно покликать на авторов и найти сети крауд-маркетологов. Как такое приживается на форумах, неясно:
http://ifoxy.ru/search.php?author_id=9572&sr=posts

Кому интересна эффективность подобных постов в плане SEO или трафика, проанализируйте продвигаемые ими сайты и активность веток. Кстати, видимость этого форума по серпстату всего 0.01, а посещаемость по симиларвебу около 150-200 чел/сутки из поиска при количестве страниц в индексе более 50к.

Заметка о том, как фейсбук заставляет проводить больше времени на сайте за счет небольших интерфейсных изменений. Дальше, рассказывается о «темных паттернах» и в конце поднимается вопрос об этичности такого поведения. Статья написана больше для недизайнеров, но в ней задается разумный вопрос.

P.S. У самого Quartz есть бесконечная подгрузка статей после прочитанной, что по сути является одним из способом удержания пользователя.

https://qz.com/1058674/facebook-news-feed-design-and-dark-ux-are-turning-us-into-sleep-deprived-internet-addicts/

Вчера проходила конференция nazapad, поэтому следующий выпуск вебинара мы выкладываем сегодня. Речь в нем об оптимизации документов под смешанные запросы, по которым в выдаче и коммерция и информационники. Нужно ли под эти запросы создавать страницы на статейнике? Игорь разбирает подробно.
https://www.youtube.com/watch?v=YK1loZn8B4U

До сих пор есть удивительные в своей наивности люди, которые верят отзывам, публикуемым на всяких форумах или в агрегаторах. (Есть, конечно, особые случаи типа booking.com, где отзыв можно оставить только о гостинице, где ты реально побывал, но речь не о закрытых системах)
Индустрия фейковых заказных отзывов - довольно развитый сегмент. И вот по нему нанёс неожиданный удар всё тот же машинный интеллект: теперь отзывы о ресторанах он пишет совершенно неотличимые о тех, которые оставляют в Yelp белковые пользователи. Некоторая часть SMMщиков могут остаться без заказов. Собственно, на этих отзывах, подчас эмоциональных, и шло обучение - и прошло успешно: в статье по ссылке отличные примеры текстов. Поскольку делали это ученые, тестирование "достоверности" и "полезности" сгенеренных отзывов было серьёзным - на реальных людях через Mechanical Turk. Этот вариант "теста Тьюринга" алгоритм прошёл - люди не могли отличить, какие отзывы машины, а какие людей. Впрочем, они признали отзывы и те и те одинаково малополезными ;))
https://www.theverge.com/2017/8/31/16232180/ai-fake-reviews-yelp-amazon
А сама научная работа, посвящённая атакам на публичные агрегаторы отзывов - https://arxiv.org/pdf/1708.08151.pdf Понятно, что владельцы систем теперь начнут тренировать свои алгоритмические защиты, и, как с прочим спамом, в итоге будет война алгоритмов друг с другом ;)

Сентябрь традиционно стал для нас началом учебы. В связи с этим я запускаю новый курс "Введение в SEO за 30 дней". В течение последующего месяца каждый день будут выходить короткие видео-ролики, описывающие важные аспекты SEO, формируя целостную систему. Изучая данный курс, вы сможете с нуля разобраться, как работают поисковые системы, какие существуют алгоритмы, что включает в себя оптимизация документов и многое другое. Это хорошая возможность войти в тему, чтобы устроиться на работу джуниором или лучше понимать ваших подрядчиков. Курс полностью бесплатный и изложен простым языком.

Первый урок посвящен важнейшему вопросу, из-за которого, собственно, и появились поисковые системы — информационной потребности пользователя:
https://www.youtube.com/watch?v=leHtlYEWT1Q