📊 Автоматическая кластеризация запросов на основе данных мониторинга запросов из Яндекс.Вебмастера

Благодаря последнему апдейту Яндекса.Вебмастера стало невероятно просто собирать кластеры запросов под существующие страницы.
Для этого выкачиваем отчет из мониторинга запросов и обрабатываем скриптом. На выходе получаем либо данные по поисковым запросам и их релевантным URL (=кластеризация), либо URL и пример поискового запроса.
Пример использования кластера запросов приведён выше.

Что поменялось с последней версии скрипта:
🟠Поддержка нового формата данных от Яндекса
🟠Больше не надо переименовывать файл в wm.xlsx, просто запускаем скрипт из той же папки, куда сохранили отчет с любым названием и выбираем подходящий XLSX файл
🟠Авто определение режима анализа - отчет по страницам или отчет по запросам
🟠Для режима запросов дополнительно считаем медианную позицию, чтобы учесть влияние сильных колебаний
🟠Оптимизировал код, убрал лишнее, облегчил на сколько возможно

❗️Важный момент: при анализе часть запросов (обычно ВЧ) могут быть релевантны разным страницам - это связано с плавающей релевантность в Яндексе, т.е сегодня одна страница показалась по запросу, завтра другая, однако основная релевантная чаще всего одна (все остальные случайные).

Фильтровать такие аномалии можно и нужно, для этого я считаю охват по запросу - как отношение показов к спросу. Чтобы убрать запросы, нерелевантные странице (там где засчитался показ по другой странице), необходимо в полученном отчете отфильтровать колонку охват и поставить от 5% или 10%. Таким образом, если запрос показался 1 раз, при большом спросе - его видимость будет крайне низкая, в результате чего он срежется.

📁 Полная инструкция и файл скрипта

👥 Скорее всего уже слышали про проблемы с Cloudflare, которые организовал РКН.

В сети быстро нашли решение с отключением TLS 1.3. Если сайты не открываются и их немного, то проще конечно сделать в ручную, а вот если у вас их несколько десятков, то включать и выключать настройки может быть муторно.

Для этого написал скрипт, который по API за 2-3 секунды может как выключить TLS 1.3 у всех сайтов, так и включить обратно (рано или поздно понадобится).

💬 Подробная инструкция по ручной и автоматической настройке, а также сам скрипт на Github:

📥 https://github.com/seo-stuff/cloudflare-tls13 📥

⚡️ UPD: Добавил включение/отключение ECH. Подробнее про ECH.

📖 Бренд медиа последнее время в тренде, почти все крупняки имеют блог или журнал, оно и понятно - трафик в коммерческой органике небольшой и добывать его все сложнее, поэтому захватываются новые вертикали.

По открытым источникам с недавнего времени собираю ценную информацию и экспертизу других компаний, возможно пригодится и вам:

🟠Никита Юкович (Главред Tinkoff) - В Т—Ж SEO есть 2022 - процессы, структура команды, что и как делают SEO-специалисты, какие трудности встречаются
🟠Катерина Ерошина (Главред MOAB) - как генерить ИИ-тексты 2024 - применение ИИ контента, для каких ниш, подходы и процессы
🟠Константин Гагарин (Главред Tripster) - как запускали бренд-медиа в тревел нише.
🟠Иван Макаров - чек лист по оценке автора

Все доклады (кроме последнего) и презентации лежат в облаке:
📊 Скачать с Google Drive 📊 (буду периодически обновлять)

Несколько мыслей про рынок фриланса

Если коротко - фрилансер как отдельная единица становится всё менее актуален, в силу того что один человек больше не может давать стабильно хороший результат в интересных нишах. Забавно как еще несколько лет назад я сам топил за то, что один фрилансер в большинстве случае сильно выигрывает у студии (конвеерной), но сейчас все поменялось и доминируют команды со своей узкой экспертизой.

Почему так?
🟠Конкуренция - за условный топ-5, среди которого пару сервисов Яндекса воюют не 10 компаний, а 50-100, при прочих равных будет побеждать тот, кто давит на правильные рычаги кратно сильнее рынка, потому что базу сделали если не все, то почти все, тогда как понять кто лучше? Тот кто значительно превосходит рынок, а здесь уже начинается борьба ресурсов - мозгов, серверов, бюджетов на ссылочное, а также оплата тестов.
🟠Если все доступные рычаги влияния разделить на основные, получится 3 кита - внутренняя часть (структура + контент), ссылочное, ПФ. Применение каждого из них в лоб результат не даёт, нужны детали (о них ниже), для погружения в каждое из направлений нужно заниматься только им. Вот и получается, что в одного даже сильный специалист либо хорошо проектирует сайт, либо крутит ПФ, либо наращивает ссылочное, охватить два других направления при всём желании не выйдет.
🟠Про детали, которые и дают результат - в паблике их нет, любые кейсы и видеоинструкции показывают лишь примерное направление действий, и то без самых важных моментов. Каждый из кейсов лишь демонстрирует, что "мы наработали экспертизу знаем что делать, но что конкретно не скажем". Это лишь френдли напоминание, что подписка на 100 каналов реальных знаний не даёт, их там нет.
🟠Чтобы понять какие детали работают нужна репрезентативная выборка, на которой сначала выдвигается, а затем тестируется гипотеза. Есть ли она у отдельного фрилансера? Нет, но есть у команды. При найденной успешной гипотезе она внедряется и масштабируется.

Что остаётся фрилансеру-одиночке:
🟠Работать на нишу в регионах/с низким чеком/конкуренцией. Да, там еще могут простые действия и небольшие вложения давать результат
🟠В проектах закрывать только ту область в которой он силен, но результат по одному направлению всегда имеет довольно низкий потолок роста. Сделали - получили, а что дальше?

Что с этим делать каждый решает сам 🙌

Так уж получилось что за последние пару месяцев я оплатил и активно тестил все основные ИИ - Gemini, ChatGPT и Claude. Ключевое что мне нужно от них - умение писать код, вторично - тексты, поэтому оцениваю с этой точки зрения.

➡️ ChatGPT, некогда флагман творит сейчас какую-то лютую дичь, постоянно забывает контекст диалога, код пишет криво, ооочень сильно ошибается в фактах и галлюционирует сильнее остальных. Из хоть сколько-то значимых плюсов - умение обрабатывать большие файлы, Claude например, имеет строгое (не очень большое) ограничение на размер прикрепленных файлов. Почти полностью отказался, продлеваться не буду, на то что изредка может решить эта ИИ хватает бесплатной версии.

➡️ Gemini неплохо справляется с проверкой фактов (всё же продукт крупнейшей поисковой системы, вот уж где данные должны быть актуальны), а вот код пишет на троечку, сложно добиться нужного функционала. Никаких существенных плюсов от покупки про версии не увидел. Оставил её для фактчекинга текстов после Claude.ai

➡️ Claude.ai - пока для меня абсолютный топ, за исключением того, что они очень сильно не любят обход блокировки. Получил мгновенный бан двух аккаунтов и привязанной карты после случайной попытки зайти с российского айпи. Из плюсов - артефакты (код в отдельном блоке), отлично программирует - улучшает и дорабатывает код, помнит контекст диалога и для объяснения не требуется повторять и уточнять в каждом сообщение про что надо не забыть. Минусы - мало лимитов, которые выжигаются за 20-30 минут активного общения с дальнейшей паузой в несколько часов.

➡️ А вот теперь к интересному: китайцы выпустили свою ИИ - DeepSeek, которая похоже будет претендовать на лучшую:
🟠Полностью бесплатная (можно авторизоваться через Google-почту)
🟠Не требует VPN из России
🟠Интерфейс похож на ChatGPT
🟠Говорит на русском, по рассуждениям напоминает Claude
🟠Отлично программирует 🙌

Последнюю активно изучаю, но вероятно при очередном бане в Claude полностью перейду на неё.

«Дзен + AI + быстробот Яндекса = 💵» или Как залетают в ТОП по гембле?

Палю реальный кейс по использованию «паразитного» SEO по самым жирным ключам вроде «лучшие казино».

1️⃣ Создается канал на Дзене на котором публикуются на автомате новые статьи с разницей в несколько минут под нужный запрос, типа «ТОП-10 казино 2025» с партнерскими ссылками на казиношки. Контент естественно генерируется на AI 📱

2️⃣ И… всё. Повторяйте это упражнение несколько раз в день) Каждый свежий пост с канала залетает в ТОП Яндекса.

В чем секрет «успеха»?

Во-первых, Дзен идеально подходит в качестве площадки для паразитного SEO.

Во-вторых, главный секрет в том, чтобы добиться индексации быстробота. Тогда Яндекс подхватывает каждый свежий пост и выводит его в выдаче с пометкой «N минут назад».

В самих статьях я ничего особенного не заметил, сначала там идет список ссылок (рейтинг), затем простыня текста. Каждая статья «уникальна». Под этим постом я прикрепил статью 📕, которую нашел в ТОПе.

Что может пойти не так?

Конечно Дзен банит такие каналы, они живут пару дней.

А это значит, что нужно как-то автоматизировать регистрацию каналов и постинг. Возможно даже какое-то время «прогревать» аккаунты.

То есть в итоге схема превращается в соревнование софта, кто быстрее и чаще наладит постинг ради получения своей «минуты славы» в выдаче.

Курсы по SEO больше не нужны, да и любые другие тоже 😭

Вчера на встрече у «Хороших SEOшников» пообещал рассказать про интересную фичу с нейросетями, поехали. У Google есть бесплатный инструмент по созданию собственной базы знаний, в которую можно загружать документы, видео, страницы сайтов под названием NotebookLM.

Те кто задавал вопросы нейросети напрямую, наверняка знают, что ответы она даёт довольно обобщённые, сглаженные и нужно глубоко знать тему, чтобы выуживать из неё что-то стоящее. Здесь же мы формируем базу знаний на основе доверенных источников.

Какие источники поддерживаются (до 300 шт. в бесплатной версии):
➡️ Ссылки на страницы
➡️ Youtube видео
➡️ Документы и тексты

Хотите освоить линкбилдинг на основе знаний русскоязычных экспертов? Находим доверенных специалистов на 🖥, загружаем в базу. Хотите освоить новую сложную программу? Парсим ссылки на документацию и выгружаем в базу.

А дальше задаём все интересующие вопросы. В результате вместо десятков и сотен часов, потраченных на изучение и конспектирование видео, осваиваем софт, интересующее направление или что угодно прямо в чате.

Откуда доставать источники:
🟠Ссылки на документацию можно взять из выдачи: site:site.ru inurl:/slug/
🟠Cпарсить страницы сайта через A-Parser / Screaming Frog SEO Spider
🟠Под парсинг видео из Youtube со всего канала, или плейлиста я написал небольшой скрипт 📥

⚡️UPD: Серьезно обновил скрипты, теперь они генерируют код для консоли, которые позволяют автоматом добавлять ссылки в источники, также добавил скрипт, который из json файла истории канала/чата создаёт txt файл.