Размеры интернета колоссальны, и задача поисковой машины — мгновенно найти в этом космосе то, что нужно пользователю. Иначе говоря, необходимо упорядочить документы так, чтобы в начале списка оказались наиболее релевантные. Но как отличить хорошие документы от плохих, а наилучшие от хороших?

Об этом Александр Сафронов (руководитель службы релевантности и лингвистики в Яндексе) рассказал на недавней встрече «Как устроен поиск Яндекса: о чем невозможно прочитать».

🎬 Видео и презентация: https://ln2.in/Pi01uTV
📌 Обзорная статья на сёрче: https://ln2.in/8l6kdeK

Кратко, ранжирование в Яндексе состоит из трёх основных компонентов:

1⃣ Лингвистика

Благодаря лингвистическому анализу, поисковик понимает тематику документа и его контент, а также интент пользователя по короткому запросу и истории поиска. Яндекс лучше других поисковиков понимает морфологию русского языка, оперирует большой базой синонимов, а также учитывает так называемые "связанные расширения" (слова, подчеркивающие тематику, либо LSI-фразы). На изображении выше приведен пример связанных расширений по запросу "достопримечательности праги".

2⃣ Факторы

На данный момент в Яндексе около 1500 факторов. Их можно разделить на несколько групп:

▪️ Статические документные (например, размер и возраст документа, его pagerank и посещаемость)
▪️ Запросные (например, длина запроса, язык, тематика и тип)
▪️ Текстовые (текстовая релевантность разных участков текста, близость нужных фраз к началу документа)
▪️ Ссылочные (количество и качество ссылок, ведущих на страницу)
▪️ Пользовательские (поведение пользователей на выдаче и на сайте)
▪️ Персональные (язык браузера, регион поиска, личные настройки)
▪️ Метафакторы (под этим термином, скорей всего, яндекс подразумевает совокупность других типов сигналов, а не данные мета-тегов)

3⃣ Машинное обучение

Теперь, из 1500 факторов Яндексу нужно получить одно число, на основе которого отсортировать документы. Этим занимается система MatrixNet, использующая машинное обучение асессорами и нейронные сети.

Всю эту красоту, конечно портит "Многорукий бандит", создавая рандом выдачи https://ln2.in/HybM7Ys

К середине 2016 года кол-во HTTPS сайтов в ТОП10 выдачи Google дошло до 30% https://ln2.in/qTv4FIl

❓ А что, если удалить со своего сайта страницы, показывающие плохие поведенческие? SimilarWeb провел интересный эксперимент на эту тему https://ln2.in/Z6URzbq

Через панель для вебмастеров Google ребята нашли страницы сайта с большим количеством показов в поиске, но малым CTR, а также через Google Analytics нашли страницы с плохими поведенческими (большой показатель отказов, малое время на сайте, низкое число просмотров страниц). Объединив данные, они проверили типы полученных мало-эффективных страниц, важны ли они для бизнеса, могут ли давать лиды. Страницы, которые показали низкую ценность - исключили из индекса с помощью мета-тега noindex.

Сюда попали, к примеру, страницы с анализом порно-сайтов, посетители которых ожидали увидеть совсем другое и не давали лиды сервису SimilarWeb.

❗️ Из-за таких манипуляций пол миллиона поискового трафика было потеряно. Однако, для всего сайта показатель отказов уменьшился на 42%, кол-во просмотренных страниц увеличилось на 34%, среднее время пребывания на сайте увеличилось на 65%. То есть, это не пользователи стали больше проводить время на сайте, а в целом улучшилась общая статистика из-за удаления плохих данных.

И после того, как большая часть страниц выпала из индекса, органический трафик после падения начал расти. 🎉 Улучшились позиции сайта по ряду отслеживаемых фраз. Например, средняя позиция сайта по запросу "website ranking" в мае была на 3 месте, а в июле уже на 1! По запросу "app rankings" ребята прыгнули с 9 места на 4! В среднем, позиции ключевых слов выросли на 26%, в то время, как CTR улучшился на 23%.

Делайте выводы! Экспериментируйте. Делитесь результатами.

Сергей Сосновский о 13 ошибках, из-за которых можно получить фильтр за переоптимизацию.

1. Переоптимизация тега <noscript>
2. Создание шаблонных страниц
3. Переспам в сквозных элементах
4. Ключевые слова в имени файла изображения, а также атрибутах alt и noscript
5. Переспам выделением жирным (<strong>, <b>)
6. Портянки контента (без формата)
7. Переспам внутренними ссылками
8. Переспам текста ключевыми словами
9. Контент без смысловой составляющей
10. Многочисленные теги для одного элемента
11. Переоптимизация мета-тегов denoscription и keywords
12. Переспам подзаголовков H2-H6
13. Совпадение <noscript>, <h1>, URL и хлебных крошек

Подробнее в свежей статье по ссылке:
http://sosnovskij.ru/pereoptimizaciya-sajta/

Живая статистика по количеству пользователей интернета в разных странах.
http://www.internetlivestats.com/internet-users-by-country/

Полезно не только для понимания ситуации в наших регионах, но и для планирования запуска стартапов на западные рынки.

Россия — 6 место,
Украина — 34,
Узбекистан — 37,
Казахстан — 43,
Беларусь — 61

Не все алгоритмы Яндекса приживаются. Даже неделю не проработал новый алгоритм ранжирования новостей в блоке "подробнее о событии". После жалоб со стороны партнеров пришлось откатить (многие региональные СМИ потеряли прилично трафика). Для новостей наиболее важным фактором остается свежесть.
https://vc.ru/n/yanews-nochange

Кстати, примечательно, что в Яндексе это назвали корректным и уважительным словом "эксперимент". Когда ваши ожидания от новых внедрений не оправдались и поступают жалобы, говорите всем, что это был эксперимент :) Я тоже так иногда поступаю.

Эля Леонова, помощник SEO-оптимизатора в SiteClinic рассказала о своем опыте начинающего сеошника и дает рекомендации, с чего начать вновь прибывшим.
http://siteclinic.ru/blog/raznoe/chego-ozhidat-novichku-v-seo/

1. Изучите особенности профессии, обязанности SEO-специалиста, оплату труда.
2. Просмотрите сайты потенциальных работодателей.
3. Почитайте статьи на отраслевых блогах.
4. Присоединитесь к группам в соц.сетях.
5. Повисите на форумах.
6. Узнайте о лидерах/коучах индустрии, поинтересуйтесь их деятельностью.
7. Просмотрите онлайн-уроки и попытайтесь вникнуть в суть.

Для каждого пункта даются подробные описания и ссылки. А также в статье другие советы новичкам к 1 сентября.

Руководство по линкбилдингу в 12 частях
Авторы: Нейл Патель и Брайан Дин

1. Новая эра линкбилдинга
https://ln2.in/q85gnuu

2. В поисках идеальной трастовой ссылки
https://ln2.in/1oioHoi

3. Контент-маркетинг как инструмент линкбилдинга
https://ln2.in/gN7sccm

4. 7 источников для самостоятельного получения ссылок
https://ln2.in/NOdPETO

5. Получение ссылок с сайтов на доменах .EDU И .GOV
https://ln2.in/Cf6TDbZ

6. Руководство по построению отношений для получения ссылок
https://ln2.in/RwusB36

7. Стратегия битых ссылок
https://ln2.in/sHFz4mH

8. Наращивание ссылок при помощи SCRAPEBOX
https://ln2.in/7oUvcYl

9. Как получить ссылки при помощи инфографики
https://ln2.in/HSZuX6o

10. Гостевой постинг уровня Эксперт
https://ln2.in/B7o2U8L

11. Построение воронок ссылочного веса для усиления линкбилдинга
https://ln2.in/5bsOIXn

12. «Серые» методы наращивания ссылочной массы
https://ln2.in/njVLxQg

via @devakatalk

По данным BusinessInsider, к 2020 году мобильная коммерция США составит 45% всей электронной коммерции, что примерно в деньгах $284 млрд.
via @devakatalk

Для сравнения, объемы российского рынка мобильной коммерции. Источник: https://ln2.in/eLHFs8o

#Лонгрид на тему белых методов оптимизации.

Перевод статьи Брайана Дина о том, как достичь заветного первого места в поисковой выдаче Google, используя технику небоскреба. Эмиль Шур, контент-маркетолог сервиса по доставке здоровой пищи в США превратил этот результат в 100.000$ ежемесячного дохода.
https://ln2.in/XUxA359

P.S. Сам еще не читал, планирую на вечер :)

«Яндекс» изучил статистику за 36 лет и узнал, какие погодные приметы работают. Например, хуже всего они работают в Центральной России: http://goo.gl/oKJJYx

Максим Уваров перевел старую, но полезную статеечку про расширенные фильтры в Excel, которыми можно заменить отсутствующий функционал регулярных выражений, а также дополнил русскоязычными скриншотами https://ln2.in/r7euFWd

Кстати, сам я для анализа табличных данных использую Open Office Calc, здесь с регулярками все в порядке. OpenOffice это кроссплатформенный, свободный и открытый офисный пакет. Скачать можно здесь: https://www.openoffice.org/download/index.html

3 года назад Яндекс тестировал добавление изображений в сниппеты, в том числе по коммерческим запросам https://ln2.in/1F2lu8j
Денис Воеводин еще тогда заметил ряд недостатков алгоритма https://ln2.in/9QRxar9

И похоже, эксперименты закончились неудачно, о картинках в сниппетах больше никто не слышал. Но одна группа запросов, связанных с онлайн-играми, выделилась в поведенческих характеристиках и сейчас вы можете заметить много изображений в выдаче, связанной с играми https://ln2.in/zoAGyLa

Как же добавить изображения в сниппет для своего сайта? Вот несколько советов:

🔹 Изображения в сниппетах появляются только по игровым запросам. Не считая сниппетов images.yandex.ru, где изображения появляются по всем запросам, предполагающим картиночный интент.
🔹 Используйте изображение в навигации (на главной и страницах рубрик), размещенное над названием игры.
🔹 Не используйте noindex, чтобы скрыть эти изображения от Яндекса.
🔹 Делайте минимальный размер изображений 90х90 px (квадратные) и 120х90 px (прямоугольные).
🔹 Организуйте список игр в виде тегов <UL>-<LI>, чтобы поиск их мог проще распознать.
🔹 Используйте ЧПУ и хлебные крошки.
🔹 Используйте тег OpenGraph для изображений (og:image) на странице с игрой и на страницах-рубриках.
🔹 Называйте игры кратко, максимум 6-7 слов.
🔹 В топе не будет одинаковых изображений сниппетов, поэтому сортируйте игры так, чтобы верхние в рубриках не повторялись с подобными у конкурентов.
🔹 В то же время яндексу важно пользовательское поведение, оставляйте на первых местах лучшие игры, делайте интерфейс удобным.

После изменений на сайте должно пройти какое-то время, возможно 1-2 месяца, перед тем, как это повлияет на сниппет.

via @devakatalk

Теперь на Яндексе доступна версия API Вебмастера 3.0 https://tech.yandex.ru/webmaster/

API открывает доступ к данным Яндекс.Вебмастера о сайтах. Он пригодится хостинг-провайдерам, разработчикам CMS, инструментов веб-аналитики, и обязательно найдется применение в SEO сервисах.

Хороший seo-кейс на вечер от интернет-магазина Brandshop.
https://ln2.in/psUcseu #кейс

Ребята долго выбирали подрядчика. Когда разослали запросы коммерческих предложений, то поняли, что никто не делает их персонализировано. Как минимум, компании не понимали, чем Brandshop отличается от Wildberries или Lamoda. Специфика сайта такова, что основная часть трафика лежит на десятках тысяч среднечастотных и низкочастотных запросов.

1⃣ "Главное, что мы поняли на второй месяц работы: все SEO для электронной коммeрции построено на непрерывном анализе поискового спроса и на построении структуры магазина не так, как нравится закупщикам, а так, как товар ищут пользователи."

2⃣ «купить кроссовки Nike» и «купить недорогие кроссовки Nike», просто невозможно продвинуть на один листинг.

3⃣ Коммерческие и некоммерческие ключевые слова нельзя продвинуть на одну странцу — таковы правила ранжирования «Яндекса».

4⃣ Чтобы грамотно развивать витальные запросы, нужно искать и порой создавать самим подходящие инфоповоды.

5⃣ Метрики эффективности SEO: процент запросов в топ-10−5−3 в целевых регионах, видимость в поиске, трафик с органики на внедренные категории, конверсия с органики и продажи.

Несмотря на скрытую рекламу Rush Agency, рекомендую почитать.

via @devakatalk

Как достичь рейтинга А+ для SSL-сертификата на вашем сайте:
https://ln2.in/ktcFvU5

1. Отключить уязвимые SSL-протоколы (SSL v1, v2, v3)
2. Актуализировать набор шифров.
3. Сгенерировать надёжный ключ dh_param.
4. Включить механизм HSTS.
5. Ускорить SSL-переговоры с помощью OCSP Stapling.
6. Ускорить SSL-переговоры с помощью SPDY.
7. Включить кэширование.

Техническая статья для оптимизаторов.

Друзья, переводить свои сайты на HTTPS придется быстрее. Уже с января следующего года Chrome начнет отмечать сайты без HTTPS как небезопасные https://ln2.in/fY2IDym
За счет этого какая-то часть сайтов потеряет трафик и доверие.

Пока что функция будет присутствовать для тех сайтов, где необходимо вводить логин-пароль, но в дальнейшем индикатор будет отображаться для всех HTTP-сайтов. Другие браузеры последуют за хромом, в Mozilla давно высказывали подобные идеи. Инструкция как перейти на HTTPS https://ln2.in/0QYR0wH

Аудитория русскоязычного телеграма на основе опроса 3500+ пользователей:
https://vc.ru/p/telegram-audience