22 августа 2017 Яндекс запустил новую версию поискового алгоритма – «Королёв». Максимально кратко и емко можно описать его суть словами из пресс-релиза Яндекса:
Запуск алгоритма состоялся в Московском планетарии и сопровождался докладами разработчиков алгоритма, торжественным нажатием кнопки запуска и даже звонком на МКС и прямым эфиром с космонавтами.
Полное видео презентации можно посмотреть прямо здесь, а ниже мы рассмотрим основные изменения и ответы на частые вопросы. Информацию мы будем сопровождать комментариями сотрудников Яндекса в блоге компании, а также цитатами из официальных источников.
Что изменилось в поиске Яндекса?
«Королев» – это продолжение алгоритма «Палех », представленного в ноябре 2016 года. «Палех» был первым шагом в сторону семантического поиска, задача которого – лучше понимать смысл страниц.
«Королев» же теперь умеет понимать смысл всей страницы, а не только заголовка title, как было после анонса «Палеха».
Алгоритм должен улучшить выдачу по редким и сложным запросам.
Документы могут не содержать многих слов запроса, поэтому традиционные алгоритмы определения текстовой релевантности не справятся с этой задачей.
Выглядит это примерно так:
В Google работает аналогичный алгоритм – RankBrain:
Область действия алгоритма «Королев» распространяется на все запросы, в том числе на коммерческие. Однако больше всего влияние заметно именно на многословных запросах. Яндекс подтвердил, что алгоритм работает на всем поиске.
Конечно, целью алгоритма было улучшение качества выдачи по редким и сложным вопросам. Проверим на редких и сложных коммерческих запросах, связанных как раз с названием предмета.Например, в этом случае Яндекс действительно понимает, о чем идет речь. Правда, в выдаче в основном обзоры и статьи, а не коммерческие сайты.
А в этом случае поисковик понял, что меня, скорее всего, интересует дрон или квадрокоптер. Конечно же, выдача начинается с Яндекс.Маркет:
Но в некоторых случаях Яндекс бессилен…
Как это работает (+ 11 фото из презентации)
Разберем подробнее презентацию нового алгоритма. Ниже будут только выдержки самых интересных моментов с нашими комментариями и слайды из презентации.
Новая версия поиска основана на нейронной сети. Она состоит из большого количества нейронов. У нейрона есть один выход и несколько входов, он умеет суммировать полученную информацию и после преобразования передавать ее дальше.
Нейронная сеть может выполнять гораздо более сложные задачи и ее можно обучить понимать смысл текста. Для этого нужно дать ей много обучающих примеров.
Работу в этом направлении Яндекс начал с модели DSSM, состоящей из двух частей, соответствующих запросу и странице. На выходе была оценка, насколько они близки по смыслу.
Для обучения нейросети нужно много обучающих примеров.
Отрицательные – это пара текстов, не связанных по смыслу.
Положительные – пары «текст-запрос», связанные по смыслу.
Согласно презентации, Яндекс использовал для обучения массив данных о поведении пользователей на выдаче и считал связанными по смыслу запрос и страницу, на которую часто кликают пользователи в выдаче. Но как позже пояснил Михаил Сливинский, удовлетворенность пользователя результатами поиска меряются не только кликами:
Как ранее рассказывал в презентации "Палеха" Александр Садовский, наличие клика не говорит о том, что документ релевантен, а отсутствие, что не релевантен. Модель Яндекса предсказывает, задержится ли пользователь на сайте и учитывает множество других метрик удовлетворенности пользователя.
После обучения модель представляет текст в виде набора 300 чисел – семантического вектора. Чем ближе тексты по смыслу, тем больше сходство чисел векторов.
В поиске Яндекса нейронные модели использовались давно, но в алгоритме «Королёв» увеличено влияние нейронных сетей на ранжирование.
Теперь при оценке смысловой близости алгоритм смотрит не только на заголовок, но и на текст страницы.
Параллельно Яндекс работал над алгоритмом сравнения смыслов запросов на основании нейронных сетей. Например, если для одного запроса поисковая система точно знает лучший ответ, а пользователь ввел запрос, очень близкий к нему, тогда результаты поиска должны быть похожи. В качестве иллюстрации такого подхода Яндекс приводит пример: «ленивая кошка из монголии» – «манул». ()
В «Палехе» нейронные модели применялись только на самых поздних стадиях ранжирования, приблизительно на 150 лучших документов. Поэтому на ранних стадиях ранжирования часть документов терялась, а они могли быть хорошими. Это особенно важно для сложных и низкочастотных запросов.
Теперь вместо вычисления семантического вектора во время исполнения запроса Яндекс делает вычисления заранее – при индексации. «Королёв» проводит вычисления на 200 тыс. документов на запрос, вместо 150, которые были раньше при «Палехе». Сначала такой метод предварительного расчета был испытан на «Палехе», это позволило сэкономить на мощности и находить соответствие запросу не только заголовка, но и текста.
Поисковик берет полный текст на этапе индексации, проводит нужные операции и получает значение. В итоге для всех слов и популярных пар слов формируется дополнительный индекс со списком страниц и их предварительной релевантностью запросу.
Команда Яндекса, которая занималась проектированием и внедрением нового поиска, запускает его.
Запуск алгоритма:
Обучение искусственного интеллекта
В Яндексе уже много лет задачей сбора данных для машинного обучения занимаются асессоры, которые оценивают релевантность документов запросу. С 2009 по 2013 год поисковик получил более 30 млн таких оценок.
За это время появился поиск по картинкам, по видео, внутренние классификаторы и алгоритмы: количество проектов Яндекса выросло.
Так как все они работали на технологиях машинного обучения, требовалось больше оценок и больше асессоров. Когда асессоров стало больше 1500, Яндекс запустил краудсорсинговую платформу «Толока» , где может зарегистрироваться и выполнять задания любой человек.
Например, вот такие задания встречаются в «Толоке»:
Или такие:
Если хотите подробнее узнать, как пользователи оценивают релевантность ответов, чтобы понимать, какие параметры выдачи оцениваются, рекомендуем почитать инструкции по заданиям или даже попробовать пройти обучение.
За несколько лет в сервисе собралось более 1 млн человек, которые сделали более 2 млрд оценок. Это позволило Яндексу сделать огромный рывок в масштабировании и объеме обучающих данных. Только в 2017 году задания выполняли более 500 000 человек.
Среди заданий есть:
- Оценка релевантности документов;
- Задания для развития карт. Так проверяют актуальность данных об организациях для базы Справочника;
Задания для настройки речевых технологий голосового поиска.
Правила, которым Яндекс хочет научить алгоритм, открыты всем зарегистрированным пользователям в виде инструкций для работников «Толоки». По некоторым заданиям просто собирается субъективное мнение людей.
Вот выдержка из инструкции о том, как Яндекс определяет релевантность документа:
Яндексу очень важно качество оценок. Оно может быть субъективно, поэтому задания даются сразу нескольким людям, а потом математическая модель оценивает распределение голосов с учетом степени доверия к каждому работнику и экспертизы каждого участника. Для каждого «толокера» хранятся данные о точности оценок по каждому проекту и сводятся в единый рейтинг.
Именно поэтому нельзя сетовать на то, что необъективность асессоров погубила ваш сайт.
Таким образом, в Яндексе появилась дополнительная группа факторов:
- Смысл страницы и соответствие ее запросу;
- Является ли документ хорошим ответом на похожие пользовательские запросы.
Что изменилось в топе Яндекса?
Алгоритм предположительно был запущен несколько раньше презентации и, если верить сторонним сервисам (например, https://tools.pixelplus.ru/updates/yandex), изменения в выдаче начались еще в начале августа, но неизвестно, связано ли это с алгоритмом «Королев».
По этим данным можно выдвинуть гипотезу, что уменьшение доли главных страниц в топ-100 и уменьшение возраста документов в пределах топ-100 связано с новым алгоритмом, который помогает получить больше релевантных ответов.
Правда, при этом заметных изменений в топ-10, топ-20 или топ-50 не видно. Возможно, их там нет либо они незначительны. Мы также не заметили существенных изменений выдачи по продвигаемым запросам.
Текстовая релевантность в стандартном понимании никуда не делась. Подборки и более широкие ответы по многословным запросам содержат большое количество страниц с вхождениями слов запроса в title и текст:
Свежесть результатов поиска тоже имеет значение. Пример из презентации Яндекса содержит ряд свежих результатов с искомой фразой целиком.
Хотя, учитывая тот факт, что алгоритм проводит расчеты сразу при индексации, «Королев» теоретически может влиять и на подмешивание результатов быстроботом.
Надо ли как-то оптимизировать тексты под «Королев»?
Скорее наоборот: чем больше поисковик учится определять смысл текста, тем меньше требуется вхождений ключевых слов и тем больше требуется смысла. Но принципы оптимизации не меняются.
Например, еще в 2015 году Google рассказал об алгоритме RankBrain, который помогает поиску лучше отвечать на многословные запросы, заданные на естественном языке. Он неплохо работает, что отметили пользователи в многочисленных публикациях сравнения поиска Яндекса и Google после анонса новой версии алгоритма.
Это не сопровождалось масштабной презентацией и сильно не повлияло на работу специалистов. Никто целенаправленно не занимается «оптимизацией под RankBrain», поэтому и в Яндексе это никак глобально не меняет работу специалиста. Да, появился тренд на поиск и включение в текст так называемых LSI-ключей, но это явно не просто часто повторяющиеся слова на страницах конкурентов. Ожидаем развития SEO-сервисов в этом направлении.
В алгоритме также заявлено, что анализируется смысл и других запросов, по которым пользователи попадают на страницу. Опять же, в перспективе это должно дать одинаковую или похожую выдачу по синонимичным запросам, так как сейчас результат анализа выдачи порой показывает, что пересечений по синонимичным запросам в выдаче нет. Будем надеяться, что алгоритм поможет устранить подобные несоответствия.
Но Яндекс пока не может найти (или плохо находит) документы, близкие по смыслу к запросу, но вовсе не содержащие слов запроса ().
Советы:
Убедитесь, что страница отвечает на запросы, под которые она оптимизирована и по которым переходят пользователи.
Убедитесь, что страница все же включает слова из поисковых запросов. Мы не говорим про прямые вхождения, просто проверьте, есть ли слова из запросов в любой форме на странице.
Тематические слова могут придать странице дополнительную релевантность, но это явно не просто часто повторяющиеся слова на страницах конкурентов. Ожидаем развития SEO-сервисов в этом направлении.
Для ключевых фраз, по которым страница сайта хорошо ищется, проверьте, не выбивается ли показатель отказов из среднего показателя по сайту. Если по запросу сайт находится на высокой позиции и пользователь находит то, что ему нужно, сайт может быть показан по сходным по смыслу ключевым фразам (если такие есть).
Клики на поиске показывают удовлетворенность пользователя результатом. Это не ново, но стоит еще раз проверить сниппеты по ключевым запросам. Возможно, где-то получится повысить кликабельность.
Как проверить влияние алгоритма на свой сайт?
Для сайтов, у которых нет ярко выраженной сезонности, вы можете сравнить количество низкочастотных ключевых фраз, по которым переходили на сайт до запуска алгоритма и после. Например, взять неделю в июле и неделю в августе.
Выбираем «Отчеты – Стандартные отчеты – Источники – Поисковые запросы».
Выбираем визиты из Яндекса:
И фильтром оставляем только те запросы, по которым был 1 переход. Дополнительно стоит исключить фразы, содержащие название бренда.
Также можете посмотреть наличие поисковых фраз, слов из которых у вас нет в тексте. В целом, такие фразы присутствовали среди НЧ-запросов и раньше, просто сейчас их может стать заметно больше.
Перспективы и прогноз
Поисковик сможет еще лучше находить документы, близкие по смыслу к запросу. Наличие вхождений станет еще менее важным.
К текущему алгоритму будет добавлена персонализация.
В перспективе хорошие материалы, отвечающие на вопрос пользователя, могут получить еще больше трафика по микрочастотным, редким или семантически похожим запросам.
По низкочастотным ключевым фразам может увеличиться конкуренция за счет большей релевантности неоптимизированных документов.
Гипотеза. С помощью подобных алгоритмов Яндекс может лучше оценивать, насколько семантически связаны страницы, ссылающиеся на другие, и учитывать это для оценки внешних ссылок. Если это может быть значимым фактором с учетом слабого влияния ссылок в Яндексе.
Нам стоит ожидать дальнейших изменений, связанных с нейросетями, и в других сервисах Яндекса.
Вопрос-ответ
Вопрос : так как Яндекс оценивает клики, значит ли это, что накрутка поведенческих факторов будет набирать обороты?
Вопрос : связан ли «Королев» с «Баден-Баденом»?
Вопрос : как включить новый поиск Яндекса?
Ответ : в блоге Яндекса и в поисковых запросах часто встречались вопросы, как включить или установить новый поиск. Никак . Новый алгоритм уже работает и никаких дополнительных настроек делать не нужно.
Честно говоря я уже не помню когда это случилось, но как-то я скачал Яндекс Браузер, установил его и тут бац — новый дизайн. Я даже не сразу допер что это новый дизайн, думал может вообще другой браузер. У меня были какие-то облака, которые двигались… При этом было непривычно, ибо не было стандартного окна и вообще оформление браузера не то чтобы плохое… просто какое-то странное, ну не так как у остальных браузеров
Минутку, ребята! Это у меня получилось сделать, реально! О чем это я? Ну конечно о том, как вернуть старый дизайн Яндекс Браузера, все получилось, я нашел способ как это сделать и поделился этим с вами! Так что вперед, читайте об этом !
Честно говоря я не думал что есть возможность вернуть старый дизайн Яндекс Браузера, потому что уже привык к тому, что из нормального часто делают неудобное, но оказалось что можно вернуть все как было раньше
Новый дизайн Яндекс Браузера, это вот такой:
Не знаю как вам, а мне он что-то не очень, ну слишком непривычный и эти облака, что это за выкрутасы такие..
В общем вверху, в правом верхнем углу есть кнопка, значок таких палочек горизонтальных, вот ее нажимаем и в появившемся меню выбираем пункт Настройки:
Кстати, в настройки также можно попасть, если просто перейти по этому адресу:
browser://settings
Кстати! Вот оказывается что в настройках также тут можно отключить Яндекс Дзен, я не знаю что это вообще, но оно мне точно не нужно! Чтобы отключить, то нужно снять вот эту галочку:
Ну так вот, теперь по поводу дизайна, крутим настройки дальше и там внизу будет кнопка Показать дополнительные настройки, нажимаем ее:
Крутим дальше, кстати, извините что опять не по теме, но если что, то тут есть еще нужная опция включения блокировки шоковой рекламы. Ну а что? Если вам также неприятна эта реклама, как и мне, то ставьте тут галочку:
Короче я прокрутил, прокрутил и настройку не нашел! Но такого быть не может, ведь я точно помню, что она была! Блин, я уже испугался, думал может они убрали эту опцию отключения нового дизайна, но к счастью нет! Просто раньше вроде бы это была галочка, вот я ее и искал.. А это оказывается кнопка и она вообще не находится в дополнительных настройках.. В общем она возле галочки отключения Дзена какого-то, в общем вот эта кнопка:
Я эту кнопку нажал, потом было такое сообщения, я тут нажал Выключить.
Мы уже писали раньше об использовании . Я, как человек мало разбирающийся в этих вопросах, подам эту тему именно с такой точки зрения: как быстро, без особых усилий управлять из . Остается, конечно, вопрос, зачем это нужно. Точнее сказать, зачем удаленное управление с телефона по локальной сети, потому что доступ к своему компьютеру через интернет вопросов не вызывает. Как всегда, буду руководствоваться принципом «Если такое есть, значит оно нужно».
Общий экран в локальной Wi-Fi сети
Итак, шаг 1 : в Системных настройках активируем опцию .
Обязательно зайдите в Настройки компьютера и задайте пароль. Мало ли…
Шаг 2 : установите VNC клиент для iPhone. Я остановился на Mocha VNC Lite . Для теста мне большего и не нужно было.
Откройте программу, создайте новое подключение и введите внутренний IP Mac’а, который можно увидеть сразу после активации Общего экрана. При необходимости проведите дополнительные настройки (например, задайте пароль).
Разрешение экрана лучше сделать немного меньше максимального. У iPhone не достаточно памяти для отображения такого разрешения, и программа может просто завершить свою работу.
У меня крушений не было и все заработало с первого раза.
Кстати, прочитал где-то, что программа успешно работает на устройствах без .
Удаленное управление через интернет
Здесь уже не так все просто. Каждый модем, независимо от того, проводный ли он или беспроводный, имеет свои настройки. Для доступа из сети компьютер будет иметь кроме внутреннего IP еще и внешний. Основная настройка, которую вам придется провести - это перенаправление всех входящих соединений внешнего IP через порт 5900 на внутренний. Зайдите в настройки своего модема и найдите что-то вроде Port Forwarding, сконфигурируйте весь траффик порта 5900 и направьте его на внутренний IP. Мне пришлось порыться в настройках своего D-Link. Если все сделать правильно, будете иметь доступ к компьютеру из любой точки глобальной сети. Главное, не забыть его включить;).
Смартфоны и планшеты уже давно перестали быть «младшими братьями» стационарных ПК для большинства пользователей, уделяющих мобильным гаджетам больше времени. И это не вызывает удивления, ведь при помощи iPhone или iPad можно решать практически те же задачи, что и на стационарном компьютере или ноутбуке. Но, до полного вытеснения последних из нашей жизни еще далеко.
Вконтакте
Действительно, даже стационарные телефоны, которым пророчили полное исчезновение еще с десяток лет назад, до сих пор , включая развитые страны. И всем нам иногда приходиться использовать мобильный телефон в качестве «домашнего». Аналогичная ситуация часто возникает и с ПК — чтобы управлять настольной системой вовсе не обязательно сидеть за компьютером, можно воспользоваться одним из перечисленных ниже решений для получения с мобильного устройства.
Parallels Access (649 рублей в год)
Главная особенность данного приложения заключается в том, что оно предлагает пользователю собственный интерфейс рабочего стола с иконками программ, установленных на стационарном ПК. При этом, позволяет работать с такими пакетами, как Microsoft Word, Excel, Adobe Photoshop, Sony Vegas и т.д. То есть, подключив свой iPhone или iPad к ПК, вы сможете запускать эти программы как обычные мобильные приложения. Кроме того, вы сможете работать с ними посредством жестов, а ваши пальцы будут заменять курсор. Если же возникает необходимость точной подводки или использования функциональных клавиш, то можно вызвать экранную клавиатуру или виртуальный курсор. Единственное условие для качественной работы Parallels Access
— стабильное высокоскоростное подключение к интернету. Само приложение распространяется бесплатно, но после 14 дней использования необходимо будет приобрести подписку.
Скачать Parallels Access для iPhone и iPad (App Store) .
Microsoft Remote Desktop (бесплатно)
Утилиту Remote Desktop Connection
для всевозможных платформ, использующую одноименный фирменный протокол, сложно назвать самой функциональной (сторонние разработчики выпускают решения с более широкими возможностями на базе того же протокола RDP), но зато она отличается стабильностью работы и относительно высоким уровнем безопасности. Установив Microsoft Remote Desktop
на свой iPhone, iPad или Mac, вы сможете получить доступ к приложениям, библиотекам, документам, сетевым устройствам и другим функциям удаленного компьютера под управлением Windows.
TeamViewer: Remote Control (бесплатно)
Простое, бесплатное и безопасное решение для контроля над удаленным ПК посредством iPhone или iPad. Для начала сеанса необходимо просто установить мобильное приложение на свой iДевайс и бесплатно скачать утилиту для Mac OS X, Windows или Linux с официального сайта разработчиков. Установка соединения не отнимает много времени и позволяет управлять десктопной операционной системой, передавать и принимать файлы, использовать буфер обмена, транслировать аудио и видео, включать/выключать удаленный ПК и т.д.
Screens VNC (649 рублей)
Приложение из разряда «сел и поехал». Для установления удаленного контроля над компьютером из любой точки мира не понадобится производить каких-то сложных операций — достаточно заблаговременно установить на десктоп под управлением OS X или Windows специальную программу Screens Connect
, а также приобрести в App Store приложение Screens VNC
за 649 рублей (979 рублей в Mac App Store). После того, как вы заполните небольшую анкету и установите соединение с ПК, оно автоматически синхронизируется через iCloud и впоследствии можно будет просто кликнуть ранее созданное подключение и ввести пароль.
Удаленный рабочий стол iTeleport (799 рублей)
Еще одна утилита, которая способна удовлетворить потребности как любителей, так и профессиональных сетевых администраторов. С ее помощью можно подключиться к любому количеству компьютеров под управлением операционных систем Windows, OS X и Linux, использующих любой VNC-сервер, включая и фирменную разработку- iTeleport Connect
. Отдельно стоит отметить производительность приложения — при стабильном интернет-соединении iTeleport
позволяет работать с тяжелыми графическими редакторами, играми и другими программами, при этом, поддерживаются мониторы с высоким разрешением (включая 4К). Еще одна особенность программы заключается в отображении функциональных клавиш той системы, к которой в данный момент производится подключение.
Скачать «Удаленный рабочий стол iTeleport» для iPhone, iPad и iPod Touch (App Store) .
Splashtop 2 Remote Desktop (169 рублей)
Одно из наиболее универсальных и популярных (среди платных) приложений этой подборки. Splashtop 2 Remote Desktop
позволяет транслировать аудио и видео в высоком разрешении, работать с библиотеками данных на ПК, переключаться между мониторами, поддерживает практически любые подключаемые устройства, управление жестами, облачную синхронизацию подключений и т.д. Как и iTeleport
, это приложение отличается высокой производительностью и способностью передавать без потерь большие объемы данных. Единственный нюанс — множество функций программы недоступны в обычном режиме и являются встроенными покупками.
