Экскурс в историю: Что не так с Яндексом, и есть ли шанс это исправить

Как и в каждой подобной истории, путь мальчика был наполнен победами и поражениями, взлетами и падениями — в общем, стандартным набором развития. Совсем скоро Яше будет двадцать, но так как в таких случаях год идет за два — мы имеем дело с вполне состоявшимся мужчиной. И в честь приближающейся годовщины мы решили вспомнить все этапы его насыщенного жизненного пути.

Его первым словом было…

Родители Яндекса встретились в 1990 году, и поняли, что им вместе им суждено сделать что-то необычайное. Правда, как и большинство молодых людей, сначала создатели Яндекса решили пожить для себя: создавали разнообразные информационно-поисковые программы вроде поиска по Библии или поиска по Международному Классификатору изобретений. Говорят, что последняя даже весьма неплохо себя показала.

Поиск по Международному Классификатору изобретений не только принес семье неплохой доход, но и заставил задуматься о чем-то большем.

Немного семейного архива: вот они — родители нашего мальчика!

Одной из самых интересных семейных историй можно по праву считать историю о том, как будущему наследнику мечтательно придумывали имя.

Или не совсем мечтательно — скорее мучительно: ведь быть как все не хотелось. Неизвестно, сколько бы еще продолжался творческий процесс, если бы в один момент Илья Сегалович не увидел определенное очарование в сокращении фразы yet another indexer. Близкий друг семьи — Аркадий Волож решил поучаствовать в выборе имени, и предложил добавить немного патриотизма: заменить две первые английские буквы на одну русскую Я. Вот так ребенку придумали имя. Оставалось самое малое — сделать его. А вот на это ушло 4 года приготовлений, которые завершились успехом только в конце 1997 года.

Именно тогда (если совсем точно, то 23го сентября) на выставке Softool мир узнал о появлении поисковой системы Yandex.ru — и даже смог протестировать ее, не отходя от кассы. Тогда интернет мог похвастаться куда меньшим размером данных: в частности, весь рунет состоял из порядка 5 тысяч сайтов.

Яндекс был гениальным ребенком: не успел он толком родиться, как сразу мог ранжировать документы, понимал важность расстояния между словами и даже знал тонкости морфологии русского языка. В общем, когда люди подходили к нему с вопросом А кто тут у нас такой красивенький мальчик?, то получали четкий и вразумительный ответ. К слову, история даже сохранила фотокарточки, запечатлевшие этот прекрасный момент:

1997 год, торжество по случаю рождения Яндекса, ч.1

1997 год, торжество по случаю рождения Яндекса, ч.2

Развитие происходило стремительно: уже в 1998 году Яндекс обзавелся контекстным баннером, а два года спустя научился параллельному поиску, и даже стал по-настоящему помогать в хозяйстве: запустил такие сервисы как Почта, Новости, Закладки — и даже прототип будущего Яндекс.Маркет.

Первые шаги к самостоятельности

Подозреваем, что родители Яндекса не могли нарадоваться: он рос так стремительно, параллельно впитывая в себя все самое лучшее, что в него вложили.

Так, в 2001 году Яндекс создал свой первый бизнес — Директ, который только с момента старта помог ему собрать 2500 рекламодателей. Рискнем предположить, что именно это помогло Яндексу обзавестись собственным жилищем на Вавилова, 40. Самостоятельная жизнь — хороший стимул для творчества. Новые полезные сервисы продолжали появляться (например, прототип нынешних Словари), а старые — обновлялись и улучшились.

Вообще, если посмотреть на список достижений Яндекса, то он впечатляет:

• Оставить позади Рамблер, и это на 4м году существования;
• Полный выход на самоокупаемость на 5м году существования,
• Многочисленные образовательные/благотворительные проекты/программы/гранты начиная с 6го года существования;
• Создание своего рода инновации — метода машинного обучения Матрикснет, который (в теории) должен был изменить все;
• Создание CatBoost — второй инновации за историю компании. Вопрос в том, останется ли она такой же теоретической, как и первая

Но вернемся к вопросу о самоокупаемости. Всем известно, что Поисковики получают основную прибыль от размещения контекстной рекламы (вспомнить хотя бы как переполошился Гугл после знаменитых мартовских событий). Самоокупаемость Яндекса — это заслуга сервиса Яндекс.Директ.

Никто не спорит: зарабатывать — это хорошо. А хорошо зарабатывать — еще лучше. В 2008 году Яндекс находился на 9м месте среди всех поисковиков мира. А потом произошло что-то нехорошее.

Падение Вавилона

Вернемся на секундочку в 2005й год. Интернет, как мировое явление, стремительно набирал обороты. Количество ежедневных запросов, совершавшихся в Яндексе, превысило отметку в два миллиона, но качество поиска стало так же стремительно снижаться по банальнейшей из причин — чем больше в интернете сайтов, тем сложнее их контролировать. Для того, чтобы удержаться на плаву необходимо было срочно что-то предпринять.

Примерно в это время Яндекс перестает заниматься исключительно глупостями, и начинает серьезно подходить к вопросам ранжирования сайтов и созданию алгоритмов. В 2008 году Яша начинает открыто заявлять об использовании алгоритмов. А также — давать им имена, подробно описывать, и рассказывать про назначение.

Первым серьезным алгоритмом Яндекса можно считать Непот-фильтр — тот самый, который боролся с сомнительными ссылками. И вроде бы первые пару лет Яндекс активно боролся как с бесполезными сайтами, так и с SEO-продвижением. Множество сайтов значительно просели — и так и не выкарабкались, погребенные под тяжестью наказаний от поисковика. И, наверное, пессимизировать сайты Яндексу пришлось по душе. Иначе как объяснить то, что стало твориться потом? Логика наотрез отказывается участвовать в обсуждениях.

В теории, перед Яндексом стояло две первоочередные задачи: очистить выдачу от всяких глупостей (это первая) и предоставить пользователю сайты с максимально качественным контентом — причем не только технически уникальным, но и действительно полезным (это вторая).

Ради такого дела было внедрено множество алгоритмов. Все мы помним Портяночный фильтр,Ты — спамный, Баден-Баден и т.д. Ах,да. К моменту появления первого значительного фильтра за переоптимизацию сайта на дворе стоял 2010 год. Яндексу потребовалась 13 лет, чтобы ввести в обиход алгоритм из разряда must have. И, собственно, это и является основной проблемой Яндекса, о которой не пошутил только ленивый.

Нет, не выход отдельно взятого алгоритма. А скорость реакции.

Ау! Вы меня слышите?

Техническая поддержка Яндекса отвечает быстро. Это да.

Собственно, на этом вся скорость, которую может предоставить эта поисковая система, заканчивается.

Обращаться в техническую поддержку Яндекса в большинстве случаев — гиблая идея. Это будет приятный разговор с хорошо обученными людьми, но какой в этом толк, если сам поисковик ранжирует выдачу и применяет свои фильтры со скоростью улитки? В частности, после выхода Баден-Баден — и по сей день, в топ-10 Яндекс можно с легкостью встретить откровенно переоптимизированные тексты. Которые никак не должны быть в топ-10, учитывая то невероятное количество фильтров, под которое они должны были попасть.

Во времена выхода алгоритма Баден-Баден, мы писали:

Крупнейший поисковик постсоветского пространства, кажется, всерьез вознамерился оставить копирайтеров без хлеба. Да, все идет к тому, что пишущей братии пора убирать из резюме достижение знаю толк в SEO-текстах.

В своем блоге Яндекс уведомил веб-мастеров о том, что сайты, содержащие SEO-тексты, не выйдут из-под фильтра Баден-Баден никогда.

Мухаха.

Яндекс настаивает на том, что для всех сайтов, избавившихся от подобного рода текстов, ждало полное возвращение позиций (читай: поискового трафика). Не просто настаивает, а и красивую инфографику добавляет:

Казалось бы — живи и радуйся. Вот только все не так просто. Комментарии пользователей, уже ознакомившихся с этим чудесным обновлением, оставляют желать лучшего. Например:

То есть, главный вопрос: если ваш сайт радует глаз своей масштабностью, как понять, что именно не устроило алгоритм Баден-Баден?

То есть, главный вопрос — а изменилось ли что-то вообще?

Мы решили проверить. Простите автору любовь к сладкому — запрос звучал как Купить конфеты в Москве. И вот вам пример сайта, находящийся на 3й строке поисковой выдачи:

4 ключевика на 965 символов без пробела, с показателями в 38% заспамленности и 17% воды — это не очень хорошие показатели технической уникальности. Про смысловую и говорить не приходится — мне очень пригодилась информация про возможность совершить покупку в один клик, сидя в удобном кресле.

Мы видим, что многие вебмастера, получившие сообщение о нарушении, начинают менять содержимое страниц на своих сайтах — уменьшать количество ключевых слов, использовать другие семантические конструкции, экспериментировать с тегами разметки. Однако суть текстов при этом остается прежней — они написаны не для людей, а для поисковых роботов. А значит, соответствующее нарушение остается.

Окей, Яндекс.

Все прекрасно, кроме главного вопроса:

Почему текстовые портянки по-прежнему находятся в поисковой выдаче? И, раз уж так сложилось, то как расшифровать этот странный термин тексты для людей?…

К сожалению, мы с вами прекрасно знаем, что ничего особо не изменилось. Вот и пользователи Рунета продолжают посвящать Яндексу горячие признания:

Или вот:

В 2010 году Яндекс переходит на международный уровень, запустив англоязычную версию самого себя на домене com.

И это при том, что с 2007 года доля Яндекса в Рунете стала понемногу проседать. И хоть в 2008 году Яндекс еще входил в топ-10 поисковиков мира, а его ежедневная аудитория превысила отметку в 5 миллионов пользователей, печальную тенденцию уже было не остановить. с 2007 года страдает от заметного снижения поисковой доли в Рунете — то есть, на своей территории. Получает ее, конечно же, Гугл. Так же стремительно, как Яндекс теряет.

Если смотреть на цифры, то картина такова: в Рунете доля Яндекса снизилась с 60% до 51,99%. И это в то время, как доля Гугл выросла до практически 27%. И это с 5%.

Владислав Дорофеев в своей книге Яндекс. История создания компании мечты пишет:

За год американский поисковик увеличил свою долю на рынке поиска в Рунете более чем в четыре раза.Самоуверенные руководители „Яндекса“, еще в 2006 ернический шутившие насчет возможности „черной руки“ Гугл в Рунете, были посрамлены. Бит был и Рамблер, который, потеряв около 15-20%, впервые с 1996 года откатился на третью позицию.Началось многолетнее противостояние Гугл и Яндекс в России.

Отсутствие развития в Яндексе обусловлено еще несколькими важными моментами:

• Яндекс упустил период перерождения интернета: т.е. появление социальных сетей, и, как следствие, приход в Интернет простых людей. Интернет стал не только бизнес-пространством или средством для поиска информации, но и развлекательным мероприятием.
• С 2005 года у Яндекса начались проблемы с технически квалифицированным персоналом(всех переманил Павел Дуров?), который был бы способен разрабатывать новые продукты и технологии. Частично это вина самого Яндекса: известно, что при приеме на работу в компанию человеческие качества сотрудника ценились намного выше, чем его опыт и умения. Из серии наш человек или не наш.
• Отсутствие духа конкуренции: как только Гугл появился в России — его доля в Рунете была смешной. Так продолжалась несколько лет. В результате чего Яндекс перестал воспринимать Гугл как конкурента — а потому и проиграл.

Через несколько лет Яндекс частично вернет себе доверие пользователей: доля поисковика в Рунете снова составит 57%, а в 2011м даже вырастет до 64%. Так будет продолжаться до 2017 го: с января показатели Яндекса стали снижаться, и на данный момент замерли в районе 52%.

… В конце статьи обычно принято делать выводы.

Что-то вроде а сейчас мы поговорим про чудесное спасение — т.е. расскажем в пяти строчках как решить ту огромную проблему, которую мы до этого полчаса расписывали.

Мы бы рады, но на этот раз магия не сработает.

Похоже, единственный путь быть по-настоящему замеченным Яндексом — это размещать рекламу в Директе. Что неудивительно — ведь мы помним про то, что хорошо зарабатывать — это хорошо.

Кажется, что Яндекс попал в замкнутый круг: отсутствие движения поисковой выдаче в техническом плане из-за нехватки специалистов, как следствие — падение доли в поисковом рынке, потеря дохода — и попытка этот доход возобновить, заставив пользователей размещать рекламу через Директ.

Можно надеяться на то, что в корпорацию все-таки попала молодая кровь, и CatBoost не просто так создавался.

Хотя, да простят мне мой цинизм, нет никакого толка от литров молодой крови, если на главных руководящих должностях по-прежнему сидят клещи.

Если вы хотите быть в курсе последних новостей, подписывайтесь на нас на Спарке, ВКонтакте, на Фейсбуке, в Telegram.