Все записи в категории 'Поисковые машины'

Государственного поисковика не будет

Кремль отказался от идеи создать Государственную поисковую систему

Кремль отказался от идеи создать Государственную поисковую систему

«Ведомости» пишут:

Государство не будет финансировать создание национальной поисковой машины — конкурента Яндекса или Google, но поддержит разработку российской операционной системы — конкурента Windows

выпуск за 27 октября

А жаль 🙁

Эту информацию они почерпнули из полученной ими копии проекта федеральной целевой программы «Информационное общество», разработанного Минкомсвязи и одобренного президиумом правительства в конце сентября. В проекте остался толькопоисковик для ведомственных нужд, с помощью которого чиновники будут искать документы в министерских базах данных, а остальные пользователи — находить нужные документы на сайтах госорганизаций. В 2011 г. разработчики ФЦП рассчитывают получить под этот поисковик из бюджета 150 млн руб., а в 2011-2013 гг. — еще 470 млн руб.

О государственном поисковике заговорили весной этого года, когда сотрудники Яндекса, Mail.ru и Rambler стали получать от некой структуры предложения о переходе на работу в этот проект.

Что ж, будем и дальше жить с монополистом.


Яндексу невтерпеж сделать государственный поисковик

Яндекс играет на опережение — госпоисковик может появиться без участия государства

Технический директор Яндекса И.Сегалович часто фотографируется в экстравагантных нарядах

Технический директор Яндекса И.Сегалович часто фотографируется в экстравагантных нарядах

Как обычно, Яндекс идет по пути, проложенному Google. Подобно тому, как Google создал отдельную страницу только для поиска по государственным сайтам, Яндекс анонсировал создание поиска по сайтам гос. органов.

Об этом сообщил Илья Сегалович — технический директор компании Яндекс.

«Объем контента на государственных сайтах заметно растет. Есть смысл заниматься отдельным поисковиком, работающим именно с государственным сегментом», — сообщил он. В качестве удачного примера поиска по государственному сегменту Сегалович привел американский Google: «Это удобный сервис и я бы хотел, чтобы в России было что-то похожее». Сам «Яндекс» готов сотрудничать с государством в части консультирования и экспертной поддержки.

В США у Google, действительно, работает US Government Search (с неформальным названием UncleSam). На этой специальной странице выдается результат поиска только по американским правительственным сайтам. В выдачу попадают, например, сайты Белого дома, космического агентства NASA, Государственного департамента, Федеральной избирательной комиссии и в таком же духе.

Напомню, что сообщения о начале создания государственной поисковой машины появились этим летом. Тогда сообщали, что разработка госпоисковика должна обойтись в 3,3 млрд руб. По тем же госпланам, госпоисковик должен быть введен в работу в конце 2011 г. Поисковик будет создан за счет государственного финансирования, и должен работать под государственным контролем.

Ни один из существующих поисковиков не подошел на роль государственного. В частности, Яндекс, был признан не годящимся на эту роль из-за того, что имеет голландского акционера.

Это новое заявление Яндекса можно рассматривать как игру на опережение в предстоящей конкурентной борьбе с новой поисковой машиной.

Punto Switcher — шпионит за своими пользователями в пользу Яндекса

Зачем это нужно? Какая информация о нас нужна Яндексу?

Обнаружен несанкционированный сбор информации Яндексом

Обнаружено, что Punto Switcher передает в Яндекс данные без ведома пользователя. передача данных

Обнаружено, что Punto Switcher передает в Яндекс данные без ведома пользователя

В интернете опубликована статья о том, что распространяемая Яндексом программа Punto Switcher передает на сервера Яндекса данные о своих пользователях и о конфигурации их компьютера. Сервер Яндекса возвращает в ответ текст «Ok».

Punto Switcher — очень популярный и удобный клавиатурный переключатель. Если вы забыли переключить разкладку клавиатуры и набираете что-то типа цццюзкщырштюкг, то он это заметит, сам переключит раскладку и автоматически заменит текст на www.proshin.ru. Это очень удобно, сам  пользуюсь.

У программы есть несколько побочных функций. Например, «дневник» — запись в один файл всего, что набиралось на клавиатуре. Эта функция по умолчанию выключена. До недавнего времени была еще функция передачи разработчику закладок браузера — для сбора статистики. Программа при установке просила подтверждение этой функции. Т.е., в принципе, в программе всегда были реализованы функции, необходимые для программы-шпиона.

Сейчас подобные шпионские функции зачем-то задействовал владелец программы Яндекс. Делается это якобы для запроса обновлений. Сейчас в Яндекс передается информация о версии операционной системы. Но если пользователь при установке отказывается от обновлений, данные все равно передаются. Мало того, данные продолжают передаваться даже после деинсталляции программы, т.к. для этого используются средства самой операционной системы Windows.

Реализовано это так, что штатными средствами такую утечку данных определить практически невозможно!

Особо бдительные пользователи забили тревогу, сегодня Яндекс отдает ответ ОК, а завтра может запросить конфиденциальную информацию, хранящуюся на компьютере пользователя (закладки, пароли и т.п.). И Switcher может выполнить эту команду.

Автор этого наблюдения разместил на страничке программы Пунто Свитчер  (на сайте Яндекса) описание этого поведения  и задал вопросы:

— зачем понадобилось закладывать это поведение в Свитчер?

— что еще, кроме собственно Свитчера, устанавливается в систему?

— какие данные вы запрашиваете и передаете в Яндекс?

С сайта Яндекса эта информация была удалена через несколько минут. Поэтому можно понять, что такая работа программы, скорее всего, была не случайной ошибкой, а специально заложена в нее.

Почему же Punto Switcher собирает информацию о пользователях и отсылает ее в Яндекс без ведома пользователя?

У меня по этому поводу есть предположения. Несколько лет назад Яндекс сообщал об экспериментах по поведенческому ранжированию результатов поиска.

Напомню, что широко известны два вида ранжирования поисковой выдачивнутреннее (оценивающее релевантность сайта запросу) и ссылочное (в зависимости от ссылок на сайт). Ссылочное ранжирование появилось в результате признания того, что современные поисковые машины не могут сами определить ценность сайта и вынужденны использовать оценку пользователей. За оценку сайта принимается количество внешних ссылок на сайт — чем больше, тем сайт признается ценнее. Знание правил ранжирования и манипулирование ими лежит в основе SEO — поискового продвижения сайтов.

Речь идет о новом виде ранжирования результатов поиска — поведенческом. В качестве оценки принимается поведение пользователя на сайте, на который он перешел. Если по поведению пользователя будет понятно, что сайт его не удовлетворил, то оценка сайта будет понижаться. Если пользователь зачитался сайтом или загружает с него много данных, то этот сайт должен получить высокую оценку.

Вот только, как Яндекс может получить, информацию о том, что делал пользователь на сайте? Ведь пользователь после поиска покинул поисковую машину и его браузер больше не обменивается с нею информацией. Т.е. Яндекс нуждается в источниках информации о том, что делает человек на различных сайтах, особенно после поиска.

Сейчас есть разнообразные данные о том, что алгоритмы поведенческого ранжирования уже реализованы Яндексом, хотя официального заявления об их использовании не было. В качестве источников данных о поведении пользователей почти наверняка используются:

  • счетчик Яндекс Метрика, установленный на оцениваемом сайте самим его хозяином для учета посещаемости
  • плагин Яндекс Бар, который сейчас получил очень широкое распространение у пользователей
  • и вот теперь мы видим, что для этой цели может быть привлечен клавиатурный переключатель Punto Switcher.

В ближайшее время я напишу подробнее о том, что известно про поведенческое ранжирование, и какие есть данные о его реализации в алгоритмах поиска Яндекса.


Rambler может заменить свою поисковую машину на Яндекс или Google

Rambler может отказаться от собственного поиска

Rambler может отказаться от собственного поиска

РБК daily сообщает, что Рамблер подыскивает новый движок для своего поиска, т.к. собирается отказаться от своего собственного. Он рассматривает возможность заключить партнер­ское соглашение с Яндексом или Google.

Решение о замене движка продиктовано тем, что после объединения с Афишей Rambler «полностью перейдет в развлекательную плоскость», а собственный поиск поддерживать в такой ситуации «не имеет смысла». Об объединении стало известно в прошлом месяце. Тогда же вместо Ольги Турищевой на пост генерального директора компании был назначен руководитель «Афиши» Николай Молибог.

Директор по связям с общественностью компании Rambler Константин Воронцов не дает официальных комментариев этого известия, говоря, что новая команда только начинает работу и пока ничего конкретного по судьбе собственной поисковой машины не решила.

В Яндексе говорят, что начинали переговоры о поисковом движке в начале года, но эти переговоры ничем не завершились. Представители Google от официальных комментариев отказались.

Аналогичное решение недавно приняла американская компания Yahoo!, которая заменила свой поисковый движок на поисковую машину, разработанную компанией Microsoft.

Напомню, что доля Rambler на рынке поисковых машин за последние 2,5 года сократилась с 14,9 до 2,5%.

Яндекс обвиняют в незаконном отказе индексировать сайты

Обычно, Яндекс не аргументирует отказ от индексации. Но в данном случае объяснять все-таки придется.

Обычно, Яндекс не аргументирует отказ от индексации. Но в данном случае объяснять все-таки придется.

Я уже несколько раз писал о судебных исках к компании Google, выдвинутых на западе. Вот аналогичная история случилась и у нас в России с Яндексом. Это цитата из вчерашнего номера газеты Коммерсант:

Завод GT7, занимающийся производством газового и нефтехимического оборудования судится с крупнейшим российским интернет-поисковиком «Яндекс», утверждая, что тот незаконно отказался включить в свою поисковую систему четыре его сайта. В результате GT7 пришлось прибегнуть к платным услугам — размещению контекстной рекламы в системе «Яндекс.Директ». Сайты завода (Polymerprom.ru, Agzs.ru, Kuzpolymer.ru и Tdkpm.ru) — поисковый спам, уверяет «Яндекс».

Истец уточняет, что между ним и «Яндексом» должны были возникнуть правоотношения, регулируемые ст. 428 Гражданского кодекса. То есть между сторонами имеет место договор присоединения, так как «Яндекс» располагает поисковой системой, к которой путем регистрации присоединяются все желающие. Истец считает, что, произведя регистрацию в системе, он выполнил условия для заключения публичного договора с «Яндексом», но последний уклоняется от этого, то есть не индексирует сайты.

GT7 обращается к суду с требованием обязать «Яндекс» проиндексировать все свои сайты.

На мой взгляд, сами по себе сайты газовой компании ни чем особым не примечательны для пользователя, дизайном не блещут, о их полезности смогут судить только специалисты газовики и нефтяники.

По данным «Яндекса» на осень 2009 года, в рунете было около 15 млн сайтов, что составляет 6,5% от всего интернета. При этом четверть сайтов рунета Яндекс оценивает как поисковый спам.

Не только у этой, но и у многих других организаций есть претензии к Яндексу за сомнительную аргументацию отказа индексировать их сайты. Попадал в эту ситуацию и я. Обычно, Яндекс, на такие вопросы не отвечает или отвечает письмом робота — его сотрудники не опускаются до разговоров с владельцами отвергнутых сайтов.

Когда же после нескольких настойчивых требований, мне ответил сотрудник Яндекса, то он, по заведенному Яндексом обыкновению, подписывал свои письма псевдонимом «Платон Щукин», т.е. фактически отсылал мне анонимки. Такое неуважение к миллионам создателей сайтов, конечно, не добавляет авторитета Яндексу. Ему это сходит с рук только благодаря монопольному доминированию в нашей стране.

В данном случае, аргументировать отказ от индексации, видимо, Яндксу все-таки придется, и отвечать надо будет открыто, не прикрываясь анонимами. Юристы подобных судебных разбирательств в России не припомнят. Этим, собственно, данный факт особенно интересен.  Хотелось бы, чтобы данный опыт научил Яндекс относиться с бОльшим уважением к создателям сайтов.


Пора установить государственный контроль над монополией Google

Монополия Google на поиск заставляет думать о госконтроле

Монополия Google на поиск заставляет думать о госконтроле

Недавно один из представителей Google в газете Financial Times признал участие людей в ранжировании результатов. Несколько крупных фирм уже обратились с жалобами на Google в антимонопольную службу — они допускают, что участие человеческого фактора в ранжировании делает поиск «необъктивным», тем более что правила работы этих «живых ботов» засекречены.

В случае российского «Яндекса» участие биороботов в ранжировании результатов поиска уже широко известно (Яндекс их называет «ассессорами», и как они работают, Яндекс тоже скрывает).

На Западе такое известие о Google вызвало живой отклик. Газета The New York Times предложила американским властям взять контроль над работой корпорации Google.

В публикации  «The Google Algorithm» утверждается, что государству необходимо начать следить за тем, каким образом поисковая система фильтрует и обрабатывает поисковые запросы. По мнению авторов статьи, влияние Google на бизнес стало настолько серьезным, что поисковик превратился в ворота Интернета для пользователей сети. При этом из-за смены алгоритмов и других нововведений, людские потоки кардинально меняются. Т.е. от результатов выдачи зависит,  какие ресурсы будут посещать пользователи. Именно поэтому за Google нужен глаз да глаз.

Выражая заботу о корпорации Google, на которую возложена огромная ответственность, журналисты высказывают некоторые сомнения относительно механизма получения результатов поисковой выдачи и считают, что фильтрация и обработка поисковых запросов в современных условиях должна находиться под государственным контролем.

Строительство нового национального поиска набирает ход

В России будет создан поисковик, который составит конкуренцию Яндексу

Этот проект широко обсуждается в прессе и обрастает слухами с марта этого года. Он нем пишут все издания от «РБК-daily» и «Ведомостей» до желтых газет.

Поисковик будет построен в рамках государственной программы «Электронная Россия» и развития электронного правительства. В рамках этих программ будет создан единый портал государственных услуг. Предполагается, что на нем граждане, организации и бизнес смогут получить большинство государственных услуг. Портал уже заработал в декабре 2009 года, но на данном этапе он пока функционирует просто как единый государственный справочник. Возможно, новая поисковая машина будет работать на этом портале.

В России будет создана национальная поисковая система

В России будет создана национальная поисковая система

Новая поисковая система обеспечит доступ пользователей только к проверенной и безопасной информации. Сайты с запрещенным контентом будут блокироваться. Новая система будет отличаться от существующих в рунете поисковиков тем, что будет более ориентированной на государственные нужды.

Ещё одно серьёзное отличие — в создании новой системы смогут принимать участие только российские инвесторы. Таким образом власть надеется получить относительно контролируемый поисковик с лояльными владельцами. Возможность создания подобного поисковика обсуждается с конца 2009 года. Со стороны правительства тему ведет управление внутренней политики, которое курирует Вячеслав Сурков, а также подключено Минкомсвязи.

В качестве альтернативы созданию совершенно нового поисковика рассматривалось приобретение Rambler — как уже действующего на рынке успешного игрока с российскими акционерами. Яндекс из этого рассмотрения выпал сразу, т.к. акционер Яндекса — голландская Yandex N.V. Но в итоге от идеи приобретения отказались и систему было решено создавать с нуля.

Это подтверждают все более заметные усилия рекрутингового агентства Arthur Hunt по набору специалистов в области поиска и лингвистики. От этого агентства уже поступили приглашения участникам разработки поисковых алгоритмов всех известных отечественных  поисковиков, в том числе Яндекса, Рамблера и Mail.ru. Пригласительные письма содержат указание на небывалую масштабность и амбициозность проекта. Бюджет проекта около 100 млн. долл., а заработать он должен в 2011 году.

Российским пользователям интернета, а также владельцам сайтов объективно будет полезно создание сильной альтернативы Яндексу, который сейчас приближается к монопольному владению поиском. Яндекс пока набрал примерно 60% доли поисковых запросов в рунете, но уже в полной мере проявляет признаки болезни монополиста, которые выражаются во все большем навязывании пользователям своих представлений о правильных результатах поиска. При этом в расчет идут в первую очередь интересы самого Яндекса, а удовлетворенность пользователей отходит на задний план.

BP выкупила у поисковых машин ключевые слова о разливе нефти

Geenpeace-BP-Rebranding-Contest-04

BP купила права на поисковые запросы о разливе нефти

Насколько понимаю, это, возможно, первый прецедент.

Британская нефтегазовая компания British Petroleum, деятельность которой привела к тяжелым последствиям из-за утечки нефти в Мексиканском заливе, приобрела у поисковых систем Google и Yahoo права на словосочетания, связанные с разливом нефти.

В том числе BP купила права на поисковые запросы «oil spill» («разлив нефти»), «oil spill claims» и другие. По запросу «oil spill» поисковики Google и Yahoo выдавали на первом месте ссылку на сайт BP с материалом «Gulf of Mexico response» — на этой странице описываются действия нефтяного гиганта по ликвидации пятна.

Этими действиями BP, которую сейчас не ругает только немой, пытается улучшить свой сильно пострадавший имидж.

Для нас, заказчиков, услуг продвижения, да и для всех пользователей поисковых машин важен прецедент.

Во-первых, впервые признается, что продаются первые позиции в выдаче поисковых машин. Гугл и раньше подозревали в манипуляциях поисковой выдачей, но во всеуслышание это говорится впервые.

Во-вторых, признается, что поисковые машины могут делать фильтрацию за деньги. Ведь этими действиями BP увеличивает количество удобной ей информации и выдавливает из выдачи ту информацию, которая ее не устраивает. Т.е. BP контролирует содержание поисковой выдачи.

Многие считают, что такими действиями BP может не улучшить свой пострадавший имидж, а навредит ему еще больше. Лично я сам пытался  посмотреть выдачу Google по этим поисковым словам, но сайта BP я в ней не увидел. Возможно, в BP быстро одумались и отказались от использования такого способа воздействия на пользователей интернета.

Информацию об этом событии опубликовало авторитетное  интернет-издание C-News почему-то без ссылки на источники: http://internet.cnews.ru/news/top/index.shtml?2010/06/09/395223

Сравнение эффективности популярных способов продвижения сайта

Я подготовил статью о сравнении наиболее часто используемых способов продвижения сайта: поискового продвижения, медийной (баннерной) рекламы и контекстной рекламы. Эти способы продвижения я сравнивал по их эффективности, выражаемой средней стоимостью одного привлеченного посетителя.

Сравнение сделано по результатам моего опыта продвижения в 2009-2010 годах. Поисковое продвижение — 6 проектов, медийная реклама — 2 проекта, контекстная реклама — 8 проектов. Часть проектов я выполнял сам, часть была заказана сторонним исполнителям.

Большинство этих проектов относится к тематике международных перевозок грузов и таможенного оформления. Понятно, что в других тематиках стоимость привлечения одного посетителя будет другая, но соотношения между различными видами продвижения должно сохраняться.

В результате я делаю выводы о том, какой способ продвижения выгоднее. Самых дешевых посетителей дает контекстная реклама. Но ее эффективность сильно зависит от качества управления. Если контекстной рекламой управляет неопытный человек, то цена посетителя оказывается дороже, чем при поисковом продвижении.

Поисковое продвижение требует долговременных затрат, и начинает приносить результаты только через пять-шесть месяцев. В 2009 году сильно выросла конкуренция в поисковом продвижении. поэтому большая часть проектов заканчивается частичным или полным разочарованием — продвигаемый сайт выходит в том не по всем ключевым словам.

Медийная реклама при пересчете в стоимость одного посетителя оказалась самым дорогим способом продвижения, но некоторые решения в управлении баннерной рекламой  позволяют существенно снизить стоимость посетителя. Тогда медийная реклама может быть не сравнима по эффективности с поисковым продвижением. Если помнить про очевидный, но плохо измеряемый имиджевый эффект от баннерной рекламы, то ее результативность не ниже, чем у поискового продвижения.

Словом, читайте статью о сравнении способов продвижения сайтов.

По весне - сравнение способов продвижения сайтов

Очень красивый весенний вид - чтобы отвлечься от сравнения способов продвижения сайтов

Рынок поискового продвижения в 2009 году

Объемы рынка поискового продвижения по годам

Объемы рынка поискового продвижения по годам

«ВебПроекты» совместно с компанией «Ашманов и Партнеры» выполнили исследование рынка услуг поискового продвижения за 2009 год и прогноз на 2010, и опубликовали результаты на сайте webprojects.ru.

За прошлый год объемы предоставленных SEO услуг составили 300 млн. долл. и выросли на 40% по сравнению с 2008 (216 млн.). На 2010 год прогнозируется рост до 390 млн. долл.

В кризисный прошедший год это самый лучший показатель динамики из всех видов рекламы. Напомню, что весь рынок маркетинговых коммуникаций в 2009 году сократился на 30%. Кроме SEO росла только контекстная реклама (рост на 11%). Медийная реклама в интернете (всевозможные виды баннеров) удержала свои позиции, что тоже неплохо. Произошло перераспределение приоритетов в области рекламы в пользу онлайн бюджетов.

Что это означает для владельцев сайтов?

На конец 2009 года я являлся заказчиком услуг продвижения сразу у нескольких компаний (три проекта). Специально было выбрано несколько питерских компаний, чтобы минимизировать риски в этом плохо предсказуемом процессе. Еще несколько сайтов я продвигаю сам путем покупки ссылок, размещением статей и ведением блогов.

Как заказчик услуг я обнаружил, что уважаемые SEO компании во второй половине года перестали справляться со своими обязательствами. Два проекта закончились поражением, третий проект завершился частичным успехом (в топ 10 Яндекса вышло чуть больше половины продвигаемых сочетаний). Не буду называть эти компании, проблема не столько в них, сколько в возросшей конкуренции. Рост рынка SEO на 40% — не шутка.

Те проекты, которые я продвигаю сам, а их сейчас три, идут с ограниченным успехом. Во всех трех был достигнут хороший результат в Google и в Рамблере. В Яндексе хорошие результаты показывает только один сайт, два других вышли в топ не более, чем по 2/3 сочетаний. Очевидно, надо увеличивать ссылочный бюджет.

Рост рынка — это рост числа продвигаемых сайтов. А мест в выдаче Яндекса по-прежнему только 10. Т.е. существенно выросла конкуренция между сайтами. Введение Яндексом в прошлом году региональных выдач могло решить проблему только в регионах, да и решило ли? Больше половины сайтов продвигается по московской и питерской выдаче. Это означает, что цены на продвижение растут — по крайней мере у тех, кто реально может добиваться успеха в поисковой оптимизации. Пока это выражается не в росте месячной платы, а в том, что теперь типовой договор на продвижение подписывается на пол года, а раньше для достижения результата было достаточно платить три-пять месяцев. Также вырастают и риски того, что деньги на продвижение будут потрачены впустую.

Словом, думайте о контекстной рекламе.

Что это означает для пользователей интернета?

Это означает, что мы опять попали в период, когда в Яндексе невозможно ничего найти, кроме торговой рекламы.

К примеру, на днях я искал методику выполнения восстановительного массажа и анатомичекий атлас человека. По этим запросам на первых трех страницах Яндекса предлагают мед. услуги, SPA салоны, парфюмерные средства и платные курсы — ничего полезного для того, кто не собирается тратить деньги. Книгу о массаже я нашел, только перескочив наугад примерно на восьмую-десятую страницу выдачи.

Такое низкое качество результатов поиска было на моей памяти только в начале нулевых, когда Яндекс совсем не умел бороться с поисковым спамом. Тогда я выработал этот прием — перескакивать сразу в глубь результатов.

Тогда проблема была решена введением ссылочного ранжирования. Сейчас таких сильных идей нет. Но сегодняшний Яндекс это мало беспокоит. Для него поиск — место показа контекстной рекламы. На этом он прилично зарабатывает. А в поиске он сейчас монополист, пользователям придется мериться с плохим качеством или использовать другие поисковые машины.

Поэтому пользователям я бы теперь рекомендовал пользоваться не Яндексом, а хотя бы Гуглом. Поиск Mail.ru сейчас не находится под SEO прессингом, но, к сожалению, и ищет не хорошо. За последнее время Рамблер значительно улучшил полноту своих индексов, так что теперь его опять можно рекомендовать для повседневного использования.