Политическая забастовка роботов

[taki_net]

Интересные вещи творятся с гуглеванием пресловутого письма визенталевского директора украинскому послу (я гуглевал на фразу who collaborated with the Nazis in the early stages of World War II, and whose followers were linked to the murders of thousands of Jews and others).

Если просить ТОЧНОЕ значение, выдается несколько (два-три) сайта, среди них НИА Новости и англоязычный ЖЖ. Визенталь не выдается.

Если просить режим по умолчанию (все слова, но в любом порядке), выдается много русских ЖЖ, а также американская (в Далласе) газета, которая, в свою очередь, ссылается на RIA Novosti.

Если указать "на сайте wiesenthal.com", находится несколько похожих документов, но не этот. Поиск на самом сайте Визенталя не находит этот документ вообще никак, хотя вот он - в разделе News за 29 число.

Интересно, почему как только политически острый вопрос - поисковые машины бастуют?

Comments

[oude-rus.livejournal.com]

такое, в принципе, случается, когда документ исходит в пятницу и его банально не успевают вбить в базу данных. надо подождать до понедельника.

[oude-rus.livejournal.com]

Вот, пожалуйста: http://www.wiesenthal.com/site/apps/nlnet/content2.aspx?c=lsKWLbPJLnF&b=4441467&ct=7922775

[taki-net.livejournal.com]

К чему Вы это? У меня ясно сказано, что я его на сайте нашел (глазами, без поисковой машины).

[oude-rus.livejournal.com]

a, теперь понял.

[nickgrigoriev.livejournal.com]

Если роботы Гугля будут обходить все сайты по нескольку раз в день - не поздоровится ни хостингам, ни провайдерам. Скорее всего, Визенталя обходят не каждый день - в отличие от сайтов новостных агентств и ЖЖ, контент которых Гугл получает в реалтайме через RSS и индексирует практически мгновенно. Давай подождем еще день-два: если на эту новость на wiesenthal.com будут ставить ссылки, она довольно быстро попадет в очередь на переобход и появится в выдаче.

P.S. У Яндекса в выдаче по твоему запросу wiesenthal.com уже есть - на этот раз наши роботы оказались пошустрее :-)

[taki-net.livejournal.com]

Ха. Мой собственный постинг с вхождением этих слов (не этот, а другой), провисевший в открытом доступе 30 секунд, убранный под глазик, а еще через 2 минуты удаленный - выдается (через 9 часов!), а двое суток назад выложенная на Визенталя новость - фиг.

[nickgrigoriev.livejournal.com]

Алик, я ж говорю - Гугл индексирует RSS-фид из ЖЖ. Как только ты создал постинг, ЖЖ сразу сообщает об этом подписчикам RSS-канала, в том числе Гуглу. Визенталь, как ты понимаешь, этого не делает, и тут уж Гуглу приходится изгаляться - как бы и свежесть обеспечить, и Визенталя не задолбать вусмерть.

[taki-net.livejournal.com]

ПОЛНЫЙ фид? Да, этого я не подумал.

[groben.livejournal.com]

Кто б сомневался в оных роботах. Уж больно новость-то удобная.

[timofeikoryakin.livejournal.com]

У Гугля и предыдущая новость с wiesenthal.com ещё не проиндексирована, только за 26е...

[original-ivan.livejournal.com]

Cui prodest? Мотив то у кого?

[taki-net.livejournal.com]

Вроде никакого мотива, и вообще умысла, просто интересно оказывается вся эта интернет-машинерия устроена, в ряде мест неинтуитивно.

[lz.livejournal.com]

Все просто, поисковые роботы оценивают сайты на предмет необходимой частоты переиндексации по главной странице сайта. Поэтому любой специалист по созданию сайтов знает, что новости должны быть видны на главной странице, иначе переиндексация может происходить достаточно редко.