Ну что, вот у нас и заканчивается второй день ёпта 
И так на сегодня что мы имеем — у нас на ГСе и ДОРе есть проиндексины морды, одна у ГСа и одна у ДОРа. Да, я знаю что это быстробот постарался и это ничего не значит, но это всё же лучше чем ничего. К сожелению в гуглемы пока что в выдачу не попали, но всё со временем.
Теперь отчет по ботам:
ГС:
«Yandex/1.01.001 (I)» — побывал 15 раз, зохавал 1 sitemap.xml, главную страничку и 2 страницы внутряка , обращался к «/» (главной странице) и к robots.txt . В общем уже хорошо что хоть хавает их
«Googlebot/2.1» — как и вчера, поять к нам не пришел, обидно, ждем его завтра в гости.
«Леваки (Другие боты)» — нет.
ДОР:
«Yandex/1.01.001 (I)» — побывал 19 раз, из них к robots.txt обратился 5 раз, к главной обратился 4 раза и схавал внутряки в размере 10 штук. Что же, лучше чем вчера, так что ждем ещё его в гости и просим что бы он дал жару в АП и засунул этот дор в индекс.
«Googlebot/2.1» — хм... пришел, глянул в роботс.txt что ему можно похавать, потом обратился к sitemap.xml, та ему ответила байном (304 код), он пришел опять через 10 часов и опять получил 304 в лоб. В общем надо ему подспамить страничек.
«Леваки (Другие боты)» — Пришел суровый StackRambler/2.0 и как я говорил, он начал тупо хавать всё что можно Правда пришел он только под ночь, т.е. час назад и пока что захавал 35 страниц. В общем желаю ему удачи 
Эх работал бы яндекс и гугл как рамблер, ну в плане индексации, пизда была бы серпу)) Что бы можно было проиндекситься в один АП полностью, даже не смотря на то что бы дорвей и ещё и попадать в ТОП Было бы пиздато
Тогда бы яндекс был бы яндексом:) хороший эксперимент, бум следить.
Автор: HoldFast дата: июля 23, 2009