Нет, все-таки есть кто-то там наверху…

Какая-то сволочь в Яндексе, которая может взять и вычистить из базы 2 домена с точностью до страницы. А именно, все страницы. Абсолютно чистых и правильных доменов.

Добавил по-новой. Паук ходит, индексирует. Но время-деньги-вопрос кому эти деньги? 🙂

Если вы не параноик, это еще не значит, что за вами не следят. 🙂

Нет, все-таки есть кто-то там наверху…: 36 комментариев

  1. У нас такое тоже было c одним порталом
    Домен www.***.ru выпал подчистую из основного поиска. Однако домен forum.***.ru был на месте. В поисках по картинкам – и www находится. На письма в суппорт – молчок. В следующий апдейт все появилось в базе.

    Что-то у них там все время вылетает. К выпадению морд все уже давно привыкли, как к утреннему дождичку – неприятно, но пройдет. А вот. чтоб домен целиком выпадал (без бана) – это я видел впервые

  2. Seventh Son, прикол опять-же в том. что тЫЦ на тех сайтах был 275 и 180. Т.е., и не очень большой, и не накрученный. 🙂 Но трафа там было хорошо.
    Подождем апдейта, на самом деле. Так впечатление такое, что робот штатно ходит по выброшенным доменам, без фанатизма. Авось действительно все восстановится.

  3. Ну у нас все восстановилось нормально. Думаю, что с этими сайтами будет то же самое.

  4. Когда ситуация прояснится – сообщите плз результаты.
    Интересно чем дело закончится.

  5. у меня такое было, раза два .. последний раз месяца полтора назад, правда с новым ресурсом.. 1) сначала появился в выдаче… и за 2 недели подняли траф доя 40-50 в день, 2) через 2-3 недели сайт подчистую вылетел и появился лишь недели через 2-3 …

  6. аналогично, мысли такие что у Яндекса один (ли?) кластер (у меня в него попала тройка доменов 😉 ) 9 числа просто банально не отвечала ни на какие запросы … при этом робот-индексатор исправно шарил и брал новые дстраницы … по 200 -500 страниц в день … в последний апдейт (в понедельник) документы при поиске по домену появились … по названию сайт до сих пор нет … и по сильным запросам свалился … жду апдейта 😉

  7. Сегодня другой сайт поонстью вылетел из основного поиска. В поисках по картинкам он есть Т.е. те же симптомы. Гриш, у тебя домены вернулись?

  8. у меня возвращалось через 2-3 недели ..

    где-то через 2 недели появлялись пару страниц (2-12), еще через неделю – две появлялся весь сайт..

  9. Жень, а что Вам еще остается то 😉
    или собирайтесь в кучу и идите разбирайтесь с яндексом 😀

  10. Есть подозрение, что выпадение доменов – результат глючной обработки диретивы Host в robots.txt
    Типа, по какой-то причине назначается главным зеркалом не то, что указано в этой директиве, потом исполняется директива и зеркало выносится.

    Использовалась ли у вас в выпавших доменах эта директива?

  11. За эту ночь – утро Яндекс забрал 5000 страниц с обоих доменов, что примерно соотвествует их общему объему.
    Чую, что-то грядет 🙂

  12. Значит, не оно.
    Просто у нас в последнем случае при попытке добавить сайт, Яндекс пишет, что он зеркало другого и просит добавить это зеркало. А зеркало это запрещено директивой Host.

  13. Разобрались в чём дело в данном конкретном случае. Действительно виновата директива Host.

    В файле robots.txt была допущена ошибка. Он выглядел так:

    User-Agent: *
    Host: http://www.site.ru

    Т.е. без директивы Dissalow. Между тем, в стандарте для robots.txt говорится, что в каждом блоке должна быть по крайней одна директива Disallow.
    Похоже, разные программы в Яндексе интерпретируют такой некорректный robots.txt по-разному. Так, напимер, сервис Яндекса по проверке robots.txt http://www.yandex.ru/cgi-bin/test-robots считает, что файл корректный и запрещает к индексайии все зеркала, кроме http://www.site.ru
    Робот-зеркальщик H, считает, видимо по-другому (разные люди писали?) и главным назначил второстепенное зеркало http://www.site1.ru, о чем и говорится при попыке добавить в индекс домен http://www.site.ru
    Робот-индексатор I, видимо, как и сервис Яндекса по проверке robots.txt, считает, что файл корректный и выкинул сайт http://www.site1.ru из индекса.
    В общем, бардак. Получается, Яндекс не соблюдает стандарт файла robots.txt, т.к. все его службы юолжны были проигнорировать файл, как некорректный. Косвенное подтверждение этому есть в помощи яндекса http://www.yandex.ru/info/webmaster2.html , где есть такой пример:

    "Таким образом, файлы robots.txt вида

    User-Agent: *
    Host: http://www.myhost.ru

    и
    User-Agent: *
    Host: http://www.myhost.ru:80

    эквивалентны и запрещают индексирование как http://www.otherhost.ru, так и http://www.myhost.ru:8080. "

  14. если это те самые сайты, то 6pt. на ссылках это как минимум "некрасиво" для чела подписавшего кодекс оптимизаторов.

  15. У меня на компьютере этот текст в ссылках отлично виден. Кроме того, это реклама, предназначенная для человека, с картинками товара, которые тоже более чем видимы.
    Так что у меня с этикой все ОК.

  16. в ie при стандартных шрифтах и стандартном разрешении 15" 1204х768 пратически не читается!

  17. пардон, 1024х768
    и для опытного оптимизатора ваша ошибка со шрифтами подозрительна 🙂
    учитывая явную коммерческую направленность ваших проектов

  18. Алекс купи новый монитор 😉
    у меня на 17-ти дюймовом мониторе, с разрешением 1152х864 все более чем читабильно..

  19. умный, да?
    на настольных LCD зерно ~ 0.25-0.29 и смена монитора делу не поможет, к сожалению.
    так что купи себе новый монитор, будь ближе к народу:)

  20. куда уж ближе то 🙂 к тому же мне так удобно.. и монитор у меня не LCD, (ну не нравятся они мне)..
    хотя 2-ой комп, который дома, 17-шка LCD, там еще лучше видно 😀

  21. Э-э-э, а что это было? Типа каменья в мой огород?

  22. wolf, да это в мой огород каменья… 🙂
    Я сам читаю, значит, читается. У меня на 1024 Вьюсоник читается. Собственно. сам дизайн я делал, и под это все было сделано.

    И, кроме всего прочего, Алекс, ты ведь не отрицаешь, что почти каждый продукт проиллюстрирован фоткой (разером около 100 пх по вертикали)? Она ведь не млжет быть "нечитабельной"? 🙂

    Да, с LCD беда бывает.

  23. Прикол в том, что у ребят из Яндекса тоже не прочиталось.
    и не камни а телега :((
    Кстати как изменился траф с учётом отсутствия в Яндексе?

  24. Мысль интересная. Но тогда надо всех, у кого 6 пойнтов шрифт есть на странице, банить.
    Про траф позже, когда надежд не останется… 🙂

  25. Уже можно составить предварительное мнение по трафику?
    По моим данным падение в июле по сравнению с июнем, средневзвешано в 1,5 раза.
    А по сравнению с первой половиной июня (до 17) почти 2 раза.
    Так что с Яндексом шутки плохи 🙁
    хотя он и самый "прозрачный" поисковик 😉

Комментарии запрещены.