Accept в HTTP – заголовке

Оказывается, сервис http://seolab.ru/add/header.htm при запросе страницы “прикинувшись Яндексом” не посылает в HTTP-заголовке Accept: text/html. А обычный робот Яндекса, видимо, посылает его при индексации. Я на этом прилично накололся.
Ситуация: есть страницы на сайте. Он не индексируется. Смотрим seolab-ом: ответ 200 ОК. А если смотреть, посылая заголовок Accept: text/html – ответ 406 Not Acceptable.
Что еще забавно – при добавлении страницы в аддурл http://webmaster.yandex.ru/ он нормально принимает 406 страницу (видимо добавляльщик, в отличие от индексатора, не посылает этот заголовок или посылает его в другом виде) – и страница нормально добавляется! В то же воемя, при добавлении откровенно 4ХХ страниц Яндекс-аддурл ругается.
Упс.

аукцион на nic.ru

Сравниваем по Яндексу количество лотов в http://auction.nic.ru/ :
#url=”auction.nic.ru/torgi/lot.cgi?id=*”: страниц — 739 (здесь половина страниц – списки разных сео-характеристик доменов)
Уберем страницы с “индексами”: #url=”auction.nic.ru/torgi/lot.cgi?id=*” && -проиндексировано: страниц — 399
А сколько из них никому не нужны: #url=”auction.nic.ru/torgi/lot.cgi?id=*” && “ходе торгов не было сделано ни одной ставки”: страниц — 338

Вот так он нужен народу, этот аукцион.
Это я все к тому, что у них появился расширенный поиск с показом всяких тИЦов, PRов и т.д.
Только кому надо вообще там искать? 🙂

Реклама на NIC.RU

Можно зайти на страницу просмотра хуиза любого домена на nic.ru и, что удивительно, увидеть в нижней части страницы рекламу:

КОНФЕРЕНЦИЯ ПО ПОИСКОВОЙ ОПТИМИЗАЦИИ

Как работают поисковики, контекстная реклама и поисковая оптимизация.
Участвуют Яндекс, Рамблер, Ашманов и Партнеры, Бегун и другие.
http://www.optimization.ru/05/

-вот уже дошли… рекламу продают! Кстати, урл ссылки – http://www.nic.ru/cgi-bin/advertising3.cgi?pos=1;rand=652574 во-первых, наводит на мысль о их собственной крутилке, а во-вторых, напоминает “партбилет номер 1” В.И. Ленина. 🙂
Что, похоже, первый клиент появился? 🙂
PS особенно порадовало Участвуют Яндекс, Рамблер, Ашманов и Партнеры, Бегун и другие – в хорошую компанию А&П попали по своему велению? 🙂

бывший проектик “mr. паркера”

Я-то думал, что Владимир Владимирович™ Максима Кононенко – это, как бы так сказать, единственный выстрел и сразу в десятку.
Ан нет. Вот кеш web.archive.org проекта “Алла Бо®исовна”: http://web.archive.org/web/*/alla.borisovna.ru . Домен скоро освобождается (кому надо. налетай :)). Смотрю – Кононенко им владеет.
Вот оно как. Широкой сетью, значит, накрыл. Копался, выходит, в гумусе, и наткнулся на жилу.
А написана там (на “Алла Бо®исовна”) редкостная фигня. Но стиль – его. 🙂

Генератор уникальных ссылок – сервис

Сделал себе сервис: генератор уникальных ссылок.
Он принимает на вход список словосочетаний, разделенных вводом, минимальную и максимальную длину ссылки, их число. И перемешивает фразы, разделяя их запятой, союзом “и” и прочими разделителями.
Одна ссылка встречается только один раз.
Список ссылок может быть неполным – т.к. все делается не строгим перебором всех вариантов, а по рандому.
Можно тестировать и юзать.

В копилку

http://www.cs.bell-labs.com/cm/cs/pearls/sec153.html – описание алгоритма генерации тектсов с цепями Маркова, с примерами
http://gotai.net/documents/doc-art-007.aspx – диссертация по структуре тектса и поисковым алгоритмам
http://my.opera.com/doorway/ – блог дорвейщика, где найдены ссылки.

А не скачать ли нам базу ссылок рунета?

Я, в порядке яндекс-гранта, игрался с базой ссылок между хостами яндекса. Чувствую – этого мало… Хочется знать с каких внутренних страниц поставлены ссылки… Можно поточнее приблизить русский PageRank. Кроме того, частенько по сниппетам понятен текст ссылки.

Короче, есть предложение. Скинуться деньгами и скачать по 500 тыс. хостов ссылающиеся на них страницы, и по новым найденным хостам – тоже. Информацию поделить.

На февраль этого года было около 500 тыс. проиндексированных Яндексом хостов. Из них с половины примерно хостов были внешние ссылки на проиндексированные Я. сайты.

Тарифы на яндекс-хмл: http://help.yandex.ru/xml/?id=396583
более 500 тысяч – $2 за тысячу.

По моей оценке, за 7 месяцев число проиндексированных хостов могло подрасти примерно на 200 тыс. максимум. Если исходить из расчета 700 тыс. хостов = 700 тыс. запросов к ссылающимся = $1400 в деньгах.

При этом у 50% хостов ссылающихся не будет, у 90% хостов число ссылающихся в пределах 10. Остальное надо копать вглубь, но в массе это сильно не увеличит число требуемых денег.

Инфу в сыром виде либо обработанном раздать всем участникам гешефта. Если десяток человек наберется – по $140 с каждого получится.
В качестве стартовой базы можно использовать Яндекс-каталог.
Кому интересно, отмечаемся на searchengines.

Классный юзерпик, — отчетливо сказала Эллочка

Изучающим распространение “баянов”.

Изначально нашел здесь, а т.к. ходить по ссылкам в поисках источника лень, пошел в blogs.yandex.ru и на 13-й странице нашел самое раннее упоминание в LJ nadia_yacik от 2005-04-18, ссылающайся на самый ранний источник на авто.ру.
*** Итак:
Почти по Ильфу и Петрову…

Эллочка с шиком провезла стулья по Варсонофьевскому переулку. Мужа дома не было. Впрочем, он скоро явился, таща с собой портфель-сундук.
— Классный юзерпик, — отчетливо сказала Эллочка. Все слова произносились ею отчетливо и выскакивали бойко, как горошины.
— Здравствуй, Еленочка, а это что такое? Откуда стулья?
— Пазитиф!
— Нет, в самом деле?
— Гламурно!
— Да. Стулья хорошие.
— Готично!
— Подарил кто-нибудь?
— Ужоснах!
— Как?! Неужели ты купила? На какие же средства? Неужели на хозяйственные? Ведь я тебе тысячу раз говорил…
— Эрнестуля! Выпей йаду!
— Ну, как же так можно делать?! Ведь нам же есть нечего будет!
— Фтопку!..
— Но ведь это возмутительно! Ты живешь не по средствам!
— В газенваген!
— Да, да. Вы живете не по средствам…
— Где модератор?
— Нет, давай поговорим серьезно. Я получаю двести рублей…
— Выпей йаду!
— Взяток не беру… Денег не краду и подделывать их не умею…
— Ханжа, убей себя!..
Эрнест Павлович замолчал.
— Вот что, — сказал он наконец, — так жить нельзя.
— Помой хобат, воняет, — возразила Эллочка, садясь на новый стул.
— Нам надо разойтись.
— В Бобруйск, жывотное!
— Мы не сходимся характерами. Я…
— Низачот, парниша.
— Сколько раз я просил не называть меня парнишей!
— Оффтопик!
— И откуда у тебя этот идиотский жаргон?!
— Афтар, учи албанский!
— О черт! — крикнул инженер.
— Готично!
— Давай разойдемся мирно.
— Фтему!
— Ты мне ничего не докажешь! Этот спор…
— Каменты рулят.
— Нет, это совершенно невыносимо. Твои доводы не могут меня удержать от того шага, который я вынужден сделать. Я сейчас же иду за ломовиком.
— Жжош!
— Мебель мы делим поровну.
— Ужоснах!
— Ты будешь получать сто рублей в месяц. Даже сто двадцать. Комната останется у тебя. Живи, как тебе хочется, а я так не могу…
— Слив защитан, — сказала Эллочка презрительно.
— А я перееду к Ивану Алексеевичу.
— Ахтунг!
— Он уехал на дачу и оставил мне на лето всю свою квартиру. Ключ у меня… Только мебели нет.
— Ахуеть, дайте две!
Эрнест Павлович через пять минут вернулся с дворником.
— Ну, гардероб я не возьму, он тебе нужнее, а вот письменный стол, уж будь так добра… И один этот стул возьмите, дворник. Я возьму один из этих двух стульев. Я думаю, что имею на это право?..
Эрнест Павлович связал свои вещи в большой узел, завернул сапоги в газету и повернулся к дверям.
— Картинки не грузятся, — сказала Эллочка граммофонным голосом. — До свиданья, Елена.
Он ждал, что жена хоть в этом случае воздержится от обычных металлических словечек. Эллочка также почувствовала всю важность минуты. Она напряглась и стала искать подходящие для разлуки слова. Они быстро нашлись.
— Киса, ты с какова горада?
Инженер лавиной скатился по лестнице.