объемы

если у яндекса Уникальных серверов: 1 722 162, уникальных документов: 457 501 435, то:
457501435 не вмещается в 3 байта, т.е., id страницы должен занимать 4 байта (если по битам не считать). Если на каждой странице по рунету в среднем 20 ссылок (внутренних плюс внешних), объем для хранения графа ссылок будет 36.6 Гб – многовато.
1722162 входит в 3 байта, если по 100 внешних ссылок с сайта (число взято от балды) – объем графа хостов будет 516 Мб.
Как раз на CD войдет. А вот как его обсчитывать…