[Будущий миллионер]
Объем базы проиндексированных документов без дублей превышает 220 Тбайт, а с учетом дубликатов – 300 Тбайт.
Т.е., если взять самый большой винчестер, который сейчас представлен на рынке, размером 2 Терабайта, то грубо для хранения 220 Терабайт потребуется 110 винчестеров :)
Это более 100 миллионов хостов, имеющих хотя бы одну страницу в базе, а всего роботу Яндекса известно более 500 миллионов хостов.
Т.е. получается, что только 20% известных Яндексу сайтов он пускает в серп.
Источник: http://www.g-news.com.ua/content/view/6161/64/
А сколько всего сайтов в интернете?
Всего, в августе 2009 года, паук компании netcraft.com, насчитал 225'950'957 хостов по всему интернету.
Источник: http://news.netcraft.com/archives/web_server_survey.html
Но я несколько засомневался в достоверности этих данных, когда увидел количество сайтов в России:
Ведь по данным РуЦентра, только делегированных доменов в зоне RU уже более 2 млн. штук.
Посему, отвечая себе на вопрос: "Сколько сайтов в интернете"?, я склоняюсь к данным от Яндекса: уже более 500 миллионов хостов(сайтов)!
Реклама в бомжеленте.
Помогите детям!