Não consigo imaginar como o Google consegue armazenar praticamente tudo que tem na internet. Praticamente quando pensar em internet é inevitavel nao ter o Google em mente. Pois eles consegue armazenar tudo, imagine, 1 trilhão de url, mesmo que muitos deles são conteúdos semelhantes.
Como eu trabalho somente com projetos pequenos com uso de banco de dados MySQL, nem consigo imaginar, quão grande é a estrutura dos data centers para armazenar está enorme quantidade de dados. Para trabalhar com alguns projetos que contém um pouco mais de dados, e fazer uma busca mais complexa, o computador leva segundos a minutos para ter retorno dos dados. Fico pasmado, quando vou fazer uma busca no Google, com palavras e frases numa pesquisa só, quão rápido é o retorno.
Além do motor de busca, o Google tem outros serviços, como o Analytics, que gera muitos dados estatÃstico. Nunca parei para analisar mais a fundo, mas quase todos as páginas que visito, tem o código do Analytics.
Sem dúvida, imagino que ninguém no mundo, hoje tem mais informações que o Google. Praticamente ele domina.
O Yahoo que me lembro, se não estou enganado, conheci primeiro que o Google, e é o segundo maior site de procura da internet, que eu sei, eles adquiriram o Cade (do Brasil), um dos primeiros motores de busca, o Alta Vista. Mesmo assim, não conseguiram ficar em primeiro lugar. Não foram capazes de aguentar a criatividade e estratégias do Google.
Não é a toa, que o Google é a empresa que mais cresceu no mundo em curto tempo.
Referência: IDG Now