Este post lo abro desde un punto de vista divulgativo, otro de esos temas raros que a mi me gustan tanto. Seguro que algunos ya han oído hablar del tema e incluso son unos expertos, pero seguro que hay mucha otra gente que no conozca el tema y se interese después de leer estas líneas.

Me refiero a la internet profunda o invisible. Hoy por hoy el motor de búsqueda más recomendable es el Google, con un índice de poco más de 3.300 millones de urls, bien, según los expertos eso es menos del 10% del contenido total de la red de redes. Si, ya se que existe altavista, yahoo, lycos, etc..., pero tienen más de portal de variedades que de motor de búsqueda puro, como eran en su origen. Dos buenas opciones a google son www.alltheweb.com y www.metacrawler.com , pero estamos un poco en las mismas y los índices de todos son muy parecidos. ¿Dónde está el 90% restante? en forma de bases de datos, que son invisibles a los buscadores habituales. El robot de búsqueda de bases de datos más popular es el programa LexiBot.

Para ampliar conocimientos de este interesante submundo pongo unos enlaces en español:

http://www.redcom.org/tp/parcial/g03/g0 ... l_base.htm

http://www.portal-pfc.org/recursos/inte ... ofunda.htm

http://www.biblio.fi.mdp.edu.ar/basede.htm

Para saber más sobre Google:

http://google.dirson.com/

Por cierto, recomiendo la barra famosa barra de google, además de integrar el google en el navegador, posee una eficaz herramienta anti popups. http://toolbar.google.com/intl/es/index

Pues si ese miserable 10% da para tanto, no me quiero ni imaginar q seria si tuvieramos acceso a la totalidad.

Lo pongo simplemente como una anecdota graciosa, pero es q hasta el propio Google tiene su faceta "oculta".

http://www.google.com/Easter/feature_easter.html

Pues resulta q no es el unico.

http://www.google.com/heart/heart01.html
http://www.google.com/heart/feature_cons.html


Y ademas un monton de servicios extras, fuera aparte del de buscador.

http://www.aclantis.com/article1482.html

Jeje, están bien esos cómicos links Docker, el último si es más informativo.
Quiero recordar que cuando hacemos uso de los progrmas P2P, estamos accediendo a esa parte de la web que sólo es accesible mediante la búsqueda especializada a través de sus servidores, bueno también hay alguna página que otra indexada en la web superficial, que se dedica a hacer la vida más fácil a la gente que busca determinados ficheros. Pero los resultados de una búsqueda en Emule, no pueden ser ofrecidos por ningún otro servicio en internet. Eso, es web profunda, sin duda. Pero hay muuuuucho más.

En algun lugar oi de algun programa que se llama Copernico Agent y que es algo asi como el metacrawler, parace que tambien busca en mas lugares de los que se dan de alta en los buscadores, alguien lo conoce, es correcto lo que oi de este programa?

El Copernic es una suite de búsqueda. Es un programa que se encarga de pasar por todos los motores conocidos (google, yahoo, metacrawler, lycos, etc...) o sea todos motores superficiales. Está bien, pero el trabajo que hace copernic también lo puedes hacer tu de forma manual. Si no te quieres enredar y quieres hacer una búsqueda multiple, pues te lo recomiendo, pero ya te digo... más morralla pal disco duro.

Entonces no tiene caso mejor seguire usando el google.

Gracias por la informacion