La web invisible es el área oculta de Internet que los motores de búsqueda no buscan automáticamente. Es información que está disponible gratuitamente en Internet, pero que no será recuperada por las solicitudes de búsqueda normales. La información que está oculta en la web invisible requiere un poco más de trabajo para encontrarla.
La web visible es información que puede ver o recuperar de los motores de búsqueda. La web invisible a veces se conoce como la web profunda. Si piensa en Internet como una base de datos gigante, parte de la información de la base de datos es más fácil de encontrar que otra. La información contenida en la web visible es solo una fracción de la información disponible en Internet.
Las bases de datos de los motores de búsqueda de Internet ya contienen grandes cantidades de información. Cuando escribe una pregunta en un motor de búsqueda, aparecerá una lista de posibles páginas que podrían responder a su pregunta. Es menos costoso para el motor de búsqueda abrir estas páginas de respuestas que almacenar todas las páginas posibles sobre el tema que está buscando. También ocupa menos espacio en la base de datos del motor de búsqueda.
Piense en los millones de personas que utilizan Internet todos los días. Hacen preguntas a los motores de búsqueda, buscan temas o simplemente navegan por la red. Es más fácil para la base de datos dar la página de respuestas que acceder directamente a las páginas web.
Una forma de acceder al material en la web invisible es simplemente poner la palabra base de datos después de su consulta de búsqueda. Si está buscando vacaciones en Irlanda, utilice las palabras vacaciones en la base de datos de Irlanda. Esto hará que el motor de búsqueda revise las bases de datos de búsqueda sobre su tema. Muchas bases de datos que almacenan información tienen la palabra base de datos en sus páginas web, lo que facilita su búsqueda.
Hay algunas páginas web que están en la web invisible simplemente por razones técnicas. Las bases de datos se crean utilizando arañas. Estos son programas de computadora que buscan información en la web. Sin embargo, las arañas no pueden pensar ni escribir. Pueden saltar de un enlace a otro, pero no pueden pensar por sí mismos.
Si la araña se encuentra con una página web que necesita una contraseña de acceso, no tiene forma de ingresar a esa página. Hay muchos sitios que requieren que el usuario inicie sesión y use una contraseña para ingresar y ver su contenido. Además, si se ha creado una página web sin el HTML habitual, que es el lenguaje web básico, es posible que no siempre se lea fácilmente. Por ejemplo, solo se puede acceder a un documento PDF como un enlace y no se puede encontrar fácilmente como una página web HTML.
Otro enlace al que las arañas no irán es cualquier enlace que tenga un signo de interrogación. Se informa a las arañas que no vayan a enlaces con un signo de interrogación, ya que podrían ser trampas para atraparlas. El enlace también podría contener un script mal escrito y, por lo tanto, puede que no se almacene en las bases de datos habituales. Estos enlaces solo estarán disponibles cuando se busquen bases de datos en la web invisible.
Los motores de búsqueda se están actualizando con sofisticadas técnicas de búsqueda para acceder a la web invisible. Se cree que con el tiempo, la red invisible se volverá más visible. Hasta entonces, se trata de utilizar la capacidad intelectual para cuestionar los motores de búsqueda y navegar por los enlaces para encontrar información.