Red profunda

La Web profunda, a veces llamada Web invisible, es la gran parte de Internet que es inaccesible para los motores de búsqueda convencionales. El contenido de Deep Web incluye mensajes de correo electrónico, mensajes de chat, contenido privado en sitios de redes sociales, extractos bancarios electrónicos, registros médicos electrónicos (EHR) y otro contenido al que se puede acceder a través de Internet, pero que los motores de búsqueda como Google, Yahoo, no pueden rastrear ni indexar. Bing o DuckDuckGo.

Las razones para no indexar el contenido de la Web profunda son variadas. Es posible que el contenido sea propietario, en cuyo caso solo los visitantes aprobados que ingresan a través de una red privada virtual (VPN) pueden acceder al contenido. O el contenido puede ser comercial, en cuyo caso el contenido reside detrás de un muro de miembros y solo pueden acceder los clientes que hayan pagado una tarifa. O tal vez el contenido contiene información de identificación personal (PII), en cuyo caso el contenido está protegido por las regulaciones de cumplimiento y solo se puede acceder a él a través de un sitio del portal por personas a las que se les han otorgado privilegios de acceso. Cuando se han generado mashups sobre la marcha y los componentes carecen de una ubicación de recursos uniforme permanente (URL), también pasan a formar parte de la Web profunda.

No se sabe qué tan grande es la Web profunda, pero muchos expertos estiman que los motores de búsqueda rastrean e indexan menos del 1% de todo el contenido al que se puede acceder a través de Internet. La parte de Internet que los motores de búsqueda rastrean e indexan se denomina a veces la Web superficial. El término "web profunda" fue acuñado por BrightPlanet en un documento técnico de 2001 titulado "La web profunda: el valor oculto de la superficie" y a menudo se confunde en los medios de comunicación con el término web oscura. Al igual que el contenido de la Web profunda, los motores de búsqueda convencionales no pueden acceder al contenido de la Web oscura, pero la razón más frecuente es que el contenido es ilegal.