Fuentes de datos de la web profunda y la diferencia de la web oscura
La red profunda es enorme, que comprende alrededor del 90% de todo el Internet, y puede ser 500 veces más grande que la red de superficie.Contiene bases de datos corporativas, servidores de transmisión y almacenamiento de memoria en línea.
Gran parte de la red profunda se considera código abierto.En principio, todos pueden acceder a la red profunda, pero gran parte está protegida, p.para proteger los secretos de la compañía.
Fuentes de la red profunda
· Literatura gris, incluidos los documentos de la empresa y de trabajo, los documentos blancos, los informes, las evaluaciones y los datos académicos no publicados.
· El material de la base de datos no está indexado por el rastreador de búsqueda, sino que se indexa internamente y, por lo tanto, no se puede acceder directamente utilizando un navegador web de superficie.
· Áreas pagas y contenido protegido con contraseña de organizaciones académicas, corporativas, gubernamentales, legales, financieras, no gubernamentales y fuentes de salud médica/pública.
· Datos contenidos en el almacenamiento privado de intranet o en la nube (por ejemplo, OneDrive, Dropbox, etc.).
· Correos electrónicos y mensajes enviados utilizando plataformas de mensajería y aplicaciones web.
Diferencia entre la web profunda y la web oscura
La red profunda a menudo se confunde con la web oscura en las discusiones públicas, pero no son lo mismo.
La web profunda representa alrededor del 90% de toda la red mundial.Los sitios en la red profunda no están indexados y, por lo tanto, no se pueden acceder a través de motores de búsqueda regulares.La web profunda consta de bases de datos, sitios web y servicios que pertenecen a empresas, organizaciones públicas o universidades.Este contenido generalmente se paga o protegido con contraseña, pero sigue siendo inofensivo.
Por el contrario, la web oscura requiere un software especial y su contenido a menudo tiene antecedentes penales.El contenido web en la web oscura es efectivamente "invisible" para los motores de búsqueda porque no pueden rastrearlo.La diferencia entre esta y la web profunda es que gran parte de la red profunda no está oculta intencionalmente del acceso público, mientras que el contenido de la web oscura está oscurecida intencionalmente.
Por lo general, los rastreadores de búsqueda no pueden indexar la web profunda porque las páginas web les indican que no lo hagan, y el contenido generalmente requiere autenticación para acceder.Cualquier webmaster puede colocar un script (llamado robots.txt) en su sitio para instruir a los rastreadores web que no rastreen ciertas URL.