¿Por qué los motores de búsqueda como Google, Yahoo y Bing no pueden acceder a la web oscura y archivar sus contenidos para que aparezcan en sus resultados?
Suponiendo que está hablando de servicios ocultos de Tor, entonces la respuesta es que sí pueden , pero solo de manera indirecta. Hay varios sitios del "portal", como enlace , que proporcionan una puerta de entrada a los servicios ocultos. Estas puertas de enlace son sitios web normales con dominios regulares, pero ejecutan el software tor2web , que utiliza el cliente Tor para retransmitir el tráfico entre usuarios que no son Tor y Tor (pero tenga en cuenta que no proporcionan anonimato). Estos pueden ser indexados a voluntad. Hay varias razones por las que no se indexa con frecuencia:
.onion en un navegador normal. Verás que ni siquiera se resolverá. No hay una sola "base de datos" de servicios ocultos como existe para los dominios regulares (servidores de nombres de raíz). Un servicio oculto se basa en un hash codificado y truncado de la clave pública del servidor. A través de un protocolo complejo, el cliente se dirige hacia un punto de encuentro , donde se encuentran el circuito de tres saltos del servicio oculto y el circuito de tres saltos del cliente Tor. Este punto se decide mutuamente de tal manera que no se requiere una única base de datos de dominios, ya que el propio nombre de dominio tiene toda la información necesaria para utilizar la red Tor para conectarse al sitio. No hay una dirección IP que el dominio resuelva. Para que un rastreador de motores de búsqueda se conecte a estos sitios, tendría que usar este protocolo. Eso no es muy práctico para ellos.
Lea otras preguntas en las etiquetas search-engines