EN / ES / HU
architect

Pinterest utiliza huellas digitales de contenido para la deduplicación de URL en millones de dominios.

Fuente: feed.infoq.com 1 min de lectura

Compartir

Pinterest utiliza huellas digitales de contenido para la deduplicación de URL en millones de dominios.

Estás leyendo un resumen. El contenido completo está en feed.infoq.com.

Pinterest presentó MIQPS, un sistema de normalización de URL que utiliza huellas digitales del contenido renderizado para determinar qué parámetros de consulta modifican la identidad de la página. Este sistema reemplaza los métodos basados en reglas con análisis sin conexión, detección de anomalías y mapas de parámetros en tiempo de ejecución para reducir el procesamiento duplicado y mejorar la eficiencia y la escalabilidad de la ingesta de datos.

Artículos relacionados