Trustpilot Crawler

El crawler de Trustpilot es una herramienta automatizada que descubre y recopila datos públicos de Trustpilot a gran escala. No necesitas una lista completa de URLs. Puedes partir de una palabra clave, una categoría, una URL de búsqueda o una página específica. El crawler encuentra los registros coincidentes y envía los datos en un formato estructurado.

El crawling trata sobre descubrimiento: encontrar las páginas. El scraping trata sobre extracción: obtener campos específicos de una página que ya conoces. Un scraper necesita que le indiques qué URL visitar. Un crawler encuentra los registros por ti y luego extrae los datos. Usa el crawler cuando no tengas la lista completa de URLs, o cuando la lista cambie constantemente, como cada ítem de una categoría o cada resultado de una palabra clave. Si ya tienes las URLs exactas, recopilar por URL es la opción más directa.

Un dataset son datos ya recopilados, que compras como un archivo listo para usar. El crawler recopila datos frescos cuando lo ejecutas, según tus propias entradas. Elige un dataset si quieres una cobertura amplia de inmediato sin configuración. Elige el crawler si necesitas un alcance específico, los datos más recientes o una recopilación con un horario que tú controlas.

Los proxies son infraestructura. Envían tus solicitudes a través de diferentes direcciones IP, pero igual tienes que construir y mantener el crawler, el parser y el desbloqueo. El crawler de Trustpilot incluye todo eso: gestión de proxies, renderizado completo del navegador, resolución de CAPTCHA, parseo de datos y entrega. Elige proxies si quieres escribir y ser dueño del código. Elige el crawler si solo quieres los datos.

No. La Crawl API funciona en cualquier sitio web público. Le das una URL raíz y devuelve el contenido del sitio en Markdown, Texto, HTML o JSON. El crawler de Trustpilot está diseñado solo para Trustpilot. Devuelve campos listos para usar específicos de Trustpilot, así que no tienes que escribir tu propia lógica de parseo.

Depende del crawler que elijas. Los puntos de partida comunes son una URL directa, una palabra clave, una URL de categoría, una URL de búsqueda, o una URL de perfil, vendedor o tienda. Puedes enviar hasta 5,000 URLs en una sola solicitud masiva.

Sí. El crawler admite recopilación por lotes y programada, para que puedas repetir el mismo crawl a intervalos regulares. Esto es útil para rastrear cambios a lo largo del tiempo, como precios, disponibilidad, posiciones o cifras de interacción, sin iniciar cada ejecución manualmente.

No. La gestión de proxies, la resolución de CAPTCHA y el renderizado completo del navegador están integrados. El crawler funciona en la red de Bright Data con más de 400 millones de IPs de usuarios reales en 195 países, así que puedes hacer crawling de Trustpilot desde cualquier ubicación sin mantener tu propia configuración de desbloqueo.

Pagas solo por los registros entregados con éxito. Las entregas fallidas nunca se cobran. Puedes empezar con el nivel gratuito de 5,000 registros al mes sin tarjeta de crédito, y luego pasar a pago por uso o a un plan mensual a medida que creces. Los detalles de los planes están en la sección de precios de arriba.

El crawler solo recopila datos disponibles públicamente. Las prácticas de privacidad de Bright Data cumplen con las leyes de protección de datos, incluyendo GDPR y CCPA. También cuenta con un proceso de Verificación KYC y una Política de Uso Aceptable pública. Tú sigues siendo responsable de asegurarte de que tu propio uso de los datos cumpla con las leyes que te apliquen.