Scraper Monitoring
custom
monitoring

Conocimiento sobre monitoreo de sistemas de scraping y deteccion de fallos

ID: scraper-monitoring
Preview
Codigo

Scraper Monitoring


Metricas Clave

  • Productos escaneados: Total de productos procesados por el scraper
  • Precios encontrados: Precios extraidos exitosamente
  • Ratio exito: precios/productos (ideal > 0.8)
  • Throughput por hora: productos/hora (baseline ~500-1000)

Umbrales de Alerta

| Metrica | CRITICO | WARNING | HEALTHY |

|---------|---------|---------|---------|

| Productos/hora | 0 | < 100 | >= 100 |

| Ratio exito | < 0.3 | < 0.5 | >= 0.5 |

| Horas sin datos | > 2 | > 1 | 0 |


Causas Comunes de Fallo

1. 0 productos: Servicio caido, error de red, bloqueo IP

2. Bajo throughput: Rate limiting, cambios en sitio web, timeouts

3. Bajo ratio: Cambios en estructura HTML, productos descatalogados


Acciones Recomendadas

  • CRITICO: Notificar inmediatamente, crear incidencia
  • WARNING: Monitorear proxima hora, preparar investigacion
  • HEALTHY: Report de rutina

Informacion

Estado
Activo
Origen custom
Usos 3
Ultimo uso 23/01 16:57
Actualizado 21/01/2026 16:43