DFTechBot
El bot de DF Gaming, un comparador de hardware de PC para Argentina.
Qué hace
Lee las fichas públicas de productos de hardware (procesadores, placas de video, memorias, fuentes, etc.) de tiendas argentinas para mostrar precio, stock y especificaciones, y verificar compatibilidad entre piezas. Cada producto que mostramos lleva el link a la ficha de la tienda.
Cómo lo hace
| Identificación | Se presenta siempre con este User-Agent:DFTechBot/0.1 (comparador de hardware DF Gaming, Argentina; +https://dfgaming.com.ar/bot) |
| robots.txt | Lo lee antes de pedir cualquier página y no pide lo que prohíba a DFTechBot o a *. Si declara Crawl-delay, lo respeta. |
| Frecuencia | Un pedido cada 3 segundos como mínimo por sitio, una pasada por día (de noche, hora argentina), con caché: no vuelve a pedir lo que ya tiene del día. |
| Qué no hace | No inicia sesión, no usa carritos ni APIs privadas, no descarga ni aloja imágenes, no rota direcciones ni se hace pasar por un navegador, y no intenta esquivar bloqueos: si un sitio lo bloquea, se deja de leer. |
| Datos | Solo datos de producto (nombre, precio, stock, especificaciones). No recolecta datos personales. |
Excepción documentada
Para especificaciones de chips usamos la API de Wikipedia (en.wikipedia.org/w/api.php) según la política de uso de API de Wikimedia (User-Agent identificable, pedidos espaciados, caché). Su robots.txt restringe /w/ a crawlers de páginas; es la única excepción y está registrada en el código.
¿Querés que no leamos tu sitio?
Hay dos formas, y cualquiera alcanza:
- Agregá a tu robots.txt:
User-agent: DFTechBotDisallow: /
Lo tomamos en la siguiente pasada (en menos de 24 horas). - Escribinos y lo sacamos de la lista: dftech.contacto@gmail.com.
Si nos pedís que paremos, paramos y lo registramos. No hace falta dar explicaciones.