Proxies de centro de datos para consultas rápidas y baratas en sitios con poco bloqueo

Las IP de centro de datos proceden de líneas en instalaciones llenas de servidores, no de hogares ni de teléfonos. Esas líneas son amplias y estables, así que las respuestas llegan rápido y la velocidad se mantiene incluso con muchas solicitudes a la vez. Sin línea doméstica ni red de operadora de por medio, el precio es el más bajo de los cuatro productos.

La otra cara es que los sitios de destino pueden saber que la dirección viene de un centro de datos. Los sitios que solo quieren visitantes comunes pueden tratar las IP de centro de datos con más rigor. Por eso, que los proxies de centro de datos sean la opción más eficiente o la equivocada depende de lo duro que bloquee el destino.

La conexión es igual que en los demás productos: conéctate a la puerta de enlace gate.proxymay.com:7000 por HTTP o SOCKS5 y usa tu token de acceso como contraseña. Solo cambias la configuración de proxy de tu rastreador, así que es fácil comparar productos con el mismo código.

La forma más segura es medirlo con una muestra pequeña. Solicita unas 200 páginas del destino con IP de centro de datos y anota los resultados.

• Si la mayoría devuelven 200 con contenido normal, el centro de datos es suficiente.
• Si aparecen algunas respuestas 403 y 429, reduce la velocidad y vuelve a medir.
• Si sigues cayendo en páginas de inicio de sesión o de verificación, pasar al residencial rotativo te ahorra dinero y tiempo.

Entre los destinos que suelen funcionar bien con IP de centro de datos están los sitios que gestionas tú, los registros públicos de organismos oficiales, las páginas publicadas para que las lean máquinas, como los feeds de productos, y los sitemaps que permiten el rastreo de buscadores. Guarda los resultados de tu muestra con fecha. Las reglas de bloqueo del mismo sitio pueden cambiar meses después, y volver a medir periódicamente te dice cuándo es momento de cambiar de producto.

El centro de datos es el producto que eliges por velocidad y precio. Si el trabajo no necesita parecer un usuario doméstico, no hay motivo para pagar por una dirección más cara.

Si el destino bloquea a menudo las direcciones de centro de datos, cambia a proxies residenciales rotativos: cada solicitud sale desde una IP doméstica distinta y los bloqueos bajan. Si necesitas la misma IP con la sesión iniciada durante semanas, usa proxies ISP estáticos; si necesitas ver lo que ven los usuarios de móvil, usa proxies móviles.

En la práctica, mucha gente los combina. Descarga rápido las partes ligeras, como sitemaps y páginas de listados, con IP de centro de datos, y envía al residencial rotativo solo las páginas de detalle que se bloquean. El coste total baja mucho y, con un solo saldo, no hay que recargar cada uno por separado.

• Revisar tu propio sitio: confirma periódicamente que tu sitio carga en varios países y lo rápido que responde.
• Rastreo de sitemaps: recorre rápido sitemaps con decenas de miles de URL para encontrar enlaces rotos y redirecciones.
• Recopilación de listados públicos: descarga grandes volúmenes de datos cuya recopilación permite el editor, como registros públicos y feeds de productos abiertos.
• Pruebas de localización: comprueba que el idioma, la moneda y la visualización de precios cambian correctamente por país en tu propio servicio.

Los proxies de centro de datos brillan cuando ejecutas muchas solicitudes en paralelo, pero el número en paralelo debe quedarse dentro de lo que el destino puede soportar. Aquí tienes un ejemplo de Scrapy que reparte solicitudes entre varias IP mientras controla la velocidad.

# settings.py
CONCURRENT_REQUESTS = 32
CONCURRENT_REQUESTS_PER_DOMAIN = 8
DOWNLOAD_DELAY = 0.25
AUTOTHROTTLE_ENABLED = True
RETRY_HTTP_CODES = [429, 503]

# proxies.txt (copied from the dashboard in host:port:user:token format)
gate.proxymay.com:7000:USERNAME:YOUR_TOKEN

Con varias IP, reparte las solicitudes por igual entre ellas. Si una IP soporta la mayor parte de la carga, esa dirección llega antes a los límites.

Los proxies de centro de datos se cobran por IP, desde $1.20 por IP. Los datos transferidos no forman parte del precio, así que cuanto más grandes sean las páginas y más solicitudes hagas, más ventaja tienen frente a los productos por GB.

Por ejemplo, compra 20 IP para ejecutar un rastreador de sitemaps y el coste sale a 20 × $1.20. Descarga decenas de GB por esas IP y el importe sigue igual. El mismo volumen con residencial rotativo, que se cobra por GB, seguiría restando saldo por cada GB.

Así que con muchos datos y poco bloqueo, el centro de datos suele ganar; con pocos datos o mucho bloqueo, el residencial rotativo a menudo cuesta menos. Una prueba de muestra que mida la tasa de bloqueo y el tamaño de página te permite decidir con números.

1. 1Regístrate y guarda tu token de acceso. Es a la vez tu inicio de sesión y tu contraseña de proxy.
2. 2Recarga y luego elige un país y el número de IP en el producto de centro de datos.
3. 3Copia el formato del panel que necesite tu herramienta: http, socks5 o host:port:user:token.
4. 4Añádelo a tu rastreador o herramienta de monitorización y ejecuta la prueba con curl para confirmar la ubicación de la IP.
5. 5Empieza con pocas solicitudes en paralelo y súbelas poco a poco mientras vigilas los códigos de respuesta.

Empieza con un número bajo en paralelo y súbelo solo cuando la tasa de errores se vea estable. Dónde introducir la configuración en cada herramienta se explica en el inicio rápido.

Los proxies de centro de datos están disponibles en 18 países, centrados en lugares con muchas instalaciones de servidores como Estados Unidos, Reino Unido, Alemania, Japón y Singapur.

Elige según dos criterios. Si necesitas lo que ven los usuarios de un país, como en las pruebas de localización, elige ese país. Si lo que importa es la velocidad pura, elige un país cercano a los servidores del destino para obtener respuestas más rápidas. Los productos por país aparecen en ubicaciones, y una página como IP de Singapur muestra de un vistazo qué productos puedes usar allí.

Como los proxies de centro de datos son rápidos, también pueden cargar fácilmente un destino. Encontrar el ritmo al que el destino sigue respondiendo con normalidad te da al final más datos que funcionar a máxima velocidad.

• Cuando aumenten las respuestas 429, reduce a la mitad las solicitudes en paralelo y luego vuelve a subirlas despacio.
• Fija un límite aparte de solicitudes por dominio.
• Respeta robots.txt, las condiciones del servicio y lo que está pensado para ser público.
• Están prohibidas las pruebas de carga o los ataques que puedan tumbar un destino.

Si los bloqueos continúan, no fuerces. Reduce la velocidad o pasa a otro producto.

Ejecuta un trabajo de muestra con unas pocas IP y mide primero la tasa de bloqueo. Si los resultados son buenos, añade IP para ampliar y envía solo las partes bloqueadas a otro producto. Consulta los importes de recarga en precios y luego regístrate para obtener tu token.