¿Cuán extendido es el uso de servidores proxy en ISP y universidades? ¿Hay alguna forma de saber cuánto tráfico de mi sitio utiliza un servidor proxy como Squid para el almacenamiento en caché?

Creo que la mayoría, si no todos los ISP, usan alguna forma de almacenamiento en caché.

También creo que la mayoría de las universidades tendrían alguna forma de almacenamiento en caché.

El uso de calamar es muy improbable en todos los ISP, excepto en los más pequeños, porque cuando lo usé por última vez en un ISP, el caché seguía cayendo bajo la carga. Parece que recuerdo un par de ISP ligeramente más grandes que lograron sintonizar y hacer que funcione. aunque recuerdo a los otros ingenieros de ISP quejándose sobre el mantenimiento cuando comenzó a escalar.

Alrededor de 2002, la mayoría de los ISP de Nueva Zelanda se habían trasladado a un caché industrial como un flujo de caché, etc. y muy pocos todavía usaban Squid. Para pequeñas empresas, grandes empresas y Unis, ¿creo que todavía usan calamares?

De lo que tengo barba es que más recientemente para algunos ISPS midieron la carga / costo de la memoria caché, etc. El costo de las memorias caché directas puede no acumularse como solía hacerlo (por ejemplo, la velocidad de la CPU para entregar y la memoria caché a veces era más lenta que la Internet real) pero esto se debió al tamaño de la memoria caché frente a la gran carga de ancho de banda y el costo más barato del ancho de banda. Escuché que esto ocurre en 2 ISP.

La mayoría de los ISP de tamaño decente han puesto en caché Akimai, Google y YouTube, por lo que esto está colocando el alojamiento del contenido más popular dentro de la red de ISP.

Akimai es una empresa internacional de hosting masiva que se especializa en hosting rápido para las empresas realmente grandes (US Army, Microsoft, Apple, etc.). En realidad, proporcionan un servidor gratuito para que los ISP alojen, por lo que estos sitios populares y de clase alta obtienen una entrega muy rápida.

Google (incluido YouTube) también distribuye servidores de caché internacionales.

Entonces en resumen
——————–
La mayoría del caché de ISP
Los grandes ISP no usarán calamares
Algunos han eliminado las opciones de caché para mejorar el rendimiento o el precio, pero esta no es la corriente principal
Akimai y Google efectivamente ahora proporcionan esta función

Fuentes: rumores y rumores de geeks con los que he sido compañero, o cosas que yo mismo he visto.

El almacenamiento en caché dejó de moda para los proveedores de servicios de Internet hace varios años. Esto se debió en gran parte al cambio de los patrones de tráfico (Streaming Video Content), los costos a la baja del ancho de banda, el costo de los sistemas de almacenamiento en caché / tráfico que aumentaron a medida que aumentaba el ancho de banda por sub, y los problemas técnicos generales con el almacenamiento en caché.

Hoy en día, muy pocos (si los hay) proveedores importantes almacenan en caché las páginas web normales. Hay cachés para contenido de video, pero son complejos y, por lo que he visto, son un éxito mixto. Si puede obtener el número correcto de suscriptores por caché “correcto”, parecen funcionar, pero tienen que ser administrados y para muchos proveedores es más barato y más fácil comprar más ancho de banda.

Llamar a Akamai Technologies (empresa) un caché no es realmente preciso, son una Red de entrega de contenido (CDN) y, a diferencia de un caché, son el punto de origen del contenido que alojan. Lo mismo se aplica a Google (compañía) / YouTube y Netflix (producto).

Para la pregunta sobre la detección de proxy, vea el encabezado HTTP X-Fordered-For. Registra y analiza.

Aunque muchos ISP y universidades usan Squid para el almacenamiento en caché, no hay una manera de saber cuánto tráfico de un sitio web utiliza un servidor proxy.