Guardar Access logs de un Load Balancer en S3

Si tenemos una o varias instancias, por ejemplo, de Nginx para hacer de Webserver, es muy probable que nuestro Access log esté a petar de accesos debido a las múltiples escrituras que el própio Nginx le hará. Por ello es muy interesante deshabilitar la inserción de registros y que el própio Load Balancer de AWS se encargue de guardarlo, por ejemplo, en S3. Para deshabilitarlo en el fichero de configuración del Site de nginx, se tiene que hacer por cada Dominio publicado, solamente tendremos que añadir ésta línea: [Leer más]

Inserción de datos masivos en AWS Kinesis y AWS Redshift

Si tenemos una necesidad de inserción masiva de datos, podemos disponer, a la vez, de varios Servicios de AWS como son: AWS Load Balancer, ASG EC2, AWS Kinesis Streams y AWS redshift ellos nos van a dar la poténcia necesaria para tener una más que correcta Pipeline de inserción, buffer y posterior filtrado y trato de los datos capturado. Sin duda, esta Tipología de Arquitectura no es válida para cualquier tipo de inserción de datos, muchas veces los datos que se ingieren necesitan un Realtime que un proceso de Buffering no les puede dar. [Leer más]