Data Ingestion & Distribution by Apache NiFi

¿Podemos poner en un ring de boxeo dos tipologías de arquitecturas como son la ingestión de datos mediante BPMs o con eventos? Creo no es acertado ponerlas a competir pero si, podemos explicarlas por separado y afrontar, según nuestras necesidades y/o posibilidades, cual de las arquitecturas podemos llevar a cabo. También es cierto que muchas veces nos lo encontraremos dado, por ejemplo cuando tenemos delante una aplicación o servicio más tradicional, sea un ERP, un CRM, etc… aquí será muy complejo el poder llegar a un proceso de generación de eventos ya que, seguramente, deberíamos afrontar una transformación casi por completo de la aplicación. [Leer más]

Los Beneficios (con seguridad) de los Metadatos (Apache Atlas + Ranger + Kafka)

¿Qué pasa cuando queremos aplicar seguridad a nuestros Datos? Por lo general podemos aplicar muchos tipos como también, distintas capas de seguridad. Por ejemplo lo más frecuente sería una validación mediante OpenID para los usuarios y mediante API Key para los usos programáticos, con una siguiente capa mediante validación IAM para el uso entre infraestructuras o componente más “físicos” y podemos continuar extendiendo mucho más allá, no quiero profundizar ahora mismo con ello… mi pregunta, mejorada, es la siguiente: ¿Qué pasa cuando queremos aplicar seguridad a nuestros Datos que se consumem mediante subscripción? [Leer más]

Democratización de datos, complementando una Estrategia Data Centric

Muchas de las empresas y más las llamadas Data Centric pueden tener estrategias de Gobierno del Dato (de sus datos) pero, seguramente con toda probabilidad, no tendrán sus datos democratizados. ¿Qué entendemos por “Democratización de datos”?. Lo miraré de resolver con otra pregunta: ¿Cuántos de los nuevos productos o nuevas releases nacen mal o más tarde de lo previsto porque no se conocen bien las fuentes origen de los datos que requerimos? [Leer más]

Un SuperSensor IoT en nuestra casa (Smart Homes)

Empezamos con una colección de Post para explicar ejemplos de aplicación del IoT, es por ello que no hay mejor manera que empezar con un SuperSensor. A continuación podemos verlo en marcha: Este sensor puede monitorear casi toda la actividad en nuestro hogar, detectando la fluctuación de temperatura, el uso de electricidad, los sonidos, el movimiento y la duración de los eventos. Podríamos decir que es una perfecta base para construir hogares verdaderamente “inteligentes”, donde las distintas actividades que realizamos son rastreadas, controladas remotamente y automatizadas según creamos convenientemente y así lo configuremos. [Leer más]

Pla Barcelona Ciutat Digital (Pla digital de l'Ajuntament de Barcelona).

Barcelona arrancó en septiembre de 2016 un más que importante proceso de Transformación digital. Aunque, para mi, creo va más allá de su Transformación digital ya que, también es un cambio de paradigma, de formas de colaborar con la administración pública o de formación y capacitación de sus propios trabajadores. Me parece brillante el trabajo que está haciendo l’Ajuntament de Barcelona y, por ello, dedico este post a poder explicarlo desde mi punto de vista. [Leer más]

GDPR y nueva Gobernanza de Datos

La Nueva regulación europea sobre la Protección de Datos Personales, la GDPR nos marca muy claramente como se deben obtener, tratar, guardar y destruir estos. Para ello, las nuevas Arquitecturas de Gobierno del Dato que tienen que moverse dentro de la nueva Regulación, deberán estar totalmente orientadas a la Seguridad de los Datos. Ya no hay separación entre la Arquitectura Big Data, propiamente dicha como aquella Seguridad necesaria para poder cumplir con la Regulación. [Leer más]

Accesibilidad Digital

m4Social es una iniciativa que fomenta el valor social del móvil para el desarrollo de personas y comunidades. Es una de las más que interesantes iniciativas que nacieron en Barcelona tras la Barcelona Mobile World Capital. El pasado 25 de octubre, dentro de las jornadas “m4Socialday: Accessibilitat digital. Les TIC per a tothom” se presentó una Guía de buenas prácticas para el diseño accesible de aplicaciones web o móvil. También, en esta se incluyen casos de éxito que han desarrollado organizaciones, tanto públicas como privadas, que nos pueden ser de utilidad y ejemplo. [Leer más]

Instalación y Configuración de Apache Ambari, administrar y monitorear Cluster Apache Hadoop

Bajo la licencia de la Apache Foundation, Apache Ambari, nació con el objetivo de simplificar la gestión de Hadoop desarrollando software para aprovisionar, administrar y monitorear los clústeres de Apache Hadoop. Ambari proporciona una interfaz de usuario web de administración de Hadoop muy intuitiva y fácil de usar respaldada por sus API RESTful. Ambari nos va a permitir realizar, por ejemplo, las siguientes acciones: Provisión de un clúster de Hadoop [Leer más]

GDPR, General Data Protection Regulation for Dummies

GDPR son las siglas de “General Data Protection Regulation” y nace en abril de 2016 en el Marco de la Unión Europea. Dicha es de obligado cumplimiento y su fecha límite es mayo de 2018. A su vez, en España, la agencia española de protección de datos está supervisando su cumplimiento y establece de puente con el Marco Europeo. En España no es extraño el hablar de Protección de Datos, tenemos anteriores marcos de referencia como la “LOPD” o la “LSSI”. [Leer más]

Teoría de Grafos aplicada al Gobierno del Dato

La Teoría de Grafos aplicada al mundo Data nos dice que una base de datos, orientada a grafos, representa la información como nodos de un grafo y sus relaciones con las aristas del mismo, de manera que se pueda usar dicha teoría para recorrer la base de datos ya que esta puede describir atributos de los nodos (entidades) y las aristas (relaciones). Bien, dicha afirmación que es sacada casi textual de la Wikipedia, “amañada” un poco a mi interés, nos dice claramente que podemos crear una estructura de control y Gobierno del Dato que a partir de la descripción de los atributos podamos generar tantas relaciones como queramos. [Leer más]