Diseñando arquitecturas: Big Data + tiempo real - Inés Huertas @quierodata

Todo el mundo habla de plataformas Big Data, pero su diseño y despliegue no es cosa sencilla, ¿Qué utilizamos para ingestar los datos en tiempo real? ¿Cómo lo procesamos? ¿Dónde lo almacenamos? Además hay que tener en cuenta que todos estos componentes hay que integrarlos para que funcionen a la perfección una vez desplegados.
Durante la charla mostraremos como desplegar una arquitectura Big Data basada en Hadoop capaz de ingestar en tiempo real grandes volúmenes de datos, evaluaremos las principales opciones que hay en el mercado OpenSource desde la ingesta (Nifi, Flume, Kafka...) pasando por el almacenamiento en Hadoop y su explotación (Hive, ElasticSearch, Solr...).
Finalmente realizaremos una demo de como encajan estas piezas y lo lanzaremos contra Twitter para ver su funcionamiento completo.
------------------
@quierodata
Data Scientist y cofundadora de Datatons (www.datatons.com), Ex-Sysadmin y enamorada de los datos, desarrolla proyectos de analítica sobre plataforma Hadoop no solo enfocado en el tratamiento dato sino también en la parte del diseño dada su experiencia en la administración de sistemas Big Data y HPC.
Actualmente participa también como coorganizadora del grupo de R-ladies Madrid y el meetup de Data Science Madrid intentando generar una comunidad donde todo el mundo que tenga interés pueda participar e iniciarse en el mundo de los datos.
¿Y si lo escuchas mientras vas al trabajo o te pones en forma? www.ivoox.com/2...
Todos los videos de CODEMOTION 2017
• Codemotion 2017
Descarga gratis la versión digital del libro de Roberto Canales “Conversaciones con CEOs y CIOs sobre Transformación Digital y Metodologías Ágiles ” goo.gl/i2zZtJ
Suscríbete a nuestra newsletter;
goo.gl/5jc6uP
Facebook;
goo.gl/o8HrWX
Twitter;
goo.gl/MU5pUQ
LinkedIn
goo.gl/2On7Fj/