Mejor proyecto big data
•
0 gefällt mir•750 views
Proyecto Big Data realizado para Euskaltel, operador vasco de telefonía móvil. Premios open awards 2017, los premios más importantes del sector de las tecnologías abiertas
Empfohlen
Empfohlen
Weitere ähnliche Inhalte
Andere mochten auch
Andere mochten auch (20)
Ähnlich wie Mejor proyecto big data
Ähnlich wie Mejor proyecto big data (20)
Mehr von zylk net
Mehr von zylk net (16)
Kürzlich hochgeladen
Kürzlich hochgeladen (10)
Mejor proyecto big data
- 1. Candidatura Mejor Proyecto BigData realizado para
- 2. Integrado con fuentes de datos Captura de datos/sensores Tiempo real Almacenamiento distribuido y Almacenamiento en cloud Arquitectura lambda procesada con herramientas de Hortonworks Analiza comportamientos machine learning Visualización en tiempo real y en Dashboards personalizados Servicios Consultoría Industria 4.0 Telecos Smarcities Sanitario ¿Qué ofrecemos en ZYLK? Implantamos en su compañía una solución completa de analítica avanzada basada en la suite de Hortonworks y en nuestro know-how Le permitimos sacar valor a sus datos
- 3. Luego aplicamos una capa de analítica avanzada Captura Integración Arquitectura Análisis Casos de Uso Fuente de datos Visualización Utilizamos arquitectura lambda en tiempo real con las herramientas Big Data de Hortonworks Extracción Proceso VisualizaciónAlmacenaje ¿Cómo lo hacemos? Data Analysis Predicción
- 4. ¿Cómo lo hacemos? Hortonworks Dataflow y Ambari Resource Manager Se necesita un periodo de consulta inicial seguido de la adquisición de datos API’s para ofrecer un valor de modelización del sistema y técnicas de machine learning
- 5. Casos de Éxito : EUSKALTEL La Inteligencia del Dato al Servicio de las Telecomunicaciones
- 6. Big Data Smart Data ¿Cómo puedo aportar valor a mis clientes? ¿Cómo convencer a negocio?
- 7. x2.5 year-on-year Mejoramos la experiencia del usuario y Mejoramos procesos de negocio
- 8. Caso 1: Widget consumo de datos en T.R. Experiencia de usuario
- 9. Caso 2: Prevención de Averías en Red Procesos de negocio
- 10. ¿Cómo puedo aportar valor a terceros con mis datos?
- 11. Caso 3: Replicate Project http://replicate-project.eu/ Este proyecto ha recibido fondos del programa de investigación e innovación H2020 de la Unión Europea en el marco del contrato nº 691735 Mejoramos la sostenibilidad de los recursos de la ciudad
- 12. Euskaltel: Replicate Project El Dato en las Telecomunicaciones ü Aproximadamente 150 millones de eventos/día ingeridos en Apache Kafka ü 100 cores, 300 GB de memoria, 4 TB HDFS storage OBJETIVO Disponer de un sistema de detección de eventos en tiempo real a fin de mejorar la experiencia de usuario y la sostenibilidad de recursos de una ciudad gracias al mantenimiento predictivo Representación como una serie temporal #peticiones #fallos #código error #... Análisis: Detección de fallos a partir de umbrales obtenidos a partir de un periodo sin fallos
- 13. Replicate Project Smart Mobility Simulación Este proyecto ha recibido fondos del programa de investigación e innovación H2020 de la Unión Europea en el marco del contrato nº 691735 Wifi Kalean + Big Data Datos agregados, anonimizados y en tiempo real PREDICCIÓN Y MEJORA EN LA TOMA DE DECISIONES ü Tráfico ü Obras en la ciudad ü Parkings ü Rutas turísticas etc..
- 14. Replicate Project Smart Mobility Simulación Este proyecto ha recibido fondos del programa de investigación e innovación H2020 de la Unión Europea en el marco del contrato nº 691735 S M A R T M O B I L I T Y Mapa de calor con datos reales
- 15. Ejemplo: Código 200 # peticiones (LTE & Wifi Kalean ): millones de conexiones por día Análisis código éxito (OK) Los umbrales no siempre funcionan
- 16. Ejemplo: Código 200 Detección de Outliers Estadísticos en ventanas de tiempo y algoritmos de regresión
- 18. Arquitectura Multicapa API Ingesta ü Procesos ETL ü Back Pressure Control & Guaranted Delivery 1
- 21. Arquitectura Multicapa API Datos Procesos Distribuidos ü Programación Funcional ü Analítica Avanzada o Ventanas o Heurísticos o Algoritmos de ML 4
- 22. Arquitectura Multicapa API Gateway EAG Datos Agregados y anonimizados 5
- 23. Time & Windows Event time Processing time Ingestion time
- 24. Visualización Zeppelin ü Intérpretes ü Unificación de fuentes ü Computación bajo demanda ü Standalone Vs. cluster
- 25. Casos de Uso y Conclusiones Canal Online ü Experiencia de Usuario Marketing ü Dimensionamiento de servicios Replicate ü El dato como valor añadido ¿Qué valor aporta? ü Facilita el dimensionado de servicios ü Mejora de la experiencia de usuario ü Añade funcionalidad sin penalizar transacciones (Canal online, aplicación móvil) ü Elimina Islas (un único sumidero de información)