Con la rápida expansión del Internet de las Cosas (IoT), redes sociales, aplicaciones móviles e innumerables canales de información digital, las empresas generan y almacenan enormes cantidades de datos multi-estructurados sin poder combinarlos de una forma que genere conocimiento útil para el negocio.
Hoy en día, tecnologías OpenSource como Hortonworks, Hive, Spark y muchas otras, combinadas con la capacidad de procesamiento de Amazon Web Services (AWS) o Microsoft Azure, ponen a disposición de todos algunas posibilidades que antes solo tenían las grandes compañías y gobiernos.
Netlabs, principal partner de Hadoop en Uruguay, acompaña a estas empresas en el camino de comprender como las nuevas herramientas y procesos de BigData pueden transformar su organización. Trabajamos en conjunto con sólidos partners en Data Science para modelar e implementar soluciones de BigData altamente escalables, capaces de analizar grandes volúmenes de datos y generar predicciones en tiempo real mediante algoritmos de Machine Learning.
Esta inteligencia en tiempo real, acompañada de una estrategia para recolectar, almacenar, transformar y visualizar estos datos para la toma ráida de decisiones, es el diferencial competitivo que todos los negocios están buscando en la actualidad.
Algunas etapas del proceso y tecnologías involucradas:
- Instalación y Configuración de Cloudera, Hortonworks, y otras distribuciones de Hadoop.
- Procesamiento de datos utilizando Hive, Sqoop, Pig, Spark y Nifi.
- Desarrollo en Java, Python y Scala.
- Integración con Amazon Web Services (AWS) y Microsoft Azure.
- Bases de datos NoSQL como MongoDB, HBase y otras.
- Análisis relacional con Redshift, Vertica, Teradata y otros.
- Analytics con Spark, R o Python.
- Visualización y análisis con Tableau, Zeppelin, Datameer y Alpine Data Labs.