Como extender la capacidad Analítica conectando

Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Como extender la capacidad
Analítica conectando fuentes
de datos Big Data en ArcGIS
César Rodríguez
Reinaldo Cartagena
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Agenda
•
Fundamentos para Big Data
•
La Analítica y Big Data generar conocimiento
•
ArcGIS conecta fuentes Big Data
•
Arquitectura de Big Data con ArcGIS
•
Herramientas de geoprocesamiento para Hadoop
•
Integrando las herramientas de geoprocesamiento Big Data en ArcGIS
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Big Data
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
ArcGIS conecta fuentes Big Data
o Patrones de comportamiento.
o Oportunidades de negocio.
o Geoenriquecimiento.
o Mapas Inteligentes.
Analítica y Big Data para desarrollar conocimiento acerca del entorno Empresarial.
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Oportunidad Big Data
Interacción con aplicaciones
Gestión de datos y análisis
Contenidos geográficos
Comportamientos en Mapas
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Patrones Analíticos
Datos Históricos
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Las directrices de 5 V’s y ArcGIS
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
La datificación de nuestro mundo
Datos de Actividades
Multimedia
Datos de sensores
Datos de
Conversación
Reproductores
Compartir
Compartir
Email
Colectores
Publicar
Localización
Redes sociales
Buscadores
Velocidad y dirección
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Valor de su Big Data
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Fuentes Big Data
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
ArcGIS conecta los Cluster de Hadoop
Plataforma
Big Data
Plataforma
ArcGIS
GIS Tools for
Hadoop
 Tarda minutos en su procesamiento
 Análisis distribuido espacial
 Procesando millones de registros
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Arquitectura de Big Data con ArcGIS
Plataforma ArcGIS
•
•
•
Python geoprocesing Scripts
Análisis eficiente
Procesar Billones de registros
Cluster de Hadoop
Oozie
HDFS
ArcGIS conecta los Cluster de Hadoop
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
GIS Tools for Hadoop
Geoprocessing tools
Copy to HDFS
Copy from HDFS
Features to JSON
JSON to Features
Execute Workflow
https://github.com/Esri/geometry-api-java
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Demostración
¿Cómo obtener herramientas de
geoprocesamiento para Hadoop?
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
ArcGIS Habilita soluciones Big Data
Operaciones
ArcGIS for
Server
ArcGIS GeoEvent
Processor for Server
ESRI Geometry
API for Java
open source
toolkit
Hadoop
GitHub
ArcGIS Pro
Geoprocessing
Tools for
Hadoop
IBM
MongoDB
Microsoft
SAP HANA
Spatial
framework for
Hadoop
Integrar
Esri Location Analytics
ArcGIS for
Desktop
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Recursos de IT
Big Data permite
desarrollar conocimiento
Analytics
Acceso a los recursos
Mobility
Plataforma
ArcGIS
Security
Drivers mejorados
Cloud
Seguridad un factor
clave
Estos cuatro pilares de IT, son fundamentales para el diseño y la implementación SIG con plataforma ArcGIS
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Agregar capacidades GIS a Hadoop
Plataforma ArcGIS
Enfoque general
−
−
−
−
Clipping
Filtering
Grouping
…
Plataforma Big Data
ArcGIS Pro
ArcGIS for Desktop
ArcGIS Online
GitHub
GIS Tools for Hadoop
ArcGIS for Server
Open-source software framework
Apache Hive
SQL queries over petabytes of data
HDFS (Hadoop Distributed File System)
Distribuido, escalable, tolerante a fallos,
HW commodity
https://github.com/Esri/spatial-framework-for-hadoop
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Funciones ArcGIS con Big Data
Fuentes Big Data
Posición
Factores Socioeconómicos
Riesgo,
Incertidumbre,
Simulación
Factores
meteorológicos
Facebook,
Twitter, …..
Back-Office, Front-Office
& Hadoop
Análisis Geográfico
Plaforma ArcGIS
Patrones y tendencias
Comportamiento y relaciones
Redes sociales
Integración de datos
Variables de negocio
Análisis Histórico
transacciones
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Visualizar
Analizar
Tendencias
Pronósticos
Simulaciones
Tiempo real
Compartir mapas
Volúmenes datos
Demostración
Integrando las herramientas de
geoprocesamiento Big Data en
ArcGIS
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Modelo Geoprocesamiento Tools for Hadoop
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Función geográfica de Polígonos de Agregación
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Hadoop Distributed File System (HDFS)
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Agregación Espacial
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Reflexión sobre Big Data
“Big data is not about the data.”
Haciendo énfasis, si bien los datos son abundantes y fáciles de
recolectar, “el valor real está en el análisis”
– Gary King
Harvard University
Director, Inst. For Quantitative Social Science
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Recursos
Esri Colombia
http://www.esri.co
Herramientas SIG para hadoop
https://github.com/Esri/gis-tools-for-hadoop
Herramientas de geoprocesamiento para hadoop
https://github.com/Esri/geoprocessing-tools-for-hadoop
Comunidad Esri
http://geonet.esri.com/
Síganos en:
@esricol
Esri Colombia S.A.S
Esri Colombia
Contáctenos: www.esri.co
[email protected]
[email protected]
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Charlas de Interés
Análisis espacial con ArcGIS en la construcción de infraestructuras para ciudades
del futuro (Camilo Mora - Hector Torres)
Fecha: Viernes 25 de Septiembre
Salón: Sol 3
Hora: 8:30 am
ArcGIS for Server & Portal For ArcGIS: El camino a seguir para maximizar el uso de la
plataforma ESRI (Alfredo Alarcón - Alexander Mogollón)
Fecha: Viernes 25 de Septiembre
Salón: Sol 4
Hora: 8:30 am
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS
Como extender la capacidad Analítica conectando fuentes de datos Big Data en ArcGIS