The 2020 Data & AI Landscape

El VC de FirstMark, Matt Turck, resume en una sola imagen el mapa de la industria de datos e inteligencia artificial de 2020 y su explicación.

• Principales tendencias de Data Infra

→ El stack de datos moderno se vuelve mainstream: Snowflake, BigQuery, RedShift, DBT, Fivetran, Stitch, Looker..

→ ETL vs ELT

→ Automatización de la ingeniería de datos

→ El auge de los analistas de datos

→ ¿Integración de data lake y data warehouse? = Data Lakehouse o Unified Analytics Warehouse

→ La complejidad sigue presente:

⇨ Aumento de la demanda de tecnologías de streaming en tiempo real

⇨ Motores de orquestación: comenzando con Airflow y Luigi, hasta motores de nueva generación como Prefect, Dagster, Kedro, Metaflow, etc.

⇨ Data Lineage & DataOps: LinkedIn (Datahub), WeWork (Marquez), Lyft (Admunsen), Uber (Databook)

• Principales tendencias de Analytics & Enterprise AI

→ Época de auge para las plataformas de ciencia de datos y machine learning (DSML)

→ El ML realmente se despliega e integra

⇨ MLOps

⇨ AI Governance, AI fairness

⇨ Decision Science (optimization, simulation)

→ El año del NLP: GPT-3, BERT, ELECTRA

• Principales inversiones, exits e IPO

→ IPO: Snowflake, Palantir, Datadog, Sumo Logic, Dynatrace, Cloudflare

→ M&A: ARM (NVIDIA), SignalFX (Splunk), Habana Labs (Intel), Fitbit (Google), Moovit (Intel)

→ Adquisiciones pequeñas pero interesantes: MapR (HPE), HortonWorks (Cloudera), Arcadia Data (Cloudera), Redash (Databricks)..