Allen AI envía plataforma OlmoEarth para inferencia geospacial a escala continental; modelos de satélite de 10TB
Allen AI lanzó la Plataforma OlmoEarth, una infraestructura administrada para ejecutar modelos de fundación de observación terrestre a escala continental. La plataforma se basa en modelos de la familia OlmoEarth, pre-entrenados en ~10 terabytes de datos de satélite multimódales, y se destina a gobiernos, ONG y organizaciones ambientales que realizan monitoreo de deforestación, evaluación de seguridad alimentaria y mapeo de riesgo de incendios. La plataforma agrupa adquisición de datos, ajuste fino de modelos, inferencia a larga escala y procesamiento de salida— resolviendo el ciclo de vida completo para organizaciones que carecen de equipos de infraestructura de ML dedicados.
El desafío de ingeniería es severo: la imaginería de satélite debe obtenerse en múltiples proveedores, alinearse a diferentes proyecciones y resoluciones, procesarse a escala continental y coserse en mapas geogeograficamente consistentes mientras el sistema se recupera de fallas de computación distribuida. OlmoEarth Run (la capa de ejecución) divide regiones geogeograficamente en miles de particiones independientes, luego miles de ventanas más pequeñas para inferencia paralela. Un trabajo reciente de mapeo de riesgo de incendios cubriendo toda América del Norte usó ~19.600 CPU y 994 GPU en paralelo, logrando 155x speedup (4.737 horas seriales → 30.5 horas de tiempo de reloj de pared). La plataforma logra fracciones de un centavo por kilómetro cuadrado de imaginería procesada.
Para arquitectos: Esta es ML Ops a nivel de producción aplicada a datos geospaciales. El pipeline de tres etapas (preparación de datos CPU → inferencia GPU → post-procesamiento CPU) es elegante— evita desperdiciar GPU costosa en trabajo vinculado a I/O. Los gobiernos y las orgs de conservación han estado restringidos por la falta de servicios administrados de extremo a extremo; una década de Allen AI operando Skylight y EarthRanger les enseñó esta brecha. Modelos abiertos + una plataforma administrada es un modelo defensible para el trabajo de impacto dirigido por misiones. Observe la adopción por verificación de créditos de carbono, evaluación de riesgo agrícola y orgs de adaptación al clima.
Fuentes
- Primary source
- huggingface.co
“The OlmoEarth models are our family of Earth observation foundation models, pretrained on roughly 10 terabytes of multimodal satellite data. Governments, NGOs, and other mission-driven organizations are already adapting OlmoEarth for applications including deforestation monitoring, food security, and wildfire risk.”
- huggingface.co
“Today, the platform can run inference across continent-scale areas in roughly a day, processing dozens of terabytes of imagery at a cost of fractions of a penny per square kilometer.”
- huggingface.co
“We recently used this approach to generate a wildfire-risk map covering all of North America. At peak, the run used roughly 19,600 CPUs and 994 GPUs in parallel, with network throughput exceeding 168 GB/s. That level of parallelism reduced an estimated 4,737 hours of serial compute to about 30.5 hours of wall-clock time—a 155× speedup.”