DoubleCloud

DoubleCloud: Construye una Infraestructura de Análisis de Datos en Un Día

DoubleCloud era una plataforma diseñada para optimizar los flujos de datos ofreciendo soluciones de código abierto totalmente gestionadas y sin mantenimiento. La plataforma tenía como objetivo ahorrar tiempo y costes, integrando todo, desde la ingestión de datos hasta la visualización en tiempo real. Aunque DoubleCloud ha cesado sus operaciones, sus funcionalidades y características ofrecen valiosas perspectivas sobre la infraestructura moderna de análisis de datos.

¿Qué era DoubleCloud? DoubleCloud proporcionaba un conjunto de servicios y herramientas de código abierto gestionados, diseñados para simplificar la creación y el mantenimiento de soluciones de análisis de datos. Permitía a los usuarios aprovechar las tecnologías de código abierto sin la sobrecarga de gestionar la infraestructura ellos mismos.

¿Cómo funcionaba DoubleCloud? La plataforma ofrecía varios componentes clave:

• Servicios de Código Abierto: Servicios gestionados para ClickHouse, Kafka y Airflow en Amazon Web Services (AWS) o Google Cloud Platform (GCP).
• Motor de Integración de Datos: Una herramienta ELT (Extract, Load, Transform) sin código para la sincronización de datos en tiempo real entre sistemas.
• Visualización en Tiempo Real: Herramientas de visualización de datos de código abierto gestionadas para la creación de gráficos y paneles.

Características y Beneficios Clave:

• Servicios Totalmente Gestionados: DoubleCloud se encargaba de las tareas de mantenimiento rutinarias, como las actualizaciones de software, el sharding, las copias de seguridad y el auto-escalado.
• Rendimiento Excepcional: Construida sobre ClickHouse, la plataforma permitía el análisis en tiempo real con velocidades de consulta hasta 100 veces más rápidas que los principales DBMS.
• Experiencia del Desarrollador: Las características incluían la implementación automatizada utilizando Terraform o API, la exportación de métricas a través de Prometheus, la integración de registros, un IDE SQL basado en la web y las transformaciones de datos integradas utilizando dbt.
• Seguridad: Aplicación del cifrado TLS 1.2+, VMs dedicadas para la entrega de software y cumplimiento de ISO 27001, SOC 2, GDPR y otras normas de la industria.
• Rentabilidad: Precios de pago por uso, opciones BYOC (Bring Your Own Cloud), almacenamiento híbrido S3 y servicios gratuitos como copias de seguridad automáticas y tráfico entre AZ.

Casos de Uso:

DoubleCloud atendía a una variedad de casos de uso, incluyendo:

• Análisis Deportivo en Tiempo Real: LSports mejoró su velocidad de consulta en 180 veces utilizando DoubleCloud y ClickHouse.
• Registro y Métricas: Neon mejoró la granularidad de las métricas de consumo de recursos para los nuevos planes de suscripción.
• Análisis para el Usuario Final: Yango Tech lanzó análisis orientados a los socios en sólo una semana.
• Monitorización: Honeybadger migró de Elasticsearch para impulsar el rendimiento y lanzar un nuevo servicio de monitorización de aplicaciones de salud.

¿Por qué era importante DoubleCloud? DoubleCloud pretendía democratizar el acceso a potentes herramientas de análisis de datos simplificando la implementación y gestión de tecnologías de código abierto. Permitió a las empresas centrarse en el desarrollo de productos en lugar del mantenimiento de la infraestructura.

Tecnologías Clave:

• ClickHouse: Una base de datos OLAP (Online Analytical Processing) de código abierto conocida por su velocidad y eficiencia en la consulta de grandes conjuntos de datos. ClickHouse es fundamental para la promesa de DoubleCloud de ofrecer análisis en tiempo real.
• Apache Kafka: Una plataforma de streaming de eventos distribuida utilizada para la construcción de flujos de datos en tiempo real y aplicaciones de streaming.
• Apache Airflow: Una plataforma de gestión de flujos de trabajo para la creación, programación y supervisión de flujos de datos.

Cómo usar (Solía usar) DoubleCloud:

1. Regístrese y obtenga créditos gratuitos.
2. Seleccione un proveedor de nube, una región y los recursos necesarios.
3. Transfiera datos a ClickHouse en tiempo real.
4. Disfrute de un rendimiento y una velocidad excepcionales.

Conclusión:

Aunque DoubleCloud ya no está operativo, ejemplificó cómo los servicios gestionados de código abierto podían simplificar la infraestructura de análisis de datos. Su enfoque en el rendimiento, la experiencia del desarrollador, la seguridad y la rentabilidad proporcionó una solución convincente para las empresas que buscan aprovechar el poder de los datos.