DoubleCloud

DoubleCloud: 一天内构建数据分析基础设施

DoubleCloud 是一个旨在通过提供完全托管、零维护的开源解决方案来简化数据管道的平台。该平台旨在节省时间和成本，集成了从数据摄取到实时可视化的所有功能。尽管 DoubleCloud 已经停止运营，但它的功能和特性为现代数据分析基础设施提供了宝贵的见解。

什么是 DoubleCloud？ DoubleCloud 提供了一套托管的开源服务和工具，旨在简化数据分析解决方案的创建和维护。它允许用户利用开源技术，而无需承担管理基础设施本身的开销。

DoubleCloud 如何工作？ 该平台提供几个关键组件：

• 开源服务： 在 Amazon Web Services (AWS) 或 Google Cloud Platform (GCP) 上为 ClickHouse、Kafka 和 Airflow 提供的托管服务。
• 数据集成引擎： 一种无需编码的 ELT（提取、加载、转换）工具，用于系统之间的实时数据同步。
• 实时可视化： 用于构建图表和仪表板的托管开源数据可视化工具。

主要特性和优势：

• 完全托管的服务： DoubleCloud 处理例行维护任务，例如软件更新、分片、备份和自动扩展。
• 卓越的性能： 基于 ClickHouse 构建，该平台支持实时分析，查询速度比领先的 DBMS 快 100 倍。
• 开发者体验： 功能包括使用 Terraform 或 API 进行自动部署、通过 Prometheus 导出指标、日志集成、基于 Web 的 SQL IDE 以及使用 dbt 进行的内置数据转换。
• 安全性： 强制执行 TLS 1.2+ 加密，为软件交付提供专用 VM，并符合 ISO 27001、SOC 2、GDPR 和其他行业标准。
• 成本效益： 按需付费定价、BYOC（自带云）选项、S3 混合存储以及自动备份和跨 AZ 流量等免费服务。

使用案例：

DoubleCloud 满足各种使用案例，包括：

• 实时体育分析： LSports 使用 DoubleCloud 和 ClickHouse 将查询速度提高了 180 倍。
• 日志记录和指标： Neon 提高了新订阅计划的资源消耗指标的粒度。
• 最终用户分析： Yango Tech 仅用一周时间就推出了面向合作伙伴的分析。
• 监控： Honeybadger 从 Elasticsearch 迁移，以提高性能并启动新的健康应用程序监控服务。

为什么 DoubleCloud 很重要？ DoubleCloud 旨在通过简化开源技术的部署和管理，使人们能够更轻松地使用强大的数据分析工具。它允许公司专注于产品开发，而不是基础设施维护。

关键技术：

• ClickHouse： 一种开源 OLAP（在线分析处理）数据库，以其在查询大型数据集方面的速度和效率而闻名。ClickHouse 是 DoubleCloud 提供实时分析承诺的核心。
• Apache Kafka： 一个分布式事件流平台，用于构建实时数据管道和流式应用程序。
• Apache Airflow： 一个用于创作、调度和监控数据管道的工作流管理平台。

如何使用（曾经使用）DoubleCloud：

1. 注册并获得免费积分。
2. 选择云提供商、区域和必要的资源。
3. 将数据实时传输到 ClickHouse。
4. 享受卓越的性能和速度。

结论：

虽然 DoubleCloud 不再运营，但它 exemplifie 了托管开源服务如何简化数据分析基础设施。它对性能、开发者体验、安全性以及成本效益的关注为希望利用数据力量的公司提供了一个引人注目的解决方案。