数据处理平台架构中的SMACK组合:Spark、Mesos、Akka、Cassandra以及Kafka

  • 时间:
  • 浏览:4
  • 来源:彩神大发幸运飞艇_神彩大发幸运飞艇官方

Cassandra - 一套分布式高可用性数据库,旨在跨太多座数据中心防止大规模数据。

Akka - 一套用于在JVM之上构建高并发、分布式及弹性消息驱动型tcp连接运行运行的工具包与运行时。

Spark - 一套高速通用型引擎,用于实现分布式大规模数据防止任务。

Mesos - 集群资源管理系统,都都可以立足于分布式tcp连接运行运行提供行之有效的资源隔离与共享能力。

在今天的文章中,你们都你们都将着重探讨怎么才能 才能 利用SMACK(即Spark、Mesos、Akka、Cassandra以及Kafka)堆栈构建可扩展数据防止平台。真是这套堆栈仅由数个简单部分组成,但其都都可以实现几滴 不同系统设计。除了纯粹的批量可能性流防止机制之外,你们都你们都亦可借此实现繁复的Lambda以及Kappa架构。

在本文结速了了阐述刚刚,你们都你们都你们都首先立足于已有生产项目经验从设计与示例入手进行说明。