注册即时通讯云 注册客服云
云原生数据湖架构中的无服务器Kafka

发布于 2021-08-18 10:52:02 | 阅读 20858

人们需要了解如何在混合云上利用云原生和无服务器Apache Kafka来处理与数据湖互补的动态数据。而Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据。

快到起飞的Kafka,是如何设计的?

发布于 2021-07-07 14:38:25 | 阅读 18077

消息队列是分布式系统中重要的组件,在很多生产环境如商品抢购等需要控制并发量的场景下都需要用到。

因为从一次 Kafka 宕机,我明白了 Kafka 高可用原理

发布于 2021-06-29 10:58:38 | 阅读 21731

不管是传统的基于关系型数据库设计的系统,还是分布式的如 zookeeper 、 redis 、 Kafka 、 HDFS 等等,实现高可用的办法通常是采用冗余设计,通过冗余来解决节点宕机不可用问题。

图解Kafka的核心概念,一看就明白!

发布于 2021-05-13 19:03:44 | 阅读 20264

Kafka 是主流的消息流系统,其中的概念还是比较多的,下面通过图示的方式来梳理一下 Kafka 的核心概念,以便在我们的头脑中有一个清晰的认识。

kafka 入门最佳实践

发布于 2021-02-05 18:09:40 | 阅读 22057

Kafka 是一个分布式流媒体平台,kafka官网:http://kafka.apache.org/

3 分钟带你了解「消息中间件」Kafka、RocketMQ

发布于 2021-01-29 10:41:48 | 阅读 24790

非常成熟,生态丰富,与 Hadoop 连接紧密.

3 分钟带你了解「消息中间件」Kafka、RocketMQ

发布于 2021-01-27 18:58:34 | 阅读 24413

每个 partition 相当于一个巨型文件→多个大小相等 segment 数据文件中 每个 partition 只需要顺序读写就行了,segment 文件生命周期由配置决定 segment file 组成:index file:索引文件data file:数据文件 segment file 文件命名规则:全局第一个 segment 是 0后序每个加上全局 partition 的最大 offset

Kafka突然宕机了?稳住,莫慌!

发布于 2020-09-30 14:32:42 | 阅读 24484

笔者所在的是一家金融科技公司,但公司内部并没有采用在金融支付领域更为流行的 RabbitMQ,而是采用了设计之初就为日志处理而生的 Kafka

注意了!Kafka与RabbitMQ千万不要乱用…

发布于 2020-04-03 11:10:32 | 阅读 30266

作为一个有丰富经验的微服务系统架构师,经常有人问我,应该选择 RabbitMQ 还是 Kafka?

一口气说出Kafka为啥这么快?

发布于 2020-03-31 11:22:46 | 阅读 18236

在过去的几年里,软件架构领域发生了巨大的变化。人们不再认为所有的系统都应该共享一个数据库。

周排行

申请试用

提交后工作人员会尽快与您联系进行功能演示
技术咨询已转移到管理后台,请先登录

即时通讯云使用者请在应用详情页面咨询
客服云使用者请进入管理员模式咨询

×

在线咨询

电话咨询

微信咨询

注册客服

注册IM

环信即时通讯云——100注册用户永久免费
环信MQTT——免费开通 每月赠送额度
环信PUSH——1000个DAU免费

注册享福利、赢好礼

立即体验