kafka
kafka
Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。
Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。

文章

kafka·2024-05-08
观测云 · 观测云 擅长领域:云计算, 容器, 云原生
文章介绍了Kafka作为消息中间件在业务日志采集中的应用,结合观测云的采集器Datakit实现快速集成。包括准备Kafka环境、安装DataKit、开启Kafka采集器等步骤,最后通过Pipeline对业务日志进行字段提取。...(more)
浏览386
容器云平台·2023-04-27
rechen2020 · 某大型银行 擅长领域:云计算, 容器云, 容器
29 会员关注
Kafka在金融银行应用广泛,容器化部署可提高敏捷交付成功率、弹性伸缩能力、业务迁移扩展等。存储选型需考虑高性能、高可用、高扩展性。测试验证了多集群多副本架构、华为企业级NAS存储与OpenShift容器云平台的组合,实现了高可用Kafka集群实例在容器云平台节点上的独立部署...(more)
专栏: 最佳实践
浏览6196
评论2
kafka·2023-03-10
Luga Lee联盟成员 · None 擅长领域:云计算, 容器, 容器云
46 会员关注
众所周知,ApacheKafka是一个分布式开源流和事件处理平台,广泛应用于各大互联网公司以及基于不同体系的软件架构的业务场景中。其实,基于早期的设计理念而言,Kafka最初被设想为消息队列,并基于分布式提交日志的抽象。然而,自2011年由LinkedIn创建并开源以来,Kafka已迅速从消息队...(more)
浏览1249
kafka·2023-03-02
Luga Lee联盟成员 · None 擅长领域:云计算, 容器, 容器云
46 会员关注
Kafdrop是一款基于SpringBoot的Apache Kafka WebUI可视化工具,支持查看Kafka代理、主题、消息、消费者组等信息,可通过Docker和Kubernetes进行部署。
浏览1870
kafka·2022-05-20
qhdx07 · as 擅长领域:服务器, Linux, 系统运维
19 会员关注
1.整体架构图:2.实验环境准备:各组件简单介绍:Elasticsearch:是一个基于Lucene的搜索服务器。提供搜集、分析、存储数据三大功能。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTfulweb接口。Elasticsearch是用Java开发的,并作为Apache许可条款下的开放源码发布,是当前...(more)
浏览1410
评论1
Kubernetes·2020-03-16
南山行者 · 某银行 擅长领域:云计算, 容器, 容器云
173 会员关注
网站:1、helm的官方网站:https://helm.sh/备注:主要是可以查看相关的文档方便2、char包的离线下载url:https://github.com/helm/charts备注:可以直接下载下来,然后传到服务器上3、char包的在线下载url:https://hub.kubeapps.com/备注:服务器可以连接外网时使用备注:这篇文章目前只...(more)
浏览4414
容器·2019-11-08
PanMichael · 兴业数金 擅长领域:云计算, 容器, 容器云
16 会员关注
本故事纯属虚构,如有雷同,纯属巧合,一笑了之。公司分配给了A和B一个任务,测试容器化Kafka集群的性能。之前B在老机器上已经测试过一个版本,并写了完整的报告,算是有经验的老鸟了。现在到了一批新机器,需要在它们上面重新测试一下Kafka的性能,A主动承担这个该任务,要知道新机器不管...(more)
浏览9324
kafka·2018-11-23
平台人生 · 平台人生 擅长领域:服务器, 数据库, 关系型数据库
83 会员关注
今天给大家介绍一个强大的开源流处理平台——Kafka--Kafka是什么?ApacheKafka是一个分布式发布-订阅(Pub-Sub)消息系统和一个强大的队列,可以处理大量的数据,能够将消息从一个端点传递到另一个端点。它的消息保留在磁盘上,并会在群集内复制以防止数据丢失。此外,Kafka需要构建...(more)
专栏: 平台人生
浏览5639
评论1
kafka·2018-10-31
yinxin · 某金融机构 擅长领域:数据库, 服务器, 云计算
980 会员关注
背景介绍Kafka简介Kafka是一种分布式的,基于发布/订阅的消息系统。主要设计目标如下:以时间复杂度为O(1)的方式提供消息持久化能力,并保证即使对TB级以上数据也能保证常数时间的访问性能高吞吐率。即使在非常廉价的商用机器上也能做到单机支持每秒100K条消息的传输支持Kafka...(more)
浏览1177
评论1
人工智能·2018-05-03
windix联盟成员 · 某证券公司 擅长领域:大数据, 数据库, 大数据平台
380 会员关注
一、券商实施个性化推荐项目的必要性1.1个性化推荐技术发展背景目前,随着用户接收到的信息量爆炸般增长,传统的推荐以及服务方式的边际收益正在不断减少,用户个性化的需求变得越来越多。大数据实时个性化服务,主要基于大数据用户画像、产品画像建设成果,结合实时流计算框架,以...(more)
专栏: 最佳实践
浏览13276
评论4

描述

Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。
Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。
X社区推广
  • 提问题