查看原文
其他

Apache Kafka:大数据的实时处理时代

王国璋 QCon 2019-08-16

编者按

作者介绍:王国璋, Confluent Kafka Streams 系统架构师和技术负责人。此前曾就职于 LinkedIn 数据架构组任高级工程师,主要负责实时数据处理平台,包括 Apache Kafka 和 Apache Samza 系统的开发与维护。


在过去几年,对于 Apache Kafka 的使用范畴已经远不仅是分布式的消息系统:我们可以将每一次用户点击,每一个数据库更改,每一条日志的生成,都转化成实时的结构化数据流,更早的存储和分析它们,并从中获得价值。同时,越来越多的企业应用也开始从批处理数据平台向实时的流数据数据平台转移。


本演讲介绍了最近 Apache Kafka 添加的一些系统架构,包括 Kafka Connect 和 Kafka Streams,并且描述一些如何使用它们的实际应用体验。大家可以了解到 Apache Kafka 作为一个实时流处理的中央平台所提供的最新性能,从普通消息队列到关键业务数据冗余备份,再到流数据的实时处理分析。


演讲视频

https://v.qq.com/txp/iframe/player.html?vid=e05137vba5p&width=500&height=375&auto=0


幻灯片


在公众号后台回复“Kafka”,即可下载完整幻灯片。




QCon 上海 2017



一年一度的 QCon 上海 2017 大会将于 10 月 17-19 日在上海宝华万豪酒店召开,本次大会的专题涵盖了硅谷人工智能技术,软件性能,架构,互联网金融,前端实践,运维,移动,安全,创业,微服务,产品,以及团队管理等众多领域,详情请点击阅读原文查看。



    您可能也对以下帖子感兴趣

    文章有问题?点此查看未经处理的缓存