最佳 Kafka 峰会视频
以下演讲(包括视频记录和幻灯片)在 2018 年以后的 Kafka 峰会。感谢所有演讲者的辛勤工作!
目录
Kafka 内部原理和基础知识
- 让 Kafka 云原生, Jay Kreps (Confluent),堪萨斯州欧盟 2021
- ksqlDB 的工作原理, Michael Drogalis (Confluent),堪萨斯州欧盟 2021
- 了解高吞吐量应用程序的 Kafka Produce 和 Fetch API 调用, Jason Gustafson (Confluent),堪萨斯州欧盟 2021
- kafka式的 Raft 协议, Mik Kocikowski (Cloudflare),堪萨斯州欧盟 2021
- Kafka Cloud (Keynote) / 卡夫♥卡云 (Keynote)/ Jay Kreps (Confluent),堪萨斯州 2020
- 分布式系统设计中的权衡:Kafka 是最好的吗? Ben Stopford & Michael G. Noll (Confluent), 堪萨斯州 2020
- Kafka Streams 和 ksqlDB 的 Flux Capacitor, Matthias J. Sax (Confluent),堪萨斯州 2020
- 跨越流:Kafka Streams 中新的流式外键连接功能, John Roesler (Confluent),堪萨斯州 2020
- 欢迎来到 Kafka;我们很高兴您在这里, Dave Klein (Centene),堪萨斯州 2020
- Kafka 的新架构(主题演讲), Gwen Shapira (Confluent),堪萨斯州 2020
- Apache Kafka 入门 – 贡献者之旅, 以色列Ekpo (Microsoft) & Matthias J. Sax (Confluent) & Nikolay Izhikov (Sberbank), 堪萨斯州 2020
- Kafka 不需要 (Zoo)Keeper (抽象), Jason Gustafson & Colin McCabe (Confluent),SFO 2019
- 当你可以改变世界时,为什么要停止它?增量协同再平衡的设计与实现(摘要), Konstantine Karantasis (Confluent),SFO 2019
- Kafka 102:流和表一直向下(摘要), Michael G. Noll (Confluent),SFO 2019
- 几点了?为什么呢?(摘要)、 Matthias J. Sax (Confluent),SFO 2019
- Zen and the Art of Streaming Joins: The What, When and Why (摘要), Nick Dearden (Confluent),纽约 2019
- 重新审视 Exactly Once 语义(摘要), Jason Gustafson (Confluent),纽约 2019
- Kafka Streams 应用程序的性能分析和优化(摘要), 王国章 (Confluent), LON 2019
- 你一直想知道但又不敢问的关于 Kafka 的 Rebalance 协议的一切(摘要), Matthias J. Sax (Confluent),LON 2019
- 使用 Apache Kafka 进行可靠的消息传递(摘要), Ying Zheng & Xiaobing Li (Uber), SFO 2018
- 强化 Kafka 复制(摘要), Jason Gustafson (Confluent),2018 年 SFO
- 不要重复自己:在 Apache Kafka 中引入 Exactly-Once 语义(摘要), Matthias J. Sax (Confluent),LON 2018
应用程序和用例
- 您应该将 Kafka 作为流式读取还是批量读取?你甚至应该关心吗? Ido Nadler (尼尔森) & Opher Dubrovsky (尼尔森)
- 使用 Apache Kafka 扩展核心银行引擎, Peter Dudbridge (Thought Machine),堪萨斯州亚太地区 2021
- 使用 IBM 和 Confluent 扩展事件驱动型架构, Antony Amanse (IBM) & Anton McConville (IBM),KS EU 2021
- 使用实时数据源为旅游开发动态定价, Mourad Benabdelkerim (FREE NOW), KS EU 2021
- 使用 Pac-Man 构建事件流应用程序, Ricardo Ferreira (Confluent),堪萨斯州 2020
- Apache Kafka,分层存储和 TensorFlow,用于在没有数据湖的情况下进行流式机器学习, Kai Waehner (Confluent),堪萨斯州 2020
- KSQL-ops!在野外运行 ksqlDB, Simon Aubury (ThoughtWorks),堪萨斯州 2020
- 流向我们的量子未来, David Elbert & Tyrel McQueen (约翰霍普金斯大学), 堪萨斯州 2020
- KafkaConsumer – 解耦消费和处理以提高资源利用率, Igor Buzatović (Inovativni trendovi d.o.o), KS 2020
- Kafka 可以处理 Lyft 行程吗? Andrey Falko & Can Cecen (Lyft), 堪萨斯州 2020
- 用 Kafka 拉平曲线, Rishi Tarar (Northrop Grumman Corp.), 堪萨斯州 2020
- 使用流处理进行零售风险管理, Daniel Jagielski (Virtuslab/Tesco), 堪萨斯州 2020
- 0-60:Tesla 的流数据平台(摘要), Jesse Yates(特斯拉),SFO 2019
- Eventing Things – Netflix 原创!(摘要)、 尼廷·夏尔马 (Netflix),SFO 2019
- 使用 Apache Kafka 对 NASA 深空网络进行关键任务实时故障检测(摘要), Rishi Verma(NASA 喷气推进实验室),SFO 2019
- 使用 Kafka 发现隐藏在数据库中的事件(摘要), Anna McDonald (SAS 研究所), SFO 2019
- 构建企业事件框架(摘要), Bryan Zelle (Centene) & Neil Buesing (Object Partners, Inc),SFO 2019
- ksqlDB 性能调优以获得乐趣和利润(摘要)、 Nick Dearden (Confluent),SFO 2019
- 使用 Kafka Streams 发现药物(摘要), Ben Mabey & Scott Nielsen (Recursion Pharmaceutical),SFO 2019
- 成为云世界中的 Apache Kafka 开发人员英雄(摘要), Ricardo Ferreira (Confluent),SFO 2019
- 流式处理应用程序和毒丸计划:使用 Kafka Streams 处理意外情况(摘要), Loic Divad (Xebia France), SFO 2019
- 为印度渴望板球的人口进行扩展(摘要), Bhavesh Raheja & Namit Mahuvakar (Hotstar), SFO 2019
- 在 Ticketmaster 的流处理器应用程序中利用服务(摘要), Derek Cline (Ticketmaster),SFO 2019
- 使用 Spring 框架进行流处理(就像你以前从未见过的那样)(摘要), Josh Long (Pivotal)、Tim Berglund (Confluent),纽约 2019
- 如何使用 Apache Kafka 和 Druid 来驯服你的路由器数据(摘要), Rachel Pedreschi (Imply Data),纽约,2019
- Kafka Connect 和 ksqlDB:从旧系统迁移到 Kafka Streams 的有用工具(摘要), Alex Leung & Danica Fine (彭博社), 纽约 2019
- 使用 Kafka 构建无服务器应用程序(摘要), Dale Lane (IBM),LON 2019
- 将事件和流处理引入全国建筑协会(摘要), 罗伯特·杰克逊和皮特·克拉克内尔(全国建筑协会),LON 2019
- 自定义 ksqlDB 函数的令人兴奋的前沿(摘要), Mitch Seymour (Mailchimp),LON 2019
- 使用 Location Data 来展示 Kafka Streams DSL 和 ksqlDB 中的键、窗口和连接(摘要), Neil Buesing (Object Partners, Inc),LON 2019
- ksqlDB 实践(摘要), Almog Gavra (Confluent),LON 2019
- 基于 Kafka 的行业就绪型 NLP 服务框架(摘要), Bernhard Waltl & Georg Bonczek (宝马集团),LON 2019
- Booking.com 的数据流生态系统管理(摘要), Alex Mironov (Booking.com), SFO 2018
- 企业中的 Kafka — 从头开始构建数据流平台的两年之旅(摘要), Benny Lee & Christopher Arthur (澳大利亚联邦银行), SFO 2018
- Life is a Stream of Events (摘要), Bjørn Kvernstuen & Tommy Jocumsen(挪威工作和福利局),SFO 2018
- Kafka 多租户 — 在 LINE 的一个共享集群上每天处理 1600 亿条消息(摘要), Yuto Kawamura (LINE Corporation), SFO 2018
- 将 Tinder 的规模与 Kafka 相匹配(摘要), Krunal Vora (Tinder),SFO 2018
- 在 Capital One 构建企业流式处理平台, Chris D'Agostino (Capital One), SFO 2018
- 更多数据,更多问题:在 LinkedIn 上扩展 Kafka 镜像管道(摘要), Celia Kung (LinkedIn), SFO 2018
- 从螺旋桨到喷气式飞机:在飞行中升级您的发动机(摘要), Christopher Morris (PagerDuty),SFO 2018
- 理解流式 SQL 的可视化方法(摘要), Shant Hovespian (Arcadia Data), SFO 2018
- 使用 Kafka 实现医疗保健行业的数字化转型 - 构建低延迟数据管道(摘要), Dmitry Milman & Ankur Kaneria (Express Scripts), SFO 2018
- 使用 Kafka Streams 构建 Pinterest 实时广告平台(摘要), Liquan Pei & Boyang Chen (Pinterest), SFO 2018
- 使用 Kafka 和 Flink 将有状态流处理提升到一个新的水平(摘要), Stephan Ewen (Ververica),LON 2018
- 大规模驯服数十亿个指标和日志:使用 Kafka 作为 CERN 监控中心数据中心的两年时间(摘要), Luca Magnoni (CERN), LON 2018
- ksqlDB 201:深入探讨查询处理(摘要), Hojjat Jafarpour (Confluent), LON 2018
- ING Bank 的 Kafka 演变(摘要), 帝汶蒂穆里和理查德·布拉斯(荷兰),LON 2018
架构和模式
- 错误 - 我犯了一些错误。事件驱动架构中的失误, Simon Aubury(ThoughtWorks 澳大利亚),堪萨斯州亚太地区 2021
- 使用 ksqlDB 实现更好的 CQRS, Anshuman Mukherjee (Airwallex空中云汇),堪萨斯州亚太地区 2021
- 在微服务之间共享数据:如何使用 Kafka Connect 捕获变更数据来拯救我们, Ali Nazemian (Brolly) & Milad Vahood (Brolly),堪萨斯州亚太地区2021
- Apache Kafka 和数据网格, Ben Stopford (Confluent) & Michael Noll (Confluent), 堪萨斯州欧洲 2021
- 如何构建 Data Mesh Foundation:一种有原则的方法, Zhamak Dehghani (ThoughtWorks),堪萨斯州 2021 年欧盟
- 快速上手 MirrorMaker 2, Mickael Maison (IBM) & Ryanne Dolan (Twitter),堪萨斯州欧洲2021
- 对事件驱动的世界做出反应, Kate Stanley & Grace Jansen (IBM), KS 2020
- 两个数据中心的故事:Kafka Streams Resiliency、 Anna McDonald (Confluent),堪萨斯州 2020
- Kafka 作为您的数据湖 – 是否可行? Guido Schmutz (Trivadis), 堪萨斯州 2020
- GDPR 合规性:在事件驱动系统中透明地处理个人身份信息, Masih Derkani (SolarWinds),堪萨斯州 2020
- Apache Kafka 上的同步命令, Neil Buesing (Object Partners, Inc),堪萨斯州 2020 年
- 混合 Kafka,将实时分析引入业务, Cody Irwin (Google Cloud) & Josh Treichel (Confluent) & Jeff Ferguson (Confluent), 堪萨斯州 2020
- 我并不总是测试我的流,但当我测试时,我会在生产环境中进行。 Viktor Gamov (Confluent),堪萨斯州 2020
- 使用事件建模构建信息系统, Bobby Calderwood (Evident Systems),堪萨斯州 2020
- 使用 Kafka 和 Cloud Events 构建事件驱动型架构(摘要), Dan Rosanova (Microsoft),SFO 2019
- 事件溯源、流处理和无服务器、 Ben Stopford (Confluent),SFO 2019
- Shattering The Monolith(s)(摘要), Martin Kess(即),SFO 2019
- 关于流和事件的硬道理(摘要), Dan Rosanova (Microsoft),纽约 2019
- 分布式系统中的复杂事件流(摘要), Bernd Ruecker (Camunda), 纽约 2019
- 使用 Apache Kafka(摘要)每天经济高效且可靠地聚合数十亿条消息, Chunky Gupta & Osman Sarood (Mist Systems), 纽约 2019
- 基于 Kafka 的应用程序跟踪:理解事件驱动的数据流(摘要), Jorge Esteban Quilcate Otoya (SYSCO AS), NYC 2019
- 每天从 100 万到 1 万亿个事件:荒谬模式下的流处理(摘要), Shrijeet Paliwal (特斯拉) 纽约 2019
- 迁移到事件驱动型微服务(摘要), Adam Bellemare (Flipp),纽约 2019
- 谈论交通:驾驶座上的数据(摘要), Dominique Chanet (Klarrio), LON 2019
- Kafka 世界的隐私工程(摘要), Alexander Cook (Privitar), LON 2019
- 流媒体之谜 - 为乐趣和利润而设的代码拼图(摘要) Nick Dearden (Confluent),LON 2019
- Kafka 是数据库吗?, Martin Kleppmann (剑桥大学), LON 2019
- 事件驱动型工作流:使用 Kafka 和 Zeebe 监控和编排微服务环境(摘要), Mike Winters & Sebastian Menski (Camunda), LON 2019
- 使用 Apache Kafka 处理 GDPR:如何在不惊慌的情况下遵守 GDPR?(摘要)、 David Jacot(独立人士,正式名称为瑞士电信),LON 2019
- 一把钥匙统治他们所有人(摘要), Richard Noble & Francesco Nobilia (Babylon Health),LON 2019
- 如何使用 Kafka 和 Druid 来驯服你的路由器数据(摘要), Rachel Pedreschi 和 Eric Graham (Imply Data),LON 2019
- Apache Kafka 和面向事件的架构, Jay Kreps (Confluent),SFO 2018
- 将流数据带给大众:降低流数据平台的“入场成本”(摘要), Bob Lehmann (拜耳), SFO 2018
- 使用更改跟踪、Kafka 和 KStreams/ksqlDB 分解 SQL 整体式架构(摘要 Wanny Morellato (SAP Concur),SFO 2018
- Kafka 作为事件系统,将单体式架构重新平台化为微服务(摘要), Madhulika Tripathi (Intuit),SFO 2018
- 使用基于事件的系统进行实验, Martin Fowler & Toby Clemson (ThoughtWorks), LON 2018
数据管道
- 使用 Apache Kafka 走上正轨:使用 Rail Data 构建流式 ETL 解决方案, Robin Moffatt (Confluent),堪萨斯州亚太地区 2021
- Apache Kafka 和 ksqlDB 的实际应用:让我们构建一个流式数据管道! Robin Moffat (Confluent),堪萨斯州 2020
- 使用 Debezium 和 Kafka Streams 更改数据捕获管道, Gunnar Morling (Red Hat),堪萨斯州 2020
- Bravo Six,走向实时。将 Activision Data Pipeline 过渡到流, Yaroslav Tkachenko (Activision),堪萨斯州 2020
- Kroger 如何在构建实时数据管道时采用“架构优先”理念, Rob Hoeting, Rob Hammonds & Lauren McDonald (Kroger), SFO 2019
- 使用 ksqlDB 通过 Apache Kafka 构建流处理应用程序Robin Moffat (Confluent),SFO 2019
- Kafka Connect:从战壕中吸取的运营经验教训(摘要), Elizabeth Bennett (Confluent),SFO 2019
- Oracle RDBMS 和 Apache Kafka 之间的双向集成解决方案(摘要), Guido Schmutz (Trivadis), SFO 2019
- Airbnb 日志事件的流式摄取(摘要), 王浩 (Airbnb),纽约 2019
- 不再孤岛:将数据库集成到 Apache Kafka(摘要), Robin Moffatt (Confluent),纽约 2019
- 使用 Kafka Connect 构建连接器的经验教训(摘要), Katherine Stanley & Andrew Schofield (IBM UK), 纽约 2019
- 为《使命召唤》游戏构建可扩展且可扩展的数据管道(摘要), Yaroslav Tkachenko (Activision),纽约 2019
- 使用 Kafka Connect 从零到英雄(摘要), Robin Moffatt (Confluent), LON 2019
- 使用 Debezium 更改微服务的数据流模式(摘要), Gunnar Morling (Red Hat),LON 2019
- 超越消息传递:企业级、多云智能路由(摘要)、 Anand Phatak (Adobe),SFO 2018
- 您必须构建其他管道:Blizzard 的 Kafka 上的 Pub-Sub(摘要), Stephen Parente & Jeff Field(暴雪),SFO 2018
- 所以你想写一个连接器吗?(摘要)、 Randall Hauch (Confluent),SFO 2018
Kafka 操作
- 注意应用程序:如何监控您的 Kafka Streams 应用程序, Simon Aubury (ThoughtWorks),2021 年堪萨斯州欧盟大会
- 加密静态 Kafka 消息以保护应用程序, Robert Barnes (HashiCorp),堪萨斯州欧盟 2021
- 您需要了解的有关 Kubernetes 上的 Kafka 但又不敢问的一切, Jakob Scholz (Red Hat),堪萨斯州欧洲 2021
- 完全托管的多租户 Kafka 集群:提示、技巧和工具, Christopher Beard (彭博社), 堪萨斯州 2020
- 克服kafka秘密蔓延的危险, Tejal Adsul (Confluent),堪萨斯州 2020
- 人类的 Kafka 滞后监控, Elad Leev (AppsFlyer),堪萨斯州 2020
- 分享即关怀:迈向创建自调优多租户 Kafka, Anna Povzner (Confluent),堪萨斯州 2020
- Kubernetes 上的 Kafka:保持简单, Nikki Thean (Etsy),SFO 2019
- 请升级 Apache Kafka。现在!Gwen Shapira (Confluent),SFO 2019
- 以小团队应对 Kafka, Jaren Glover (Robinhood),SFO 2019
- 在真正的多租户环境中大规模保护 Kafka(摘要), Vishnu Balusu & Ashok Kadambala(摩根大通),SFO 2019
- 在 Yelp 上运行大规模 Kafka 升级(摘要), Manpreet Singh (Yelp),SFO 2019
- Kubernetes 上的生产就绪型 Kafka(摘要), Devandra Tagare (Lyft), SFO 2019
- Uber 的 Kafka 集群联合(摘要), Yupeng Fui & Xiaoman Dong (Uber), SFO 2019
- 大规模操作 Apache Kafka® 的经验(摘要), Noa Resare (Apple), 纽约, 2019
- 用于企业安全的 Kafka 可插拔授权(摘要), Anna Kepler (Viasat),纽约 2019
- Kubernetes 上的 Kafka:真的必须要“艰难”吗?(摘要)、 Viktor Gamov 和 Michael Ng (Confluent),纽约 2019
- 使用 SASL/OAUTHBEARER 的灵活身份验证策略(摘要), Michael Kaminski(纽约时报)和Ron Dagostino(道富公司),纽约2019
- 具有故障树分析的 Bulletproof Apache Kafka(摘要), Andrey Falko (Lyft),纽约 2019
- 多 DC Kafka 的基础(摘要), Jakub Korab (Confluent),LON 2019
- 向我展示可以提高我工作效率的 Kafka 工具(摘要), Stephane Maarek (DataCumulus)
- 在 Kubernetes 中运行 Kafka:实用指南(摘要), Katherine Stanley(英国 IBM 公司),LON 2019
- 在 Kubernetes 中运行生产 Kafka 集群(摘要), Balthazar Rouberol (Datadog),LON 2019
- Don't be Scared: Multi-tenant Cluster Support at Scale(摘要)、 Kelly Attaway & Cabe Waldrop (Pandora Media), LON 2019
- ZFS 上的 Kafka:通过文件系统实现更好的生活(摘要), Hugh O'Brien (Jet.com), SFO 2018
- Kafka 安全 101 和实际技巧(摘要), Stephane Maarek (DataCumulus),SFO 2018
- 使用 Confluent Platform 实现端到端安全性(摘要), Vahid Fereydouny (Confluent), SFO 2018
- Kafka Streams 的稳健操作(摘要), Bill Bejeck (Confluent),SFO 2018
- 使用 Docker 和 Kubernetes 部署 Kafka Streams 应用程序(摘要), Gwen Shapira & Matthias J. Sax (Confluent), SFO 2018
- URP?对不起!您必须了解的三个指标(摘要), Todd Palino (LinkedIn),SFO 2018
- 像专业人士一样监控 Kafka(摘要), Gwen Shapira & Xavier Léauté (Confluent), LON 2018