Kafka开源转商业实践，助力车主无忧系统稳健 | 凌云时刻
凌云时刻 · 技术
导读：“商业版的Kafka完全兼容开源的生态，接入方便容易，并且提供了优质的SLA保障，各种日常功能操作也简洁易用，综合使用成本有优势。总得来说就是省事省钱，质量有保证，是一款良心制作的基础PAAS产品。”
—— 小迈CTO 温嘉铭
作者 | 阿里云云原生
来源 | 凌云时刻（微信号：linuxpk）
什么是MQ
车主无忧是属于广州小迈网络科技公司服务于汽车后市场的重要产品。小迈网络是一家以1，2线城市车主为目标用户的移动互联网公司，通过构建串联车主与商家的O2O平台，降低车主用车成本，提升车主用车品质。公司于2015.1成立，由纳斯达克上市公司前高管创建，并获得多轮风投的青睐。公司拥有一流的移动互联网产品研发核心团队，团队年轻有活力，拥有多年移动互联网产品研发运营经验，在过去的工作中领导和创建了超过4亿用户规模的移动互联网产品。
车主无忧服务车主用户破亿，提供了违章查询，罚单处理，二手车，加油充值，车险服务，以及各种咨询头条服务。打造一个汽车服务的生态圈子。艾瑞咨询APP热点指数“汽车护理”领域排名第一。
痛点
容量弹性方面：开源的Kafka在partition分区规模超过1000后有明显的抖动，集群扩容小时级别，业务有感知。
存储开销方面：开源的Kafka多副本存储，存储压力大，且会在磁盘写满的情况下直接宕机，没有保扩机制，需要额外提供告警人工处理。
性能稳定方面：在处理冷数据读的时候会导致明显的变慢，数据写入伴随着部分失败；拉取G级别的数据时，Full GC高频出现。
利用经过优化的阿里云商业版消息队列Kafka开箱即用，完全兼容开源的无缝迁移的特性，结合最佳实践《在线迁移消息队列Kafka 》 的指导，自主高效地完成了迁移工作。由阿里云团队进行专业的运维，利用Kafka的自动化内检功能，保证Broker以及依赖组件Zookeeper的健康稳定；运维白屏化管理，可以协助用户进行快速的分钟级扩容；提供了有效的故障管理。借助商业版本提供的监控告警能力，实时掌握硬件资源与服务可用性情况，指导我们的应用进行优化调整。
业务价值
业务稳定：通过迁移到商业版本的Kafka, 消息丢失现象长期不存在，生产与消费端的抖动明显好转，整个消息集群平稳运行，有效地支持了业务的快速发展。
效率提升：Kafka提供了白屏化的管理方式， 基于阿里云提供的控制台，我们可以方便快捷地扩展实例，对TOPIC进行管理，以及扩展PARTITION。另外还提供了堆积、 消息查询等实时监控功能，并且可以设定各种资源的报警规则, 用于快速定位问题，提升诊断效率，指导优化系统。
成本控制：节省了大量的运维人力成本，解放了生产力，综合比较，使用商业版本的使用成本更划算。
END
往期精彩文章回顾
进阶之路：深入解读 Java 堆外内存
干货：一文看懂Apache Ranger
吴翰清：有变革的需求，才有技术的诞生
云原生时代，消息中间件的演进路线
如何提升微服务的幸福感
OceanBase 连破纪录的背后，是技术人的砥砺前行
重磅！解读国内唯一入选全球顶会SIGCOMM论文
一文读懂数据湖
长按扫描二维码关注凌云时刻
每日收获前沿技术与科技洞见
Kafka开源转商业实践，助力车主无忧系统稳健 | 凌云时刻相关推荐
- 车主无忧：为什么放弃开源Kafka？
简介:通过迁移到商业版本的 Kafka,车主无忧的系统稳定性得到了大幅提升,消息无丢失,生产与消费端的抖动明显好转,整个消息集群平稳运行,有效地支持了业务的快速发展. 车主无忧是属于广州小迈网络科技公 ...
- 开源运维管理软件排名_车主无忧：为什么放弃开源Kafka？
简介:通过迁移到商业版本的 Kafka,车主无忧的系统稳定性得到了大幅提升,消息无丢失,生产与消费端的抖动明显好转,整个消息集群平稳运行,有效地支持了业务的快速发展. 车主无忧是属于广州小迈网络科技公 ...
- kafka reassign 限速_车主无忧：为什么放弃开源Kafka？
简介:通过迁移到商业版本的 Kafka,车主无忧的系统稳定性得到了大幅提升,消息无丢失,生产与消费端的抖动明显好转,整个消息集群平稳运行,有效地支持了业务的快速发展. 车主无忧是属于广州小迈网络科技公 ...
- 以商业实践反哺开源技术跃升｜2023开放原子全球开源峰会开源商业化创新发展分论坛成功举行
6 月 11 日,由开放原子开源基金会主办,软通动力信息技术(集团)股份有限公司承办的 2023 开放原子全球开源峰会开源商业化创新发展分论坛在京成功举行.分论坛以"开源引领 创新共赢&q ...
- 车主无忧：天下武功，唯快不破，神策让我们快人一步
速度是商业竞争的必杀技.近日,车主无忧与神策数据正式签约合作,神策数据将助力其挖掘数据价值的同时提高企业运营效率.加快产品迭代速度,在商业竞争中快人一步. 车主无忧一直致力于用数据指导工作决策,帮助企 ...
- 刘敏：优麒麟开源操作系统运营实践 | DEV. Together 2021 中国开发者生态峰会
内容来源:2021 年 6 月 5 日,由 SegmentFault 思否主办的 2021 中国开发者生态峰会圆满落幕.会上,优麒麟开源社区运营负责人刘敏发表了主题为<优麒麟开源操作系统运营实践 ...
- 品牌LOGO设计丨商业实践设计思路大揭秘 难怪他接单不断
点击 ☞创意视觉设计 关注我,加星标★ 欢迎转发到朋友圈ღ 文丨夏沙沙 文章中分享的原创LOGO作品已商用,请勿用作其他用途! 本教程案例也仅供参考,学习,交流使用.谢谢! 最近收到不少朋友的困惑,看 ...
- 国内外开源分析及实践
摘要 本文通过对国内外开源现状和趋势进行分析,引出开源基础设施在国内的现状和亟待解决的开源托管平台.开源许可证.开源社区.社区治理架构等目前国内尚待完善的方面.通过建木项目开源实践过程,详细地阐述了国 ...
- 数字孪生重点商业实践展示
数字孪生是一个系统或一组对象的虚拟表示.数字孪生背后的技术旨在准确反映系统的生命周期和应用程序,并使用机器学习.模拟和人工智能的组合来帮助在现实生活中运行之前对使用.问题或效率进行建模.如今,数字孪生 ...
- 华为徐兴海、区波：面向业务创新的大数据平台及商业实践
摘要:BDTC 2015全体会议上午最后一场由华为IT产品线大数据解决方案规划总监徐兴海和华为电信软件大数据首席技术规划区波共同完成,期间他们表示,华为正在以平台牵引应用和服务合作的方式致力于大数据生 ...
最新文章
- 增加数据_Photoshop XMP元数据沉积造成文件量增加
- 数码管显示实验一 编写程序让8只数码管同时显示零
- JS-面向对象-创建具有私有属性的构造函数(2种方法)
- 基于JAVA+SpringMVC+Mybatis+MYSQL的体育场地预约管理系统
- linux系统函数 utime,utime函数
- WCF如何使用X509证书（安装和错误）（二）
- New features in EJB3.1 (Part 4)
- php获取类的实例变量
- 自媒体各大平台收益对比_自媒体推广平台都有哪些？
- async python两个_Python多线程一览
- 2020年度美国最受市场欢迎的十大编程语言
- linkedin python 领英技能 测评
- linux常用的引导管理器,Linux引导管理器GRUB、GRUB 2和LILO简介
- nals\string-trim.js Replace Autoprefixer browsers option to Browserslist config. Use browserslis
- Centos7.x实现Cobbler无人值守安装
- 美团后台开发秋招面经汇总（更新至2021-08-13）
- 【操作系统】《计算机的心智:操作系统之哲学管理》读书笔记
- excel使用教程_Excel 有多强大？你用 Excel 做的最酷的事情是什么？
- PDF的页面设置工具在哪里？如何使用并调整PDF页面？
- include的用法