Kafka宕机引发的高可用问题

问题要从一次Kafka的宕机开始说起。

笔者所在的是一家金融科技公司，但公司内部并没有采用在金融支付领域更为流行的RabbitMQ，而是采用了设计之初就为日志处理而生的Kafka，所以我一直很好奇Kafka的高可用实现和保障。从Kafka部署后，系统内部使用的Kafka一直运行稳定，没有出现不可用的情况。

但最近系统测试人员常反馈偶有Kafka消费者收不到消息的情况，登陆管理界面发现三个节点中有一个节点宕机挂掉了。但是按照高可用的理念，三个节点还有两个节点可用怎么就引起了整个集群的消费者都接收不到消息呢？

要解决这个问题，就要从Kafka的高可用实现开始讲起。

详细介绍开发工具IDEA、Eclipse、STS,以及流行插件的安装和配置。本章将利用IDEA开发、运行和打包发布第一个Spring Boot应用程序"Hello World"。在介绍IDEA实用技能的同时，还会详细比较IDEA和Eclipse的区别，以及如何在各个开发工具中使用本书的随书源代码。

基础篇

基础篇，尤其是对入门读者来说特别适用。

Spring Boot基础

首先介绍Spring Boot的基础知识:然后讲解如何定制启动画面、实现热部署:最后介绍如何使用配置文件，以及通过配置文件配置多环境。

分层开发Web应用程序

介绍Web开发中最常用的分层开发的模式MVC ( Model View Controller );然后讲解视图技术Thymeleaf的语法和实用技术，并用实例讲解如何将MVC三者联系起来构建Web应用程序;最后通过实例讲解如何用Validator实现数据验证，以及如何自定义数据验证。

响应式编程

首先介绍响应式编程的基本概念，并对比分析MVC和WebFlux模式，用实例讲解如何进行WebFlux的开发; 然后讲解用MVC及响应式开发方式开发WebFlux的方法;最后用WebFlux模式结合MongoDB数据库实现数据的增加、删除、修改和查询。

进阶篇

在理论讲解部分让我们明白工作中需要的技术重点，再以实例让我们深入学习，提高技术水平，轻松迎接工作，真真切切地将知识点和实操技能应用到工作中。

Spring Boot进阶

介绍AOP、loC、Servlet 容器;然后深入讲解自动配置原理、自定义Starter、自定义注解;最后讲解异常的处理，以及如何进行单元测试。

用ORM操作SQL数据库

介绍如何使用ORM ( JPA、MyBatis )操作数据库;然后讲解常用的查询方式、自定义查询方式、原生SQL (Structured Query Language,结构化查询语言)的开发和映射，还会深入地讲解一对一、-对多、多对多的关系映射操作以及事务的使用;最后对比分析JPA和MyBatis的区别。

接口架构风格——RESTful

RESTful是非常流行的架构设计风格。本章首先介绍REST的特征、HTTP方法与CRUD动作映射;然后讲解如何基于Spring Boot为PC、手机APP构建统- -风格的Restful API; 最后讲解在Spring Boot下如何使用RestTemplate发送GET、POST、DELETE、PUT等请求。

集成安全框架，实现安全认证和授权

介绍如何使用Spring Security 创建独立验证的管理员权限系统、会员系统，讲解如何进行分表、分权限、分登录入口、分认证接口、多注册接口，以及RBAC权限的设计和实现，如何使用JWT为手机APP提供token认证;然后讲解Apache的Shiro安全框架的基本理论基础，以及如何使用Shiro构建完整的用户权限系统;最后对比分析Spring Security和Shiro的区别。

在Spring Boot中使用Redis实现高并发

Redis是大规模互联网应用常用的内存高速缓存数据库，它的读写速度非常快，据官方Bench-mark的数据，它读的速度能到11万次/秒，写的速度是8.1万次/秒。

首先介绍Redis的原理、概念、数据类型;然后用完整的实例来帮助读者体验缓存增加、删除、修改和查询功能，以及使用Redis实现文章缓存并统计点击量;最后讲解分布式Session的使用。

用RabbitMQ实现系统间的数据交换

RabbitMQ是近年来使用非常广泛的消息中间件。

首先介绍它的原理、概念、6种工作模式、常用的注解:然后用实例讲解在Spring Boot中如何使用AmapT emplate接口实现消息的发送和监听。

集成NoSQL数据库实现搜索引擎

关于搜索引擎，我们很难实现Elasticsearch和Solr两大搜索框架的效果。所以针对两大搜索框架，非常详细地讲解了它们的原理和具体使用方法。首先介绍什么是搜索引擎、如何用MySQL实现简单的搜索引擎，以及Elasticsearch 的概念和接口类;然后介绍Elasticsearch的精准、模糊、范围、组合、分页、聚合查询;最后介绍Solr的概念、安装、配置和使用，并对两大搜索框架进行比较。

让我们可以在短时间内从一个技术“菜鸟”成长为技术“达人

项目实战

开发企业级通用的后台系统

使用Spring Boot,免不了开发后台系统。所以，通过实现-一个基于角色的访问控制后台系统，来系统地介绍如何使用Spring Security。

实现一个类似“京东”的电子商务商城

为了综合使用本书讲解的Spring Security、 Redis、RabbitMQ、 JPA、JWT技术，通过实例来整合这些技术。

首先讲解如何整合管理系统和会员系统实现多用户系统;然后讲解如何实现会员系统的多湍、多方式注册和登录;最后讲解如何实现购物、下单、秒杀，以及订单自动取消功能。

新业务转入Spring Boot技术栈之后，员工好招聘了( Java开发者多，有Java基础能很快上手使用)，它使得开发速度、开发成本和业务运营效果都得到了飞速提升。没用太多时间，同事们就使用Spring Boot构建了公司的第一个大数据开发框架。它整合了Spark、Elasticsearch、RabbitMQ、Redis 等，实现了数据挖掘、自动预测趋势、关联分析、聚类、概念描述、偏差检测等。

Spring Boot 的配置、使用、监控、部署都很简单，它拥有完善的生态。后期如果因为项目流量太大需要切换到微服务Spring Cloud (基于Spring Boot )也会极为顺利。可以预想，未来会有越来越多的公司采用Spring Boot,更会有越来越多的开发者关注和使用Spring Boot。

最后

码字不易，觉得有帮助的可以帮忙点个赞，让更多有需要的人看到

又是一年求职季，在这里，我为各位准备了一套Java程序员精选高频面试笔试真题，来帮助大家攻下BAT的offer，题目范围从初级的Java基础到高级的分布式架构等等一系列的面试题和答案，用于给大家作为参考，需要的可以戳这里免费领取，以下是部分内容截图
这里，我为各位准备了一套Java程序员精选高频面试笔试真题，来帮助大家攻下BAT的offer，题目范围从初级的Java基础到高级的分布式架构等等一系列的面试题和答案，用于给大家作为参考，需要的可以戳这里免费领取，以下是部分内容截图

腾讯后台开发，手机java软件安装相关推荐

s60 手机 Java软件安装冲突解决
Java软件有MIDP2.0和MIDP1.0两种.因此,我们在安装Java软件时,首先需要根据软件提供的信息判断软件是否适合自己的手机,从而避免安装之后无法使用的情况发生. 此外,有些软件可能会与手机 ...
手机java软件安装，真香
目录进入Spring Boot世界讲述Sping.Spring Boot 和Spring Cloud 之间的关系,还重点讲述了如何利用开发工具(如IDEA)来实现开发,如何通过API文档来寻找类对 ...
AI开发过程中常用开发命令及软件安装
来源:投稿作者:frank 编辑:学姐 <<打造舒适的AI环境>>系列总览: 分为硬件篇x1 跟软件篇x3 硬件篇1:主机八大件的选购软件篇1:AI开发过程中常用开发命令 ...
手机java安装_花样繁多 MOTO手机JAVA程序安装详细步骤
使用MOTO手机的朋友可能都知道,JAVA程序是很普遍安装的软件,但是有些朋友可能知道1~2种方法,其实安装的方法有很多.我们摩托罗拉手机论坛的网友夜飞鸟,就将MOTO手机上JAVA程序的多种安装方法 ...
『腾讯后台开发』实习生技能要求
一.操作系统方面 1. 多线程相关与线程之间同步技术熟练使用(但不局限于)以下linux API linux下的线程创建.等待.获取线程id int pthread_create(pthread_t ...
盘点腾讯后台开发各级工程师（T1-T9）需要具备哪些能力
作为一个程序员,不管是初入职场的菜鸟还是做开发多年的老鸟,都希望有机会能进大厂,最近有不少小伙伴问腾讯好不好进?需要的技术栈是怎么样的?本文就给大家普及一下腾讯后台开发各级工程师(T1-T9)需要具备 ...
mysql过载保护_腾讯后台开发技术总监浅谈过载保护小心雪崩效应
摘要: 每个系统,都有自己的最大处理能力,后台技术人员对此必须很清楚,且要注意自我保护,不然就会被雪球压垮,出现雪崩. 雪球: 对于时延敏感的服务,当外部请求超过系统处理能力,如果系统没有做相应保护, ...
腾讯后台开发技术总监浅谈过载保护小心雪崩效应
摘要: 每个系统,都有自己的最大处理能力,后台技术人员对此必须很清楚,且要注意自我保护,不然就会被雪球压垮,出现雪崩. 雪球: 对于时延敏感的服务,当外部请求超过系统处理能力,如果系统没有做相应保护, ...
手机java软件_浅谈软件开发就业前景
我国信息化人才培养还处于发展阶段,导致社会实际需求人才基数远远大于信息化人才的培养基数,使得数以万计的中小企业急需全面系统掌握软件开发基础技能与知识的软件工程师.目前对软件已达20万并且以每年20 ...

腾讯后台开发，手机java软件安装

Kafka宕机引发的高可用问题

目录

基础篇

进阶篇

项目实战

最后

腾讯后台开发，手机java软件安装相关推荐

最新文章

热门文章