2019-08-06 22:56:03 +08:00
|
|
|
|
# 互联网 Java 工程师进阶知识完全扫盲<sup>[©](https://github.com/yanglbme)</sup>
|
2019-06-20 08:40:29 +08:00
|
|
|
|
[![license](https://badgen.net/github/license/doocs/advanced-java?color=green)](https://github.com/doocs/advanced-java/blob/master/LICENSE)
|
2019-02-25 16:20:51 +08:00
|
|
|
|
[![original](https://badgen.net/badge/original/%E4%B8%AD%E5%8D%8E%E7%9F%B3%E6%9D%89/orange)](https://github.com/doocs/advanced-java)
|
2019-04-26 15:26:49 +08:00
|
|
|
|
[![notice](https://badgen.net/badge/notice/%E7%BB%B4%E6%9D%83%E8%A1%8C%E5%8A%A8/red)](/docs/from-readers/rights-defending-movement.md)
|
2019-06-04 08:51:29 +08:00
|
|
|
|
[![wechat-group](https://badgen.net/badge/chat/%E5%BE%AE%E4%BF%A1%E4%BA%A4%E6%B5%81/138c7b)](https://github.com/doocs/advanced-java/issues/70)
|
2019-03-29 10:10:57 +08:00
|
|
|
|
[![reading](https://badgen.net/badge/books/read%20together/cyan)](https://github.com/doocs/technical-books)
|
2019-04-25 09:29:28 +08:00
|
|
|
|
[![coding](https://badgen.net/badge/leetcode/coding%20together/cyan)](https://github.com/doocs/leetcode)
|
2019-08-13 09:14:17 +08:00
|
|
|
|
[![doocs](https://badgen.net/badge/organization/join%20us/cyan)](https://doocs.github.io/#/?id=how-to-join)
|
2019-02-25 16:20:51 +08:00
|
|
|
|
[![stars](https://badgen.net/github/stars/doocs/advanced-java)](https://github.com/doocs/advanced-java/stargazers)
|
2019-04-13 18:33:06 +08:00
|
|
|
|
[![contributors](https://badgen.net/github/contributors/doocs/advanced-java)](https://github.com/doocs/advanced-java/tree/master/docs/from-readers#contributors)
|
2019-02-25 16:41:31 +08:00
|
|
|
|
[![help-wanted](https://badgen.net/github/label-issues/doocs/advanced-java/help%20wanted/open)](https://github.com/doocs/advanced-java/labels/help%20wanted)
|
2019-02-25 16:20:51 +08:00
|
|
|
|
[![issues](https://badgen.net/github/open-issues/doocs/advanced-java)](https://github.com/doocs/advanced-java/issues)
|
|
|
|
|
[![PRs Welcome](https://badgen.net/badge/PRs/welcome/green)](http://makeapullrequest.com)
|
2018-10-06 21:15:26 +08:00
|
|
|
|
|
2019-09-27 09:09:01 +08:00
|
|
|
|
本项目大部分内容来自中华石杉,版权归作者所有,内容涵盖[高并发](#高并发架构)、[分布式](#分布式系统)、[高可用](#高可用架构)、[微服务](#微服务架构)等领域知识。我([@yanglbme](https://github.com/yanglbme))对这部分知识做了一个系统的整理,方便学习查阅。配合《[大型网站技术架构](https://github.com/doocs/technical-books#architecture)——李智慧》、《[Redis 设计与实现](https://github.com/doocs/technical-books#database)——[黄健宏](https://github.com/huangz1990)》、《[Redis 深度历险](https://github.com/doocs/technical-books#database)——钱文品》、《[亿级流量网站架构核心技术](https://github.com/doocs/technical-books#architecture)——张开涛》食用,[效果更佳](https://doocs.github.io/advanced-java/#/docs/extra-page/offer)。
|
2019-02-24 09:44:05 +08:00
|
|
|
|
|
2019-09-18 09:45:10 +08:00
|
|
|
|
学习之前,先来看看 [Issues 讨论区](https://github.com/doocs/advanced-java/issues/9#issue-394275038)的技术面试官是怎么说的吧。本项目也欢迎各位开发者朋友到 [Issues 讨论区](https://github.com/doocs/advanced-java/issues)分享自己的一些想法和实践经验,参与或加入开源组织请看[这里](https://github.com/doocs/advanced-java/issues/61),你也访问 [GitHub Page](https://doocs.github.io) 详细了解一下 Doocs。
|
2019-02-22 00:32:43 +08:00
|
|
|
|
|
2019-10-08 21:16:55 +08:00
|
|
|
|
[另外,我还将在这里更新内容,感兴趣的朋友可以进来看看。](/docs/extra-page/subscriptions-for-doocs.md)
|
|
|
|
|
|
2018-10-06 20:28:56 +08:00
|
|
|
|
## 高并发架构
|
2018-10-07 11:29:41 +08:00
|
|
|
|
### [消息队列](/docs/high-concurrency/mq-interview.md)
|
2018-10-07 16:58:55 +08:00
|
|
|
|
- [为什么使用消息队列?消息队列有什么优点和缺点?Kafka、ActiveMQ、RabbitMQ、RocketMQ 都有什么优点和缺点?](/docs/high-concurrency/why-mq.md)
|
|
|
|
|
- [如何保证消息队列的高可用?](/docs/high-concurrency/how-to-ensure-high-availability-of-message-queues.md)
|
2019-01-07 21:54:14 +08:00
|
|
|
|
- [如何保证消息不被重复消费?(如何保证消息消费的幂等性)](/docs/high-concurrency/how-to-ensure-that-messages-are-not-repeatedly-consumed.md)
|
2018-10-08 22:53:17 +08:00
|
|
|
|
- [如何保证消息的可靠性传输?(如何处理消息丢失的问题)](/docs/high-concurrency/how-to-ensure-the-reliable-transmission-of-messages.md)
|
2018-10-09 23:40:46 +08:00
|
|
|
|
- [如何保证消息的顺序性?](/docs/high-concurrency/how-to-ensure-the-order-of-messages.md)
|
2018-12-02 10:01:35 +08:00
|
|
|
|
- [如何解决消息队列的延时以及过期失效问题?消息队列满了以后该怎么处理?有几百万消息持续积压几小时,说说怎么解决?](/docs/high-concurrency/mq-time-delay-and-expired-failure.md)
|
2018-12-02 10:17:44 +08:00
|
|
|
|
- [如果让你写一个消息队列,该如何进行架构设计啊?说一下你的思路。](/docs/high-concurrency/mq-design.md)
|
2018-10-06 20:28:56 +08:00
|
|
|
|
|
2018-12-04 17:01:34 +08:00
|
|
|
|
### [搜索引擎](/docs/high-concurrency/es-introduction.md)
|
2018-12-02 15:45:28 +08:00
|
|
|
|
- [es 的分布式架构原理能说一下么(es 是如何实现分布式的啊)?](/docs/high-concurrency/es-architecture.md)
|
2018-12-03 19:02:41 +08:00
|
|
|
|
- [es 写入数据的工作原理是什么啊?es 查询数据的工作原理是什么啊?底层的 lucene 介绍一下呗?倒排索引了解吗?](/docs/high-concurrency/es-write-query-search.md)
|
2018-12-02 22:53:20 +08:00
|
|
|
|
- [es 在数据量很大的情况下(数十亿级别)如何提高查询效率啊?](/docs/high-concurrency/es-optimizing-query-performance.md)
|
2018-12-03 11:07:47 +08:00
|
|
|
|
- [es 生产集群的部署架构是什么?每个索引的数据量大概有多少?每个索引大概有多少个分片?](/docs/high-concurrency/es-production-cluster.md)
|
2018-10-06 20:28:56 +08:00
|
|
|
|
|
2018-12-25 17:56:08 +08:00
|
|
|
|
### 缓存
|
2018-11-15 21:47:04 +08:00
|
|
|
|
- [在项目中缓存是如何使用的?缓存如果使用不当会造成什么后果?](/docs/high-concurrency/why-cache.md)
|
|
|
|
|
- [Redis 和 Memcached 有什么区别?Redis 的线程模型是什么?为什么单线程的 Redis 比多线程的 Memcached 效率要高得多?](/docs/high-concurrency/redis-single-thread-model.md)
|
2018-11-16 09:30:22 +08:00
|
|
|
|
- [Redis 都有哪些数据类型?分别在哪些场景下使用比较合适?](/docs/high-concurrency/redis-data-types.md)
|
2018-11-16 11:04:42 +08:00
|
|
|
|
- [Redis 的过期策略都有哪些?手写一下 LRU 代码实现?](/docs/high-concurrency/redis-expiration-policies-and-lru.md)
|
2018-11-17 15:11:00 +08:00
|
|
|
|
- [如何保证 Redis 高并发、高可用?Redis 的主从复制原理能介绍一下么?Redis 的哨兵原理能介绍一下么?](/docs/high-concurrency/how-to-ensure-high-concurrency-and-high-availability-of-redis.md)
|
|
|
|
|
- [Redis 的持久化有哪几种方式?不同的持久化机制都有什么优缺点?持久化机制具体底层是如何实现的?](/docs/high-concurrency/redis-persistence.md)
|
2018-11-18 16:23:46 +08:00
|
|
|
|
- [Redis 集群模式的工作原理能说一下么?在集群模式下,Redis 的 key 是如何寻址的?分布式寻址都有哪些算法?了解一致性 hash 算法吗?如何动态增加和删除一个节点?](/docs/high-concurrency/redis-cluster.md)
|
2019-03-15 17:03:27 +08:00
|
|
|
|
- [了解什么是 redis 的雪崩、穿透和击穿?Redis 崩溃之后会怎么样?系统该如何应对这种情况?如何处理 Redis 的穿透?](/docs/high-concurrency/redis-caching-avalanche-and-caching-penetration.md)
|
2018-11-18 23:03:15 +08:00
|
|
|
|
- [如何保证缓存与数据库的双写一致性?](/docs/high-concurrency/redis-consistence.md)
|
|
|
|
|
- [Redis 的并发竞争问题是什么?如何解决这个问题?了解 Redis 事务的 CAS 方案吗?](/docs/high-concurrency/redis-cas.md)
|
|
|
|
|
- [生产环境中的 Redis 是怎么部署的?](/docs/high-concurrency/redis-production-environment.md)
|
2018-10-06 20:28:56 +08:00
|
|
|
|
|
|
|
|
|
### 分库分表
|
2018-11-30 17:01:19 +08:00
|
|
|
|
- [为什么要分库分表(设计高并发系统的时候,数据库层面该如何设计)?用过哪些分库分表中间件?不同的分库分表中间件都有什么优点和缺点?你们具体是如何对数据库如何进行垂直拆分或水平拆分的?](/docs/high-concurrency/database-shard.md)
|
2018-11-30 19:49:50 +08:00
|
|
|
|
- [现在有一个未分库分表的系统,未来要分库分表,如何设计才可以让系统从未分库分表动态切换到分库分表上?](/docs/high-concurrency/database-shard-method.md)
|
2018-11-30 21:08:53 +08:00
|
|
|
|
- [如何设计可以动态扩容缩容的分库分表方案?](/docs/high-concurrency/database-shard-dynamic-expand.md)
|
2018-11-30 22:52:53 +08:00
|
|
|
|
- [分库分表之后,id 主键如何处理?](/docs/high-concurrency/database-shard-global-id-generate.md)
|
2018-10-06 20:28:56 +08:00
|
|
|
|
|
|
|
|
|
### 读写分离
|
2018-12-01 11:19:34 +08:00
|
|
|
|
- [如何实现 MySQL 的读写分离?MySQL 主从复制原理是啥?如何解决 MySQL 主从同步的延时问题?](/docs/high-concurrency/mysql-read-write-separation.md)
|
2018-10-06 20:28:56 +08:00
|
|
|
|
|
2018-12-03 09:51:46 +08:00
|
|
|
|
### 高并发系统
|
|
|
|
|
- [如何设计一个高并发系统?](/docs/high-concurrency/high-concurrency-design.md)
|
|
|
|
|
|
2018-12-20 16:23:48 +08:00
|
|
|
|
## 分布式系统
|
|
|
|
|
### [面试连环炮](/docs/distributed-system/distributed-system-interview.md)
|
2018-12-03 09:51:46 +08:00
|
|
|
|
### 系统拆分
|
|
|
|
|
- [为什么要进行系统拆分?如何进行系统拆分?拆分后不用 Dubbo 可以吗?](/docs/distributed-system/why-dubbo.md)
|
|
|
|
|
|
|
|
|
|
### 分布式服务框架
|
|
|
|
|
- [说一下 Dubbo 的工作原理?注册中心挂了可以继续通信吗?](/docs/distributed-system/dubbo-operating-principle.md)
|
|
|
|
|
- [Dubbo 支持哪些序列化协议?说一下 Hessian 的数据结构?PB 知道吗?为什么 PB 的效率是最高的?](/docs/distributed-system/dubbo-serialization-protocol.md)
|
|
|
|
|
- [Dubbo 负载均衡策略和集群容错策略都有哪些?动态代理策略呢?](/docs/distributed-system/dubbo-load-balancing.md)
|
|
|
|
|
- [Dubbo 的 spi 思想是什么?](/docs/distributed-system/dubbo-spi.md)
|
|
|
|
|
- [如何基于 Dubbo 进行服务治理、服务降级、失败重试以及超时重试?](/docs/distributed-system/dubbo-service-management.md)
|
|
|
|
|
- [分布式服务接口的幂等性如何设计(比如不能重复扣款)?](/docs/distributed-system/distributed-system-idempotency.md)
|
|
|
|
|
- [分布式服务接口请求的顺序性如何保证?](/docs/distributed-system/distributed-system-request-sequence.md)
|
2019-01-05 20:31:20 +08:00
|
|
|
|
- [如何自己设计一个类似 Dubbo 的 RPC 框架?](/docs/distributed-system/dubbo-rpc-design.md)
|
2018-12-03 09:51:46 +08:00
|
|
|
|
|
|
|
|
|
### 分布式锁
|
|
|
|
|
- [Zookeeper 都有哪些应用场景?](/docs/distributed-system/zookeeper-application-scenarios.md)
|
|
|
|
|
- [使用 Redis 如何设计分布式锁?使用 Zookeeper 来设计分布式锁可以吗?以上两种分布式锁的实现方式哪种效率比较高?](/docs/distributed-system/distributed-lock-redis-vs-zookeeper.md)
|
|
|
|
|
|
|
|
|
|
### 分布式事务
|
|
|
|
|
- [分布式事务了解吗?你们如何解决分布式事务问题的?TCC 如果出现网络连不通怎么办?XA 的一致性如何保证?](/docs/distributed-system/distributed-transaction.md)
|
|
|
|
|
|
|
|
|
|
### 分布式会话
|
|
|
|
|
- [集群部署时的分布式 Session 如何实现?](/docs/distributed-system/distributed-session.md)
|
2018-10-06 20:28:56 +08:00
|
|
|
|
|
|
|
|
|
## 高可用架构
|
2018-12-01 16:49:52 +08:00
|
|
|
|
- [Hystrix 介绍](/docs/high-availability/hystrix-introduction.md)
|
2018-12-01 18:54:39 +08:00
|
|
|
|
- [电商网站详情页系统架构](/docs/high-availability/e-commerce-website-detail-page-architecture.md)
|
2018-12-26 20:40:31 +08:00
|
|
|
|
- [Hystrix 线程池技术实现资源隔离](/docs/high-availability/hystrix-thread-pool-isolation.md)
|
2018-12-28 22:13:03 +08:00
|
|
|
|
- [Hystrix 信号量机制实现资源隔离](/docs/high-availability/hystrix-semphore-isolation.md)
|
2018-12-29 19:14:21 +08:00
|
|
|
|
- [Hystrix 隔离策略细粒度控制](/docs/high-availability/hystrix-execution-isolation.md)
|
2018-12-30 22:12:05 +08:00
|
|
|
|
- [深入 Hystrix 执行时内部原理](/docs/high-availability/hystrix-process.md)
|
2019-01-01 00:07:15 +08:00
|
|
|
|
- [基于 request cache 请求缓存技术优化批量商品数据查询接口](/docs/high-availability/hystrix-request-cache.md)
|
2019-01-04 11:26:11 +08:00
|
|
|
|
- [基于本地缓存的 fallback 降级机制](/docs/high-availability/hystrix-fallback.md)
|
2019-01-05 09:26:39 +08:00
|
|
|
|
- [深入 Hystrix 断路器执行原理](/docs/high-availability/hystrix-circuit-breaker.md)
|
2019-01-05 20:31:20 +08:00
|
|
|
|
- [深入 Hystrix 线程池隔离与接口限流](/docs/high-availability/hystrix-thread-pool-current-limiting.md)
|
2019-01-07 21:54:14 +08:00
|
|
|
|
- [基于 timeout 机制为服务接口调用超时提供安全保护](/docs/high-availability/hystrix-timeout.md)
|
2018-10-06 20:28:56 +08:00
|
|
|
|
|
|
|
|
|
### 高可用系统
|
|
|
|
|
- 如何设计一个高可用系统?
|
|
|
|
|
|
|
|
|
|
### 限流
|
2019-11-07 10:14:36 +08:00
|
|
|
|
- [如何限流?在工作中是怎么做的?说一下具体的实现?](/docs/high-concurrency/huifer-how-to-limit-current.md)
|
2018-10-06 20:28:56 +08:00
|
|
|
|
|
|
|
|
|
### 熔断
|
|
|
|
|
- 如何进行熔断?
|
|
|
|
|
- 熔断框架都有哪些?具体实现原理知道吗?
|
2019-08-03 14:41:59 +08:00
|
|
|
|
- [熔断框架如何做技术选型?选用 Sentinel 还是 Hystrix?](/docs/high-availability/sentinel-vs-hystrix.md)
|
2018-10-06 20:28:56 +08:00
|
|
|
|
|
2018-10-06 21:15:26 +08:00
|
|
|
|
### 降级
|
2019-01-09 16:08:13 +08:00
|
|
|
|
- 如何进行降级?
|
|
|
|
|
|
2019-01-09 17:44:12 +08:00
|
|
|
|
## 微服务架构
|
2019-04-04 08:08:38 +08:00
|
|
|
|
- [微服务架构整个章节内容属额外新增,后续抽空更新,也欢迎读者们参与补充完善](https://github.com/doocs/advanced-java)
|
2019-01-09 16:08:13 +08:00
|
|
|
|
- [关于微服务架构的描述](/docs/micro-services/microservices-introduction.md)
|
2019-09-03 20:39:26 +08:00
|
|
|
|
- [从单体式架构迁移到微服务架构](/docs/micro-services/migrating-from-a-monolithic-architecture-to-a-microservices-architecture.md)
|
2019-09-05 10:11:59 +08:00
|
|
|
|
- [微服务的事件驱动数据管理](/docs/micro-services/event-driven-data-management-for-microservices.md)
|
2019-01-09 16:08:13 +08:00
|
|
|
|
|
2019-01-12 14:27:52 +08:00
|
|
|
|
### Spring Cloud 微服务架构
|
2019-11-07 10:11:56 +08:00
|
|
|
|
- [什么是微服务?微服务之间是如何独立通讯的?](/docs/micro-services/huifer-what's-microservice-how-to-communicate.md)
|
2019-01-12 14:27:52 +08:00
|
|
|
|
- Spring Cloud 和 Dubbo 有哪些区别?
|
|
|
|
|
- Spring Boot 和 Spring Cloud,谈谈你对它们的理解?
|
|
|
|
|
- 什么是服务熔断?什么是服务降级?
|
|
|
|
|
- 微服务的优缺点分别是什么?说一下你在项目开发中碰到的坑?
|
2019-11-07 10:09:07 +08:00
|
|
|
|
- [你所知道的微服务技术栈都有哪些?](/docs/micro-services/huifer-micro-services-technology-stack%20.md)
|
|
|
|
|
- [微服务治理策略](/docs/micro-services/huifer-micro-service-governance.md)
|
2019-01-12 14:27:52 +08:00
|
|
|
|
- Eureka 和 Zookeeper 都可以提供服务注册与发现的功能,它们有什么区别?
|
2019-07-12 08:53:13 +08:00
|
|
|
|
- ......
|
2019-11-18 21:21:46 +08:00
|
|
|
|
|
|
|
|
|
---
|
|
|
|
|
|
|
|
|
|
GitHub 技术社区 Doocs 旗下唯一公众号,欢迎关注,专注于分享有价值的文章。
|
|
|
|
|
|
|
|
|
|
<div style="text-align:center;">
|
|
|
|
|
<img src="./images/qrcode_for_doocs.jpg" width="200px;"/>
|
|
|
|
|
</div>
|