您当前的位置:首页 > 电脑百科 > 程序开发 > 架构

今天聊聊腾讯目前在用的微服务架构

时间:2022-06-30 15:44:42  来源:  作者:Java高级互联小课堂

自从去年 10 月份搜狗正式被腾讯合并以后,我一直想给大家讲讲腾讯内部目前开发在用的一些技术栈,我想这对同学们有很高的学习价值。但苦于公司内部有明确的规定,不允许私自对外分享和发布未经公开的信息。一经发现,高压线开除处理!所以一直迟迟都没有动手。

最近我在腾讯的 TechoDay 技术开放日活动中了解到内部在使用的微服务核心北极星(Polaris-Mesh)和一站式微服务开发框架 Spring Cloud Tencent 都已经对外开放了。

北极星 Githubhttps://github.com/polarismesh

Spring Cloud Tencent:https://github.com/Tencent/spring-cloud-tencent

那我今天就可以结合它们来给大家简单聊聊腾讯内部在用的微服务体系了。

一、 为什么要拥抱微服务

我是 2011 年进入腾讯的,那个时候使用的技术栈主要是 LAMP(linux + Apache + MySQL + php)。当时业界还有另外一套流行的技术栈是 MVC(Spring + iBatis/Hibernate + Tomcat)。无论是 LAMP 还是 MVC,都是为单体因共用架构设计的。开发出来的服务也是部署在物理服务器上,一般都是由运维来部署的。

在 web 网页的时代,上面两套技术栈切切实实火了很长的时间。但随着移动互联网的爆发,要开发的服务越来越多,功能也越来越杂,团队开发人员也不断地扩张,发布频率越来越高。传统的单体服务的架构就逐渐呈现出了这么几个问题。

部署服务效率低下:传统的单体服务直接部署在物理机或虚拟机上,服务运行所依赖的软件都得由运维手工去安装和配置。

机器资源很难被复用:现代的服务器配置都是非常的高,但是要运行的单体服务很少有一个服务就能把 CPU、内存等资源都充分利用起来的,会有大量的闲置。但为了保证服务之间的隔离,又往往不敢把多个不想干的服务部署在一起。

团队协作成本高 当有多个人负责同一个服务的时候,难免就会出现提交代码互相影响的情况,发布也是得商量着来。另外就是每次版本发布前的测试工作也是得需要很全面才行。

在后来,就慢慢衍生出了服务的概念。把单体应用拆分成多个不同的服务独立进行部署和发布。比如我当年负责的搜狗手机助手,在后台就是分成了应用推荐列表、应用检查更新、搜索、精准推荐、云端控制、地址定位等等多个独立的服务出来。

在 2014 年开始, Docker 容器开始大行其道,虚拟化程度相比较之前的 KVM 有了质的飞越。一个容器镜像就可以将服务所依赖的软件环境全部打包在一起,最小的情况下只要十几 M 就搞定,分发起来非常自由和方便。启动更是秒级就可以启动起来。

业界围绕容器技术又进行了一系列的演化和迭代,逐步演化出了今天的微服务架构。微服务的热度在 2017 年后突然爆发,各大一线互联网公司也纷纷将这一技术引入并在实际业务中落地,腾讯也不例外。

二、腾讯的微服务引擎

很早腾讯内部各个部门就不同程度地开始试水微服务了。在 2020 年又在公司内部将之前的多套微服务框架进行整合,诞生出了现在的以 tPRC 为核心的微服务框架。现在绝大部分的服务和接口几乎都已经切到了基于容器的微服务架构上了。

在腾讯也好,业界也罢。微服务架构虽然在细节的技术选型上会有所差异。但基本上都可以如下一张微服务架构图来表示。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

在这个微服务架构中,左右两侧分别都是微服务的基础设施,中间是开发框架。在这些基础组件中,我觉得最重要和核心的就属上图左侧的网关、名字服务北极星、以及配置中心。这也正是腾讯对外的云微服务引擎(Tencent Cloud Service Engine,TSE)所对外开放的能力。

所以接下来我就这三个展开了给大家讲一讲。

2.1 云网关

在单体应用时代,在接入层的做法一般就是申请一个外网域名,然后在接入层按照域名将请求分发到不同的业务服务器上。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

在微服务架构中,网关仍然是流量的入口。不过到了微服务时代后,服务的数量比之前要多很多。再也无法直接按照一个域名一个服务的方式进行配置了,而且微服务场景下对路由、监控配置管理等方面的需求更为强烈。

所以这时就需要一个微服务网关,作为所有 API 接口的总入口。网关对后端的微服务进行封装,通过 API 网关统一暴露服务。在网关中提供统一的安全、路由、流控、监控等服务。当有流量到达的时候,网关进行一些预处理后实现根据不同的服务名进行流量的分发。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

2.2 服务治理中心

腾讯的服务治理组件叫北极星。该项目最早是腾讯内部开源协同共建的统一名字服务组件,用于解决 RPC 调用的服务注册、动态路由、负载均衡和容错问题。

现在北极星不但部署到了腾讯云上对外提供服务能力,而且还入驻了开源社区。该项目一上线就受到了业界的广泛关注。

Github 地址:https://github.com/polarismesh

上手报告|今天聊聊腾讯目前在用的微服务架构

 

该项目不仅仅是把源码全部开源出来了,而且还配置了详细的使用文档。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

我接下来给大家介绍一下这个开源项目 Polaris Mesh 解决的问题和所提供的能力。

在微服务架构里,首先要解决的一个问题就是如何找到你要调用的服务。在一家大公司里,可能线上有成千上万个服务同时在运行。那么当你的服务想调用某个服务的时候,如何正确找到对应的服务并进行访问呢?

这个问题就是通过北极星 Polaris Mesh 的服务注册与发现机制来解决。服务提供方在启动时会向 Polaris Mesh 注册自己的服务名以及服务地址。当调用方需要调用的通过在进程内部内嵌的 Proxy 代理先到 Polaris Mesh 获取要调用的服务地址,找到后直接发起调用。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

一般情况下服务提供方都是有多个实例的,那么到底该选择哪一个来进行访问呢?有这么两种不同的使用场景。

一种使用场景是分组,比如你的服务调用方和服务提供方可能是多地部署的,在Linux 网络性能的 15 个优化建议! 一文中我们提到过最好是在同机房内部来进行服务调用。要避免跨机房调用。因为这会导致过长的耗时。再比如你可能需要单独部署测试环境,和灰度环境等等。

还有一种应用场景是负载均衡,即使是同环境同机房,可能各个服务提供实例方的 CPU 等配置不一样,也需要合理调度请求流量。

这两种实际应用场景都需要通过合理的路由规则来解决。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

我们再聊聊限流。在服务的响应能力里有一个词叫做雪崩。雪崩指的是一种自然现象,雪山上堆积了很多雪,但都还算稳定。但当最后一片雪花落下的时候,整个雪山就崩塌了。服务也存在类似的现象,假如说你的服务每秒可能最大可以正常处理 1000 个请求,但是如果到了 1001 个请求,整个服务将崩溃,连 1 个请求也没办法正常处理了。这就是服务中的雪崩。

那在服务治理中为了杜绝这种现象的产生,就诞生出了一种限流功能。你可以配置某个服务实例的最大处理能力,当超过这个处理能力时后面就不要再过来新的请求了,以保证服务还能正常运行。限流方式有两种,一是快速失败,直接拒绝掉多出来的请求。二是均匀地排队,让服务慢慢地处理。就像地铁站里的限流栏一样。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

这两种限流能力在 Polaris Mesh 中都可以非常方便地进行配置。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

除了上面的能力以外,Polaris Mesh 还包括熔断规则、访问鉴权、可观测等等特性。在接入方式上不但提供了 JAVA / Go / C++ / Node.js / PHP 的 SDK 接入,而且还支持 Spring Cloud / gRPC 、服务网格、K8s 服务治理等多种主流客户端。完整的接入方式参见下图:

上手报告|今天聊聊腾讯目前在用的微服务架构

 

在使用上,我觉得腾讯云提供的配置工具比我们内部用的还方便。路由规则、熔断规则、限流规则都可以在界面上直接进行配置。用起来非常的方便。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

2.3 配置中心

在传统的单体服务时代,配置往往都是写在一个叫配置文件的东东里的。但是到了微服务时代,由于服务数量的爆炸,一大堆的各类配置项,各种不定时的修改需求会让整个工作过程显得混乱不堪。过于分散的配置文件加大了管理的难度。

所以在微服务时代里,配置中心都成为了标配。思路就是把项目中所有参数、开关等配置性的信息,全部都放到一个集中的地方进行统一管理,并提供一套标准的接口。当某个服务需要获取配置的时候,调用接口拉取。当有配置更新的时候,配置中心会通知到各个服务时期动态加载。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

在业界,已经有多种常用的解决方案了,包括 Zookeeper、Eureka、Nacos、Consul、Apollo 等等。在腾讯云 TSE 中以上几种主流配置中心解决方案全部都支持,而且对功能进行了增强,提供可视化的控制台、服务管理、日志、监控、告警、鉴权等一系列原方案所不具备的功能。

在部署上,不再需要自己的运维团队进行部署。一键就可以部署出支持多活、持久化等高可用的配置中心集群。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

在可视化的控制台中,可以非常方便地对配置中心进行数据管理、日志查看、运行监控等日常操作。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

北极星 Github 地址:https://github.com/polarismesh

2.4 开发框架

对于 Java 开发者来说,还可以直接使用 Spring Cloud Tencet 开发框架。该框架实现了Spring Cloud 标准微服务 SPI,它依托北极星 polaris,实现各种分布式微服务场景。

上手报告|今天聊聊腾讯目前在用的微服务架构

 

Spring Cloud Tencent 所有组件都已上传到 Maven 中央仓库,只需要引入依赖即可。

Spring Cloud Tencent:https://github.com/Tencent/spring-cloud-tencent/

三、总结

微服务架构是目前比较流行的技术。搭建一套微服务基础架构往往需要组装一系列的微服务中间件,例如服务注册中心、配置中心、日志中心等等。这个初期的成本投入是很高的。一般大公司有有专门的人力和财力来搭建微服务所需要的这些基础轮子。

对于中小公司,甚至是个人开发者来说,如果全盘从 0 自己部署微服务所依赖的这些基础组件,光是部署就足够折腾好久的了。而且微服务中还存在多种技术选型,比如配置中心就有 Zookeeper、Eureka、Nacos、Consul、Apollo 等很多种。学习和运维难度都比传统的开发模式要复杂的多。

但是作为中小公司或者个人开发者来说,如果不接触微服务架构又会慢慢地与时代脱节。好在现在公有云厂商都提供了微服务基础设施。我在 Techo Day 上体验下来的感觉,就是太方便了开箱即用

回想起我刚开始折腾 Zookeeper、Consul 的时候,光编译和安装就浪费了很多时间。现在一键部署就能使用,实在很方便。而且我感觉腾讯对外的产品使用体验上的打磨做的更好,其实很多地方比我们内部的工具用起来都好用。

原文链接:
https://mp.weixin.qq.com/s/AOUypK_MtcI3cQGcYSlMQw



Tags:微服务架构   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,不构成投资建议。投资者据此操作,风险自担。如有任何标注错误或版权侵犯请与我们联系,我们将及时更正、删除。
▌相关推荐
对于微服务架构监控应该遵守的原则
随着软件交付方式的变革,微服务架构的兴起使得软件开发变得更加快速和灵活。在这种情况下,监控系统成为了微服务控制系统的核心组成部分。随着软件的复杂性不断增加,了解系统的...【详细内容】
2024-04-03  Search: 微服务架构  点击:(7)  评论:(0)  加入收藏
PHP+Go 开发仿简书,实战高并发高可用微服务架构
来百度APP畅享高清图片//下栽のke:chaoxingit.com/2105/PHP和Go语言结合,可以开发出高效且稳定的仿简书应用。在实现高并发和高可用微服务架构时,我们可以采用一些关键技术。首...【详细内容】
2024-01-14  Search: 微服务架构  点击:(124)  评论:(0)  加入收藏
微服务架构中的数据一致性
在微服务中,一个逻辑上原子操作可以经常跨越多个微服务。即使是单片系统也可能使用多个数据库或消息传递解决方案。使用多个独立的数据存储解决方案,如果其中一个分布式流程参...【详细内容】
2023-12-27  Search: 微服务架构  点击:(147)  评论:(0)  加入收藏
Eureka: 微服务架构中不可或缺的服务治理工具
Eureka是Netflix开源的一款用于服务治理的工具,它是NetflixOSS(OpenSourceSoftware)项目的一部分,主要用于实现微服务架构中的服务注册与发现。在当今庞大而复杂的微服务系统中,E...【详细内容】
2023-12-14  Search: 微服务架构  点击:(200)  评论:(0)  加入收藏
微软官方出品微服务架构:十个.Net开源项目
1、一个高性能类型安全的.NET枚举实用开源库Enums.NET是一个.NET枚举实用程序库,专注于为枚举提供丰富的操作方法。它支持.NET Framework和.Net Core。它主要优点表现在类型...【详细内容】
2023-12-06  Search: 微服务架构  点击:(137)  评论:(0)  加入收藏
深入理解Java微服务架构与容器化部署
随着云计算和大规模分布式系统的兴起,Java微服务架构和容器化部署成为了现代应用开发中的热门话题。它们可以提供灵活性、可伸缩性和高效性,使得开发人员能够更好地构建和维护...【详细内容】
2023-11-29  Search: 微服务架构  点击:(269)  评论:(0)  加入收藏
DDD四层微服务架构
一、微服务搭建思路大家看到的这张架构图并不是空穴来潮,它是通过不断演变出来的,我们要从DDD四层架构、微服务架构两个维度去融合理解。这里的DDD四层架构适用于单个服务的工...【详细内容】
2023-11-24  Search: 微服务架构  点击:(222)  评论:(0)  加入收藏
在微服务架构中的数据一致性
当从传统的单体应用架构转移到微服务架构时,特别是涉及数据一致性时,数据一致性是微服务架构中最困难的部分。传统的单体应用中,一个共享的关系型数据库负责处理数据一致性。在...【详细内容】
2023-11-23  Search: 微服务架构  点击:(176)  评论:(0)  加入收藏
一文搞懂微服务架构演进
本文将介绍微服务架构和相关的组件,介绍他们是什么,以及为什么要使用微服务架构和这些组件。本文侧重于简明地表达微服务架构的全局图景,因此不会涉及具体如何使用组件等细节。...【详细内容】
2023-11-21  Search: 微服务架构  点击:(169)  评论:(0)  加入收藏
单体架构 vs 微服务架构的全面比较
软件架构是指软件系统的高层设计和组织方式。它定义了系统的结构、组件、它们之间的交互以及它们如何满足系统的需求。有各种软件架构模式,每种都有其自身的优点和权衡。两种...【详细内容】
2023-11-01  Search: 微服务架构  点击:(255)  评论:(0)  加入收藏
▌简易百科推荐
对于微服务架构监控应该遵守的原则
随着软件交付方式的变革,微服务架构的兴起使得软件开发变得更加快速和灵活。在这种情况下,监控系统成为了微服务控制系统的核心组成部分。随着软件的复杂性不断增加,了解系统的...【详细内容】
2024-04-03  步步运维步步坑    Tags:架构   点击:(7)  评论:(0)  加入收藏
大模型应用的 10 种架构模式
作者 | 曹洪伟在塑造新领域的过程中,我们往往依赖于一些经过实践验证的策略、方法和模式。这种观念对于软件工程领域的专业人士来说,已经司空见惯,设计模式已成为程序员们的重...【详细内容】
2024-03-27    InfoQ  Tags:架构模式   点击:(20)  评论:(0)  加入收藏
哈啰云原生架构落地实践
一、弹性伸缩技术实践1.全网容器化后一线研发的使用问题全网容器化后一线研发会面临一系列使用问题,包括时机、容量、效率和成本问题,弹性伸缩是云原生容器化后的必然技术选择...【详细内容】
2024-03-27  哈啰技术  微信公众号  Tags:架构   点击:(13)  评论:(0)  加入收藏
DDD 与 CQRS 才是黄金组合
在日常工作中,你是否也遇到过下面几种情况: 使用一个已有接口进行业务开发,上线后出现严重的性能问题,被老板当众质疑:“你为什么不使用缓存接口,这个接口全部走数据库,这怎么能扛...【详细内容】
2024-03-27  dbaplus社群    Tags:DDD   点击:(15)  评论:(0)  加入收藏
高并发架构设计(三大利器:缓存、限流和降级)
软件系统有三个追求:高性能、高并发、高可用,俗称三高。本篇讨论高并发,从高并发是什么到高并发应对的策略、缓存、限流、降级等。引言1.高并发背景互联网行业迅速发展,用户量剧...【详细内容】
2024-03-13    阿里云开发者  Tags:高并发   点击:(11)  评论:(0)  加入收藏
如何判断架构设计的优劣?
架构设计的基本准则是非常重要的,它们指导着我们如何构建可靠、可维护、可测试的系统。下面是这些准则的转换表达方式:简单即美(KISS):KISS原则的核心思想是保持简单。在设计系统...【详细内容】
2024-02-20  二进制跳动  微信公众号  Tags:架构设计   点击:(40)  评论:(0)  加入收藏
详解基于SpringBoot的WebSocket应用开发
在现代Web应用中,实时交互和数据推送的需求日益增长。WebSocket协议作为一种全双工通信协议,允许服务端与客户端之间建立持久性的连接,实现实时、双向的数据传输,极大地提升了用...【详细内容】
2024-01-30  ijunfu  今日头条  Tags:SpringBoot   点击:(23)  评论:(0)  加入收藏
PHP+Go 开发仿简书,实战高并发高可用微服务架构
来百度APP畅享高清图片//下栽のke:chaoxingit.com/2105/PHP和Go语言结合,可以开发出高效且稳定的仿简书应用。在实现高并发和高可用微服务架构时,我们可以采用一些关键技术。首...【详细内容】
2024-01-14  547蓝色星球    Tags:架构   点击:(124)  评论:(0)  加入收藏
GraalVM与Spring Boot 3.0:加速应用性能的完美融合
在2023年,SpringBoot3.0的发布标志着Spring框架对GraalVM的全面支持,这一支持是对Spring技术栈的重要补充。GraalVM是一个高性能的多语言虚拟机,它提供了Ahead-of-Time(AOT)编...【详细内容】
2024-01-11    王建立  Tags:Spring Boot   点击:(135)  评论:(0)  加入收藏
Spring Boot虚拟线程的性能还不如Webflux?
早上看到一篇关于Spring Boot虚拟线程和Webflux性能对比的文章,觉得还不错。内容较长,抓重点给大家介绍一下这篇文章的核心内容,方便大家快速阅读。测试场景作者采用了一个尽可...【详细内容】
2024-01-10  互联网架构小马哥    Tags:Spring Boot   点击:(131)  评论:(0)  加入收藏
站内最新
站内热门
站内头条