。

极氪汽车是吉利控股集团旗下高端纯电汽车新品牌#xff0c;2021

月极氪发布首款…作者极氪汽车

新能源汽车已经成为我国汽车市场再次崛起的关键支柱随着新能源汽车市场的快速发展不同类型的品牌造车厂商呈现出百花齐放的态势。

极氪汽车是吉利控股集团旗下高端纯电汽车新品牌2021

月极氪发布首款高端智能电动车型–极氪

极氪坚持不止于车的服务体验除了为客户提供卓越产品的同时还通过极氪

APP

推出线上社区、订阅出行、好物商城、极氪生活等多元创新举措实现了极氪产品的全生命周期管理以及用户旅程的全场景覆盖。

从用户想要了解相关车型到有意向进行购买、提车使用、分享感受以及售后问题迅捷解决方案等各种环节的使用场景都被集成到了这款

APP

“我之前对极氪汽车并不是很了解极氪这款软件对我的帮助非常大我觉得这是很好的同时也在极氪软件里面看到了自己想要买的车关注极氪已经一年了不仅可以了解极氪汽车知识还能得极分换商品希望极氪多多上新实用商品”

Apple

既是用户智能控车随时随地掌握车况的车主服务好帮手又能提供购买用车好物、共享社区活动的极致出行用车体验便于用户获取触手可得的用车信息让出行变得更加便捷有趣。

云原生技术发展

技术也在不断更新迭代。

极氪极为重视客户对服务的体验并将系统稳定性、业务功能的迭代效率、问题的快速定位和解决视为构建核心竞争力的基石。

公司副总裁刘昊表示为快速响应用户的需求例如缩短一辆车的制造周期、便捷平滑地升级汽车操作系统等企业从产品到用户体验到商业模式都需要创新。

然而消费互联网和传统产业发展的经验不足以完全满足产业互联网对成本、效率、质量等方面的高要求。

云原生是一个确定性的技术发展趋势能有效推动产业发展驱动企业积极革新。

极氪将持续投入将云原生能力赋能到企业内的研、产、供、销、三电等更广泛的业务领域。

在极氪系统改造上云的过程中围绕着云原生技术体系推动极氪的各条业务线进行技术升级改造加快数智化发展进程。

在技术选型上极氪始终遵循着2条原则

使用开源开放的主流技术标准可以确保技术方案的成熟度更便捷地从开发者社区获取技术资源和最佳实践也能够帮助企业更好的招募技术人才。

此外这样的策略也避免了被封闭技术体系和特定云厂商所捆绑。

软件技术的国产化以及自主可控也是需要考虑的点。

将稳定性保障、底层技术实现、技术组件维护、弹性伸缩等非功能性需求尽可能交给云厂商解决让技术团队将更多的精力投入到业务创新上。

个原则并不矛盾相反它们之间可以非常好的融合这也是所有使用云计算的企业用户都值得借鉴的架构选型标准。

比如

Kubernetes

产品可以简化用户的搭建成本更好地与云计算资源进行集成。

同时用户依然可以基于开源

Kubernetes

款云产品形成了自动化运维和云平台交互的新界面从而提升企业业务系统的弹性和自动化运维能力。

基于容器服务

系统容器化改造工作比预想中的要顺利得多。

对于每一个业务系统而言从虚拟机迁移到

Kubernetes

仅仅是底层的承载发生了变化不会涉及到太多的改造成本。

在容器化改造的过程中当极氪技术团队遇到疑难问题的时候可以第一时间从阿里云获得最佳实践指导包括集群规划、平台运维、应用适配、安全防护、可观测等多个方面这也更进一步的提升了容器化改造的速度。

目前极氪

Kubernetes。

相比传统的基于虚拟机部署方式容器化帮助极氪在资源利用率上提升了

2022

与容器化改造几乎同步进行的是对微服务架构的统一。

在此之前极氪的各个业务单元多种技术栈并存彼此之间相互通讯复杂度高项目成员的交接往往要耗费巨大的精力极大程度上阻碍了数字化转型的进展因此微服务架构统一势在必行。

年多时间完成了这一项艰巨的工作虽然投入精力巨大但收益是立竿见影的而且可以持续发挥作用不论是内部团队还是三方

ISV

在技术框架上都有统一的标准可以遵循各团队共享技术栈后研发效率成倍提升。

战略在微服务架构的选型上高开放性、高成熟度、高普及度这三条标准缺一不可考虑到极氪以

Java

致力于提供微服务开发的一站式解决方案包含开发分布式应用微服务的必需组件方便开发者通过

Spring

编程模型轻松使用这些组件来开发分布式应用服务。

这些组件一部分以

SDK

的形式集成到代码中一部分以中间件的形式独立运行后者往往可以选择托管版云产品以降低开发者的工作量。

比如阿里云微服务引擎

MSE

的上线注册车主数量呈现出了爆发式的增长用户的使用场景也不断扩大。

在这个过程中APP

的用户使用体验变得愈发重要如何在用户规模高速增长的同时可以保证

APP

小时持续在线。

特别是面临旺季销售活动、新车型发布、突发热点事件等情况APP

面临着高并发大流量压力经常会发生功能失效、页面打不开、延迟过高甚至

APP

随着用户场景需求的增加越来越多的功能等待发布上线对迭代频率的要求越来越高但由于

APP

服务端缺少全链路灰度发布能力为了保障业务稳定性每次发布客户只能选择在凌晨的业务低峰期进行开发、运维、测试同学苦不堪言急需实现随时发版无损发布能力。

技术架构缺少整体设计

快速上线对于技术架构整体设计考虑不足体现在业务间高度耦合、系统链路过长、技术实现标准不一、云产品选型不合理等诸多问题例如通过调研发现某核心接口请求链路过长导致延迟抖动率很高影响用户使用体验。

研发团队意识到随着业务发展的向好这些挑战也会也越来越大。

在业务快速发展中既要保证好已有业务的稳定性又要快速地迭代新功能并且需要保证开发的效率并不会随着业务增长而大幅降低毕竟存在团队招聘节奏跟不上业务发展的问题。

总结来说团队解决

APP

用户数多起来之后系统的稳定性就显得比较重要无论是用户在某段时间遇到异常报错增多还是某一个功能点持续性地报错再大到系统有一段时间完全不可用这些都会影响产品在用户中的口碑最后这种完全不可用的场景甚至还可能成为微博等社交网络上的舆论热点。

效率

随着用户的增多相应的需求也越来越多业务场景也越来越复杂在这个时候测试可不是内部测试就能覆盖所有的场景需要加大在测试上的投入。

虽然功能需求越来越多但是迭代的速度却要求越来越快因为市场中已经有不少竞争者大家竞争的一个关键就是速度业务更需要跑得更快开发节奏要快测试节奏要快发版节奏也要快。

针对以上问题研发团队根据业务架构从流量入口到微服务再从全局视角进行微服务的系统优化与调优围绕着成本、稳定性以及效率进行深入的微服务化探索。

业务链路入口升级

极氪架构中的网关架构并不一致各种网关都起了一定的作用。

我们可以从上图中看到流量网关、API

管理、流量分发等作用思考一下如果一个请求链路经过多个网关那么这个事情对成本与稳定性都有一定的挑战。

在这个时候

云原生网关出现在研发团队的视野中云原生网关将流量网关Kubernetes

Cloud

防护异常流量是很常规的需求而且随着互联网环境变得越来越复杂用户对防护的诉求是持续增强的常规做法是将流量先接入Waf安全网关过滤后再将流量转发给流量网关最后到达微服务网关那么升级云原生网关后进一步需要思考的事情是入口流量的安全能力是否还可以具备

Waf

网关作为链路流量的入口除了安全能力之外还承接着入口流量/容量的管理、高可用等职责。

无损上下线提升微服务稳定性

应用使用的是微服务架构当进行业务发版、弹性扩缩容等场景时会遇到请求失败率升高POD

MSE

产品能力通过应用下线过程中自适应等待和主动通知、应用上线过程中就绪检查、服务预热等手段实现微服务无损上下线发布有效规避了发布过程中的流量损失降低业务访问失败风险。

同时通过引入MSE流量防控能力针对核心业务场景落地相应技术手段如接口限流降级、MQ

削峰填谷、数据库慢

原架构下容量不足问题愈发突出在面对新车发布、销售活动、突发热点情况时无法快速进行水平扩展并且大量核心业务库都放在同个数据库实例上容易出现“一损俱损”。

阿里云服务团队推荐使用

Polardb-X

产品将业务库逐个剥离出来并通过对业务大表水平拆分解决单表过大问题提高数据库层面水平弹性扩容能力。

另外针对微服务弹性能力不足的痛点输出多可用区节点弹性伸缩、HPA、CronHPA

流量防护与容错

想象一下在业务高峰期当某些下游的服务提供者遇到性能瓶颈甚至影响业务。

极氪

APP

团队正是遇到了这样的问题在某次架构迁移的过程中遇到预料之外的慢调用拖慢了系统导致整体稳定性的抖动。

如何避免这类问题需要对部分非关键服务消费者配置一个熔断规则当一段时间内的慢调用比例或错误比例达到一定条件时自动触发熔断后续一段时间服务调用直接返回

Mock

的结果这样既可以保障调用端不被不稳定服务拖垮又可以给不稳定下游服务一些“喘息”的时间同时可以保障整个业务链路的正常运转。

突发的事情是非常多的那么如何可以做好系统的高可用让系统在不确定的情况下工作在最优解上极氪

APP

整体宕机的情况。

然后对核心服务和接口做梳理摸清上下游对强依赖解耦和改造并且根据监控、可观测数据确认核心服务配置什么合理参数。

在这之后多次对服务进行限流降级配置以及演练、优化总结场景实践规律制定恰当的技术规范。

开发测试效率提升在线服务测试

部署完应用之后应用是否健康当线上出现了一个问题怎么能够快速发起一次请求进行复现。

大版本上线前修改的内容对性能有什么影响上量之后会不会服务压力过大

为了做到安全隔离研发环境、测试环境、预发环境、生产环境部署在不同的专有网络

VPC

内如果自建测试工具需要解决测试工具到不同环境的网络互通问题企业

人员明明只想要一个简单的测试工具却因为上云之后要解决复杂的云上网络拓扑远远没有结束为了能够在办公网使用该测试工具还需要保证该测试工具能够被办公网访问此时又面临着网络安全的考验。

的弹性计算能力一方面打通了云上网络打通的问题另一方面随用随弹最大程度解决资源利用率的问题借助服务契约提供的内容服务测试功能可以自动填充测试参数测试时只需要进行值的修改就可以发起测试。

还可以根据提示将服务测试进行串联从而达到自动化回归、压测的目的。

全链路治理

随着极氪汽车销售越发火爆其注册用户和每日活跃用户快速增长需要支持的业务场景和新功能也越来越多平均两三天一个小版本、半个月一个大版本的升级频率。

为了不影响白天业务高峰每次发版只能选择在凌晨业务低峰期进行想象一下如果研发/运维人员每次都集中在晚上发布那么这些参与发布的同学第二天的工作效率将会受到影响如果晚上选择较少的人参与发布那么当出问题的时候止血措施很可能会来不及实施故障责任也不好划分。

阿里云服务团队帮助极氪团队一起制定和落地全链路灰度发布方案通过部署灰度版本并按照流量比例或客户特征进行灰度验证验证完毕后进行生产发布并切流满足了客户小版本白天随时发布的诉求。

针对客户核心业务链路上多个微服务同时需要发版的场景基于

MSE

CDN、网关、MQ、配置、数据库等灰度场景通过这种方式让客户在不需要更改任何业务代码的情况下实现多业务白天发版同时通过逐步流量放大进行验证如出现问题可及时回切流量降低了白天发布可能导致的稳定性风险。

同时通过改造云效流水线帮助客户实现核心业务自动化发布更好地提升部署效率。

开发环境隔离

微服务的迭代存在非常多的依赖业务的开发人员无法在本地完成开发必须使用一整套完整的环境才能正常的进行开发和联调。

极氪

APP

的设计理念保留一套稳定的基线环境各个分支的开发同学通过逻辑环境隔离的方式快速拉起需要开发的

feature

环境都部署整套的微服务应用及其配套设施。

其中基线环境包含了所有微服务应用也包含了服务注册中心、域名、SLB、网关

等其他设施而

环境。

极氪团队使用微服务治理中的全链路灰度方案实现“流量泳道”做到快速拉起隔离的开发环境在提升研发效率的同时节省了一笔不菲的成本开销。

全链路压测与调优

能够真实承载的并发容量需要对核心业务接口进行多轮全链路压测和调优。

对于系统容量评估、优化与防护主要概括为四点压测、观测、限流、扩容。

系统高可用体系建设必须从实践中出真知极氪团队通过压测对

APP

服务能力进行性能摸底评估性能是否能接受。

如果性能不能接受的话那么需要对性能进行扩容和优化性能符合预期那么要配置对应的限流规则以防超出预期的流量将服务打垮。

整个压测演练的过程中需要做到边压、边看、边限、边扩不断对对数据进行反馈调整最终建立保证业务系统高可用的体系。

通过全链路压测不仅让大家对

APP

系统的性能、容量做到心中有数更增强了整套生产系统升级至云原生架构的信心。

未来展望

端业务系统的稳定性和敏捷性为冲击更高的销量目标提供了坚实的技术支撑。

这仅仅是探索的开始随着云原生架构的深入业务的可用性将持续增强从而为汽车终端用户带来更好的出行体验和乐趣。