打造高可用云数据库服务 网易蜂巢云数据库实践

 新闻资讯     |       来源:优游ub8平台    发布时间:2024-08-02 16:32:30

  在这个信息化的时代,几乎所有的开发工作都不可避免的和数据打交道,尤其是云计算和大数据时代的到来,传统数据库的性能已难以满足海量数据的实时交易查询需求,在性能和成本的双重压力之下,云计算下的数据库需要寻找突破之路。

  4月21号在北京开幕的QCon全球软件开发大会上,作为网易的资深开发工程师和蜂巢数据库服务负责人,郭忆同与会的数千名开发者分享了网易蜂巢在云数据库方面的实践,以及网易蜂巢为开发者打造稳定可靠、简单易用的在线数据库服务所做的努力。

  随着网易蜂巢、云信、七鱼云客服、视频云等一系列云计算产品的上线,网易已然成为国内云计算市场不容忽视的力量。从面向网易新闻、云音乐、考拉海购能产品的私有云,到为“中顺易”、“浙大网新”等企业服务的公有云,再到以蜂巢为代表的全面公有云时代,网易的云计算格局已悄然成形。

  据郭忆介绍:“网易云计算平台整体规划由三层组成,位于最底层的是由物理机器、硬盘以及网络设备组成的物理硬件层,在非云环境,我们的程序是直接运行在这层之上的。在云环境下,我们基于物理设备,分别构建了云主机、云硬盘和云网络,组建了IaaS层,分别让我们实现计算、存储和网络的资源虚拟化和管理功能。要完全实现一个面向开发者的云计算平台,仅有IaaS还是做不到的,基于IaaS之上,我们构建了强大的PaaS和CaaS服务,具体又分为应用管理类服务和数据存储类服务,我们今天要重点介绍的云数据库就属于后者。”

  网易数据库团队基于10年的数据库开发和运维经验,设计研发的云数据库服务具备高可用、高可靠、高性能、高智能、在线扩展等多个特性,特别是网易基于MySQL Replication自主研发的同步复制功能,完全解决了MySQL主从节点切换丢数据的难题,实现了完全不丢数据的秒级故障切换。

  MySQL 是目前业界最为流行的开源数据库,尤其是在网络公司应用十分普遍,这与MySQL的简单易用有很重要的关系。复制是体现这一优点的最重要的特性之一,通过复制就可以快速的搭建一个有着主备关系的实例,实现数据库高可用和读写分离。但是MySQL复制并不是想象中那么完美,原生异步复制因为主机事务更新日志是在事务提交之后再发送给从节点的,一旦主机宕机,有几率存在部分主机上已经提交的事务日志没有发送给从机,造成数据不一致的问题。郭忆称,网易设计研发的同步复制技术,调整了事务提交和发送事务更新日志到从机的顺序,确保所有在主机提交的事务都首先将更新日志发送给了从机节点,这样就确保了主机宕机后,主从数据完全一致。同时,通过Binary log group commit技术能解决同步复制造成的性能直线下降的问题,通过并行复制技术,解决主从复制落后延迟的问题,确保数据库能轻松实现实时故障切换。

  虽然高可用技术看似完美,但是对用户来说,一则存在切换代价的问题,二则切换并不能解决所有的问题,例如某个SQL因为索引设计不合理造成的执行时间非常长,这并不能通过主从切换来解决。 “通过对线%的故障实际上都能提前预知从而避免,所以我们应该云数据库拥有提前预知风险,更加智能的能力。为此,我们推出了数据库健康检查服务,针对数据库提出21项健康检查指标,覆盖索引、容量规划、用户访问、服务安全、参数配置以及主从复制,定期对数据库做全面体检,提前将风险扼杀在摇篮中。” 郭忆强调说。

  在此次QCon大会上,开发者们对云计算表现出了极高的关注度,而早期的云数据库产品只是提供了一个运行在云基础设施上的数据库进程,并没有真正解决开发者在实际使用的过程中遇到的难题。郭忆的分享让不少开发者对云数据库有了新的认识,特别是网易蜂巢针对开发者打造的数据库健康检查功能, 彻底击中了开发者使用数据库的痛点,真正开启了“智能化”的数据库时代。

  展望未来,我们看好中国科技公司在奥运会上的表现,或将打开新的想象空间。奥运会这一全球盛事,将为中国科技公司提供更多机遇,助力它们在国际舞台上再创辉煌。

  OPPO A3活力版已经上架OPPO官方商城正式开售,这款手机拥有超纤薄直屏设计,整机采用超抗摔金刚石架构,具备360度抗摔能力。

  真我携旗下多款爆款产品亮相2024 ChinaJoy,为玩家带来“GT电竞场”性能体验盛宴。现场展出的线、线等多款爆款产品引发现场观众一众好评。

  与大部分智能手机生产厂商展示直板机不同,此次ChinaJoy,荣耀重点展示了自家的全形态折叠屏矩阵,包括荣耀Magic V3、Vs3、荣耀Magic V Flip等产品。

  最近一段时间开启公测的手游大作可是真不少,而想要在这些游戏中有个不错的体验,你在大多数情况下要一部iQOO Neo9S Pro+。

  2024 ChinaJoy在上海正式开幕,高通在第五次参展CJ之时,再次包下了一整个展馆,打造了骁龙主题馆,为广大玩家全方位展现了移动游戏的最新技术成果。

  7月26日,2024 ChinaJoy在上海正式开幕,本次高通依旧打造了骁龙主题馆,并携手终端品牌,展现骁龙赋能之下的全平台游戏体验。

  全新极氪009能够说是从内到外、脱胎换骨的一次大更新,具体有哪里不一样?本期视频带你详解全新极氪009。