10.24技术沙龙总结 | 企业级数据库管理的技术演进与实践

数据库未来是云,越来越多企业面临数据库和应用技术转型,如何面对技术发展和架构演进过程中的数据库选择和规模运维管理是企业必须面对的问题,企业在数据安全、容量管理、备份和容灾架构也面临着新的挑战和新的机会。


就在刚刚过去的10.24 程序员节,阿里云智能在上海举办了一场题为《企业级数据库管理技术演进和实践》的技术沙龙。本次沙龙主题回归技术,各位专家在沙龙上分享了阿里集团内的最佳实践经验,深度剖析了阿里巴巴规模化运维实践、智能化容量规划与扩容,解读企业数据安全管理和云原生灾备技术未来趋势。现场有来自金融、保险、游戏、地产、计算机软件等各行各业的DBA、应用架构师和CTO,大家对多个技术问题进行了深度交流。


10.24技术沙龙总结 | 企业级数据库管理的技术演进与实践


开场由李圣陶(阿里云数据库资深技术专家)介绍了阿里巴巴集团内的大规模数据库管理实践。DBA 通过平台和工具极大的提升了运维管理效率,通过DMS数据管理和DBS 备份解决数据安全问题,在容量上借助DAS 自动扩容降低人力和基于DTS 的异地多活技术快速拓展,在成本上借助云原生数据库PolarDB 高效弹性以及数据库内核优化,高效支撑阿里经济体的所有业务。在全面上云的过程中,越来越多的DBA 成长为掌握云产品技术和数据库服务能力的架构师。

10.24技术沙龙总结 | 企业级数据库管理的技术演进与实践


王天振(阿里云数据库高级技术专家)为大家揭秘阿里巴巴数据库的权限安全管理体系,通过人员、权限、数据三者的抽象,把人员和数据之间的权限细粒度管控规则(可自定义)统一收敛到一个数据管理(DMS)平台上。通过IDE 和DevOps 能力将业务的数据订正提取、以及应用开发者的DDL、SQL 审核和自助发布都服务起来,大大减少了开发和DBA 之间的频繁交互,解放生产力。


作为支持RDBMS、NoSQL、OLAP 等超过23 种数据源的统一管理, DMS 也支持数据资产管理和数据开发,跨库跨表查询的计算任务编排、周期调度、数据可视化报表展示和数据分享,使得简单的分析需求在同一个权限体系上被满足,提升了安全性和易用性,成为了一个在线处理和分析一体化的数据管理平台。

10.24技术沙龙总结 | 企业级数据库管理的技术演进与实践


陈杰(阿里云数据库高级技术专家)在会上分享了数据库离线容量规划与实时弹性扩容技术,通过对在线库的SQL 抓取和特征分析,在离线环境进行全量SQL 回放,评估出适合当前业务的数据库规格,智能压测的回放技术突破能够完美重现生产系统的历史运行曲线。

10.24技术沙龙总结 | 企业级数据库管理的技术演进与实践


同时介绍通过磁盘容量预测算法和负载模型分析,通过自动弹性扩容的方式解决业务运行中因异常流量导致的资源紧张问题。这些技术已经沉淀到数据库自治服务DAS 中,大家可直接在阿里云上体验。


10.24技术沙龙总结 | 企业级数据库管理的技术演进与实践


付大超(阿里云数据库资深技术专家)分享了实时数据流基础技术的演进并进行了详细剖析,同时也介绍了阿里DBA 如何利用此技术解决各种业务问题从而快速成长为架构师的故事,用户可通过公网、VPC、CEN 或专线方式打通网络链路,使用DTS 搭建跨地域的实时容灾数据库架构。

10.24技术沙龙总结 | 企业级数据库管理的技术演进与实践


同时DTS 支持零停机上云迁移,通过正向和反向链路支持异构迁移的回滚兜底,帮助你平滑上云,其中包括Oracle、DB2(LUW/AS400)、SQLServer 等迁移同步能力。


10.24技术沙龙总结 | 企业级数据库管理的技术演进与实践


傅翠云(阿里云数据库资深技术专家)带来了《下一代云原生数据库备份技术深度解读与实践》的精彩分享。随着云原生技术的兴起,备份也出现了非常大的变化和机会。备份数据不再是满足规范或仅仅应对万一之需,而是能够利用云计算发挥冷数据的巨大价值。


云原生备份可以通过全量和增量自动合成,加上持续打快照的能力,持续准备最新快照,然后利用云原生的存储计算分离技术直接挂载出数据库,用在定时恢复BI 分析、数据库开发测试环境准备和应急恢复场景,一份快照可多次克隆和挂载。


同时对于逻辑备份副本通过Parquet 格式和数据湖DLA 分析打通,实现备份副本可以直接用SQL 来查询,进行表级恢复、指定记录提取或定义报表。


云原生备份的特性是弹性存储、弹性计算、多云多端、备份数据应用,其中多云多端具备更好的开放性,支持上传和下载,比如到本地的FTP、MinIO、NAS 等等,可以很方便地进行异地、异构的多级存储池统一周期管理,实现企业数据备份副本的统一管理和收敛,保障备份策略实施的同时降低企业成本。

10.24技术沙龙总结 | 企业级数据库管理的技术演进与实践



随着云计算发展和云原生技术的兴起,企业应该借助云技术提升数据库管理水平。阿里云推出数据库网关产品,让用户不需要暴露本地数据库,只要在本地数据中心找到一台能上互联网的机器安装,就能够使用阿里云的数据管理DMS、自治服务DAS、数据传输DTS、数据备份DBS 等多款产品,通过DMS 解决企业数据安全问题,将备份通过DBS 云原生技术统一管理,提升RPO/RTO 水平的同时挖掘冷数据价值,快速享受到云计算的红利。


作为全球第三、亚太第一的数据库,并且在数据库领域的权威评选——Gartner 全球数据库魔力象限评比中,成功进入“挑战者”象限,连续两年作为唯一的中国企业入选,阿里云数据库在技术上有着十多年的沉淀,同时在阿里集团内丰富的业务场景打磨下,持续从用户需求出发,研发更有竞争力的数据库产品,助力企业更好地完成数据库和应用技术转型。


分享到:


相關文章: