江苏龙网

  1. 首页 > 人文 > >

NewSQL角度看Apache ShardingSphere

【IT168评论】近些年NewSQL概念盛行 ， 国内外各大公司对NewSQL都有着不同的解读 。 本次ITPUB技术栈线上沙龙2020上 ， 京东数科高级DBA潘娟分享了有关NewSQL理念、国内外产品架构的解读 ， 以及ApacheShardingSphere的架构、特性、规划、开源社区 。
嘉宾简介：主要负责京东数科分布式数据库开发、数据库运维自动化平台开发等工作 。 曾负责京东数科数据库自动化平台设计与开发 ， 现专注于ApacheShardingSphere分布式数据库中间件平台的开发 。 主要在分布式数据库、开源、分布式架构等相关领域进行探索 。 多次受邀参加数据库&架构领域的相关会议并进行分享交流 。
一、NewSQL的概念
NewSQL的概念 ， 最开始来源于国外的一份商业分析报告 。 它是各种新的可扩展/高性能数据库的简称 ， 这类数据库不仅具有NoSQL海量数据的存储管理能力 ， 还保持了传统数据库支持ACID和SQL等特性 。
提及SQL ， 很多朋友最先想到的就是MySQL数据库和PostgreSQL数据库 。 对我们来说 ， 它其实一个单点、很可靠 ， 有ACID事务 ， 也有查询语言的关系型数据库 。 其中 ， ACID事务和查询语言是我们最关心的两点 。
伴随互联网的蓬勃发展 ， 数据量的持续膨胀 ， NoSQL出现了 。 NoSQL泛指非关系型数据库 ， 具备Scalability（扩展性）和Resilience（弹性） 。 扩展性是指可以无限的把一个单点变成一个集群 ， 从而提升整个系统的可用性 。 弹性保证了在宕机集群崩溃后 ， 数据的自动修复且上层业务无感知 。
那么就有人提出来了 ， 我能不能既可以拥有像SQL的关系模型 ， 拥有它的ACID事务 ， 同时还拥有像NoSQL的扩展性、弹性伸缩 ， 以及高可用性 。 于是 ， NewSQL应运而生 ， 它最开始的定义就叫做ScalabilitySQL 。
在分布式的场景中 ， 没有办法同时保证Consistency（一致性）和Availability（可用性） ， 以及分区的容错性 。 CAP原则就是 ， 你只能保证整个系统更关注于强一致性 ， 或者高可用性 。
对于用户来说 ， NewSQL其实就是AsinglelogicalDB ， 即单个逻辑数据库 。 从开发的角度 ， NewSQL具有NewArchitecture（新架构）、TransparentSharding（透明化分片中间件）、DatabaseasaService（云数据库）三种形态 。
二、ApacheShardingSphere的架构
ApacheShardingSphere是一套开源的分布式数据库中间件解决方案组成的生态圈 ， 它由JDBC、Proxy和Sidecar（规划中）这3款相互独立 ， 却又能够混合部署配合使用的产品组成 。 它们均提供标准化的数据分片、分布式事务和数据库治理功能 ， 可适用于Java同构、异构语言、云原生等各种多样化的应用场景 。
ApacheShardingSphere定位为关系型数据库中间件 ， 旨在充分合理地在分布式的场景下利用关系型数据库的计算和存储能力 ， 而并非实现一个全新的关系型数据库 。 ApacheShardingSphere目前已提供数十个SPI作为系统的扩展点 ， 仍在不断增加中 。
首先 ， 中间件的数据库集群 ， 可能有自己的主库或者从库 ， 包括同步、复制、备份等都是靠MySQL或者PG数据库来实现的 。
其次 ， 用户真正能够接触三个产品 ， 第一个产品叫ShardingSphere-JDBC ， 它定位为轻量级Java框架 ， 在Java的JDBC层提供的额外服务 。 它具备解析SQL、分片管理、分布式事务 ， 脱敏等功能 。
第二个产品叫ShardingSphere-Proxy ， 定位为透明化的数据库代理端 ， 提供封装了数据库二进制协议的服务端版本 ， 用于完成对异构语言的支持 。 适用于任何兼容MySQL/PostgreSQL协议的的客户端 ， 可以管理数据库集群 。
三、功能介绍
仔细观察ShardingSphere的框架 ， 我们不难发现中间件左侧的Sharding-Scaling ， 它是一个提供给用户的通用的ShardingSphere数据接入迁移 ， 及弹性伸缩的调度平台 。
JDBC的核心功能就是Orchestration ， 即编排治理 ， 配置集中化与动态化、数据治理 。 ShardingSphere提供了界面治理模块——Sharding-UI ， 可以快速维护Sharding-Proxy集群 ， 方便用户一键式的操作 。
我们必须要解析SQL ， 才能理解用户需要什么 。 Parser（解析器）已经重构过很多遍 ， 为了实现自主可控 ， 保证高效性和正确性 。 除此之外 ， Router代表着路由 ， Rewriter改写一些SQL ， Executor做并行的控制 ， 提高整体效率 。
潘娟强调道 ， 分库分表、强一致事务、柔性事务、分布式治理、可视化链路追踪、读写分离等所有的功能都是可以组合在一起的 。 完全的自由组合 ， 从而形成一个只满足公司所需要的产品 。
四、社区


    推荐阅读


    上一篇：dos命令systeminfo图文教程，显示操作系统配置信息msinfo32

    下一篇：广州日报|天价游戏账号背后暗藏风险 警方：交易要走官方渠道