欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  数据库

YouTube开源项目Vitess:打造高性能MySQL前端

程序员文章站 2022-05-24 21:39:58
...

项目简介 关系型数据库(如MySQL)最初并没有针对大型Web应用进行构建和优化,Vitess项目的目标是推动MySQL数据库面向大型Web应用的扩展性。 Vtocc是vitess项目中第一个可用的产品,它的作用是作为MySQL的前端,为接收和发送SQL命令提供一个RPC接口。它能够

YouTube开源项目Vitess:打造高性能MySQL前端

项目简介

关系型数据库(如MySQL)最初并没有针对大型Web应用进行构建和优化,Vitess项目的目标是推动MySQL数据库面向大型Web应用的扩展性。

Vtocc是vitess项目中第一个可用的产品,它的作用是作为MySQL的前端,为接收和发送SQL命令提供一个RPC接口。它能够在少量且吞吐量合理(~10kqps)的数据库连接上高效复用大量的传入连接(10K+)。另外,它还内置了SQL语法分析器,使得服务器有能力理解并优化处理接收到的查询语句。

Vtocc已经在许多大型生产环境中有所应用,例如,YouTube全新的MySQL服务架构以其为核心。

特性概览

  • Python DBAPI 2.0兼容的客户端接口(vt_occ2.py)
  • Go语言数据库/SQL兼容的客户端接口
  • 支持基于HTTP或TCP套接字的多种协议
  • 支持绑定变量查询,支持查询缓存:可避免重复分析,高效复用查询计划
  • 支持连接池
  • 事务处理管理:可以限制事务处理的并发连接数
  • DML注释:每个DML语句都包含一个注释区域,以标识它所改动行的主键
  • 内置可靠性解决方案
    • 强化查询:可以为子查询重用正在执行的查询
    • 限制查询返回的行数量的最大值
    • 可终止运行时间过长无响应的事务
    • 可终止运行时间过长无法返回结果的查询
    • 可自动终止后台空闲连接,以避免出现脱机数据库错误

Vtocc未来可能会具备的新特性:

  • 支持行缓存的一致性,重写查询,以最大化行缓存的利用率
  • 内置binlog解释器,支持由vtocc注入的提供行变更更新流的DML文档分析
  • 支持DDL
  • 支持持久性连接 (张志平/编译)

项目链接:Vitess Project