【TBase开源版测评】分布式数据库复制表关联查询
时间:2022-07-22
本文章向大家介绍【TBase开源版测评】分布式数据库复制表关联查询,主要内容包括其使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。
在项目中有时候会涉及到数据节点之间的数据交互,有时候会带来比较大的网络开销,同时性能也不佳,可以尝试复制表来解决此类问题,本次我们就来体验一下TBase复制表关联查询的功能。我们的项目中有一个字典表中,其中保存了项目中会用到的一些常量定义,比如性别、通知类型、消息类型、订单类型、支付类型等,这些数据需要经常参与join操作、表数据量比较小,一旦定义之后在整个项目运行过程中变化不多。
一、体验流程
1、在TBase集群中创建ha_dict表并使用distribute by replication关键字创建复制表。
create table ha_dict(id int,parent_id int,code text,dict_key int,dict_value text,sort int,remark text,is_deleted int) distribute by replication;
为了方便对比,我们同时创建了ha_dict_old表。
create table ha_dict(id int,parent_id int,code text,dict_key int,dict_value text,sort int,remark text,is_deleted int);
从原有项目数据库中将ha_dict表的数据导入到这两个表中。
2、创建一个用户表,里面有性别需要join关联字典表中搜索。
create table ha_user(id int,username text,sex int) distribute by shard(id);
往用户表中导入数据。
3、使用join查询关联两个不同的表进行查看:
explain select * from ha_user as u join ha_dict as d on u.sex=d.dict_key where u.id=6 and d.code='sex';
explain select * from ha_user as u join ha_dict_old as d on u.sex=d.dict_key where u.id=6 and d.code='sex';
如上图所示,创建ha_dict表的时候增加distribute by replication关键字之后,非shard key的join下推到了dn001进行,在很多场景下是可以提升查询性能的。
同时使用java语言对这两种查询方式进行性能比对,参考官方应用接入指南的代码,加上时间统计:
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.ResultSet;
import java.sql.Statement;
public class TbaseApplication {
public static void main(String[] args)
{
Connection c = null;
Statement stmt = null;
try {
Class.forName("org.postgresql.Driver");
c = DriverManager.getConnection("jdbc:postgresql://152.136.155.36:30004/postgres?currentSchema=public&binaryTransfer=false","tbase", "tbase");
System.out.println("Opened database successfully");
long beginTime=System.currentTimeMillis();
System.out.println(beginTime);
stmt = c.createStatement();
String sql = "select * from ha_user as u join ha_dict_old as d on u.sex=d.dict_key where u.id=6 and d.code='sex';" ;
// String sql = "select * from ha_user as u join ha_dict as d on u.sex=d.dict_key where u.id=6 and d.code='sex';" ;
ResultSet result=stmt.executeQuery(sql);
long endTime=System.currentTimeMillis();
System.out.println(endTime);
System.out.println("执行时间:"+(endTime-beginTime));
stmt.close();
c.close();
} catch ( Exception e ) {
System.err.println( e.getClass().getName()+": "+ e.getMessage() );
System.exit(0);
}
}
}
关联ha_dict_old表查询时输出如下图:
关联ha_dict表查询时输出如下图:
二、体验总结
通过本次体验,对TBase的分布式数据库复制表关联查询功能有了深刻的认识,虽然因为我们的实验数据比较小,不知道这样的性能参数是否能做为参考,后期如果有性能上需要提升或是要求比较高的项目,可以在这方面再多做体验和测试。
- JavaScript 教程
- JavaScript 编辑工具
- JavaScript 与HTML
- JavaScript 与Java
- JavaScript 数据结构
- JavaScript 基本数据类型
- JavaScript 特殊数据类型
- JavaScript 运算符
- JavaScript typeof 运算符
- JavaScript 表达式
- JavaScript 类型转换
- JavaScript 基本语法
- JavaScript 注释
- Javascript 基本处理流程
- Javascript 选择结构
- Javascript if 语句
- Javascript if 语句的嵌套
- Javascript switch 语句
- Javascript 循环结构
- Javascript 循环结构实例
- Javascript 跳转语句
- Javascript 控制语句总结
- Javascript 函数介绍
- Javascript 函数的定义
- Javascript 函数调用
- Javascript 几种特殊的函数
- JavaScript 内置函数简介
- Javascript eval() 函数
- Javascript isFinite() 函数
- Javascript isNaN() 函数
- parseInt() 与 parseFloat()
- escape() 与 unescape()
- Javascript 字符串介绍
- Javascript length属性
- javascript 字符串函数
- Javascript 日期对象简介
- Javascript 日期对象用途
- Date 对象属性和方法
- Javascript 数组是什么
- Javascript 创建数组
- Javascript 数组赋值与取值
- Javascript 数组属性和方法
- Sticks(UVA - 307)【DFS+剪枝】
- Linux CentOS服务器搭建与初始化配置教程
- Centos6.9安装vsftpd并配置多用户的方法
- linux c下log输出代码模板示例代码
- linux adsl 拨号自动配置脚本的方法
- Python调用ip代理案例,快代理api调用demo
- centos7(redhat7)如何卸载自带yum并且安装国内yum源的方法
- linux用户组以及权限总结
- Linux Crontab Shell脚本实现秒级定时任务的方法
- Linux配置SSH和Xshell连接服务器的教程(图解)
- 增强Linux内核中访问控制安全的方法
- 使用Samba在Linux服务器上搭建共享文件服务的方法
- CentOS Yum编译安装MySQL 5.6
- Linux中环境变量配置的步骤详解
- 详解Linux搭建DNS服务器