PostgreSQL 12的可拔插存储引擎--表访问方法以及bloackholes案例
PostgreSQL 12的可拔插存储引擎--表访问方法以及bloackholes案例
正文
PostgreSQL使用自定义插件做扩展时非常便利,例如Decoder plugins、extension、background workers、索引访问方法、hooks、自定义函数、聚合、数据类型等。
对代码做了大量的重构后,PG12具备了表访问方法的基础架构,允许自定义表数据如何存储以及访问。默认情况下,PG的表还是使用heap存储引擎。他的工作原理是基于8KB的页面管理方式,并以段文件(默认1GB)的形式管理页面。需要保存所有版本的tuple。这就意味着即使只修改tuple的一个字段,也需要存储整个新版本。这就使得vaccum和autovacuum变得更加昂贵。当然,本文目的不是讨论这个,需要了解的话可以查看手册。
表访问方法非常cool。允许以插件的形式集成到PG中,就像MySQL的多个存储引擎一样,使实现诸如列存储的功能成为可能。做的方法大致分为两类:
通过PG存储管理器的访问方法,充分利用现有的shared buffer层以及现有的页格式。有2个优势:自动支持备份和checksum。
不通过PG的访问方法。不依赖于PG的shared buffer。使完全依赖于操作系统换成成为可能。当然,需要自己添加函数来完成对checksum和备份的支持。
Ottawa的PG大会上有两个主题关于这个特性:
https://www.pgcon.org/2019/schedule/events/1374.en.html
https://www.pgcon.org/2019/schedule/events/1321.en.html
最近人们开始讨论新的AMs如zheap或者zstore。可拔插的WAL也收到限制,WAL需要注册大量的回调函数,resource manager IDs需要hard values。依赖于AM时,TIDs会成为一个重要问题。
有大量的回调函数定义了AM表是什么(当前有42个),未来接口可能会改变。
我写了个简单的demo作为表访问方法blackhole_am。作为一个新插件的一个demo,操作函数都是空函数。创建表访问方式需要CREATE ACCESS METHOD。编译后生成一个动态链接库,以扩展插件的形式集成到PG。
=# CREATE EXTENSION blackhole_am;
CREATE EXTENSION
=# dx+ blackhole_am
Objects in extension "blackhole_am"
Object description
-----------------------------------------
access method blackhole_am
function blackhole_am_handler(internal)
(2 rows)
表定义方式,参数default_table_access_method控制表访问方法,设置后可以不指定using:
=# CREATE TABLE blackhole_tab (id int) USING blackhole_am;
CREATE TABLE
=# INSERT INTO blackhole_tab VALUES (generate_series(1,100));
INSERT 0 100
=# SELECT * FROM blackhole_tab;
id
----
(0 rows)
原文
https://paquier.xyz/postgresql-2/postgres-12-table-am-blackhole/
- Ext JS 6 新特性和工具
- 为你的WordPress 博客文章页面增加多彩排版条
- java: web应用中不经意的内存泄露
- java: web应用中不经意的内存泄露
- velocity模板引擎学习(4)-在standalone的java application中使用velocity及velocity-tools
- mac上开启ftp
- Web前端开发的四个阶段
- 使用Visual Studio 2015 开发ASP.NET MVC 5 项目部署到Mono/Jexus
- 关于把本地应用封装成windows app发布审核通不过的问题
- java并发编程学习:用 Semaphore (信号量)控制并发资源
- java并发编程学习: ThreadLocal使用及原理
- 使用Autofac IOC组织多项目应用程序
- 国内首个“人工智能与变革管理研究院”成立
- 解决WordPress缩略图插件timthumb不支持站外图片的问题
- MySQL 教程
- MySQL 安装
- MySQL 管理与配置
- MySQL PHP 语法
- MySQL 连接
- MySQL 创建数据库
- MySQL 删除数据库
- MySQL 选择数据库
- MySQL 数据类型
- MySQL 创建数据表
- MySQL 删除数据表
- MySQL 插入数据
- MySQL 查询数据
- MySQL where 子句
- MySQL UPDATE 查询
- MySQL DELETE 语句
- MySQL LIKE 子句
- mysql order by
- Mysql Join的使用
- MySQL NULL 值处理
- MySQL 正则表达式
- MySQL 事务
- MySQL ALTER命令
- MySQL 索引
- MySQL 临时表
- MySQL 复制表
- 查看MySQL 元数据
- MySQL 序列 AUTO_INCREMENT
- MySQL 处理重复数据
- MySQL 及 SQL 注入
- MySQL 导出数据
- MySQL 导入数据
- MYSQL 函数大全
- MySQL Group By 实例讲解
- MySQL Max()函数实例讲解
- mysql count函数实例
- MYSQL UNION和UNION ALL实例
- MySQL IN 用法
- MySQL between and 实例讲解
- HashMap中add()方法的源码学习
- IOC容器实现
- Docker安装mysql
- 【LeeCode 面试题】二叉树的前序遍历,中序遍历,后序遍历递归和迭代的两种实现方式
- MySQL笔记汇总
- 【DB笔试面试856】在Oracle中,如何判定实例是否运行?
- 【DB笔试面试857】在Oracle中,若一个主机上有多个Oracle实例,则如何确定哪些共享内存段属于想要清掉的实例的内存段?
- vue + flask实现邮件密码找回功能
- PicGo + Gitee 构建免费云图床
- python scipy.stats计算单样本假设检验(1 sample test)
- python scipy.stats计算双独立样本假设检验(2 sample independent test)
- 深入理解JS的事件循环
- C语言必背的18个经典程序。
- 打卡群刷题总结0811——从中序与后序遍历序列构造二叉树
- Docker服务开放了这个端口,服务器分分钟变肉机!