强人随笔pg_lightool基于basebackup的单表恢复和块恢复

背景 开源软件pg_lightool,实现了基于wal日志的块恢复。详情参见博客:https://my.oschina.net/lcc1990/blog/1931485。由于wal日志中FPW的不确定性,它不能作为一个数据库恢复的解决方案。目前对pg_lightool的代码做了升级,它可以基于一个basebackup和basebackup之后的wal日志完成某个数据表的恢复或者某些page的恢复。项目开源地址:https://gitee.com/movead/pg_lightool。 工具的安装方法在之前的博客里有详细说明,不再赘述。本文主要说明一下pg_lightool新功能的使用方法。新功能的主要应用场景:有基础备份的数据量级比较大的数据库,在发生表或者块数据损坏时,用于损坏数据的快速恢复。

wangliyun 发布于 2019-04-24 08:57:41
评论:0    浏览:21
顶:0    踩:0

强人随笔新型硬件GPU在PostgreSQL的应用

作者简介 Naju Mancheril,来自卡耐基梅隆大学。这是一篇介绍在PostgreSQL中应用新型硬件GPU提升排序性能的论文,是当前热门的数据库前沿技术研究领域。原论文名称为《GPU-based Sorting in PostgreSQL》。 译者简介 朱君鹏,华东师范大学博士研究生,个人兴趣主要集中在:新型硬件(GPU、RDMA、FPGA)等在数据库中的应用,架构设计与并行计算。 陈河堆,中兴通讯数据库平台负责人,曾参与和主导公司自研高性能内存数据库、分布式数据库和分布式缓存等系统的开发和设计,目前致力于PostgreSQL数据库的研究和推广。

wangliyun 发布于 2019-04-22 18:23:54
评论:0    浏览:123
顶:3    踩:3

强人随笔PostgreSQL物理坏块和文件损坏案例分享

笔者最近发现很多朋友经常遇到PostgreSQL坏块或者数据混乱的情况,网上中文资料比较少,于是整理了一下笔者遇到各种各样的报错以及解决方案

redraiment 发布于 2019-04-18 13:39:53
评论:0    浏览:162
顶:5    踩:3

强人随笔PostgreSQL的count(1)真的比count(*)快么?

count(*)在PostgreSQL上经常被抱怨执行非常慢。而在一段时间中我收到过很多count(1)比count(*)快的说法,并将这种理解此应用于我的工作中。

redraiment 发布于 2019-04-17 00:40:19
评论:0    浏览:276
顶:6    踩:4

强人随笔ShardingSphere即将支持PostgreSQL代理

ShardingSphere的第一个Apache Release将在近期发布,新版的Sharding-Proxy首次实现了对PostgreSQL的支持,欢迎试用。

redraiment 发布于 2019-04-16 00:43:25
评论:0    浏览:214
顶:5    踩:5

社区活动PostgreSQL中文社区招募翻译志愿者

PostgreSQL中文社区的发展离不开志愿者们的付出和奉献,在此向所有志愿者们表示由衷的感谢!为了不断壮大志愿者队伍,扩大PostgreSQL社区影响力,PostgreSQL中文社区诚邀PG技术爱好者加入到我们的翻译团队,自愿贡献时间和精力,在服务社区的同时,不断地提升自我。

redraiment 发布于 2019-04-13 22:53:05
评论:0    浏览:181
顶:6    踩:5

强人随笔声明:CVE-2019-9193 不是安全漏洞

近期在互联网媒体上流传PostgreSQL存在任意代码执行的漏洞:“拥有‘pg_read_server_files’权限的攻击者可利用此漏洞具备超级用户权限,执行任意系统命令”。针对此言论,PostgreSQL官方在2019年4月4日发表声明。

redraiment 发布于 2019-04-12 09:00:56
评论:0    浏览:243
顶:9    踩:7

强人随笔一款PostgreSQL WAL日志解析工具: wal2json

自从PostgreSQL 9.4 支持logical级别的WAL后,PostgreSQL可以通过逻辑解码的方式(基于行或语句的logical replication)来解读WAL中的内容。通过slot在从节点解码WAL中的数据变更流进行重演实现数据库的逻辑复制。

redraiment 发布于 2019-04-10 09:33:03
评论:0    浏览:299
顶:11    踩:15

社区活动云栖TechDay - PG天天象上数据库沙龙 - 成都站

2018年9月开始,《PG天天象上》活动陆续在杭州,北京,郑州、广州、深圳、上海、南京多地开展,活动在线上与线下覆盖人数已达数万人次,出席活动的参会者汇聚了银行,证券,互联网,人工智能,高校,医疗,新制造,电商,游戏,政府,电力等行业的开发者,DBA,架构师,CTO,CIO。

redraiment 发布于 2019-04-09 08:43:23
评论:0    浏览:190
顶:8    踩:9

强人随笔Wal日志解析工具开源: Walminer

Walminer工具是一款wal日志的解析工具,它可以从wal日志中解析出用户执行的DML语句,以及用户执行DDL语句对系统表产生的DML语句。它的前身是xlogminer,但是xlogminer有较大的限制,比如wal日志级别需要是logical、需要将表改为FULL模式。Walminer则不需要这些限制,它可以解析普通的archive或replica级别以上的wal日志。

redraiment 发布于 2019-04-01 17:14:00
评论:0    浏览:398
顶:13    踩:12

强人随笔PostgreSQL 11 新特性解读|支持并行创建索引

PostgreSQL 11 版本在并行方面得到增强,例如支持并行创建索引、并行Hash Join、并行 `CREATE TABLE .. AS`等,本文先介绍并行创建索引。 PostgreSQL 11 版本并行创建索引仅支持 B-tree 索引,其它类型索引现阶段不支持并行创建。

redraiment 发布于 2019-03-28 23:33:27
评论:0    浏览:394
顶:12    踩:14

强人随笔PostgreSQL误删数据怎么破?

PostgreSQL并未有闪回和数据误删除保护的功能,但是在一些场景下也可以实现。

redraiment 发布于 2019-03-28 11:33:57
评论:0    浏览:396
顶:15    踩:13

社区活动PGConf US DAY5小结

美国时间3月22日,第八届Postgres Conference US大会(以下简称“PGConf US”)在美国纽约时代广场喜来登酒店盛大闭幕。会议最后一天,瀚高软件受邀与微软、亚马逊、德国Credativ集团、欧洲DBeaver、EDB、TimeScale等公司共同举办现场招聘活动,以下由瀚高软件带来本日速报。

redraiment 发布于 2019-03-26 15:05:37
评论:0    浏览:232
顶:12    踩:12

社区活动PostgresConf 2019 US DAY4速报

美国东部时间3月21日,是PostgresConf 2019的第4天,会议以各个分会场的演讲为主,在六个分会场分别举行。中国PG分会国际顾问委员会秘书长、PG中国社区核心组成员周宝峰,代表中国PG分会在大会现场做《中国PostgreSQL实践》的演讲,向与会嘉宾重点介绍了PG在中国的发展。会议期间,瀚高软件参会代表与来自世界各地的PG大咖进行了很多交流,同时也向多名国际知名人士发出了会议邀请,希望7月份能在北京香格里拉饭店举办的PostgresConf CN 2019上再次聚会。

redraiment 发布于 2019-03-26 14:56:30
评论:0    浏览:431
顶:11    踩:12

社区活动PostgresConf US DAY3速报

美国时间3月20日,PostgresConf 2019大会隆重召开,会议开幕式在可容纳600人的纽约时代广场喜来登大酒店纽约宴会厅举行。会议组织方Amanda、JD以及Jim分别在现场对会议进行了说明,并在开幕式的第一个环节对即将于7月份在北京由瀚高软件主办的PostgresConf CN会议进行了推介,鼓励大家到北京来参会。

redraiment 发布于 2019-03-26 11:07:45
评论:0    浏览:177
顶:13    踩:11

社区活动PostgresConf US DAY2速报

美国时间3月19日是会议的第二天,以培训为主,主要是Pivotal的GreenPlumSummit活动。Pivotal从去年开始和PostgresConf一起举办会议。

redraiment 发布于 2019-03-22 23:14:05
评论:0    浏览:223
顶:19    踩:18

社区活动PostgresConf US DAY1速报

美国时间3月18日是pgconf会议的首日,主要是内部培训,其中包括关于PostgreSQL的三个全天培训、一个Pivotal GreenplumSummit的一个全天培训以及亚马逊举行的“AWS迁移日”全天活动。

redraiment 发布于 2019-03-22 12:21:06
评论:0    浏览:326
顶:17    踩:17

新版发布历经两载磨砺,Greenplum进入6.0时代

今天(2019年3月20日),所有关注开源大数据平台Greenplum的用户和开发人员都会发现:Greenplum的github代码库里面出现了一个新的分支--“6X_STABLE”。这标志着Greenplum大数据平台进入了6.0的时代。

redraiment 发布于 2019-03-21 08:54:20
评论:0    浏览:323
顶:19    踩:21

商业活动PGer福利|苏宁易购诚聘PostgreSQL数据库工程师、内核研发

苏宁易购旗下苏宁科技集团涵盖云计算、大数据、人工智能、物联网、智能硬件等方向,具备专业的产品研发团队、运营团队、实施团队和运维团队,面向政企用户提供工苏宁云、金融云和物流云,通过门店端、PC端、移动端和家庭端的四端协同,实现无处不在的一站式服务体验。

redraiment 发布于 2019-03-20 08:00:39
评论:0    浏览:355
顶:20    踩:18

强人随笔平安科技PostgreSQL案例分享|进程私有内存探密

近期遇到一个案例,一个分析型应用的DB在早上的时候出现OOM,OS kill用户进程,数据库进入recovery,几十秒后数据库恢复。

redraiment 发布于 2019-03-19 08:30:29
评论:0    浏览:437
顶:20    踩:22
© 2010 PostgreSQL中文社区