强人随笔一款PostgreSQL WAL日志解析工具: wal2json

自从PostgreSQL 9.4 支持logical级别的WAL后,PostgreSQL可以通过逻辑解码的方式(基于行或语句的logical replication)来解读WAL中的内容。通过slot在从节点解码WAL中的数据变更流进行重演实现数据库的逻辑复制。

redraiment 发布于 2019-04-10 09:33:03
评论:2    浏览:1689

社区活动云栖TechDay - PG天天象上数据库沙龙 - 成都站

2018年9月开始,《PG天天象上》活动陆续在杭州,北京,郑州、广州、深圳、上海、南京多地开展,活动在线上与线下覆盖人数已达数万人次,出席活动的参会者汇聚了银行,证券,互联网,人工智能,高校,医疗,新制造,电商,游戏,政府,电力等行业的开发者,DBA,架构师,CTO,CIO。

redraiment 发布于 2019-04-09 08:43:23
评论:0    浏览:680

强人随笔Wal日志解析工具开源: Walminer

Walminer工具是一款wal日志的解析工具,它可以从wal日志中解析出用户执行的DML语句,以及用户执行DDL语句对系统表产生的DML语句。它的前身是xlogminer,但是xlogminer有较大的限制,比如wal日志级别需要是logical、需要将表改为FULL模式。Walminer则不需要这些限制,它可以解析普通的archive或replica级别以上的wal日志。

redraiment 发布于 2019-04-01 17:14:00
评论:2    浏览:1137

强人随笔PostgreSQL 11 新特性解读|支持并行创建索引

PostgreSQL 11 版本在并行方面得到增强,例如支持并行创建索引、并行Hash Join、并行 `CREATE TABLE .. AS`等,本文先介绍并行创建索引。 PostgreSQL 11 版本并行创建索引仅支持 B-tree 索引,其它类型索引现阶段不支持并行创建。

redraiment 发布于 2019-03-28 23:33:27
评论:0    浏览:1048

强人随笔PostgreSQL误删数据怎么破?

PostgreSQL并未有闪回和数据误删除保护的功能,但是在一些场景下也可以实现。

redraiment 发布于 2019-03-28 11:33:57
评论:0    浏览:954

社区活动PGConf US DAY5小结

美国时间3月22日,第八届Postgres Conference US大会(以下简称“PGConf US”)在美国纽约时代广场喜来登酒店盛大闭幕。会议最后一天,瀚高软件受邀与微软、亚马逊、德国Credativ集团、欧洲DBeaver、EDB、TimeScale等公司共同举办现场招聘活动,以下由瀚高软件带来本日速报。

redraiment 发布于 2019-03-26 15:05:37
评论:0    浏览:664

社区活动PostgresConf 2019 US DAY4速报

美国东部时间3月21日,是PostgresConf 2019的第4天,会议以各个分会场的演讲为主,在六个分会场分别举行。中国PG分会国际顾问委员会秘书长、PG中国社区核心组成员周宝峰,代表中国PG分会在大会现场做《中国PostgreSQL实践》的演讲,向与会嘉宾重点介绍了PG在中国的发展。会议期间,瀚高软件参会代表与来自世界各地的PG大咖进行了很多交流,同时也向多名国际知名人士发出了会议邀请,希望7月份能在北京香格里拉饭店举办的PostgresConf CN 2019上再次聚会。

redraiment 发布于 2019-03-26 14:56:30
评论:0    浏览:955

社区活动PostgresConf US DAY3速报

美国时间3月20日,PostgresConf 2019大会隆重召开,会议开幕式在可容纳600人的纽约时代广场喜来登大酒店纽约宴会厅举行。会议组织方Amanda、JD以及Jim分别在现场对会议进行了说明,并在开幕式的第一个环节对即将于7月份在北京由瀚高软件主办的PostgresConf CN会议进行了推介,鼓励大家到北京来参会。

redraiment 发布于 2019-03-26 11:07:45
评论:0    浏览:595

社区活动PostgresConf US DAY2速报

美国时间3月19日是会议的第二天,以培训为主,主要是Pivotal的GreenPlumSummit活动。Pivotal从去年开始和PostgresConf一起举办会议。

redraiment 发布于 2019-03-22 23:14:05
评论:0    浏览:659

社区活动PostgresConf US DAY1速报

美国时间3月18日是pgconf会议的首日,主要是内部培训,其中包括关于PostgreSQL的三个全天培训、一个Pivotal GreenplumSummit的一个全天培训以及亚马逊举行的“AWS迁移日”全天活动。

redraiment 发布于 2019-03-22 12:21:06
评论:0    浏览:772

新版发布历经两载磨砺,Greenplum进入6.0时代

今天(2019年3月20日),所有关注开源大数据平台Greenplum的用户和开发人员都会发现:Greenplum的github代码库里面出现了一个新的分支--“6X_STABLE”。这标志着Greenplum大数据平台进入了6.0的时代。

redraiment 发布于 2019-03-21 08:54:20
评论:0    浏览:1084

商业活动PGer福利|苏宁易购诚聘PostgreSQL数据库工程师、内核研发

苏宁易购旗下苏宁科技集团涵盖云计算、大数据、人工智能、物联网、智能硬件等方向,具备专业的产品研发团队、运营团队、实施团队和运维团队,面向政企用户提供工苏宁云、金融云和物流云,通过门店端、PC端、移动端和家庭端的四端协同,实现无处不在的一站式服务体验。

redraiment 发布于 2019-03-20 08:00:39
评论:0    浏览:825

强人随笔平安科技PostgreSQL案例分享|进程私有内存探密

近期遇到一个案例,一个分析型应用的DB在早上的时候出现OOM,OS kill用户进程,数据库进入recovery,几十秒后数据库恢复。

redraiment 发布于 2019-03-19 08:30:29
评论:0    浏览:1012

商业活动Qunar诚聘PostgreSQL/GreenPlum DBA

Qunar诚聘PostgreSQL/GreenPlum DBA

redraiment 发布于 2019-03-17 23:54:23
评论:0    浏览:660

强人随笔PostgreSQL 11新特性解读|支持存储过程(SQL Stored Procedures)

PostgreSQL 11 版本一个重量级新特性是对存储过程的支持,同时支持存储过程嵌入事务,存储过程是很多 PostgreSQL 从业者期待已久的特性,尤其是很多从Oracle转到PostgreSQL朋友,尽管PostgreSQL提供函数可以实现大多数存储过程的功能,但在函数中无法执行事务实现部分提交,换句话说,函数中的SQL要么都执行成功,要不全部返回失败。 PostgreSQL 11 版本对存储过程的支持,从兼容层面考虑和Oracle的兼容性进一步增强,本文演示下PostgreSQL存储过程的创建和调用,并且演示存储过程支持嵌入事务样例。

redraiment 发布于 2019-03-12 08:57:57
评论:0    浏览:1634

强人随笔Postgres 12 highlight - SKIP_LOCKED for VACUUM and

Postgres 11已经扩展了VACUUM,因此可以在单次查询中指定多张表,每次处理一张表。但是当VACUUM卡在一张表上很长时间,由于表被锁或者别的原因时,应由触发VACUUM的应用层仔细查看并解除阻塞情况。SKIP_LOCKED通过立即跳过任何在VACUUM或者ANALYZE处理开始时无法锁定的表,实现了对这种场景的更多控制,这意味着这种处理方式将可能以不做任何事情为代价及时完成,如果表不断累积膨胀而不被清理,这也可能是危险的。

redraiment 发布于 2019-03-09 10:35:02
评论:0    浏览:712

社区活动云栖TechDay - PG天天象上活动 - 长沙站

贸易摩擦、中兴事件、以及近期某银行收到Oracle 6亿罚单等等的热点事件,引发了企业对核心技术安全合规、自主可控的深度思考。对于数据库来说,安全合规、自主可控,成本等也已经成为绝大多数企业迫在眉睫要解决的问题。

doudou586 发布于 2019-03-08 09:11:23
评论:1    浏览:1082

其他PG_PERMISSION_检查您的PostgreSQL安全系统

安全性是一个很重要的话题。它不仅仅只存在于PostgreQL中,整个IT系统中都是如此。然而数据库会有特殊的安全要求。数据库通常存放的是机密数据,因此数据得到合适的保护是有意义的。安全第一!

doudou586 发布于 2019-03-06 12:59:58
评论:0    浏览:760

社区活动深度培训:PostgreSQL技术实战

本次深度培训课程是由DTCC2019大会新增的一个培训环节。课程将从企业应用项目选型实施角度出发,全面而深入地向企业传达:针对某个应用方案的具体实现、选型比较、实现策略、成本对比、优势优点、自我经验,教训总结等内容。 时间:2019.5.11~2019.5.12 、 德哥于北京新云南皇冠酒店开课

doudou586 发布于 2019-03-06 08:28:04
评论:0    浏览:968

技术讨论GPkafka-Kafka数据导入GreenPlum实践

Kafka是分布式消息订阅系统,有非常好的横向扩展性,可实时存储海量数据,是流数据处理中间件的事实标准。当通过Kafka和greenplum搭建流处理管道时,如何高速可靠的完成流数据加载,成为用户最关心的问题。

doudou586 发布于 2019-03-04 20:59:39
评论:1    浏览:1935
© 2010 PostgreSQL中文社区