Kubernetes集群安装高可用postgresql

news/2024/7/4 8:10:08 标签: kubernetes, postgresql, 容器, 云原生, 数据库

postgresql_0">Kubernetes集群安装高可用postgresql

Bitnami 提供的 postgresql-ha 解决方案是一个预配置的、高可用的 PostgreSQL 集群配置,通常部署在 Kubernetes 环境中。它使用了一些关键技术和组件来实现数据库的高可用性。,Bitnami postgresql-ha 主要采用以下构建方式:

  1. PostgreSQL 集群:这是核心部分,通常包含一个主(Primary)数据库和一个或多个从(Standby)数据库。这种设置支持主从复制,其中从数据库实时复制主数据库的数据。

  2. 自动故障转移:在主数据库发生故障时,系统会自动将其中一个从数据库提升为新的主数据库,以确保服务的持续可用性。

  3. Pgpool-II:Bitnami 的 postgresql-ha 使用 Pgpool-II 作为数据库连接池和负载均衡器。Pgpool-II 处理客户端连接,提供负载均衡和连接池功能,同时也支持自动故障转移和读写分离。

  4. 持久化存储:为了保证数据的持久性和稳定性,Bitnami 的解决方案通常使用持久化存储,如 Kubernetes 的持久卷(Persistent Volumes,PVs)和持久卷声明(Persistent Volume Claims,PVCs)。

  5. 监控和日志记录:集成的监控和日志记录机制,以确保集群的健康状况可以被实时监控,并在出现问题时可以迅速响应。

  6. 配置和管理:Bitnami 的 Helm chart 提供了灵活的配置选项,允许用户根据具体需求调整数据库设置、资源分配、复制策略等。

  7. 安全性:通常包括网络策略、访问控制和加密选项来保护数据和通信。

  8. 备份和恢复:可能包括对数据库备份和恢复的支持,以确保数据的安全性。

使用这样的架构,Bitnami 的 postgresql-ha 解决方案能够为企业级应用提供可靠的、高可用的数据库服务,同时充分利用了 Kubernetes 平台的特性,如易于扩展、自我修复和声明式配置。

如果想进一步了解pgpool实现高可用postgresql数据库的架构原理,请参考:pgpool-II高可用配置讲解

1.通过Helm Chart安装高可用Postgresql集群

1.1 前提条件

a. Kubernetes版本>=1.23,Kubernetes的安装请参考:Kubeadm安装K8s1.26集群

b. Helm版本>=v3.8.0,其中 Helm 的安装请参考:Helm Install

c.需要有默认的StorageClass,具体准备流程参考:Kubernetes安装StorageClass

1.2 安装流程

a.创建安装目录

#切换到当前用户根目录并建立logging文件夹
cd ~ && mkdir postgresql-ha

cd postgresql-ha

b.创建logging名字空间,独立的名字空间有助于资源管理

kubectl create ns pg

c.添加elastic官方repo仓库

helm repo add bitnami https://charts.bitnami.com/bitnami

d.定制化
如果需要做某些定制化需求请参考官方 values.yaml 文件,其中每个参数都会有详细描述: 官网参考

helm pull bitnami/postgresql-ha --version 12.3.2

tar -xvf postgresql-ha-12.3.2.tgz

cd postgresql-ha

#(非必要)以下的操作主要是修改postgresql:默认的pgpool容器副本数,持久化存储卷大小,NodePort对外暴露方式。当然如果需要还可以修改数据库名,数据库密码,登录用户名等信息,也可以通过ingress实现对外7层代理,当然如果需要还可以修改镜像地址,毕竟从外网下载镜像稳定性较差。
vi values.yaml
# 1.全局搜索“pgpool.replicaCount”

## @param pgpool.replicaCount The number of replicas to deploy
##
replicaCount: 2 #修改pgpool的数量增强高可用性

# 2.全局搜索“persistence.size”

## @param persistence.size Persistent Volume Claim size
##
size: 8Gi #默认8G比较小,在真实生产环境可以根据实际需求修改。

# 3.全局搜索“service.type”,找到如下内容:
  type: NodePort #修改为NodePort方式
  ## @param service.ports.postgresql PostgreSQL port
  ##
  ports:
    postgresql: 5432
  ## @param service.portName PostgreSQL service port name
  ## ref: https://kubernetes.io/docs/concepts/services-networking/service/#multi-port-services
  ##
  portName: postgresql
  ## @param service.nodePorts.postgresql Kubernetes service nodePort
  ## ref: https://kubernetes.io/docs/concepts/services-networking/service/#type-nodeport
  ##
  nodePorts:
    postgresql: "15432" #选择一个合适的NodePort端口

e.安装

#执行安装命令
cd ~/postgresql-ha/

helm install pg-ha ./postgresql-ha -n pg

#成功后提示
NAME: pg-ha
LAST DEPLOYED: Tue Dec  5 04:36:18 2023
NAMESPACE: pg
STATUS: deployed
REVISION: 1
TEST SUITE: None
NOTES:
CHART NAME: postgresql-ha
CHART VERSION: 12.3.2
APP VERSION: 16.1.0
** Please be patient while the chart is being deployed **
PostgreSQL can be accessed through Pgpool via port 5432 on the following DNS name from within your cluster:

    pg-ha-postgresql-ha-pgpool.pg.svc.cluster.local

Pgpool acts as a load balancer for PostgreSQL and forward read/write connections to the primary node while read-only connections are forwarded to standby nodes.

To get the password for "postgres" run:

    export POSTGRES_PASSWORD=$(kubectl get secret --namespace pg pg-ha-postgresql-ha-postgresql -o jsonpath="{.data.password}" | base64 -d)

To get the password for "repmgr" run:

    export REPMGR_PASSWORD=$(kubectl get secret --namespace pg pg-ha-postgresql-ha-postgresql -o jsonpath="{.data.repmgr-password}" | base64 -d)

To connect to your database run the following command:

    kubectl run pg-ha-postgresql-ha-client --rm --tty -i --restart='Never' --namespace pg --image docker.io/bitnami/postgresql-repmgr:16.1.0-debian-11-r11 --env="PGPASSWORD=$POSTGRES_PASSWORD"  \
        --command -- psql -h pg-ha-postgresql-ha-pgpool -p 5432 -U postgres -d postgres

To connect to your database from outside the cluster execute the following commands:

    export NODE_IP=$(kubectl get nodes --namespace pg -o jsonpath="{.items[0].status.addresses[0].address}")
    export NODE_PORT=$(kubectl get --namespace pg -o jsonpath="{.spec.ports[0].nodePort}" services pg-ha-postgresql-ha-pgpool
    PGPASSWORD="$POSTGRES_PASSWORD" psql -h $NODE_IP -p $NODE_PORT -U postgres -d postgres

#查看运行状态
kubectl get po -n pg
NAME                                          READY   STATUS    RESTARTS   AGE
pg-ha-postgresql-ha-pgpool-58468c7bff-jg9kz   1/1     Running   0          3m41s
pg-ha-postgresql-ha-pgpool-58468c7bff-lhf5p   1/1     Running   0          3m41s
pg-ha-postgresql-ha-postgresql-0              1/1     Running   0          3m41s
pg-ha-postgresql-ha-postgresql-1              1/1     Running   0          3m41s
pg-ha-postgresql-ha-postgresql-2              1/1     Running   0          3m41s

f.测试连接

#获取数据库连接密码
kubectl get secret --namespace pg pg-ha-postgresql-ha-postgresql -o jsonpath="{.data.password}" | base64 -d
f6PEWNNTec  #别用我的,咱们不一样

#检查对外暴露的端口
kubectl get svc -n pg
NAME                                      TYPE        CLUSTER-IP      EXTERNAL-IP   PORT(S)          AGE
pg-ha-postgresql-ha-pgpool                NodePort    172.16.86.61    <none>        5432:15432/TCP   12m
pg-ha-postgresql-ha-postgresql            ClusterIP   172.16.19.127   <none>        5432/TCP         12m
pg-ha-postgresql-ha-postgresql-headless   ClusterIP   None            <none>        5432/TCP         12m

#使用数据库连接工具,我使用的是pgAdmin

可以看到已经能够连接成功
在这里插入图片描述
g.错误处理
我这里做过多次安装,有的机器可能遇到如下错误

password authentication failed for user “postgres”; User “postgres” has no password assigned.

这个问题是由于postgres数据库启动太慢导致的,适当增加livenessProbe,readinessProbe,startupProbe的initialDelaySeconds数值即可。

# 1.全局搜索“postgresql.livenessProbe.initialDelaySeconds”

# 2.全局搜索“postgresql.readinessProbe.initialDelaySeconds”

# 3.全局搜索“postgresql.startupProbe.initialDelaySeconds”

http://www.niftyadmin.cn/n/5244995.html

相关文章

java_web接收前端传的excel文件读取数据

#本次做一个将患者数据导入到某个模块的功能,前期集成的代码时不时出现异常,本次进行修改记录 //controller层/*** 导入患者数据*/@RejectReplayRequest@PostMapping("/importData")public Result<?> importData(HttpServletRequest request, LoginUser lo…

【QML】QML与cpp交互(一)—— QML直接调用cpp函数

目录 1、cpp 创建一个类 2、将类对象暴露给QML 3、QML通过对象直接调用cpp函数 1、cpp 创建一个类 类模板如下: #include <QtCore/QObject>class vacUdpClient: public QObject {Q_OBJECT public: vacUdpClient(QObject* parent nullptr): QObject(parent) {}// Q…

Mybatis总体执行流程

Mybatis总体执行流程 0. 总体概述 mybatis的总体执行流程如下&#xff1a; 读取mybatis配置文件&#xff0c;构建configuration对象&#xff0c;将mapper.xml配置文件与Mapper接口绑定&#xff0c;并将文件中select|insert|update|delete 配置&#xff0c;封装成一个个Mapped…

RuntimeError: CUDA error: out of memory怎么解决

遇到这个问题的原因是之前的程序没有结束进程。 需要打开Linux的命令窗口。输入命令 nvidia-smi 发现有很多的进程没有结束。使用如下命令查看进程 发现这些黄色框里的进程就是需要结束掉的进程。 查看当前conda的环境都有哪些&#xff0c;目前项目主要用到的是main这个。 使…

数据结构与算法编程题50

假设不带权有向图采用邻接矩阵G存储&#xff0c;设计实现以下功能的算法。 &#xff08;1&#xff09;求出图中每个顶点的出度。 &#xff08;2&#xff09;求出图中出度为0的顶点数。 &#xff08;3&#xff09;求出图中每个顶点的入度。 //参考博客&#xff1a;https://blog.…

pycharm使用Anaconda中的虚拟环境【我的入门困惑二】

Anaconda的作用 Anaconda的存在&#xff0c;使得一台电脑上可以存在多个不同版本的python和相应的包&#xff0c;这解决了多个项目运行时&#xff0c;所需要的python和包版本不同的问题。 本文内容 今天就来简单说说如何在pycharm使用Anaconda中的虚拟环境。 详细介绍 首先…

Lab 3: Recursion, Tree Recursion(CS61A 2020)

在网上没有lab3相应的答案&#xff0c;作者也卡蛮久 作者可能就自己的卡住过的问题做一些总结&#xff0c;不能面面俱到&#xff0c;请见谅 &#xff08;就此补充一下答案&#xff09;&#xff08;完整答案在最后&#xff09; Q2: WWPD: Journey to the Center of the Earth…

单向通信----一对一聊天

package 一对一聊天; import java.awt.BorderLayout; import java.awt.event.ActionEvent; import java.awt.event.ActionListener; import java.io.BufferedReader; import java.io.InputStream; import java.io.InputStreamReader; import java.io.OutputStream; import …