OpenShift 4 之 GitOps（6）用ArgoCD支配MongoDB主从集群_集群_敕令

支配MongoDB主从集群准备操作环境

1. 操作环境以Linux为例。

2. 正常安装ArgoCD做事器和客户端。

3. 将https://github.com/openshift/federation-dev.git复制一份到自己的github账号，然后再clone一份到本地。
末了将本地的federation-dev/labs/utility/目录中的文件全部授予可实行权限，并将该目录放到PATH环境变量中。

4. 参照我在头条中《OpenShift 4 之 GitOps（1）安装ArgoCD环境》。

5. 在https://pkg.cfssl.org/下载对应平台的cfssl和cfssljson软件。

参考《OpenShift 4 之 GitOps（4）用ArgoCD向多OpenShift集群发布运用》，先通过“oc config rename-context <NEW_NAME>”命令修正三个OpenShift集群的Config Context名称（分别命名为cluster1、cluster2、cluster3），然后通过“argocd cluster add <CONTEXT_NAME>”命令分别将三个OpenShift集群加到ArgoCD环境中。

为了让MongoDB可通过TLS访问，须要天生证书和秘钥。

1. 进入lab-6-assets目录，然后创建三个文件，分别是ca-config.json，ca-csr.json，mongodb-csr.json。

$ cd ~/federation-dev/labs/lab-6-assets$ cat > ca-config.json <<EOF{ "signing": { "default": { "expiry": "8760h" }, "profiles": { "kubernetes": { "usages": ["signing", "key encipherment", "server auth", "client auth"], "expiry": "8760h" } } }}EOF $ cat > ca-csr.json <<EOF{ "CN": "Kubernetes", "key": { "algo": "rsa", "size": 2048 }, "names": [ { "C": "US", "L": "Austin", "O": "Kubernetes", "OU": "TX", "ST": "Texas" } ]}EOF $ cat > mongodb-csr.json <<EOF{ "CN": "kubernetes", "key": { "algo": "rsa", "size": 2048 }, "names": [ { "C": "US", "L": "Austin", "O": "Kubernetes", "OU": "TX", "ST": "Texas" } ]}EOF```

2. 天生CA文件。

$ cfssl gencert -initca ca-csr.json | cfssljson -bare ca

3. 设置所需环境变量，末了创建MongoDB证书。

$ NAMESPACE=mongo$ SERVICE_NAME=mongo$ ROUTE_CLUSTER1=mongo-cluster1.$(oc --context=cluster1 get ingresses.config.openshift.io cluster -o jsonpath='{ .spec.domain }')$ ROUTE_CLUSTER2=mongo-cluster2.$(oc --context=cluster2 get ingresses.config.openshift.io cluster -o jsonpath='{ .spec.domain }')$ ROUTE_CLUSTER3=mongo-cluster3.$(oc --context=cluster3 get ingresses.config.openshift.io cluster -o jsonpath='{ .spec.domain }')$ SANS="localhost,localhost.localdomain,127.0.0.1,${ROUTE_CLUSTER1},${ROUTE_CLUSTER2},${ROUTE_CLUSTER3},${SERVICE_NAME},${SERVICE_NAME}.${NAMESPACE},${SERVICE_NAME}.${NAMESPACE}.svc.cluster.local"$ cfssl gencert -ca=ca.pem -ca-key=ca-key.pem -config=ca-config.json -hostname=${SANS} -profile=kubernetes mongodb-csr.json | cfssljson -bare mongodb

4. 合并秘钥和证书文件。

$ cat mongodb-key.pem mongodb.pem > mongo.pem更新被支配的YAML文件

在Gitops中所有支配工具都是YAML文件，以是在通过ArgoCD实行YAML之前，我们还须要将和操作环境干系的配置更新到YAML中。

1. 修合法地的mongo-secret.yaml文件

$ sed -i "s/mongodb.pem: .$/mongodb.pem: $(openssl base64 -A < mongo.pem)/" base/mongo-secret.yaml$ sed -i "s/ca.pem: .$/ca.pem: $(openssl base64 -A < ca.pem)/" base/mongo-secret.yaml

2. 修合法地的mongo-rs-deployment.yaml文件

$ sed -i "s/primarynodehere/${ROUTE_CLUSTER1}:443/" base/mongo-rs-deployment.yaml$ sed -i "s/replicamembershere/${ROUTE_CLUSTER1}:443,${ROUTE_CLUSTER2}:443,${ROUTE_CLUSTER3}:443/" base/mongo-rs-deployment.yaml

3. 修合法地的mongo-route.yaml文件

$ sed -i "s/mongocluster1route/${ROUTE_CLUSTER1}/" overlays/cluster1/mongo-route.yaml$ sed -i "s/mongocluster2route/${ROUTE_CLUSTER2}/" overlays/cluster2/mongo-route.yaml$ sed -i "s/mongocluster3route/${ROUTE_CLUSTER3}/" overlays/cluster3/mongo-route.yaml

4. 将mongo-secret.yaml、mongo-rs-deployment.yaml、mongo-route.yaml更新至自己的github。

1. 将自己github账号（<MY-GITHUB>）中的三个MongoDB集群的配置加入到ArgoCD中。

$ MY_GITHUB=https://github.com/<MY-GITHUB>/federation-dev.git$ argocd app create --project default --name cluster1-mongo \ --repo ${MY_GITHUB} \ --path labs/lab-6-assets/overlays/cluster1 \ --dest-server $(argocd cluster list | grep cluster1 | awk '{print $1}') \ --dest-namespace mongo --revision master --sync-policy automated $ argocd app create --project default --name cluster2-mongo \ --repo ${MY_GITHUB} \ --path labs/lab-6-assets/overlays/cluster2 \ --dest-server $(argocd cluster list | grep cluster2 | awk '{print $1}') \ --dest-namespace mongo --revision master --sync-policy automated $ argocd app create --project default --name cluster3-mongo \ --repo ${MY_GITHUB} \ --path labs/lab-6-assets/overlays/cluster3 \ --dest-server $(argocd cluster list | grep cluster3 | awk '{print $1}') \ --dest-namespace mongo --revision master --sync-policy automated

如果对自己Github账户中的支配文件进行了变动，可实行以下命令手动同步到ArgoCD。

$ argocd app sync cluster1-mongo $ argocd app sync cluster2-mongo $ argocd app sync cluster3-mongo

2. 运行命令，查看三个ArgoCD app的状态。
直到它们变为“Healthy”即完成。

$ argocd app listNAME CLUSTER NAMESPACE PROJECT STATUS HEALTH SYNCPOLICY CONDITIONS REPO PATH TARGETcluster1-mongo https://api.cluster-shanghai-fba4.shanghai-fba4.example.opentlc.com:6443 mongo default OutOfSync Healthy Auto <none> https://github.com/liuxiaoyu-git/federation-dev.git labs/lab-6-assets/overlays/cluster1 mastercluster2-mongo https://api.cluster-beijing-7536.beijing-7536.example.opentlc.com:6443 mongo default OutOfSync Healthy Auto <none> https://github.com/liuxiaoyu-git/federation-dev.git labs/lab-6-assets/overlays/cluster2 mastercluster3-mongo https://api.cluster-shanghai-e90b.shanghai-e90b.sandbox1824.opentlc.com:6443 mongo

3. 查看三个OpenShift集群中的Deployment和Route工具都正常。

$ for cluster in cluster1 cluster2 cluster3; do oc --context $cluster -n mongo get deployment mongo; done$ for cluster in cluster1 cluster2 cluster3; do oc --context $cluster -n mongo get deployment mongo; done

## 配置MongoDB的ReplicaSet

1. 实行命令通过给pod打标签，将cluster1设为ReplicaSet的primary replica角色。

$ MONGO_POD=$(oc --context=cluster1 -n mongo get pod --selector="name=mongo" --output=jsonpath='{.items..metadata.name}')$ oc --context=cluster1 -n mongo label pod $MONGO_POD replicaset=primary

2. 实行命令（该命令在federation-dev/labs/utility目录中），查看MongoDB ReplicaSet的状态。

$ wait-for-mongo-replicaset cluster1 mongo 3Checking if MongoDB Replicaset from namespace mongo on cluster cluster1 is configured。
。
。
MongoDB ReplicaSet Status:--------------------------Primary Member:"mongo-cluster1.apps.cluster-shanghai-fba4.shanghai-fba4.example.opentlc.com:443"Secondary Members:"mongo-cluster2.apps.cluster-beijing-7536.beijing-7536.example.opentlc.com:443""mongo-cluster3.apps.cluster-shanghai-e90b.shanghai-e90b.sandbox1824.opentlc.com:443"

把稳：在操作的时候如果涌现作为Primary成员的cluster1的状态如果不正常（后台的MongoCD Pod涌现CrashLoopBackOff），可以考试测验先实行以下命令删除cluster1的“replicaset=primary”的标签，然后再修正本节（1）步骤的命令（将cluster2或cluste在r3设为Primary成员），末了在实行修正后的命令。

一旦在此步骤改换了replicaset的primary，后面所有和MongoDB

$ oc --context=cluster1 -n mongo label pod $MONGO_POD replicaset-

3. 实行命令，查看MongoDB的Replicaset。
确认个中三个member的"name"、"stateStr"和"syncingTo"字段内容，确认三个成员的相互关系是"stateStr"为"SECONDARY"的成员其"syncingTo"指向的是"stateStr"为"PRIMARY"的成员。

$ MONGO_POD=$(oc --context=cluster1 -n mongo get pod --selector="name=mongo" --output=jsonpath='{.items..metadata.name}')$ oc --context=cluster1 -n mongo exec $MONGO_POD \ -- bash -c 'mongo --norc --quiet --username=admin --password=$MONGODB_ADMIN_PASSWORD --host localhost admin --tls --tlsCAFile /opt/mongo-ssl/ca.pem --eval "rs.status()"'

此时在三个OpenShift集群中就配置好了三个具备主从关系的MongoDB集群。