Điểm:0

Postgres và redis pod thỉnh thoảng bị lỗi

lá cờ cn

Tôi đã thiết lập một cụm kubernetes (1.19) bằng cách sử dụng RKE trên máy ubuntu (20.04) beta beta. Tôi đang chạy một phiên bản gitlab tự lưu trữ (được cài đặt bằng biểu đồ helm) trên cụm đó.

Thỉnh thoảng (1-5 giờ một lần), một số nhóm sẽ hết và tôi thấy nhiều lần khởi động lại nhất cho

cert-manager-cainjector-856d4df858-l4fsz
gitlab-postgresql-0
gitlab-redis-master-0
nfs-cung cấp-6c95ddf48-xndwh

Tôi không biết cái nào gây ra vấn đề và cái nào là trùng hợp ngẫu nhiên. Có thể lỗi AOF là nguyên nhân chính, nhưng cũng có thể nó chỉ là kết quả của một vấn đề khác.

mô tả postgres

Cảnh báo Không lành mạnh 4m50s (x16 trên 21h) kubelet Thăm dò Liveness không thành công: â
Cảnh báo Không lành mạnh 4m50s (x19 trên 21h) thăm dò mức độ sẵn sàng của kubelet không thành công: â
Cảnh báo Không lành mạnh 4m3s (x47 trên 15 giờ) kubelet Thăm dò Liveness không thành công: 127.0.0.1:5432 - không có phản hồi â
Giết bình thường 4m3s (x74 trên 15 giờ) kubelet Container gitlab-postgresql thăm dò hoạt động không thành công, sẽ được khởi động lại â
Cảnh báo Không lành mạnh 3m53s (x74 trên 15h) thăm dò mức độ sẵn sàng của kubelet không thành công: 127.0.0.1:5432 - không có phản hồi 

đăng nhập postgres

số liệu time="2021-10-15T11:07:53Z" level=info msg="Đã thiết lập kết nối cơ sở dữ liệu mới tới \"127.0.0.1:5432\"." nguồn="postgres_exporter.go:878"
số liệu time="2021-10-15T11:07:54Z" level=info msg="Đã thiết lập kết nối cơ sở dữ liệu mới tới \"127.0.0.1:5432\"." nguồn="postgres_exporter.go:878"
số liệu time="2021-10-15T11:07:56Z" level=info msg="Đã thiết lập kết nối cơ sở dữ liệu mới tới \"127.0.0.1:5432\"." nguồn="postgres_exporter.go:878"
số liệu time="2021-10-15T11:07:59Z" level=error msg="Lỗi khi mở kết nối tới cơ sở dữ liệu (postgresql://gitlab:[email protected]:5432/gitlabhq_production?sslmode=disable): pq: the hệ thống cơ sở dữ liệu đang khởi động" source="postgres_exporter.go:1474"
số liệu time="2021-10-15T11:07:59Z" level=info msg="Máy chủ đang khởi động: :9187" source="postgres_exporter.go:1672"

mô tả redis

Cảnh báo Không lành mạnh 5m10s (x44 trong 22 giờ) thăm dò mức độ sẵn sàng của kubelet không thành công: â
Cảnh báo Không lành mạnh 5m (x34 trên 15h) thăm dò Liveness không thành công: â
Cảnh báo: Sử dụng mật khẩu có tùy chọn '-a' hoặc '-u' trên giao diện dòng lệnh có thể không an toàn. â
 hết thời gian chờ: lệnh được giám sát đã đổ lõi â
Cảnh báo Không lành mạnh 4m45s (x27 trên 19h) kubelet Thăm dò Liveness không thành công: â
Cảnh báo Không lành mạnh 65s (x2311 trên 15 giờ) thăm dò mức độ sẵn sàng của kubelet không thành công: â
Cảnh báo: Sử dụng mật khẩu có tùy chọn '-a' hoặc '-u' trên giao diện dòng lệnh có thể không an toàn. â
 hết thời gian chờ: lệnh được giám sát đã đổ lõi  

đăng nhập lại

useradd: Quyền bị từ chối.
useradd: không thể khóa /etc/passwd; thử lại sau.
chown: người dùng không hợp lệ: 'redis'
redis 06:20:45.18 THÔNG TIN ==> ** Bắt đầu Redis **
1:C 18 tháng 10 năm 2021 06:20:45.194 # oO0OoO0OoO0Oo Redis đang bắt đầu oO0OoO0OoO0Oo
1:C 18 tháng 10 năm 2021 06:20:45.194 # Phiên bản Redis=6.0.9, bits=64, commit=00000000, Modified=0, pid=1, just started
1:C Ngày 18 tháng 10 năm 2021 06:20:45.194 # Đã tải cấu hình
1:M Ngày 18 tháng 10 năm 2021 06:20:45.197 * Chế độ chạy=độc lập, cổng=6379.
1:M Ngày 18 tháng 10 năm 2021 06:20:45.197 # Khởi tạo máy chủ
1:M Ngày 18 tháng 10 năm 2021 06:20:45.512 * Đọc phần mở đầu RDB từ tệp AOF...
1:M Ngày 18 tháng 10 năm 2021 06:20:45.512 * Đang tải RDB do phiên bản 6.0.9 tạo ra
1:M ngày 18 tháng 10 năm 2021 06:20:45,512 * Tuổi RDB 694288 giây
1:M Ngày 18 tháng 10 năm 2021 06:20:45.512 * Mức sử dụng bộ nhớ RDB khi được tạo là 3,97 Mb
1:M Ngày 18 tháng 10 năm 2021 06:20:45.512 * RDB có đuôi AOF
1:M 18/10/2021 06:20:45.515 * Đang đọc phần đuôi AOF còn lại...
1:M ngày 18 tháng 10 năm 2021 06:20:45.735 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều lệnh gọi' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:46.641 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:47.169 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:47.569 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:47.649 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều lệnh gọi' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:48.151 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều lệnh gọi' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:48.697 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng các cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:50.452 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều lệnh gọi' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:51.337 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:51.479 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M Ngày 18 tháng 10 năm 2021 06:20:51.846 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:51.847 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:52.078 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:52.247 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:54.645 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng các cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:55.877 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:56.234 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:56.400 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:56.991 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều lệnh gọi' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:57.352 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều lệnh gọi' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:57.421 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:57.547 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng các cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:57.628 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng các cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:57.733 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:57.781 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều lệnh gọi' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:57.811 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:57.958 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:58.059 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng các cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:58.160 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:58.367 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều lệnh gọi' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:58.475 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:58.558 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:20:59.649 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng các cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:21:00.050 # == QUAN TRỌNG == Máy chủ này đang gửi lỗi tới máy khách AOF-loading của nó: 'Không thể lồng nhiều cuộc gọi MULTI' sau khi xử lý lệnh 'exec'
1:M ngày 18 tháng 10 năm 2021 06:21:00.278 * DB được tải từ tệp chỉ nối thêm: 15,080 giây
1:M 18/10/2021 06:21:00.278 * Sẵn sàng chấp nhận kết nối

đăng nhập nhà cung cấp nfs

I1016 09:52:48.042599 1 main.go:63] Nhà cung cấp quay.io/nfs-provisioner đã chỉ định â
I1016 09:52:48.042763 1 main.go:87] Thiết lập máy chủ NFS! â
I1016 09:53:10.846186 1 server.go:144] bắt đầu RLIMIT_NOFILE rlimit.Cur 1048576, rlimit.Max 1048576 â
I1016 09:53:10.846225 1 server.go:155] kết thúc RLIMIT_NOFILE rlimit.Cur 1048576, rlimit.Max 1048576 â
I1016 09:53:10.846823 1 server.go:129] Đang chạy máy chủ NFS!  

Tôi thik có đủ tài nguyên:

mô tả nút

Không gian tên Tên Yêu cầu CPU Giới hạn CPU Yêu cầu bộ nhớ Giới hạn bộ nhớ Tuổi
--------- --------- --------- ---------- --------------- ------------- ---
cert-manager cert-manager-66b6d6bf59-hnlm7 0 (0%) 0 (0%) 0 (0%) 0 (0%) 5d20h
cert-manager cert-manager-cainjector-856d4df858-l4fsz 0 (0%) 0 (0%) 0 (0%) 0 (0%) 5d20h
cert-manager cert-manager-webhook-5fd7d458f7-wwq4c 0 (0%) 0 (0%) 0 (0%) 0 (0%) 5d20h
gitlab gitlab-gitaly-0 100m (1%) 0 (0%) 200Mi (0%) 0 (0%) 84m
gitlab gitlab-gitlab-exporter-775f6f9fb-2tcwg 75m (1%) 0 (0%) 100M (0%) 0 (0%) 85m
gitlab gitlab-gitlab-pages-79bf887975-xptqx 900m (15%) 0 (0%) 2G (7%) 0 (0%) 80m
gitlab gitlab-gitlab-runner-bb6cbb7f-4vbxx 0 (0%) 0 (0%) 0 (0%) 0 (0%) 7h6m
gitlab gitlab-gitlab-shell-ccd9bfbbf-8kmzl 50m (0%) 0 (0%) 6M (0%) 0 (0%) 85m
gitlab gitlab-gitlab-shell-ccd9bfbbf-phzdf 50m (0%) 0 (0%) 6M (0%) 0 (0%) 85m
gitlab gitlab-grafana-app-5758fb55f6-j5rtb 0 (0%) 0 (0%) 0 (0%) 0 (0%) 44 phút
gitlab gitlab-mailroom-54c4b4769f-jj2d8 50m (0%) 0 (0%) 150M (0%) 0 (0%) 85m
gitlab gitlab-minio-f69c7f86d-lkz2m 100m (1%) 0 (0%) 128Mi (0%) 0 (0%) 7h6m
gitlab gitlab-postgresql-0 250m (4%) 0 (0%) 256Mi (1%) 0 (0%) 7h6m
gitlab gitlab-prometheus-server-6444c7bd76-62prc 0 (0%) 0 (0%) 0 (0%) 0 (0%) 7h6m
gitlab gitlab-redis-master-0 0 (0%) 0 (0%) 0 (0%) 0 (0%) 7h6m
gitlab gitlab-redis-slave-0 0 (0%) 0 (0%) 0 (0%) 0 (0%) 7h6m
gitlab gitlab-redis-slave-1 0 (0%) 0 (0%) 0 (0%) 0 (0%) 7h5m
gitlab gitlab-registry-678dccc897-dfdvd 50m (0%) 0 (0%) 32Mi (0%) 0 (0%) 85m
gitlab gitlab-registry-678dccc897-lrxcw 50m (0%) 0 (0%) 32Mi (0%) 0 (0%) 85m
gitlab gitlab-sidekiq-all-in-1-v1-57479447cb-jr9gr 900m (15%) 0 (0%) 2G (7%) 0 (0%) 78m
gitlab gitlab-task-runner-899458786-2x4n2 50m (0%) 0 (0%) 350M (1%) 0 (0%) 78m
gitlab gitlab-webservice-default-96484c9f4-khxzm 400m (6%) 0 (0%) 2600M (10%) 0 (0%) 77m
gitlab gitlab-webservice-default-96484c9f4-qmblw 400m (6%) 0 (0%) 2600M (10%) 0 (0%) 78m
ingress-nginx nginx-ingress-controller-gs9dx 0 (0%) 0 (0%) 0 (0%) 0 (0%) 5d18h
kube-system coredns-685d6d555d-626km 100m (1%) 0 (0%) 70Mi (0%) 170Mi (0%) 5d21h
kube-system coredns-autoscaler-57fd5c9bd5-t7snq 20m (0%) 0 (0%) 10Mi (0%) 0 (0%) 5d21h
kube-system metrics-server-7bf4b68b78-xkbn7 100m (1%) 0 (0%) 200Mi (0%) 0 (0%) 5d21h
kube-system nfs-provisioner-6c95ddf48-xndwh 0 (0%) 0 (0%) 0 (0%) 0 (0%) 5d20h
kube-hệ thống dệt-lưới-dsfzf 100m (1%) 0 (0%) 0 (0%) 0 (0%) 5d21h

Nguồn lực được phân bổ:
(Tổng số giới hạn có thể trên 100 phần trăm, tức là, đã cam kết quá mức.)
Giới hạn yêu cầu tài nguyên
-------- -------- ------
cpu 3745m (62%) 0 (0%)
bộ nhớ 10785078528 (42%) 170Mi (0%)
lưu trữ tạm thời 0 (0%) 0 (0%)
Hugepages-2Mi 0 (0%) 0 (0%)
Sự kiện: <không có>

Nhật ký chi tiết của postgres

postgresql 02:54:44.29 
postgresql 02:54:44.29 Chào mừng bạn đến với bộ chứa postgresql Bitnami
postgresql 02:54:44.29 Đăng ký cập nhật dự án bằng cách xem https://github.com/bitnami/bitnami-docker-postgresql
postgresql 02:54:44.30 Gửi các sự cố và yêu cầu tính năng tại https://github.com/bitnami/bitnami-docker-postgresql/issues
postgresql 02:54:44.33 
postgresql 02:54:44.34 THÔNG TIN ==> ** Bắt đầu thiết lập PostgreSQL **
postgresql 02:54:44.37 THÔNG TIN ==> Xác thực cài đặt trong POSTGRESQL_* env vars..
postgresql 02:54:44.38 THÔNG TIN ==> Đang tải tập lệnh khởi tạo trước tùy chỉnh...
postgresql 02:54:44.38 THÔNG TIN ==> Đang tải tệp tùy chỉnh của người dùng từ /docker-entrypoint-preinitdb.d ...
postgresql 02:54:44.39 THÔNG TIN ==> Đang khởi tạo cơ sở dữ liệu PostgreSQL...
postgresql 02:54:44.39 THÔNG TIN ==> Dọn dẹp tệp cũ /bitnami/postgresql/data/postmaster.pid
postgresql 02:54:44.45 THÔNG TIN ==> không phát hiện thấy tệp pg_hba.conf. Đang tạo nó...
postgresql 02:54:44.45 THÔNG TIN ==> Tạo cấu hình xác thực cục bộ
postgresql 02:54:44.47 THÔNG TIN ==> Triển khai PostgreSQL với dữ liệu liên tục...
postgresql 02:54:44.48 THÔNG TIN ==> Định cấu hình tham số sao chép
postgresql 02:54:44.54 THÔNG TIN ==> Định cấu hình fsync
postgresql 02:54:44.57 THÔNG TIN ==> Đang tải tập lệnh tùy chỉnh...
postgresql 02:54:44.57 THÔNG TIN ==> Cho phép kết nối từ xa
postgresql 02:54:44.59 THÔNG TIN ==> ** Thiết lập PostgreSQL đã hoàn tất! **
postgresql 02:54:44.64 THÔNG TIN ==> ** Bắt đầu PostgreSQL **
22/10/2021 02:54:44,670 GMT [1[] LOG: 00000: đã khởi tạo phần mở rộng pgaudit
22/10/2021 02:54:44.670 GMT [1[] VỊ TRÍ: _PG_init, pgaudit.c:2017
22/10/2021 02:54:44,670 GMT [1[] LOG: 00000: bắt đầu PostgreSQL 12.7 trên x86_64-pc-linux-gnu, được biên dịch bởi gcc (Debian 8.3.0-6) 8.3.0, 64-bit
22/10/2021 02:54:44.670 GMT [1[] VỊ TRÍ: PostmasterMain, postmaster.c:1019
22-10-2021 02:54:44.671 GMT [1[] LOG: 00000: nghe trên địa chỉ IPv4 "0.0.0.0", cổng 5432
22/10/2021 02:54:44.671 GMT [1[] VỊ TRÍ: StreamServerPort, pqcomm.c:590
22/10/2021 02:54:44,671 GMT [1[] LOG: 00000: lắng nghe trên địa chỉ IPv6 "::", cổng 5432
22/10/2021 02:54:44.671 GMT [1[] VỊ TRÍ: StreamServerPort, pqcomm.c:590
22/10/2021 02:54:44,674 GMT [1[] LOG: 00000: lắng nghe trên ổ cắm Unix "/tmp/.s.PGSQL.5432"
22/10/2021 02:54:44.674 GMT [1[] VỊ TRÍ: StreamServerPort, pqcomm.c:584
22-10-2021 02:54:44.864 GMT [92[] LOG: 00000: hệ thống cơ sở dữ liệu bị gián đoạn; được biết đến lần cuối lúc 2021-10-22 02:36:29 GMT
22/10/2021 02:54:44.864 GMT [92[] VỊ TRÍ: StartupXLOG, xlog.c:6305
22-10-2021 02:54:49.253 GMT [92[] LOG: 00000: hệ thống cơ sở dữ liệu không được tắt đúng cách; đang tiến hành phục hồi tự động
22/10/2021 02:54:49.253 GMT [92[] VỊ TRÍ: StartupXLOG, xlog.c:6808
22/10/2021 02:54:49.303 GMT [92[] LOG: 00000: làm lại bắt đầu từ 0/376F9D0
22/10/2021 02:54:49.303 GMT [92[] VỊ TRÍ: StartupXLOG, xlog.c:7083
22/10/2021 02:54:49.304 GMT [92[] LOG: 00000: độ dài bản ghi không hợp lệ tại 0/376FAB8: truy nã 24, nhận 0
22/10/2021 02:54:49.304 GMT [92[] VỊ TRÍ: ReadRecord, xlog.c:4313
22/10/2021 02:54:49.304 GMT [92[] LOG: 00000: thực hiện lại tại 0/376FA80
22/10/2021 02:54:49.304 GMT [92[] VỊ TRÍ: StartupXLOG, xlog.c:7345
22/10/2021 02:54:49.318 GMT [1[] LOG: 00000: hệ thống cơ sở dữ liệu sẵn sàng chấp nhận kết nối
22-10-2021 02:54:49.318 GMT [1[] VỊ TRÍ: máy gặt, postmaster.c:3001

nhật ký redis

useradd: Quyền bị từ chối.
useradd: không thể khóa /etc/passwd; thử lại sau.
chown: người dùng không hợp lệ: 'redis'
redis 11:49:42,69 THÔNG TIN ==> ** Bắt đầu Redis **
1:C 22 tháng 10 năm 2021 11:49:42.707 # oO0OoO0OoO0Oo Redis đang bắt đầu oO0OoO0OoO0Oo
1:C 22 tháng 10 năm 2021 11:49:42.707 # Phiên bản Redis=6.0.9, bits=64, commit=00000000, Modified=0, pid=1, just started
1:C Ngày 22 tháng 10 năm 2021 11:49:42.707 # Đã tải cấu hình
1:M Ngày 22 tháng 10 năm 2021 11:49:42,709 * Chế độ chạy=độc lập, cổng=6379.
1:M Ngày 22 tháng 10 năm 2021 11:49:42.709 # Khởi tạo máy chủ
1:M Ngày 22 tháng 10 năm 2021 11:49:42.714 * Đọc phần mở đầu RDB từ tệp AOF...
1:M Ngày 22 tháng 10 năm 2021 11:49:42,714 * Đang tải RDB do phiên bản 6.0.9 tạo ra
1:M Ngày 22 tháng 10 năm 2021 11:49:42,714 * RDB tuổi 6028 giây
1:M Ngày 22 tháng 10 năm 2021 11:49:42,714 * Mức sử dụng bộ nhớ RDB khi được tạo 3,67 Mb
1:M ngày 22 tháng 10 năm 2021 11:49:42,714 * RDB có đuôi AOF
1:M 22/10/2021 11:49:42.717 * Đang đọc phần đuôi AOF còn lại...
1:M Ngày 22 tháng 10 năm 2021 11:49:42.869 # !!! Cảnh báo: đọc ngắn trong khi tải tệp AOF !!!
1:M Ngày 22 tháng 10 năm 2021 11:49:42.869 # !!! Cắt bớt AOF ở phần bù 28641046 !!!
1:M Ngày 22 tháng 10 năm 2021 11:49:42.870 # AOF vẫn được tải vì aof-load-truncate được bật
1:M ngày 22 tháng 10 năm 2021 11:49:42,870 * DB được tải từ tệp chỉ nối thêm: 0,161 giây
1:M 22/10/2021 11:49:42.870 * Sẵn sàng chấp nhận kết nối
1:M Ngày 22 tháng 10 năm 2021 13:59:33.814 * Bắt đầu tự động viết lại AOF khi tăng trưởng 134%
1:M ngày 22 tháng 10 năm 2021 13:59:33.815 * Nền chỉ nối thêm tệp viết lại bắt đầu bởi pid 38407
1:M Ngày 22 tháng 10 năm 2021 13:59:33.843 * Đứa trẻ viết lại AOF yêu cầu ngừng gửi khác biệt.
38407:C 22/10/2021 13:59:33.843 * Phụ huynh đồng ý ngừng gửi khác biệt. Đang hoàn thiện AOF...
38407:C 22 tháng 10 năm 2021 13:59:33.843 * Ghép 0,00 MB khác biệt AOF nhận được từ cấp độ gốc.
38407:C 22 tháng 10 năm 2021 13:59:33.844 * SYNC chỉ thực hiện viết lại tệp nối thêm
38407:C ngày 22 tháng 10 năm 2021 13:59:33.845 * Viết lại AOF: 1 MB bộ nhớ được sử dụng bởi tính năng sao chép khi ghi
1:M ngày 22 tháng 10 năm 2021 13:59:33.915 * Quá trình viết lại nền AOF đã kết thúc thành công
1:M, ngày 22 tháng 10 năm 2021 13:59:33,916 * Khác biệt gốc còn lại được chuyển thành công sang AOF đã viết lại (0,00 MB)
1:M ngày 22 tháng 10 năm 2021 13:59:33.917 * Viết lại nền AOF thành công
lá cờ in
Tôi đoán OOMkilled; `kubectl description po $your_pod_name` hiển thị gì?
Wytrzymały Wiktor avatar
lá cờ it
Xin chào @ người dùng3142695. Bất cứ cập nhật?
user3142695 avatar
lá cờ cn
@WytrzymaÅyWiktor Rất tiếc là không. Tôi thiết lập máy chủ và cụm k8s của mình từ đầu. Lần này tôi đã sử dụng RKE cho cụm.
Mikolaj S. avatar
lá cờ cn
Xin chào @ user3142695, bạn có thể vui lòng chia sẻ tệp triển khai YAML của mình không? Vui lòng làm cho [vấn đề có thể tái sản xuất](https://stackoverflow.com/help/how-to-ask) của bạn.
user3142695 avatar
lá cờ cn
@MikolajS. Đây là vấn đề ở tất cả. Vấn đề này hầu như không thể tái sản xuất. Một vài ngày, mọi thứ đều hoạt động tốt và sau đó, tôi nhận được 500 lỗi, đôi khi tôi phải đợi vài phút, đôi khi hàng giờ. Tôi chỉ cam kết với repo và đường dẫn CI đang chạy. Vì tôi không thể thấy bất kỳ yếu tố nào kích hoạt điều đó nên thực sự rất khó để tìm ra vấn đề.
user3142695 avatar
lá cờ cn
@MikolajS. Tôi đã thêm tệp YAML để triển khai gitlab
Mikolaj S. avatar
lá cờ cn
@ user3142695 cảm ơn! Còn vỏ quả thì sao? `STATUS` (lệnh `kubectl get pods`) của họ là gì?
Mikolaj S. avatar
lá cờ cn
Làm thế nào về tài nguyên có sẵn trên nút của bạn? Dựa trên [điều này](https://stackoverflow.com/questions/63332007/fatal-terminating-connection-due-to-unexpected-postmaster-exit) và [chủ đề này](https://gitlab.com/gitlab- org/gitlab/-/issues/227325) có vẻ như lỗi của bạn được kết nối với tài nguyên không đủ.Bạn có thể chạy `kubectl mô tả các nút` trên cụm của mình và kiểm tra xem bạn có bao nhiêu tài nguyên khả dụng không?
Mikolaj S. avatar
lá cờ cn
Thay vì đặt câu hỏi mới, tốt hơn hết là chỉnh sửa bài đăng với tất cả thông tin mới. Bạn có thể chỉnh sửa câu hỏi của mình không?
Mikolaj S. avatar
lá cờ cn
Cảm ơn. Bạn có thể vui lòng tăng mức độ chi tiết của nhật ký cho postgres - như trong [ví dụ này](https://github.com/bitnami/charts/issues/2682#issuecomment-658713180) không?
Mikolaj S. avatar
lá cờ cn
Cảm ơn! Ngoài ra, vui lòng xem *mô tả postgres* khi nhóm được khởi động lại. Có thể chúng ta sẽ nhận được nhiều thông tin hơn, không chỉ thông báo lỗi `127.0.0.1:5432 - no response`. Làm ơn cho tôi biết kết quả.

Đăng câu trả lời

Hầu hết mọi người không hiểu rằng việc đặt nhiều câu hỏi sẽ mở ra cơ hội học hỏi và cải thiện mối quan hệ giữa các cá nhân. Ví dụ, trong các nghiên cứu của Alison, mặc dù mọi người có thể nhớ chính xác có bao nhiêu câu hỏi đã được đặt ra trong các cuộc trò chuyện của họ, nhưng họ không trực giác nhận ra mối liên hệ giữa câu hỏi và sự yêu thích. Qua bốn nghiên cứu, trong đó những người tham gia tự tham gia vào các cuộc trò chuyện hoặc đọc bản ghi lại các cuộc trò chuyện của người khác, mọi người có xu hướng không nhận ra rằng việc đặt câu hỏi sẽ ảnh hưởng—hoặc đã ảnh hưởng—mức độ thân thiện giữa những người đối thoại.