Tôi nên bắt đầu khắc phục sự cố trung bình tải cao ở đâu?

Tôi có một cụm kubernetes đang chạy với 4 nút công nhân (Ubuntu 20.04 với 4 CPU) và tôi thấy mức tải trung bình cao trên tất cả chúng. Đây là kết quả của top trên một trong các nút: hàng đầu

Tôi không chắc liệu điều này có được mong đợi hay không vì nút này đang chạy 111 vùng chứa. Có thể có điều gì khác gây ra mức tải trung bình cao hay chỉ đơn giản là do có quá nhiều vùng chứa và tôi chỉ cần thêm tài nguyên?

Tải trung bình là số lượng chương trình đang chạy hoặc chờ chạy.

Phần trên rất hay, nhưng chỉ cung cấp cho bạn một nửa bức tranh -- những thứ đang chạy hoặc đang chờ chạy trong cpu. Nửa còn lại là những thứ đang chờ đĩa I/O hoàn thành.

Đối với I/O đĩa, trên là tốt đẹp, đánh đ để hiển thị việc sử dụng đĩa theo quy trình. (Thông thường, bạn sẽ cần chạy nó với quyền root để có được điều đó.)

Một nguyên tắc chung điển hình là bạn không muốn tải trung bình của mình nhiều hơn số lõi trên máy chủ của bạn. Đó là tình huống lý tưởng. Đi trên đó không phải lúc nào cũng là một vấn đề. Theo kinh nghiệm của tôi, tải trung bình không phải lúc nào cũng là dấu hiệu của sự cố. Nếu bạn có tải cao, mức sử dụng cpu hệ thống cao hoặc iowait cao, thì có khả năng bạn đang ở một nơi tồi tệ.

Với kubernetes, một điều tôi nghe rất nhiều là bạn cần đặt giới hạn tài nguyên. Nếu bạn không có giới hạn, thì mỗi nhóm có toàn quyền truy cập vào một nút. Các ứng dụng định cỡ đúng không phải là IMO đơn giản. Đặc biệt là khi mọi người dường như đang cố gắng ném các ứng dụng gốc không phải đám mây vào k8s.

Theo gợi ý, bạn có thể giảm khối lượng công việc của mình, thêm nhiều công nhân hơn (mở rộng quy mô) hoặc thêm nhiều tài nguyên hơn vào các nút (mở rộng quy mô) hoặc kết hợp.