iowait cao với RAID0. CPU 100%. Dữ liệu tĩnh không được lưu trữ trong RAM

Tôi yêu cầu sự giúp đỡ của bạn. Bản thân tôi không còn nhìn thấy lối thoát.

tôi có một máy chủ
1x Xeon E-2236
32RAM
Đĩa 4 x 10TB (WDC WD101KRYZ-01) - được thu thập trong RAID-0.
Các đĩa rất nhanh. Mỗi cá nhân cung cấp tốc độ đọc/ghi 250 MB/giây. Mảng RAID-0 tạo ra 900MB / s - khá đủ để bơm một kênh 7 gigabit. Thử nghiệm được tiến hành với hdparm -t /dev/md0

Máy chủ được thiết kế để phân phối các tệp video lớn - đó là máy chủ phát trực tuyến video.

Khi tôi bật lưu lượng truy cập vào máy chủ này, mọi thứ sẽ diễn ra tốt đẹp trong một thời gian, nhưng theo thời gian, iowait phát triển đến mức tối đa. Các ổ cứng chỉ xử lý 40 yêu cầu mỗi giây - rất nhỏ. iowait là quá trình công nhân bận rộn (nginx).

1. Tại sao? Tôi đang làm gì sai?

Tôi đã thử bật aio cho đa luồng trong nginx, nó hữu ích nhưng không cần thiết.

Tôi đã tăng readahead = 8192, blockdev --setra 65536 - không có kết quả.

2. Tại sao nhân không thử lưu trữ dữ liệu tĩnh trong RAM khi CPU tải tối đa?

Tôi đã kiểm tra các đĩa. Không có thành phần xấu. Ổ cứng - tuyệt vời.

3. Tại sao atop chỉ hiển thị tải cao trên một đĩa? (xem ảnh chụp màn hình)
4. RAID-0 có nên tải song song trên tất cả các đĩa không?

Tôi yêu cầu sự giúp đỡ của bạn. Cảm ơn bạn!

Đĩa 4 x 10TB (WDC WD101KRYZ-01) - được thu thập trong RAID-0

Đầu tiên, hãy để tôi cảnh báo chống lại RAID0 trừ khi bạn là thực sự chắc chắn việc mất tất cả dữ liệu khi đối mặt với một đĩa xấu là tốt. Nói thật, chỉ có bàn di chuột, dữ liệu tạm thời hoặc rất dễ tái tạo mới nên được đưa vào một mảng RAID0.

Máy chủ được thiết kế để phân phối các tệp video lớn - đó là một máy chủ video trực tuyến

Khi đọc tuần tự các tệp lớn, trong đó "lớn" thực sự có nghĩa là "lớn hơn bộ đệm RAM", bộ nhớ đệm không hiệu quả: không thể lưu tất cả dữ liệu tệp vào bộ đệm trong RAM, mỗi lần đọc lại cùng một tệp sẽ khiến dữ liệu được lưu trong bộ nhớ đệm trước đó bị hủy , liên tục xóa bộ nhớ cache của chính bạn một cách hiệu quả.

Ổ cứng chỉ xử lý 40 yêu cầu mỗi giây - rất nhỏ

Thật không may, ổ cứng cơ học rất chậm đối với các IO nhỏ, ngẫu nhiên: một ổ cứng 7200 RPM khỏe mạnh cung cấp trung bình ~70 IOPS khi được thử nghiệm riêng lẻ, có thể ít hơn khi đặt trong một mảng RAID.

Điều đó nói rằng, một dịch vụ phát trực tuyến nên không phải đập các đĩa bằng các IO nhỏ, ngẫu nhiên. Bạn có thể cung cấp đầu ra của các lệnh sau trong trường hợp chờ đợi cao như vậy không?

• lsblk
• dstat -d -n -f
• iotop -a
• iostat -x -k 1

Chỉ có một giải pháp!

Nếu bạn cần tốc độ đĩa tốt, RAID 0 và 5 thậm chí không nên được xem xét. Đã kiểm tra cá nhân)) Có trên RAID 0 và 5, bạn sẽ có nhiều dung lượng trống, nhưng tốc độ sẽ rất thấp. Dưới tải cao, máy chủ của bạn sẽ yêu cầu trợ giúp.

Tôi đã cài đặt phần mềm RAID 10 và các vấn đề của tôi đã biến mất.

Nhược điểm của RAID 10 là đắt tiền. Nhưng nếu may mắn, bạn sẽ tìm được một nhà cung cấp dịch vụ lưu trữ có giá tốt cho các máy chủ.

Chúc mọi người may mắn!

Tái bútCâu hỏi đã được đóng lại!