Làm cách nào để xác định khe cắm cho thẻ GPU bị lỗi trong máy chủ bằng các lệnh của UBUNTU OS?

Tôi có một câu hỏi. Có thể xác định khe nào có thẻ GPU bị hỏng bằng hệ điều hành UBUNTU không? Chúng tôi có một máy chủ GPU SuperMicro, trong đó có khoảng 8 thẻ GPU dành cho điện toán AI. Thỉnh thoảng chúng tôi đến phòng máy chủ sau khi chúng tôi nhận được thông tin từ người dùng/bộ phận rằng thẻ không hiển thị trong lệnh 'nvidia-smi'. Đây thường là những lỗi phần cứng.Sau đó, chúng tôi gặp phải tình huống 7 thẻ hoạt động bình thường và thật không may, chúng tôi phải xác định thẻ bị lỗi bằng cách dùng thử và lỗi bằng cách kéo thẻ từ máy chủ. Điều này cực kỳ tẻ nhạt và tốn thời gian, vì vậy tôi tự hỏi liệu có thể xác định rõ ràng vị trí của thẻ bị lỗi hay không.

Cảm ơn bạn trước.

Nói chung, nếu bạn có thể tìm ra địa chỉ bus PCI nào mà thẻ này có, bạn có thể xác định vị trí chính xác của khe cắm mà nó chiếm giữ. Đi qua dmidecode xuất và tìm địa chỉ PCI này xuất hiện trong khe nào.

Tuy nhiên, điều này chỉ hữu ích nếu bạn tin tưởng rằng việc đánh số khe cắm PCI trong DMI có thể dự đoán được và tương ứng với các khe cắm vật lý thực tế trên bo mạch chủ. Trong các máy tính thương hiệu (HPE, Dell, v.v.), trường hợp này thường xảy ra. Nếu bo mạch chủ được sản xuất bởi thương hiệu kém uy tín hơn, dữ liệu DMI của nó có thể không đồng bộ. Tuy nhiên, điều này đáng để thử.