Dell R530 Broadcom NetXtreme tg3 nic giới hạn ở 12 MByte/giây

Tôi có một chiếc Dell R530 cũ hơn:

Nhà sản xuấtDell Inc.
Mô hình PowerEdge R530
CPU 16 CPU x Intel(R) Xeon(R) CPU E5-2630 v3 @ 2.40GHz
Bộ nhớ 63,78 GB

nó có 8 NIC, 3 trong số đó là tg3, Broadcom NetXtreme BCM5720's:

vmnic0 0000:02:00.0 tg3 Up Up 1000 Full 14:18:77:5e:a6:de 1500 Broadcom Corporation NetXtreme BCM5720 Gigabit Ethernet
vmnic2 0000:03:00.0 tg3 Up Up 1000 Full 14:18:77:5e:a6:e0 1500 Broadcom Corporation NetXtreme BCM5720 Gigabit Ethernet
vmnic3 0000:03:00.1 tg3 Lên xuống 0 Nửa 14:18:77:5e:a6:e1 1500 Tổng công ty Broadcom NetXtreme BCM5720 Gigabit Ethernet

Đối với cuộc sống của tôi, tôi không thể yêu cầu họ gửi lưu lượng truy cập với tốc độ cao hơn ~12 MB/giây:

--------------------------------------------- ---------
Máy chủ nghe trên 5201
--------------------------------------------- ---------
Đã chấp nhận kết nối từ 192.168.1.117, cổng 50971
[ 5] cổng 192.168.1.148 cục bộ 5201 được kết nối với cổng 192.168.1.117 50972
[ ID] Băng thông truyền khoảng thời gian
[ 5] 0,00-1,00 giây 11,2 MB 93,6 Mbit/giây
[ 5] 1,00-2,00 giây 11,2 MB 93,9 Mbit/giây
[ 5] 2,00-3,00 giây 11,2 MB 93,9 Mbit/giây
[ 5] 3,00-4,00 giây 11,2 MB 94,1 Mbit/giây
[ 5] 4,00-5,00 giây 11,2 MB 94,0 Mbit/giây
[ 5] 5,00-6,00 giây 11,2 MB 94,0 Mbit/giây
[ 5] 6,00-7,00 giây 11,2 MB 94,1 Mbit/giây
[ 5] 7,00-8,00 giây 11,2 MB 94,1 Mbit/giây
[ 5] 8,00-9,00 giây 11,2 MB 94,1 Mbit/giây
[ 5] 9,00-10,00 giây 11,2 MB 94,1 Mbit/giây
[ 5] 10,00-10,05 giây 573 KByte 93,9 Mbit/giây
- - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Băng thông truyền khoảng thời gian
[ 5] 0,00-10,05 giây 0,00 byte 0,00 bit/giây người gửi
[ 5] 0,00-10,05 giây Bộ thu 113 MByte 94,0 Mbit/giây

Chỉ để chứng minh rằng đó không phải là mạng, các máy chủ khác có hiệu suất như mong đợi:

[ 6] cổng 192.168.1.117 cục bộ 50998 được kết nối với cổng 192.168.1.242 5201
[ ID] Băng thông truyền khoảng thời gian
[ 6] 0,00-1,00 giây 75,9 MB 637 Mbit/giây
[ 6] 1,00-2,00 giây 113 MByte 944 Mbit/giây
[ 6] 2,00-3,00 giây 113 MByte 944 Mbit/giây
[ 6] 3,00-4,00 giây 112 MB 935 Mbit/giây
[ 6] 4,00-5,00 giây 113 MB 946 Mbit/giây
[ 6] 5,00-6,00 giây 112 MB 939 Mbit/giây
[ 6] 6,00-7,00 giây 110 MB 922 Mbit/giây
[ 6] 7,00-8,00 giây 109 MB 918 Mbit/giây
[ 6] 8,00-9,00 giây 102 MB 856 Mbit/giây
[ 6] 9,00-10,00 giây 102 MB 854 Mbit/giây
- - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Băng thông truyền khoảng thời gian
[ 6] 0,00-10,00 giây 1,04 GByte 890 Mbit/giây người gửi
[ 6] Bộ thu 0,00-10,00 giây 1,04 GByte 889 Mbit/giây

Tôi đã cập nhật chương trình cơ sở/trình điều khiển nhiều nhất có thể. Dựa theo https://www.broadcom.com/products/ethernet-connectivity/network-ics/bcm5720-1gbase-t-ic có vẻ như phần sụn mới nhất là 3.137 mà tôi đã cài đặt:

[root@esxi:~] mạng esxcli nic get -n vmnic0
   Đàm phán tự động được quảng cáo: đúng
   Các chế độ liên kết được quảng cáo: 10baseT/Half, 10baseT/Full, 100baseT/Half, 100baseT/Full, 1000baseT/Half, 1000baseT/Full
   Tự động đàm phán: đúng
   Loại cáp: Xoắn đôi
   Mức tin nhắn hiện tại: 4260095
   Thông tin tài xế:
         Thông tin xe buýt: 0000:02:00.0
         Tài xế: tg3
         Phiên bản phần sụn: FFV7.10.64 bc 5720-v1.36
         Phiên bản: 3.137l.v60.1
   Đã phát hiện liên kết: đúng
   Tình trạng liên kết: Up
   Tên: vmnic0
   PHYĐịa chỉ: 1
   Tạm dừng Tự động đàm phán: đúng
   Tạm dừng RX: đúng
   Tạm dừng TX: đúng
   Cổng được hỗ trợ: TP
   Hỗ trợ đàm phán tự động: đúng
   Hỗ trợ Tạm dừng: đúng
   Hỗ trợ Wakeon: true
   Bộ thu phát: nội bộ
   Địa chỉ ảo: 00:00...[snip]
   Wakeon: Gói ma thuật (tm)

Tất cả các chẩn đoán/báo cáo trạng thái rằng nó được kết nối ở mức đầy đủ 1000 và tôi đã thử nhiều NIC, cáp và công tắc đều có cùng một kết quả.

tôi đã dành giờ đang cố gắng tìm ra điều này và tất cả các tìm kiếm và thử nghiệm trên google đều không đưa tôi đến đâu cả. Bất cứ ai có ý tưởng gì khác tôi có thể thử hoặc kiểm tra?

Tôi cũng đã thử đặt tốc độ liên kết theo cách thủ công, nhưng nó đã tự động điều chỉnh thành 1000 rồi.

Nếu tất cả các liên kết vật lý hiển thị 1000 Mbit/s thì điều duy nhất còn lại là:

• nhóm cổng ESXi mà bộ điều hợp VMkernel(?) gắn vào đã đặt giới hạn lưu lượng
• công tắc mà lưu lượng chạy qua có một số loại giới hạn QoS/chính sách lưu lượng được thiết lập

Nhân tiện, quảng cáo các chế độ của cổng NIC/switch không thành vấn đề. Các đàm phán chế độ không.

Ngoài ra, các NIC của Broadcom thường hỗ trợ "Ethernet@Wirespeed", điều này làm cho NIC 1000BASE-T quay trở lại 100BASE-FX khi một trong các cặp xoắn trong cáp bị lỗi (1000BASE-T tiêu chuẩn hoàn toàn không liên kết trong trường hợp như vậy) . Vì vậy, ngay cả khi mọi thứ được định cấu hình chính xác, cáp xấu có thể khiến bạn quay trở lại 100 Mbit/s.

Hóa ra đó là một vấn đề với hệ thống cáp. Gợi ý lẽ ra đã đánh lừa tôi là 94,9 Mbit/giây giới hạn--rõ ràng là kết nối đang chạy 100Mbps. Thực tế là nó đã được thiết lập cho 1G và mọi thứ đã nói rằng nó là 1G, lẽ ra tôi nên biết rằng có thứ gì đó trong hệ thống dây điện bị rối và khiến nó chạy ở tốc độ 100Mbps. Tôi đã yêu cầu trung tâm dữ liệu tắt dây hôm nay và nó đang chạy ở tốc độ 1G như bình thường.

Tôi đã sai khi nói rằng có thiết bị khác trong giá đang chạy ở tốc độ 1G. Tôi đã cài đặt một công tắc mới trong giá đỡ và khi nhìn vào giao diện, tôi nhận thấy cổng chỉ báo cáo 100Mbps. Khi tôi thấy điều này, tôi đã kiểm tra lại và một thiết bị NAS mà tôi có trong giá thực sự sẽ chỉ sao chép các tệp lớn tại <= 100Mbps.

Xin lỗi vì thông tin sai lệch trong câu hỏi. Tôi sẽ để nguyên trong trường hợp một số người tội nghiệp gặp vấn đề tương tự ở đâu đó: nếu bạn thấy 11,3 MB/giây hoặc 11,2 MB/giây hoặc 94,9 Mb/giây một cách nhất quán, HÃY KIỂM TRA ĐÔI LẦN RẰNG CỔNG CỦA BẠN KHÔNG THỰC SỰ CHẠY Ở ĐÂU 100Mbps ngay cả khi mọi thứ đang nói như vậy! Tôi đã không nhìn thấy nó cho đến khi cài đặt một công tắc/bộ định tuyến thông minh báo cáo số thực thay vì một số cấu hình hoặc những gì đã được tự động thương lượng.