Điều gì có thể gây ra độ trễ/độ trễ của yêu cầu TCP/HTTP

Chúng tôi có một thiết bị gửi các yêu cầu POST hoặc tin nhắn TCP trong các khoảng thời gian cố định, với tải trọng JSON, qua internet tới máy chủ của chúng tôi đang chạy ứng dụng nút, ở một vị trí khác.

Tải trọng JSON có dấu thời gian và một số giá trị khác.Chúng tôi so sánh dấu thời gian đó với dấu thời gian của máy chủ để tính chênh lệch thời gian mà chúng tôi gọi là độ trễ.

Khoảng thời gian là 100ms. Những gì chúng tôi trải nghiệm là ban đầu, độ trễ dưới 200 mili giây. Chúng tôi để hệ thống chạy trong vài ngày và chúng tôi quan sát thấy độ trễ ngày càng tăng, sau 2-3 ngày là 2000 - 3000ms và tăng thêm .. sau 6 ngày khoảng 6000ms.

Sau khi chúng tôi khởi động lại quá trình máy chủ, độ trễ sẽ trở lại bình thường, vì vậy tôi cho rằng người gửi vẫn ổn. Điều này xảy ra với cả hai, triển khai yêu cầu POST và triển khai thông báo TCP.

Có ai biết tại sao điều này có thể xảy ra hoặc làm thế nào để thu hẹp vấn đề không?

Bạn có đồng bộ hóa đồng hồ trên cả máy chủ và người gửi không? 1 giây mỗi ngày không phải là độ lệch đồng hồ bất thường.

Điều này sẽ chỉ ra những gì được gọi là rò rỉ tài nguyên. Thứ gì đó trong ứng dụng của bạn đang làm chậm quá trình xử lý theo thời gian do hàng đợi hoặc bộ nhớ hoặc một số tài nguyên khác tích tụ.

Tôi khuyên bạn nên thêm công cụ vào mã NodeJS của mình để theo dõi bất kỳ hàng đợi nội bộ nào, cấp phát bộ nhớ, tra cứu cơ sở dữ liệu, v.v. Ghi nhật ký tất cả mọi thứ để bạn có thể bắt đầu xác định vị trí nút thắt cổ chai.

Nếu bạn đang chạy trên đám mây, có những công cụ tốt để trợ giúp mã công cụ, chẳng hạn như AWS X-Ray.