Logstash có thể "kéo" dữ liệu không?

Tôi có hai máy chủ. Máy chủ A đang chạy Elaticsearch và Logstash. Máy chủ B đang chạy filebeat và cũng là máy chủ chứa tất cả nhật ký mà tôi đang cố phân tích.

Máy chủ A nằm sau tường lửa, nó có thể kết nối với internet nhưng không có khả năng cho phép bất kỳ lưu lượng truy cập vào nào.

Máy chủ B nằm trong AWS và dưới sự kiểm soát của tôi đối với lưu lượng truy cập vào và ra.

Có cách nào để tôi có thể lấy dữ liệu từ máy chủ B sang logstash của máy chủ A không? Filebeat theo cách thông thường sẽ phải có khả năng đẩy dữ liệu vào logstash, nhưng điều này là không thể trong trường hợp của tôi.

Với Filebeat (hoặc bất kỳ Beat nào khác) trên B, các tùy chọn của bạn được giới hạn ở:

• Elaticsearch â không khả thi ở đây.
• Redis â Một số khả năng.
• Kafka â Những khả năng tương tự.

Nếu A có thể gọi vào không gian mạng của B, thì bạn có thể có nhật ký gửi Filebeat của B vào Redis (hoặc Elasticache Redis) hoặc Kafka (hoặc AWS Managed Kafka Services), trong đó Logstash trên A có thể kết nối với Redis hoặc Kafka.

Để bảo mật, Redis hiện có khả năng hỗ trợ cả xác thực và TLS qua kết nối. Trong các phiên bản 6.x trở lên, đặc biệt là các phiên bản AWS, Redis có hỗ trợ ACL thực tế.