Điểm:0

Làm cách nào để trích xuất danh sách tất cả các thư mục trong bộ chứa hoặc thư mục lưu trữ AWS S3 của tôi?

lá cờ cn

Amazon có cung cấp một cách dễ dàng để trích xuất danh sách tất cả các thư mục có tệp lớn hơn 500 MB từ nhóm s3 không? muốn giới hạn phạm vi trong các thư mục '/files/ftp_upload/' Điều này là để tôi có thể tính toán chi phí của mình, v.v.

Tôi đã thử điều này nhưng không nhận được nhiều sự giúp đỡ

aws s3 ls s3://YOUR_BUCKET/YOUR_FOLDER/ --recursive --human-readable --summarize

cách tiếp cận tốt nhất ở đây là gì?

Điểm:0
lá cờ af

S3 không có khái niệm về "thư mục", bảng điều khiển chỉ trình bày dữ liệu giống như các thư mục trong bảng điều khiển bằng cách tách các phím đối tượng trên dấu gạch chéo lên ("/"). Vì vậy, tóm tắt dữ liệu theo "thư mục" sẽ yêu cầu phân tích cú pháp khóa của từng đối tượng.

Bạn có thể lấy TẤT CẢ dữ liệu cho các đối tượng khớp với tiền tố khóa của mình, sau đó thực hiện một số logic & phép toán để tổng hợp dữ liệu lại với nhau, nhưng đó là rất nhiều công việc.

Nếu bạn không cần dữ liệu theo thời gian thực, S3 Inventory có thể cung cấp một giải pháp tốt. Về cơ bản, bạn nhận được một danh sách các đối tượng trong đầu ra bộ chứa S3 đã chỉ định ở một trong ba định dạng: CSV, Apache ORC hoặc Apache Parquet. Sau đó, bạn có thể thực hiện các tính toán dễ dàng hơn nhiều dựa trên dữ liệu.

Nhược điểm của S3 Inventory là phải mất một ngày hoặc lâu hơn để nhận được báo cáo và nó không phải là thời gian thực.

https://docs.aws.amazon.com/AmazonS3/latest/userguide/storage-inventory.html

-- Nếu bạn đang tìm kiếm một cách dễ dàng hơn để quản lý chi phí, bạn có thể chia nhỏ trường hợp sử dụng bằng cách sử dụng một bộ chứa S3 cho mỗi trường hợp. Sau đó, bạn có thể sử dụng Thẻ phân bổ chi phí ở cấp Nhóm.

Ngoài ra, báo cáo sử dụng S3 cũng hữu ích để xác định xem bạn có nên sử dụng một lớp lưu trữ khác hay không.

sam23 avatar
lá cờ cn
Tôi chỉ muốn lọc ra các tệp lớn hơn 500 MB khỏi thư mục tải lên bộ chứa của mình? có lời khuyên nào về điều đó không?

Đăng câu trả lời

Hầu hết mọi người không hiểu rằng việc đặt nhiều câu hỏi sẽ mở ra cơ hội học hỏi và cải thiện mối quan hệ giữa các cá nhân. Ví dụ, trong các nghiên cứu của Alison, mặc dù mọi người có thể nhớ chính xác có bao nhiêu câu hỏi đã được đặt ra trong các cuộc trò chuyện của họ, nhưng họ không trực giác nhận ra mối liên hệ giữa câu hỏi và sự yêu thích. Qua bốn nghiên cứu, trong đó những người tham gia tự tham gia vào các cuộc trò chuyện hoặc đọc bản ghi lại các cuộc trò chuyện của người khác, mọi người có xu hướng không nhận ra rằng việc đặt câu hỏi sẽ ảnh hưởng—hoặc đã ảnh hưởng—mức độ thân thiện giữa những người đối thoại.