Dự án

Tổng quan

Hồ sơ

Actions

Feature #219

đóng

Test JuiceFS dùng cho các ứng dụng yêu cầu tốc độ cao ( trading).

Thêm bởi Ru Nguyễn cách đây khoảng 1 năm. Cập nhật cách đây 11 tháng.

Trạng thái:
Closed
Mức ưu tiên:
Normal
Phân công cho:
Chủ đề:
-
Bắt đầu:
04-12-2023
Hết hạn:
06-12-2023
Tiến độ:

100%

Thời gian ước lượng:
(Tổng cộng: 2:00 h)

Mô tả

Yêu cầu: test trên ubuntu , mount như 1 folder
IOPS: 500-600 ( read/write)
Test các trường hơp:
+ Test tốc độ khi write full phân vùng cache ( local disk cache 5GB, 10GB)
+ Test khi server/VM mount JuiceFS bị lỗi, restore backup có mount lại được dữ liệu cũ

===
Link test
https://docs.google.com/spreadsheets/d/1Rgm4q1gA4OGd4xjsPJbzrVnCtKTa7iTwvWC3iRXo6Kg/edit#gid=0

===
18/12
Đã enable RDB+AOF mode fsync every second

phải backup thêm phầ AOF
https://redis.io/docs/management/persistence/#backing-up-aof-persistence
19/12
Tuning Juicefs mount

  • tăng --max-upload từ 20 lên 50
  • tăng buffer-size từ 300M lên 1G

Nhận xét:

  • Juicefs auto backup metadata mỗi 5 phút 1 lần
  • Nếu thực hiện script backup database thì sẽ phụ thuộc vào trình lập lịch chạy backup => Phù hợp với loại dịch vụ lưu trữ dữ liệu ít quan trọng, có thể chấp nhận mất data tối đa là 5 phút trong trường hợp Juicefs corrupted.

Tập tin

clipboard-202312181053-fisyf.png (5,56 KB) clipboard-202312181053-fisyf.png Tùng Nguyễn, 18-12-2023 10:53
redis max-upload.png (301 KB) redis max-upload.png Tùng Nguyễn, 19-12-2023 16:17
clipboard-202312200851-jvnre.png (75,3 KB) clipboard-202312200851-jvnre.png Tùng Nguyễn, 20-12-2023 08:51

Tác vụ con 1 (0 mở1 đóng)

Feature #268: Giả lập trường hợp backup thực tếClosedTùng Nguyễn04-12-202306-12-2023

Actions
Actions

Định dạng khác của trang này: Atom PDF