buiduchanh1995
Senior Member
E chào các bác. Chả là em có một issue như thế này muốn tham khảo ý kiến các bác.
Hiện tại e đang làm về mảng AI vào đang thiết kế 1 hệ thống liên quan đến giao thông. Bài toán cụ thể thì với camera giao thông thì db của em đang lưu các thứ sau :
Vấn đề ở collection tracing/violation thì thực ra là thông tin của từng phương tiện trên từng tuyến đường ( loại xe, màu xe, biển số v..v) nhưng như các bác đã biết thì số lượng phương tiện rất nhiều -> số lượng record cho tracing sẽ tăng rất nhiều -> như e dự kiến thì 1 ngày sẽ có khoảng tầm 50-60k bản ghi/ 1 cam/ 1 ngày. Số lượng cam của bên em thì cứ tính trung bình khoảng đơn vị nghìn cam/ 1 location => 50-60M bản ghi 1 ngày và thường dữ liệu phải lưu ít nhất là 3 tháng gần nhất => số lượng record lưu trữ khoảng 50M x 90 = 4B5 bản ghi
Hiện tại hệ thống thì đang sử dụng mongodb cho việc lưu trữ tát cả nhưng khi query thì khá chậm. Các bác có thể cho em lời khuyên về thiết kế database cho bài toán trên dể tối ưu đọc/ghi với ạ.
Em cảm ơn các bác.
Hiện tại e đang làm về mảng AI vào đang thiết kế 1 hệ thống liên quan đến giao thông. Bài toán cụ thể thì với camera giao thông thì db của em đang lưu các thứ sau :
- Config của các camera ( thông tin camera, vms, địa điểm )
- Collection lưu lại các dữ liệu dạng tracing, violation
Vấn đề ở collection tracing/violation thì thực ra là thông tin của từng phương tiện trên từng tuyến đường ( loại xe, màu xe, biển số v..v) nhưng như các bác đã biết thì số lượng phương tiện rất nhiều -> số lượng record cho tracing sẽ tăng rất nhiều -> như e dự kiến thì 1 ngày sẽ có khoảng tầm 50-60k bản ghi/ 1 cam/ 1 ngày. Số lượng cam của bên em thì cứ tính trung bình khoảng đơn vị nghìn cam/ 1 location => 50-60M bản ghi 1 ngày và thường dữ liệu phải lưu ít nhất là 3 tháng gần nhất => số lượng record lưu trữ khoảng 50M x 90 = 4B5 bản ghi
Hiện tại hệ thống thì đang sử dụng mongodb cho việc lưu trữ tát cả nhưng khi query thì khá chậm. Các bác có thể cho em lời khuyên về thiết kế database cho bài toán trên dể tối ưu đọc/ghi với ạ.
Em cảm ơn các bác.