Download dữ liệu từ website và import vao db

Tôi cần: Desktop app, Lập trình software nhỏ

Lĩnh vực hoạt động: Dịch vụ

Thiết kế: Chưa có

Số lượng trang/màn hình cần làm: 1 - 10

Nền tảng muốn làm: Tự viết hoàn toàn mới

Hệ thống Back-end: Có

Các tính năng cần có: Tool chạy trên desktop

Yêu cầu khác của khách hàng
Tool đơn giản như sau
1- Download
2- So sánh
3- Import

Lưu ý :
- Dữ liệu download/lần từ 100.000 – 1.000.000 dòng
- Dữ liệu trong DBVN có 150.000- 400.0000 dòng
- Nếu so sánh
o 1.000.000 x 400.000 -> có total 400.000.000.000 (400 Tỷ phép so sánh)
- Nên
o Cần tối ưu db và tối ưu giải thuật so sánh
o Cần thêm Project Bar để người thao tác bớt nóng ruột

- Mục tiêu
o Download : tối đa 10p
o So Sánh : tối đa 20p
o Imporrt : tối đa 1p