Module 1: Giới thiệu về Data Warehouse – Kho dữ liệu
Module 2: Thiết lập hệ thống và cấu hình môi trường
Module 3: Giai đoạn 1: ETL dữ liệu từ Nguồn vào vùng tạm (Staging)
Module 4: Giai đoạn 2: ETL từ vùng Tạm (Staging) vào DataWarehouse; Thiết lập SCD Type 2
Module 5: Giai đoạn 3: ETL từ DataWarehouse vào DataMart
Module 6: Giai đoạn 3 (tiếp): Xây dựng luồng ETL cho cả doanh nghiệp; Tổng quan về Change Data Capture (CDC)
Module 7: Giai đoạn 4: Phát triển báo cáo BI (sử dụng Microsoft Power BI)
Module 8: Tổng kết, dự án cuối khóa và chia sẻ kinh nghiêm
Kết quả đạt được:
- Hiểu rõ quy trình thiết kế kho dữ liệu Data Warehouse từ đầu đến cuối.
- Nắm bắt được mô hình dữ liệu Star Schema phổ biến trong DWH
- Hiểu rõ kiến trúc của ETL (Oracle Data Integrator 12c)
- Phát triển các job ETL, các thủ tục để đồng bộ dữ liệu từ nhiều nguồn về kho dữ liệu
- Xây dựng đa luồng, chạy song song các job ETL để tối ưu hiệu quả
- Xây các Datamart phục vụ báo cáo phân tích BI
- Phát triển báo cáo thông minh BI (sử dụng PowerBI) hỗ trợ ra quyết định
Thông tin khóa học. Kết quả đạt được và Cơ hội việc làm
1
Giới thiệu về nhân sự và lộ trình giảng dạy tại INDA
2
Thông tin khóa học và kết quả đạt được
3
Vị trí tuyển dụng, cơ hội việc làm
Giới thiệu kho dữ liệu. Vai trò DA và DE trong doanh nghiệp (DWH - Data Warehouse)
1
Giới thiệu DWH, BI Solution
2
Vai trò DA, DE của doanh nghiệp nhỏ và lớn
Tài liệu khóa học và Thông tin kết nối vào máy chủ
1
Giới thiệu về các sử dụng Tài liệu của Khóa học (QUAN TRỌNG)
2
Giới thiệu về ODI
3
Thực hành: Kết nối với Oracle Database và ODI
Thiết lập và cấu hình môi trường
1
Bài 3. Làm quen với Topology
2
Thực hành 3: Tạo kết nối tới hệ thống nguồn và đích
3
Bài 3. Project Concepts
4
Thực hành 4: Tạo Project và Import Knowledge Modules
5
Bài 4. Model Concepts
6
Thực hành 4: Tạo Data Model
ETL dữ liệu từ Nguồn vào vùng tạm (Staging)
1
Bài 5. Mapping Concepts
2
Thực hành 6: Tạo Mapping đơn giản trong ODI
3
Bài 6. Design Mappings
4
Thực hành 6: Tạo Mapping Nâng cao
5
Bài 7. Mappings: Monitoring and Troubleshooting
6
Thực hành 7: Bài tập tổng hợp
ETL dữ liệu từ Nguồn vào vùng tạm (Staging) - Nâng cao
1
Bài 8. Designing Mappings: Advanced Topics
2
Thực hành 8: Tạo Sequence
3
Thực hành 8: Sử dụng Sequence
4
Thực hành 9: Sử dụng Union trong Mapping
ETL dữ liệu từ vùng tạm (Staging) vào Data Warehouse: Tổng hợp dữ liệu phức tạp và xây dựng luồng (Data Pipeline)
1
Bài 9. Using ODI Procedures (Tổng hợp dữ liệu phức tạp)
2
Thực hành 9: Tạo procedure
3
Bài 10. Using ODI Packages (Xây dựng luồng (Data Pipeline)
4
Thực hành 10: Tạo package
5
Thực hành 10: Cấu hình gửi Email khi gặp sự cố (dùng Gmail)
ETL từ Data Warehouse vào Data Mart: Kịch bản chạy. Lập lịch tự động. Chạy song song đa luồng để tận dụng tối đa sức mạnh hệ thống
1
Bài 11: Managing ODI Scenarios (Kịch bản chạy. Lập lịch tự động)
2
Thực hành: Tạo Scenario
3
Bài 12: Using Load Plans (Chạy song song đa luồng để tận dụng tối đa sức mạnh hệ thống)
4
Thực hành: Tạo Load Plan
Phát triển báo cáo BI (sử dụng Microsoft Power BI)
1
Giới thiệu công cụ Power BI
2
Kết nối CSDL với Power BI
3
Giới thiệu dự án cuối khóa
Mô hình dữ liệu trong DWH. Giới thiệu về các loại Dim và Fact. Cơ chế SCD Type 2
1
Giới thiệu Data Warehouse và Data Mart. Bảng dimension và Fact là gì?
2
Star Schema là gì?
3
Snow Flake Schema là gì?
4
Galaxy Schema là gì?
5
Các dạng lưu trữ bảng chiều (Dimension)
6
Thực hành: Cơ chế lưu vết lịch sử Slowly Changing Dimension Type 2 (SCD Type 2)
7
Các loại bảng Fact
8
Ghi dữ liệu vào Fact
Thực hành nâng cao
1
Tích hợp dữ liệu thông qua API đưa vào Data Lake hoặc Datawarehouse
Kết thúc: Hướng dẫn viết CV và Bộ câu hỏi phỏng vấn Data Engineer
1
Nhóm tìm việc làm về Data Engineer
2
Bộ câu hỏi phỏng vấn Data Engineer
3
Hướng dẫn viết CV
Be the first to add a review.
Please, login to leave a review