2. Các bước chuẩn bị
Tổng quan
- Đầu tiên là tạo một môi trường ảo, coi như đây là môi trường ứng dụng của cửa hàng.
- EC2 Instance sẽ là máy chủ giả, nơi tạo ra dữ liệu cho lab.
- RDS Instance sẽ là cơ sở dữ liệu, dành cho các giao dịch…
- S3 Bucket sẽ là Data Lake, bao gồm các bucket sau:
- fashion-landing-zone: Nơi lưu trữ dữ liệu thô từ các nguồn khác nhau.
- fashion-clean-zone: Nơi lưu trữ dữ liệu đã được xử lý và chuẩn bị cho việc phân tích.
- fashion-logic-zone: Nơi lưu trữ các script Lambda và mã nguồn cho các quy trình ETL (Extract, Transform, Load).
- Kinesis Stream sẽ là luồng lưu trữ các sự kiện tương tác của khách hàng
Các bước triển khai
Trước khi bắt đầu, bạn cần chuẩn bị các phần code cho các bước triển khai. Link github của dự án là: aws-fashion-data-pipeline
- Clone repository về máy tính của bạn:
git clone https://github.com/ltdungg/aws-fashion-data-pipeline
cd aws-fashion-data-pipelineĐảm bảo để Region là Singapore (ap-southeast-1) trước khi thực hiện các bước sau: