File và lưu trữ
Kết nối S3 với DataxLand
Connector S3 đọc file CSV, Parquet, Avro hoặc JSONL trong một bucket Amazon S3 (hoặc kho tương thích S3 có địa chỉ công khai). Mỗi luồng bạn khai bằng một mẫu đường dẫn, ví dụ mọi file orders/*.csv, và mỗi luồng thành một bảng trong kho của workspace. Hợp với phần mềm bán hàng hay ERP xuất file định kỳ vào S3: Si đọc mẫu dữ liệu đã che để đề xuất ánh xạ vào mô hình chuẩn, rồi bạn có doanh thu thuần, giá vốn, lãi gộp sau phí như khi tải Excel, nhưng tự làm mới theo lịch.
Gói Miễn phí không thời hạn · Không cần thẻ thanh toán · Workspace mẫu mở trong vài phút
Làm được gì với S3
- Tự làm mới dashboard lãi lỗ từ file xuất hằng ngày của phần mềm bán hàng.
- Gộp file đơn hàng trong S3 với dữ liệu sàn và quảng cáo.
- Đọc file Parquet do hệ thống nội bộ xuất mà không cần mở database.
Dữ liệu bạn nhận được
Mỗi luồng thành một bảng riêng trong kho của workspace, giữ nguyên trạng; cột thông tin cá nhân được băm khi nạp.
| Luồng (bảng) | Nội dung |
|---|---|
| (luồng bạn đặt tên) | Mỗi luồng gồm tên, mẫu đường dẫn (glob) và định dạng; mọi file khớp mẫu được gộp thành một bảng. |
| CSV | Có tùy chọn dấu phân cách, mã hóa ký tự, dòng tiêu đề. |
| Parquet, Avro | Đọc theo lược đồ có sẵn trong file. |
| JSONL | Mỗi dòng một bản ghi JSON; trường lồng nhau thành chuỗi JSON. |
Thông tin kết nối
| Cách đăng nhập | Điền thông tin kết nối (khóa API, tài khoản); được mã hóa khi lưu |
|---|---|
| Cách đồng bộ | Toàn bộ (nạp lại mỗi lần) · Tăng dần (chỉ dòng mới hoặc đã sửa) |
| Thông tin cần điền | Bucket, Authentication, Streams |
| Nhà phát triển | Airbyte (chính thức), chạy trong DataxLand |
| Giấy phép | ELv2 |
Mật khẩu và khóa được mã hóa khi lưu. Cột thông tin cá nhân được băm khi nạp.
Chỉ số tính từ nguồn này
Định nghĩa thật trong gói phân tích; dashboard và Si dùng chung.
| Chỉ số | Định nghĩa | Đơn vị |
|---|---|---|
| Doanh thu thuần | Giá trị dòng sau giảm giá dòng và voucher đơn đã phân bổ, trừ tiền hoàn cho người mua. Tiền hoàn chỉ trừ ở đây. | Tiền (₫) |
| Giá vốn hàng bán | Số lượng nhân giá vốn tại ngày đặt đơn (khoảng hiệu lực nửa mở). SKU chưa có giá vốn tính 0, xem độ phủ giá vốn. Dòng bị hoàn không hoàn giá vốn. | Tiền (₫) |
| Lãi gộp sau phí | Doanh thu thuần trừ giá vốn, phí sàn, phí thanh toán, vận chuyển và phí hoàn (chưa trừ quảng cáo).= Doanh thu thuần - Giá vốn hàng bán - Phí sàn - Phí thanh toán - Chi phí vận chuyển shop chịu - Chi phí hoàn hàng | Tiền (₫) |
| Số đơn hợp lệ | Số đơn không bị hủy (trạng thái chuẩn khác cancelled). | Số lượng |
Kết nối S3 trong 4 bước
- 1
Tạo quyền đọc
Tạo IAM user (hoặc role) chỉ có quyền liệt kê và đọc bucket cần dùng, lấy access key ID và secret access key.
- 2
Thêm nguồn S3
Trong workspace chọn Thêm nguồn, tìm S3, điền Bucket, cách xác thực IAM User (hoặc IAM Role), vùng AWS nếu cần.
- 3
Khai luồng
Thêm từng luồng với tên, mẫu đường dẫn như orders/*.csv và định dạng file, rồi bấm Kiểm tra kết nối.
- 4
Duyệt và build
Si đề xuất ánh xạ từng luồng vào mô hình chuẩn; bạn duyệt rồi build.
Lưu ý và giới hạn
- Chỉ số trên trang là ví dụ khi file chứa đơn hàng và giá vốn; chỉ số thực tế phụ thuộc file bạn đưa vào.
- Nạp tăng dần theo thời điểm sửa file, nên mỗi lần làm mới chỉ đọc file mới hoặc vừa sửa. Nếu file mới chứa lại dòng cũ, cần khóa chính để gộp mà không trùng.
- Kho tương thích S3 (MinIO, R2…) cần địa chỉ công khai; DataxLand chặn địa chỉ mạng nội bộ.
- Cần gói Khởi đầu trở lên. Connector của Airbyte (ELv2) chạy bên trong DataxLand.
Câu hỏi thường gặp
Có đọc được file Excel trong S3 không?
Trang này chỉ nêu các định dạng CSV, Parquet, Avro, JSONL; với file .xlsx, dùng nguồn Excel của DataxLand hoặc xuất ra CSV.
Khóa truy cập có được lưu an toàn không?
Access key được mã hóa khi lưu và không hiển thị lại; nên dùng user chỉ có quyền đọc đúng bucket đó.
Nhiều file cùng cấu trúc thì sao?
Khai một luồng với mẫu đường dẫn khớp mọi file; chúng được gộp thành một bảng.
Mẫu dashboard dùng nguồn này
Kết nối S3 và có dashboard đã kiểm số
Gói Miễn phí không thời hạn · Không cần thẻ thanh toán · Workspace mẫu mở trong vài phút