Bỏ qua tới nội dung

File và lưu trữ

Kết nối S3 với DataxLand

Connector S3 đọc file CSV, Parquet, Avro hoặc JSONL trong một bucket Amazon S3 (hoặc kho tương thích S3 có địa chỉ công khai). Mỗi luồng bạn khai bằng một mẫu đường dẫn, ví dụ mọi file orders/*.csv, và mỗi luồng thành một bảng trong kho của workspace. Hợp với phần mềm bán hàng hay ERP xuất file định kỳ vào S3: Si đọc mẫu dữ liệu đã che để đề xuất ánh xạ vào mô hình chuẩn, rồi bạn có doanh thu thuần, giá vốn, lãi gộp sau phí như khi tải Excel, nhưng tự làm mới theo lịch.

Gói Miễn phí không thời hạn · Không cần thẻ thanh toán · Workspace mẫu mở trong vài phút

Làm được gì với S3

  • Tự làm mới dashboard lãi lỗ từ file xuất hằng ngày của phần mềm bán hàng.
  • Gộp file đơn hàng trong S3 với dữ liệu sàn và quảng cáo.
  • Đọc file Parquet do hệ thống nội bộ xuất mà không cần mở database.

Dữ liệu bạn nhận được

Mỗi luồng thành một bảng riêng trong kho của workspace, giữ nguyên trạng; cột thông tin cá nhân được băm khi nạp.

Luồng (bảng)Nội dung
(luồng bạn đặt tên)Mỗi luồng gồm tên, mẫu đường dẫn (glob) và định dạng; mọi file khớp mẫu được gộp thành một bảng.
CSVCó tùy chọn dấu phân cách, mã hóa ký tự, dòng tiêu đề.
Parquet, AvroĐọc theo lược đồ có sẵn trong file.
JSONLMỗi dòng một bản ghi JSON; trường lồng nhau thành chuỗi JSON.

Thông tin kết nối

Cách đăng nhậpĐiền thông tin kết nối (khóa API, tài khoản); được mã hóa khi lưu
Cách đồng bộToàn bộ (nạp lại mỗi lần) · Tăng dần (chỉ dòng mới hoặc đã sửa)
Thông tin cần điềnBucket, Authentication, Streams
Nhà phát triểnAirbyte (chính thức), chạy trong DataxLand
Giấy phépELv2

Mật khẩu và khóa được mã hóa khi lưu. Cột thông tin cá nhân được băm khi nạp.

Chỉ số tính từ nguồn này

Định nghĩa thật trong gói phân tích; dashboard và Si dùng chung.

Chỉ sốĐịnh nghĩaĐơn vị
Doanh thu thuầnGiá trị dòng sau giảm giá dòng và voucher đơn đã phân bổ, trừ tiền hoàn cho người mua. Tiền hoàn chỉ trừ ở đây.Tiền (₫)
Giá vốn hàng bánSố lượng nhân giá vốn tại ngày đặt đơn (khoảng hiệu lực nửa mở). SKU chưa có giá vốn tính 0, xem độ phủ giá vốn. Dòng bị hoàn không hoàn giá vốn.Tiền (₫)
Lãi gộp sau phíDoanh thu thuần trừ giá vốn, phí sàn, phí thanh toán, vận chuyển và phí hoàn (chưa trừ quảng cáo).= Doanh thu thuần - Giá vốn hàng bán - Phí sàn - Phí thanh toán - Chi phí vận chuyển shop chịu - Chi phí hoàn hàngTiền (₫)
Số đơn hợp lệSố đơn không bị hủy (trạng thái chuẩn khác cancelled).Số lượng

Kết nối S3 trong 4 bước

  1. 1

    Tạo quyền đọc

    Tạo IAM user (hoặc role) chỉ có quyền liệt kê và đọc bucket cần dùng, lấy access key ID và secret access key.

  2. 2

    Thêm nguồn S3

    Trong workspace chọn Thêm nguồn, tìm S3, điền Bucket, cách xác thực IAM User (hoặc IAM Role), vùng AWS nếu cần.

  3. 3

    Khai luồng

    Thêm từng luồng với tên, mẫu đường dẫn như orders/*.csv và định dạng file, rồi bấm Kiểm tra kết nối.

  4. 4

    Duyệt và build

    Si đề xuất ánh xạ từng luồng vào mô hình chuẩn; bạn duyệt rồi build.

Lưu ý và giới hạn

  • Chỉ số trên trang là ví dụ khi file chứa đơn hàng và giá vốn; chỉ số thực tế phụ thuộc file bạn đưa vào.
  • Nạp tăng dần theo thời điểm sửa file, nên mỗi lần làm mới chỉ đọc file mới hoặc vừa sửa. Nếu file mới chứa lại dòng cũ, cần khóa chính để gộp mà không trùng.
  • Kho tương thích S3 (MinIO, R2…) cần địa chỉ công khai; DataxLand chặn địa chỉ mạng nội bộ.
  • Cần gói Khởi đầu trở lên. Connector của Airbyte (ELv2) chạy bên trong DataxLand.

Câu hỏi thường gặp

Có đọc được file Excel trong S3 không?

Trang này chỉ nêu các định dạng CSV, Parquet, Avro, JSONL; với file .xlsx, dùng nguồn Excel của DataxLand hoặc xuất ra CSV.

Khóa truy cập có được lưu an toàn không?

Access key được mã hóa khi lưu và không hiển thị lại; nên dùng user chỉ có quyền đọc đúng bucket đó.

Nhiều file cùng cấu trúc thì sao?

Khai một luồng với mẫu đường dẫn khớp mọi file; chúng được gộp thành một bảng.

Mẫu dashboard dùng nguồn này

Mọi nguồn dữ liệu →

Kết nối S3 và có dashboard đã kiểm số

Gói Miễn phí không thời hạn · Không cần thẻ thanh toán · Workspace mẫu mở trong vài phút