BigQuery
Nối BigQuery bằng khóa service account, chọn project chạy truy vấn và dataset, đặt giới hạn dung lượng quét để kiểm soát chi phí.
BigQuery cần gói Khởi đầu trở lên. DataxLand chạy truy vấn đọc trên project bạn chỉ định (Google tính phí quét dữ liệu vào project đó) và chép kết quả về kho riêng của workspace.
1. Chuẩn bị trên Google Cloud
- Tạo một service account riêng cho DataxLand.
- Cấp vai trò BigQuery Job User trên project chạy truy vấn và BigQuery Data Viewer trên dataset cần đọc (nếu dữ liệu nằm cùng project thì cấp cả hai ở project đó).
- Tạo khóa dạng JSON cho service account và tải file về.
2. Kết nối
- Nguồn dữ liệu → Thêm nguồn, chọn BigQuery.
- Project chạy truy vấn (trả phí): project được tính phí quét.
- Dataset:
datasethoặcproject.dataset(thêm.bảngđể chỉ đọc một bảng). - Giới hạn dung lượng quét: số byte tối đa mỗi truy vấn được quét, mặc định 2 GB. Truy vấn vượt giới hạn bị dừng trước khi chạy, kèm thông báo dung lượng ước tính.
- Khóa service account: dán nội dung file JSON, hoặc Hoặc chọn file JSON.
- Bấm Kiểm tra kết nối, chọn bảng ở Chọn bảng cần đọc (tùy chọn Lọc theo ngày) rồi thêm nguồn.
Khóa được mã hóa khi lưu và không hiển thị lại (thẻ nguồn ghi Đã lưu mật khẩu).
3. Đồng bộ
BigQuery hỗ trợ Toàn bộ và Tăng dần. Bảng lớn nên đồng bộ tăng dần theo cột thời gian cập nhật để giảm dung lượng quét. Xem Cách đồng bộ và lịch làm mới.
Si điều tra bằng SQL
Si được chạy SQL chỉ đọc trên BigQuery khi điều tra, trong cùng giới hạn dung lượng quét; câu vượt giới hạn chờ bạn xác nhận.
Liên quan
SQL Server / Azure SQL
Nối Microsoft SQL Server, Azure SQL Database, Azure SQL Managed Instance, Amazon RDS for SQL Server bằng người dùng chỉ đọc, nạp toàn bộ hoặc tăng dần theo rowversion hay cột cập nhật.
REST API tùy biến
Nối phần mềm bất kỳ có REST API trả JSON (POS, CRM, kho, ERP nội bộ) bằng cách khai báo địa chỉ gốc, xác thực, endpoint và phân trang, rồi thử gọi trước khi thêm.