資料工程
資料工程
規劃可重跑的資料管線、轉換與品質檢查。
magnus919 · 社群來源 · 資料與分析
來源狀態
可用來源
原始名稱: data-engineering
原始作者: magnus919
這是第三方 Community Skill；2lus 收錄不代表已完整安全審計或保證安全。
資源類型
Skill
與類似 Skill 有什麼不同？
- 資料清理與探索分析
資料工程建立可靠資料管線；資料分析解讀資料與產出洞察。
來源描述的能力
這些是來源描述的可能操作，不代表 2lus 已授予權限或已測試。
尚未列出能力，請審查原始來源。
這個 Skill 是什麼？
把來源資料安全轉為可追溯、可供分析的資料集。
可以做什麼？何時適合使用？
- 整合多個資料來源
- 設計增量載入與回補
- 檢查轉換後資料品質
如何使用
- 盤點來源、資料契約與更新頻率
- 選擇 ETL 或 ELT，設計分層與增量鍵
- 定義驗證、重跑、觀測與錯誤處理
使用前你需要準備
- 來源結構與目標模型
- 更新頻率及資料量
你可以替換：
請提供版本、來源資料、目標與限制。
環境與相依需求
- 來源結構與目標模型
- 更新頻率及資料量
使用範例與 Prompt
以下是 2lus 撰寫的示範需求；請替換為你有權處理的檔案與專案，不代表已執行或保證結果。
入門
請依訂單表設計每日增量載入，標出主鍵及時間欄位。
實務
為多來源銷售資料規劃 ETL、資料品質規則與失敗重跑流程。
進階
設計含遲到資料與 schema 演進的管線，列出回補、去重與監控指標。
實用提醒
- 以穩定鍵管理增量與去重，記錄 lineage。
限制與注意事項
- 沒有來源樣本與量測，無法保證吞吐或正確率。
安全注意事項
- 遮蔽個資，限制管線憑證與寫入權限。
使用與設定
此條目不提供已確認的通用安裝指令；請依官方文件與 Agent 版本操作。
支援平台
未確認特定 Agent 相容性
來源與授權
來源查核日期（非安全認證）: 2026-10-01
MIT
原始來源 ↗ 官方文件 ↗相關 Skills
使用第三方 Skill 前，請先檢查來源、權限與執行內容。安裝指令只供查看與複製，不會由 2lus 執行。
2lus AI Skills Library 提供 Skill 的整理與使用導覽。第三方 Skill 的內容、授權與可用性以原始來源為準。使用或安裝前，請自行確認其權限與執行內容。
Data Engineering
Design replayable data pipelines, transformations, and quality checks.
magnus919 · Community source · Data & Analysis
Source status
Active source
Original name: data-engineering
Original author: magnus919
This is a third-party community skill. Inclusion by 2lus is not a complete security audit or safety guarantee.
Resource type
Skill
How is this different from similar skills?
- Data Analysis
Data Engineering builds reliable pipelines; Data Analysis interprets data for insight.
Documented capabilities
These are operations described upstream, not permissions granted or tested by 2lus.
Capabilities not declared here; review the original source.
What is this skill?
Turn source records into traceable datasets for analysis.
Use cases and when to use it
- Integrate multiple data sources
- Design incremental loads and backfills
- Validate transformed data quality
How to use it
- Inventory sources, contracts, and update cadence
- Choose ETL or ELT, layers, and incremental keys
- Define validation, replay, monitoring, and failure handling
What you need
- Source schemas and target model
- Cadence and data volume
You can replace:
Provide versions, source material, goals, and constraints.
Environment and dependencies
- Source schemas and target model
- Cadence and data volume
Usage and prompt examples
These example requests were written by 2lus. Substitute files and projects you may use; examples are not executed results or guarantees.
Beginner
Design a daily incremental load for this orders table, identifying keys and timestamps.
Practical
Plan ETL, quality rules, and retry behavior for sales data from multiple sources.
Advanced
Design a pipeline for late arrivals and schema evolution, including backfill, deduplication, and monitoring.
Tips
- Use stable keys for incremental loads and deduplication; record lineage.
Limitations
- Without representative data and measurements, throughput and correctness are unproven.
Security notes
- Redact personal data and restrict pipeline credentials and writes.
Usage and setup
No verified universal installation command is provided for this entry. Follow the official documentation for your agent version.
Supported agents
Specific agent compatibility unknown
Sources and license
Source check date (not a safety certification): 2026-10-01
MIT
Original source ↗ Documentation ↗Related skills
Before using a third-party skill, review its source, permissions and executable content. Commands are for viewing and copying only; 2lus does not execute them.
2lus AI Skills Library provides curated educational guides. Third-party content, licenses and availability are governed by their original sources. Review permissions and executable content before use or installation.