データ基盤 約8分
Airflow・Dagster・Prefect比較｜違いと選び方
主要なオーケストレーションツール3つの違いと選び方が分かります。Airflow（業界標準・大規模向け）、Dagster（データ資産中心・dbt親和性）、Prefect（シンプル・スモールスタート）の設計思想を4軸で比較し、チーム規模や技術スタックに応じた選定基準を現場経験から解説します。
#データパイプライン #オーケストレーション #データ基盤 #Airflow
タグ: dbt
- データ基盤
データ基盤約14分ETLとELTの違いとは？5つの比較軸とELTが主流になった理由
ETLとELTの違いと、自社に合う方式の選び方が分かります。変換のタイミングと場所・処理性能・コスト・柔軟性・セキュリティの5軸で比較表つきに整理し、ELTがModern Data Stackの主流になった背景や、raw・staging・martのレイヤー設計など導入時の注意点まで解説します。
#ETL #ELT #データ基盤 #データ統合
データ基盤約9分dbtとは？データ変換をコード管理するツールの仕組みを解説
dbtとは何かを、散らばった変換SQLの管理に悩むデータ担当者向けに解説します。ELTの「T」を担う役割、Modelファイル・ref関数・テスト・ドキュメント自動生成の4機能、BigQueryとの親和性、3ステップの導入プロセスまで整理します。
#dbt #BigQuery #データ変換 #データ基盤