私がシリコンバレーで単独、営業チームなしで利益を上げるデータ統合プラットフォームを構築した方法を紹介します。スケーラブルなETLパイプライン、AWS Fargate、そしてオープンソースツールがどのように成長を促進したのかを学びましょう。 これは筆者 ...

例えば「基幹DB＋SaaS＋DWH」のよくある構成で、部門が独自にETLを回しているケース。 基幹DB＋SaaS＋DWHのよくある構成とETL 部門A：Pythonで日次バッチ（担当者PCで実行） 部門B：BIツールのGUI変換（ロジックがブラックボックス） ...

Amazon Web ServicesとMicrosoftは、ETL（データの抽出、変換、読み込み）のクラウドサービス（以下、クラウドETL）として、それぞれ「AWS Glue」と「Azure Data Factory」を提供している。ユーザー企業はこれらのクラウドETLを利用することで、容易にデータパイプライン ...

2024年7月3日、CData Software Japan 合同会社(本社：アメリカノースカロライナ州、日本オフィス：宮城県仙台市、代表社員 職務執行者：疋田 圭介)は、クラウド・DBデータのETL / ELTツール『CData Sync』がオラクルの提供するHeatWaveをデータ同期先として対応したこと ...

基本KPIや応用KPIが決まり、 実際に、 毎日の運用の中で定期的にデータを更新して、 可視化するためには、 一連の処理を自動化する必要があります。今回は、 データパイプラインを扱うためのワークフロー管理ツールを紹介していきます。 データ ...