PythonでCSVを読み込み、データベースへ登録する。 一見すると簡単な処理ですが、実際の業務で運用するとなると、考慮しなければならないことが増えてきます。 例えば、こんな問題です。 同じCSVを2回取り込んだら、データが重複登録された 欠損値が含ま ...
PythonやSQLの経験はあるけれど、クラウド上でデータ処理を自動化する仕組みを作ったことがない。 そんなエンジニアにおすすめしたいのが、Google Cloudを使ったETL処理の構築です。 例えば、次のような場面を考えてみましょう。 毎日アップロードされるCSVを ...
株式会社スリーシェイク(本社:東京都中央区、代表取締役社長:吉田 拓真、以下スリーシェイク)が提供するクラウド型データ連携ツール「Reckoner(レコナー)」は、データ連携フロー内でPythonおよびJavaScriptのコードを記述し、独自のデータ処理を実装 ...
一部の結果でアクセス不可の可能性があるため、非表示になっています。
アクセス不可の結果を表示する