【Python/SQL/Shell/AWS】Python・データ分析エンジニア
単価
〜800,000円/月
最寄駅
秋葉原
- 募集職種
- 案件詳細
-
【概要】
某ゲーム会社様にて運用中のデータ分析基盤(Redshift)の、Google Cloud環境への移行。
Google Cloud環境では、DWHとしてBigQueryを利用し、データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定。
【主な作業内容】
1.バッチ処理コード移行(Java(Spling Boot)→ Google Cloud Composer + Google Data Fusion + dbt)
(実装、単体テスト、結合テスト、システムテスト)
2.SQL構文修正(Redshift(PostgresSQL) → BigQuery)
(実装、単体テスト、結合テスト、システムテスト)
3.テーブルデータ移行(Redshift → BigQuery)
(テーブル設計・実装、データ移行、データ検証) - スキル
-
【必須】
・SQL に関する設計・実装経験
・Python3 に関する設計・実装経験
・Gitの使用経験
・Shell に関する設計・実装経験
・パブリッククラウド(AWS、Google Cloud、Azure等)の開発利用経験
・Google Cloud Data Analyticsサービス(BigQuery、Composer、Data Fusion、Dataproc、Cloud Storage等) に関 する知識
・プロジェクト管理ツール(JIRA、Backlog、Redmine等)の利用経験
・オンラインコミュニケーションツール(Slack、Google Meet、Zoom等)の利用経験
【尚可】
・Java(Spling Boot)開発経験
・Apache Airflowの開発利用経験
・Apache Spark/Hadoopに関する知識
・YAMLの開発利用経験
・Terraformの開発利用経験
・Web APIの開発利用経験
・JP1の開発利用経験
・AWS Redshiftの開発利用経験
・Google Cloudを使用したデータ分析系基盤開発経験 - 開発環境
- 勤務時間
- 9:30~18:30
- 契約期間
- 8月~中長期
さらに詳しい内容について、HORNO担当者との個別相談にてお伝えしております。また、Web上に公開していない他の案件をご提案することも可能です。お気軽にご相談ください。
関連案件
「もっと案件を見てみたい」という方へ
個別相談にて、Webに掲載されていない案件をご提案することができます。
個別相談で情報をお伝えする理由
Webは不特定多数の方が閲覧するため、機密性の高い案件は掲載できないことがあります。また、募集開始からWeb掲載までは若干のタイムラグが発生します。
個別相談では、その日、その時に出てきた最新の情報をお伝えすることができます。
ご希望に合う案件が見つかるまで、私たちが全力サポートいたします。
オンライン個別相談のご案内
最新の市場情報を持つキャリアサポーターによる、無料の個別相談を実施しています。
すでにフリーランスの方はもちろん、これからフリーランスになるか迷っているという方も是非一度ご相談ください。
こんなお悩みを相談できます
- 今後どういう勉強をしたら有利になるか知りたい
- 今のスキルでフリーランスになれるか聞きたい
- 案件が途切れてしまわないか不安
60秒で登録完了!