エンジニアフルリモート

★フルリモート★ 運用中のデータ分析基盤の Google Cloud環境への移行(Python)

★フルリモート★      運用中のデータ分析基盤の  Google Cloud環境への移行(Python)

案件要件

職種
エンジニア
業務内容
システム開発・運用
SES
報酬目安
4,000 ~ 5,500円/時
※完全スキル見合い
稼働時間目安
週5日 (時間目安 160時間)
はたらく場所
フルリモート
スキル
ROSCA株式会社

ROSCA株式会社

ROSCA株式会社は「目の前の"1"を大切に」をコンセプトとしたエンジニア特化型エージェントです。

あらゆる可能性を吟味し、ユーザーの考える理想以上のキャリアを実現することを追求しています。
その為に「シームレスキャリア」という雇用形態にとらわれない概念を提唱し、
少数精鋭だからこそできる全包囲型キャリアサポートを実現します。

★ROSCAマガジン★
https://note.com/takashi919/m/mcb682331058d
弊社の役員兼エージェント2人が、会社のこと、エンジニアキャリアのこと、エージェント業界のことを書いたnoteをまとめております。
なかなか他では聞けない業界裏話もあったりするので、ご興味のある方は是非ご一読ください!


=========================
【内容】
Google Cloud環境では、DWHとしてBigQueryを利用し、データパイプラインにはGoogle Cloudのマネージドサービスと、データ変換ツールdbtを使用する想定です。

<作業内容>(上から優先度が高い順)
 1.バッチ処理コード移行(Java(Spling Boot)→ Google Cloud Composer + Google Data Fusion + dbt)
(実装、単体テスト、結合テスト、システムテスト)
 2.SQL構文修正(Redshift(PostgresSQL) → BigQuery)
(実装、単体テスト、結合テスト、システムテスト)
 3.テーブルデータ移行(Redshift → BigQuery)
(テーブル設計・実装、データ移行、データ検証)
━━━━━━━━━━━━━━━━━━━━━━━━━
【スキル】
<必須>
・SQL に関する設計・実装経験
・Python3 に関する設計・実装経験
・Gitの使用経験
・Shell に関する設計・実装経験
・パブリッククラウド(AWS、Google Cloud、Azure等)の開発利用経験
・Google Cloud Data Analyticsサービス(BigQuery、Composer、Data Fusion、Dataproc、Cloud Storage等) に関する知識
・プロジェクト管理ツール(JIRA、Backlog、Redmine等)の利用経験
・オンラインコミュニケーションツール(Slack、Google Meet、Zoom等)の利用経験
・課題に関する共有と解決

<尚可>
・Java(Spling Boot)開発経験
・Apache Airflowの開発利用経験
・Apache Spark/Hadoopに関する知識
・YAMLの開発利用経験
・Terraformの開発利用経験
・Web APIの開発利用経験
・JP1の開発利用経験
・AWS Redshiftの開発利用経験
・Google Cloudを使用したデータ分析系基盤開発経験
━━━━━━━━━━━━━━━━━━━━━━━━━
【場所】基本リモート
【期間】随時〜長期
【勤務時間】9:30~18:30(休憩は昼60分、夕方30分、夜30分)
 ※フレックスタイム制となります
=========================


SNSでこの案件をシェア