職務内容
同社の各種サービスのデータを横断的に分析するビッグデータ分析基盤のデータエンジニアです。
担当していただくのは、40を超えるサービスから集めたデータを加工し、
分析担当やデータサイエンティストにとって使いやすいデータマートの設計、開発、運用です。
必須スキル
・3年以上のbashやPythonを用いたバッチ処理の開発・運用経験
・3年以上の開発物に対するドキュメンテーション作成経験
・3年以上のエンジニア3名以上のチームでの開発経験
・2年以上のBigQuery,Oracle でのOLTPではないデータ分析のSQL開発経験
・データマネジメントの経験
・Git、JIRA、Jenkins等の開発ツールの利用経験
・単体/結合試験の品質評価の経験
■能力
・新規データマートの要件定義、設計、開発ができる
・運用を見据えた設計、コーディング、コードレビューができる
・マート領域において全体のデータフローを理解してジョブの設計と運用ができる
・3か月以内のSQL開発案件において、要件定義ができる
・関係者に対して積極的にコミュニケーションを取り、障害の報告や課題解決ができる
・BQやGCP等の新技術の調査および未経験領域の理解と利用が可能
・適切なドキュメンテーションを行い、チームでの開発に必要な情報共有ができる
尚可スキル
・開発品質向上に向けたCI/CDパイプライン構築や、プロダクト運用設計
・開発生産性の改善に向けたリファクタや、施策提案
・Docker,Kubernetesを利用したインフラ構築
・アーキテクトや、テックリードとしてプロダクト開発のリード
・機械学習を用いたデータ活用手法のプロダクト導入
・既存プロダクトに対するアーキテクチャ刷新および移行
・SQL可視化用のデータセットの作成やBIへの連携機能、データウェアハウスの開発経験
■能力
・システム全体のデータフローを理解し、ジョブの設計と運用ができる
・予測モデルのアプライアンスができる
・情報処理技術試験 データベーススペシャリスト
情報提供元: Midworks(ミッドワークス)
0 コメント:
コメントを投稿