募集職種 詳細
Pythonデータエンジニア
職務概要
Pythonでのバックエンドの開発
pythonアプリケーションのアーキテクチャー設計
ETL,データPipelineなどDataLake関連する開発
ビジネス要望伴う業務実践を行う
要件とNeedsはビジネスユーザーから聞き取ります、その上に業務分析して最適なアーキテクチャーの設計が必要となります。アーキテクチャー従ってシステム開発を行う、実際アプリケーションの開発能力が必要となります。
メインProject：
データAnalyticsシステムにつきまして、アーキテクチャの改善と機能追加
グローバル企業のデータanalyticsシステムは、毎日に各国家地区から各言語のデータを取り込みして、AIエンジンで分析処理を行う。分析対象データさらに拡張、処理スピード向上するため、pipelineの拡張或いは並行処理アーキテクチャの改善などの設計と開発が必要となります。
DataLake向けん、ETL及びデータPipelineのアーキテクチャの設計改善と機能追加
複数グローバル企業のData基盤向け、ETL開発、データ品質監視、DataMart、Catalog関連するアーキテクチャーの設計と実装構築
人材要件 (Must Have)
Python開発経験3年以上
SQL利用して必要な業務データ抽出作業ができる
sshアクセス、Linuxコマンドなど基本的CLI操作ができる
積極的に新しいサービス・仕組みをチャレンジして、知識や技能などを徐々に身につけて行くことができる
問題解決に対して、論理的に分析ができて、原因特定と解決策を出すための思考スキル
日本語がN2以上
人材要件 (Nice to Have)
Cloud環境利用する開発経験があれば良い
DataLake、ETL、GlueJob、DataFlowなど開発経験があれば良い
アジャイル開発経験があれば良い
Bigdataの分析・開発経験があれば良い
ElasticSearch関連する開発、設計経験があれば良い