Hadoopを活かせるアナリスト（1件）

この検索条件を保存

社内/社外のデータを利用したプロジェクトにてプロジェクト内での課題の把握と必要な作業の洗い出し、 実作業としてデータ加工、データパイプライン/ワークフローの作成、ETL処理、 また定期実行される処理の監視や適切な復旧業務を行っていただきます。 　 ※実際の作業としては以下の内容を想定しております。 　・社内に蓄積されているデータとそれを利用する環境の状況整理 　・データを用いたプロジェクトにおける課題の把握 　・アドホックなデータ抽出作業/データ加工処理 　・データパイプラインの構築や行われる処理の自動化 　・ETL処理のワークフロー化、およびその作業のシステム的な監視の構築

・SQLに関する基本的な知識 　・複数のRDBMSを扱った開発経験 　・webサービスやプロダクトのデータを用いた抽出業務やデータ加工処理の経験 　・プログラミング言語を利用したアプリケーション開発経験 　・パブリッククラウドを利用した開発経験

・Hadoop, Spark, Hiveなど分散処理のためのフレームワークを利用した開発経験 　・自社や外部の大規模データを利用したプロジェクトへの参加、プロダクト開発、データ処理や分析の蹴件 　・BIやDWHを利用したデータ分析業務の経験 　・ストリーム処理基盤の構築・運用経験 　・コンテナを使ったアプリケーション開発または運用 　・Kubernetes/Amazon ECSの利用経験 　・統計モデル、自然言語処理、機械学習ライブラリを使った実装経験