求人ID : 6453
投稿日 : 2022-05-13
業界 : Information Technology and Services
雇用形態 :
正社員, 常勤
必須スキル : Japanese3, English3, Data Engineer, HDFS, Hive, HBase, Phoenix, Scala , MS-SQL, MongoDB, Linux, Kerberos, networking
市区町村 : 東京
都道府県: 東京
国 : 日本
年俸 : 6,000,000 ~ 10,500,000
仕事内容
ポジション名 データエンジニア
職務内容:
- ユーザーやプロジェクトチームと協力し、要件や期待に応える
- ビジネス要件を分析し、機能的および非機能的な要件を満たす適切なデータソリューションを作成する。
- HDFS、Hive、HBase、Solr、RestAPIにおけるデータアーキテクチャ、構造、ストレージ、セキュリティモデルを定義する。
- Scala/Spark/Javaを使用した、非常に大量のデータを処理するためのスケーラブルなデータパイプラインの設計と実装
- データの取り込み、検証、正規化、変換のための再利用可能なフレームワークの作成と保守
- CI/CDパイプラインによるユニットテストとリリースの自動化
- 運用、リリース、データ移行、データ検証のためのスクリプトの作成
- データリネージ情報の管理
- リリース、問題、インシデントに対する技術サポートの提供
応募資格:
- 最低3~4年の開発者またはデータエンジニアとしての実務経験
- Hadoopエコシステムの確かな知識と経験。HDFS、Hive、HBase、Phoenix、Solr、Oozie、Impala、Knox、Zookeeper、YARN、Spark、Livy、HUE、Zeppelin
- ScalaとSparkによる強力なプログラミングスキル
- データプラットフォームにおけるデータベーススキーマの設計能力
- Oracleデータベース、MS-SQL Server、MongoDB、Kerberos、Linux、ネットワークに関する十分な知識
- SQL、シェルスクリプト、git、ユニットテスト、CI/CDツールに習熟していること
- 設計原則、コーディング標準、ベストプラクティスを理解していること
- 優れた問題解決能力
- 優れたデータ分析能力
- 優れたコミュニケーション能力、プレゼンテーション能力、対人関係能力
望ましい資格:
- REST API、マイクロサービス、ETL、Salesforceに関する知識があれば尚可
- クラウドサービスの実務経験があれば尚可
- ストリーミングデータ処理と変更データ取得の理解(優遇
- BIツールの使用経験があれば尚可
言語:
会社概要:
世界有数のプロフェッショナルサービス企業であり、デジタル時代に向けたクライアントのビジネス、オペレーション、テクノロジーモデルを変革しています。
業界を基盤とした独自のコンサルティング・アプローチにより、クライアントがより革新的で効率的なビジネスを構想し、構築し、実行できるよう支援しています。
米国に本社を置く同社は、フォーチュン500社の1社であり、世界で最も賞賛される企業の1つに常に挙げられています。
[受動喫煙対策】について]
屋内喫煙
指定された喫煙場所