データエンジニア

求人ID : 6453
投稿日 : 2022-05-13
業界 : Information Technology and Services
雇用形態 : 正社員, 常勤
必須スキル : Japanese3, English3, Data Engineer, HDFS, Hive, HBase, Phoenix, Scala , MS-SQL, MongoDB, Linux, Kerberos, networking
市区町村 : 東京
都道府県: 東京
国 : 日本
年俸 : 6,000,000 ~ 10,500,000

仕事内容

ポジション名 データエンジニア

職務内容:

  • ユーザーやプロジェクトチームと協力し、要件や期待に応える
  • ビジネス要件を分析し、機能的および非機能的な要件を満たす適切なデータソリューションを作成する。
  • HDFS、Hive、HBase、Solr、RestAPIにおけるデータアーキテクチャ、構造、ストレージ、セキュリティモデルを定義する。
  • Scala/Spark/Javaを使用した、非常に大量のデータを処理するためのスケーラブルなデータパイプラインの設計と実装
  • データの取り込み、検証、正規化、変換のための再利用可能なフレームワークの作成と保守
  • CI/CDパイプラインによるユニットテストとリリースの自動化
  • 運用、リリース、データ移行、データ検証のためのスクリプトの作成
  • データリネージ情報の管理
  • リリース、問題、インシデントに対する技術サポートの提供

応募資格:

  • 最低3~4年の開発者またはデータエンジニアとしての実務経験
  • Hadoopエコシステムの確かな知識と経験。HDFS、Hive、HBase、Phoenix、Solr、Oozie、Impala、Knox、Zookeeper、YARN、Spark、Livy、HUE、Zeppelin
  • ScalaとSparkによる強力なプログラミングスキル
  • データプラットフォームにおけるデータベーススキーマの設計能力
  • Oracleデータベース、MS-SQL Server、MongoDB、Kerberos、Linux、ネットワークに関する十分な知識
  • SQL、シェルスクリプト、git、ユニットテスト、CI/CDツールに習熟していること
  • 設計原則、コーディング標準、ベストプラクティスを理解していること
  • 優れた問題解決能力
  • 優れたデータ分析能力
  • 優れたコミュニケーション能力、プレゼンテーション能力、対人関係能力

望ましい資格:

  • REST API、マイクロサービス、ETL、Salesforceに関する知識があれば尚可
  • クラウドサービスの実務経験があれば尚可
  • ストリーミングデータ処理と変更データ取得の理解(優遇
  • BIツールの使用経験があれば尚可

言語:

  • 日本語:中級(N3以上)
  • 英語:中級(N3以上)

会社概要:

世界有数のプロフェッショナルサービス企業であり、デジタル時代に向けたクライアントのビジネス、オペレーション、テクノロジーモデルを変革しています。 
業界を基盤とした独自のコンサルティング・アプローチにより、クライアントがより革新的で効率的なビジネスを構想し、構築し、実行できるよう支援しています。 
米国に本社を置く同社は、フォーチュン500社の1社であり、世界で最も賞賛される企業の1つに常に挙げられています。

 [受動喫煙対策】について]
屋内喫煙
指定された喫煙場所

 


AI求人マッチング

レジュメをアップロードするだけ!
AIがあなたの経歴に合った求人を ご提案いたします。