【Hadoop、Spark、PostgreSQL、Java、Linux】通信社向けデータ蓄積システム(OSS調査・導入・検証)
【Hadoop、Spark、PostgreSQL、Java、Linux】通信社向けデータ蓄積システム(OSS調査・導入・検証)
単価
業界
ポジション
特徴 | |
職務内容 | データ蓄積システム(Hadoop/Spark)を構築し商用トライアルを実施したところ、課題が見つかったため、商用化に向けた改善を行います。 1、HadoopYARN/HDFS/Sparkのチューニング、性能検証:1名 HadoopYARN:メモリ、CPU数、データノード多重度など HDFS:ブロックサイズ、DataNodeへの接続数、Nameノードヒープサイズなど Spark:テーブルキャッシュ、パーティション数、コア数、エグゼキュータ数など 2、OSSの調査・導入・検証:3名 ・HDFSデータの暗号化、圧縮技術の調査・検証 ・大量構造化データの保持方式の調査・検証 GreenplumDB、Hiveなど 環境はHadoop、Spark、PostgreSQL、Java、Linuxとなります。 |
必須スキル | Hadoop、Spark、PostgreSQL、Java、Linuxなどのご経験 |
歓迎スキル | 詳細はコンサルタントにお尋ねください |
現場の環境 |
現場の雰囲気 稼働時間 チームの人数 ![]() 詳細はコンサルタントにお尋ねください ※案件によってはお答えできない場合があります |
担当コンサルタント
濱田からのメッセージ
Hadoop、Spark、PostgreSQL、Java、Linuxなどの経験者を募集致します。弊社直案件です。技術未経験でも自発的にOSSの調査・導入・検証ができる基礎技術があればエントリー可能なスキルアップ案件となりますので、キャリアを積みたい方におすすめです。ご応募お待ちしております。