新着案件をﾒｰﾙ受信
いつでもｷｬﾝｾﾙできます
検索キーワード：Hadoop
検索結果:26件
データエンジニア：大手求人検索サービス／東京都／週1出社 - 3日前に公開
| 業務内容：大手求人検索サービスにおけるデータエンジニアの業務担当工程：データエンジニアリング全般スキル:データエンジニアリングスキル大規模データ処理データパイプライン構築データウェアハウス設計ETL処理クラウドプラットフォーム（AWS、GCP、Azureなど）ビッグデータ技術（Hadoop、Spark、Hiveなど）SQLプログラミング言語（Python、Java、Scalaなど）データ可視化ツール勤務地：東京都業界：情報・通信・メディア |
| 業務内容：車両データを可視化する既存システムに新規機能を追加する開発案件。主な作業は以下の通り。・特定のデータを削除する機能追加・車両データを可視化する新規グラフ追加作業範囲は設計、製造、単体テスト、結合テスト、システムテスト、リリース作業。・車両データを可視化する既存システムへの新規機能追加開発・バックエンド(バッチ処理)の改修担当工程：設計、製造、単体テスト、結合テスト、システムテスト、リリース作業スキル:・Java開発5年以上・AWS開発2年以上・設計~開発~各種テストを自律して完遂できる能力尚可スキル：・ビックデータ開発経験(分散処理、Hadoop、Spark、AWS、EMRなど)・顧客とのコミュニケーション、報告などの経験・Iceberg、AWSS3Tablesの利用経験業種業界：自動車・輸送機器勤務地：愛知県稼働場所：リモート可、必要に応じ出社 |
| 業務内容：GenerativeAI向けデータ基盤の構築・運用支援DB設計・運用(RDB/NoSQL/DWHなど)クラウド(GCP/AWS)でのインフラ構築(Docker/Kubernetes)API開発、データ連携設計・実装データパイプライン開発必要スキル：Python/SQLによるデータ処理経験DB設計・運用経験クラウド利用経験Docker/Kubernetesを用いたインフラ構築経験API開発またはデータ連携設計・実装経験ビジネスレベルの日本語力尚可スキル：LLM/GenerativeAIの知見または活用経験AI学習用データの管理・整備経験データパイプライン開発経験Spark、Hadoopなどのビッグデータ技術の知見多国籍・英語環境での業務経験面談：オンライン開発環境：Python、TypeScript(React/Next.js)、GCP、Docker、Kubernetes、GitHub、Slack、Linear、GoogleWorkspace勤務地：東京都業種：情報・通信・メディア |
| 業務内容：エンドユーザー提供サービスの諸状況を分析・可視化する業務。複数案件を並行して進行し、ダッシュボードとしてアウトプットを提供。エンドユーザー（主にデジタルマーケティング営業活動をしている部門）と会話しリクエストを引き出しながら、アウトプットとしてダッシュボードを提供。主にダッシュボード作成用のデータ作成を担当。その他スポットのデータ抽出対応などを実施。担当工程：-エンドユーザー提供サービスの諸状況の分析・可視化-複数案件の並行進行とダッシュボード提供-エンドユーザーとのコミュニケーションとリクエスト把握-ダッシュボード作成用のデータ作成-スポットのデータ抽出対応スキル:必須：-SQLでの開発経験3年以上-BIレポートやデータ提供の要件を聞き出す業務経験-データの意味を理解し、提案できる能力歓迎：-Snowflake開発経験-ダッシュボード利用者目線での見せ方の工夫ができる能力その他情報：-勤務地：東京都-勤務形態：ほぼテレワーク、月1回出勤-勤務時間：9:00-18:00-開発環境：Snowflake、HADOOP-チーム構成：5名チーム |
| 業務内容：広告プラットフォームのデータ分析基盤構築、機械学習モデル開発、運用担当工程：データ分析基盤構築、機械学習モデル開発、運用スキル:必須：-Python(Pandas,NumPy,Scikit-learn)-SQL-機械学習モデル開発経験-クラウド(AWS/GCP/Azure)での開発経験-Docker/Kubernetes尚可：-Spark-Hadoop-データ可視化ツール(Tableau,PowerBI)-自然言語処理-広告業界経験その他：-勤務地：東京都-業種：情報・通信・メディア-リモートワーク週2日まで可-期間6ヶ月~(長期)-勤務時間9:00~18:00(休憩1時間) |
| 業務内容：クレジットカードシステム開発、加盟店データ中継システム新規構築（ホスト→Hadoop基盤へのデータ連携）基本設計・詳細設計・製造・テスト・本番リリースまで一連の作業担当工程：基本設計、詳細設計、製造、テスト、本番リリーススキル:必須：-Java開発経験（目安：5年以上）-Linux、Windows（ファイル連携システム開発のためDB無）尚可：-加盟店精算系知識および経験-Sparkフレームワーク-ApacheParquet、HDFS、Hive、VSCode、GitLab-COBOL（現行システム解析）勤務地：東京都業界：金融・保険業 |
| 業務内容：エンドユーザー提供サービスの状況分析・可視化複数案件のダッシュボード作成エンドユーザーとの要件ヒアリングダッシュボード作成用データ作成スポットのデータ抽出対応担当工程：要件定義設計開発テストスキル：SQLでの開発経験3年以上BIレポートやデータ提供の要件ヒアリング経験データの意味理解と提案能力Snowflake開発経験（尚可）ダッシュボード利用者目線での見せ方工夫（尚可）開発環境：SnowflakeHADOOP勤務形態：ほぼテレワーク（月1回出勤）勤務時間9:00~18:00案件期間：長期案件（7月開始）所在地：東京都業種：情報・通信・メディア |
| 業務内容：中部地域のSnowflake化対応プロジェクト基本設計から結合試験までの開発業務Javaを使ってSnowflake化の対応を行う結合試験時に週3日で名古屋への出張が発生する可能性あり作業場所：兵庫県神戸市必要スキル：・Java開発経験(5年以上)・DB実務経験(3年以上)歓迎スキル：・Linux実務経験(1年以上)・Snowflakeまたは、Hadoop実務経験・電力系の知識単価：70万円まで |
| 業務内容：電力システムのSnowflake化対応業務基本設計から結合試験までの対応一部期間名古屋への出張あり(3カ月程度)フル常駐担当工程：基本設計結合試験必須スキル：・JAVAの開発経験・DB実務経験尚可スキル：・Linux実務経験・Snowflakeまたは、Hadoop(Spark)実務経験・電力系の業務経験、知識勤務地：兵庫県神戸市その他：・リモートワークなし・出張可能な方が高評価 |
| 業務内容：計算ライブラリの変更(spark→Snowflake)及び、オンプレ→クラウドの載せ替えを実施する開発業務-基本設計～結合試験-Javaプログラミング-Snowflake操作-Windows環境、LinuxOSでの作業担当工程：基本設計～結合試験勤務地：兵庫県神戸市※結合試験フェーズ時は愛知県名古屋市へ週3回の出張（約3ヶ月）必要スキル：-Javaの開発経験(5年以上)-DBを扱った実務経験(3年以上)歓迎スキル：-Linuxを扱った実務経験(1年以上)-Snowflakeまたは、Hadoop(spark)を扱った実務経験-電力系の知識プロジェクト規模：10名以上 |
| 業務内容：ETL業務の運用引継ぎおよび改修を担当・ETL業務の運用引継ぎ・ETL業務の改修対応勤務地：東京都千代田区必要スキル：・Trinoに関する知識または経験・Pythonまたは他言語での開発経験・データエンジニアまたはアナリティクスエンジニアとしての業務経験歓迎スキル：・DigdagおよびEmbulkの利用経験・Hadoopなどの大規模データの分散処理技術を用いた業務経験単価：65万円就業環境：・リモートメイン・服装：ビジネスカジュアル |
| 業務内容：広告プラットフォーム運営企業におけるインフラ基盤の構築・運用業務・Linuxサーバの構築(OS・ミドルウェアのインストール/設定)・サーバキッティング・メモリ、HDD/SSD交換などのデータセンター作業必須スキル：・Linuxの構築経験2年以上・Ansibleの利用経験歓迎スキル：・Ciscoなどネットワークコマンドの利用経験・ネットワーク構築経験開発環境：・DB:MySQL・データ基盤:Hadoop・ミドルウェア:Nginx、Docker、Apache、Ansible・インフラ:オンプレミス、AWS、GCP勤務地：東京都渋谷区（リモート勤務可）勤務時間：10:00~19:00参画開始：5月/6月単価：60万円程度その他：・週4リモート可・PC貸与(MacまたはWindows選択可能) |
| 業務内容：求人検索サービスにおけるデータエンジニアとして以下の業務を担当・データパイプラインの設計/実装/運用・データウェアハウス(DWH)の設計/構築/運用・BIツールを活用したデータ可視化基盤の構築・データ品質管理、データガバナンスの整備担当工程：要件定義/設計/開発/運用保守スキル：【必須スキル】・DWH設計、構築経験・SQLを用いたデータ加工の実務経験・Python,Javaなどのプログラミング言語経験・クラウドサービス(AWS/GCP等)の実務経験【歓迎スキル】・Hadoop,Sparkなどの分散処理基盤の実務経験・データ分析基盤の設計/構築経験・BIツール(Tableau,Looker等)の実装経験・アジャイル開発経験勤務地：基本リモート単価：95万円以上 |
| 業務内容：外部委託中のETL業務の移管に伴うETL業務の運用引継ぎ、及び改修担当工程：運用保守/改修必要スキル：・Trinoに関する知識または経験・Pythonまたは他言語の経験・データエンジニアまたはアナリティクスエンジニアとしての業務経験歓迎スキル：・Digdag及びEmbulkの利用経験・Hadoopなどの大規模データの分散処理技術を用いた業務経験勤務地：東京都千代田区期間：2025年4月2日～2025年6月30日単価：65万円募集人数：4名服装：ビジネスカジュアル |
| 業務内容：データクリーンサービスのETL業務の移管に伴うETL業務の運用引継ぎ、及び改修業務場所：東京都千代田区リモートメイン（週1日程度出社）必要スキル：・Trino(Presto)スキル・Pythonスキル(他言語経験でも可)・Hadoopなどの大規模データ分散処理技術を用いた業務経験・データエンジニアまたはアナリティクスエンジニアとしての業務経験歓迎スキル：・Digdag及びEmbulkの利用経験その他条件：・稼働開始：2025年04月21日・勤務時間：10:00~19:00・服装：ビジネスカジュアル・面談：1回 |
| 業務内容：・大量のデータを扱うデータ基盤の設計・構築・運用・データパイプラインの構築・データ分析基盤の構築必要スキル：・データエンジニアとしての実務経験3年以上・Spark、Hadoop等のビッグデータ処理の知識・経験・クラウドサービス(AWS,GCP等)の利用経験尚可スキル：・機械学習、深層学習の知識環境：・基本リモート勤務・単価：95万円以上 |
| 業務内容：外部委託中のETL業務の移管に伴うETL業務の運用引継ぎ、及び改修場所：東京都千代田区単価：65万円必要スキル：・Trinoに関する知識またはご経験・Pythonまたは他言語での経験・データエンジニアまたはアナリティクスエンジニアとしての業務経験歓迎スキル：・Digdag及びEmbulkの利用経験・Hadoopなどの大規模データの分散処理技術を用いた業務経験その他：・面談：WEB1回・服装：ビジネスカジュアル |
| 業務内容：・求人サイトに蓄積されたデータを分析するためのデータパイプラインの構築・運用・データの前処理や加工・高速でスケーラブルなデータパイプライン設計・クラウドベースのBigDataプラットフォーム設計・構築必要スキル：・PythonまたはScalaを使ったデータ処理の実務経験3年以上・Spark、Hadoop、Kafkaなどのビッグデータ処理ツールの経験・AWS、GCPなどのクラウドサービスの利用経験歓迎スキル：・機械学習やデータマイニングの知識・データウェアハウスやデータレイクの設計・構築経験勤務地：リモートワーク可能 |
| 業務内容：広告プラットフォームのインフラエンジニア業務・OS及びミドルウェアのインストール・設定をはじめとしたサーバの構築・サーバのキッティング、メモリやHDD/SDDの交換等データセンターでの作業場所：東京都渋谷区データセンター、リモートワーク可(週4日)必要スキル：・Linuxの実務経験2年以上・AWSに携わった経験歓迎スキル：・Ciscoなどのネットワークコマンドを利用した経験・ネットワーク構築経験期間：即日~/4月~/5月~勤務時間：10:00~19:00(週4リモート/隔週水曜出社)開発環境/ツール：・DB:MySQL・データ基盤:Hadoop・ミドルウェア:Nginx、Docker、Apache、Ansible・インフラ:オンプレミス、AWS、GCP・ネットワーク:WhiteboxSwitch、Arista、Juniper・その他:Git、Slack、Jira、Confluence、GSuite単価：55万円前後（スキル見合い）面談：1回 |
| 【案件1】業務内容：・大規模メールシステム更改におけるPoC支援・約6000万人規模のメールデータシステムのマイグレーション検討・オンプレミス環境（ブロックストレージ/オブジェクトストレージ混在）の移行・システムマイグレーションのFit&Gap実施・課題解決に向けての解決策提案必要スキル：・要件定義の実務経験・メールプロトコル知識(SMTP/IMAP)・Linux実務経験・PoC実作業経験歓迎スキル：・メールシステム開発経験・SSL関連知識・C言語知識・EmailMX製品知識場所：東京都期間：即日〜2025年12月末(延長可能性有)時間：09:30-18:30【案件2】業務内容：・ETL業務の運用引継ぎ・ドキュメント整理・データ処理パイプラインの保守・運用・ETLジョブの改修・最適化・データ品質の維持・改善・システム運用の問い合わせ対応・トラブルシューティング・新規データ処理の設計・開発・パフォーマンスチューニング、データ最適化・データアーキテクチャの改善提案必要スキル：・Trinoを用いたデータ処理経験・Python開発経験（他言語可）・データエンジニア/アナリティクスエンジニア経験歓迎スキル：・Digdag及びEmbulk利用経験・Hadoop等の大規模データ分散処理技術経験場所：フルリモート期間：2025年4月〜中長期時間：10:00-19:00 |
| ①会計プロダクト保守・サポート案件業務内容：-会計プロダクトの保守及びサポートデスク業務支援-サポートデスクチームのリーダー業務必要スキル：-インフラ領域のトラブルシューティング経験-システム運用/障害対応での対顧客コミュニケーション経験-OracleDB知見-保守・サポートのプロジェクトリーダー経験があれば尚可-ERPもしくはパッケージ関連の経験があれば尚可勤務地：東京都品川区（基本リモート・月2回程度の訪問あり）②GPT技術検証案件業務内容：GPT関連の技術検証支援必要スキル：-Python経験-新技術へのチャレンジ意欲勤務地：東京都千代田区③資産管理システム保守案件業務内容：-資産管理システムの運用保守業務-社内ユーザーからの問い合わせ対応-システム課題整理、保守ベンダー調整必要スキル：-社内SE経験-システム運用保守経験-会計知識があれば尚可-固定資産システムの知見があれば尚可勤務地：東京都品川区（週1日程度リモート可）④ネットワーク設計・構築案件業務内容：-Ciscoを用いたNW設計/構築支援-ゼロトラスト化のための設計変更作業必要スキル：-NW設計構築経験-Cisco機器使用経験-VLAN設計経験-インフラエンジニア経験があれば尚可勤務地：東京都千代田区（週4日程度リモート可）⑤金融系システム開発案件業務内容：-外為仕向送金の法令・商流チェックシステム開発-Web画面、 |
| 業務内容：社外向けDCRサービス内のETL業務。ワークフローの設計・開発・単体テスト・結合テスト・運用・保守。試験用のダミーデータ作成。Workflow・ETLのチューニング・最適化。監査処理の設計・開発・テスト。マニュアル作業の自動化。クエリテンプレートの保守。必要スキル：・Python開発経験・分散SQLクエリエンジン（Trino）の経験・データエンジニアとしての業務経験・Hadoopなどの大規模データの分散処理技術を用いた業務経験・柔軟なコミュニケーション能力・主体的に業務推進できる方環境：・勤務地：東京都（基本テレワーク）・勤務時間：10:00～19:00・単価：～75万円 |
| 業務内容：大手通信系のセキュリティ関連システムにおけるインフラ保守・運用・構築業務・Linuxでの構築、運用、保守・詳細設計から構築/移行までの資料作成・ミドルウェア(ApacheTomcat)の構築・データベース(MySQLやPostgreSQL)の運用担当工程：インフラ運用・保守・開発必要スキル：・Linux環境での構築、運用、保守経験・詳細設計から構築/移行までの資料作成経験・ミドルウェア(ApacheTomcat)構築経験2年以上・データベース(MySQLやPostgreSQL)の経験歓迎スキル：・ansible等の構築自動化ツール経験・Hadoop基盤構築または利用経験勤務地：東京都千代田区※在宅勤務可（7割出社）※フレックス勤務（コアタイムあり）単価：80万円まで（スキル次第で上振れ可能）その他：・4月開始の長期案件・日本語力必須 |
| 業務内容：・広告関連システムのETL業務・顧客要件定義に基づく設計から運用保守・Workflowの設計、運用保守・試験用のダミーデータ作成・Workflow・ETLのチューニング、最適化・監査処理の設計、テスト・マニュアル作業の自動化・クエリテンプレートの保守・イテレーション対応の受入、動作検証勤務地：東京都港区、千代田区※基本テレワーク必須スキル：・Python開発経験・SQL経験・大規模データの分散処理技術を用いた業務経験・詳細なドキュメントがなくても開発、保守運用が行える方・課題を自ら発見し、積極的に調査するなどして解決できる方歓迎スキル：・Hadoop・Trino・AWS募集人数：5名 |
| 業務内容：・TreasureDataCDPからDCRサービスへのETL業務・Workflowの設計・開発・単体テスト・結合テスト・運用・保守・CI/CDの設計・開発・試験用のダミーデータ作成・Workflow,ETLのチューニングおよび最適化場所：・東京都・基本リモート勤務必要スキル：・データエンジニアまたはアナリティクスエンジニアとしての業務経験・Hadoopなどの大規模データの分散処理技術を用いた業務経験・複数名チームでのリーダー経験(リーダー枠のみ)歓迎スキル：・DigdagまたはEmbulkの利用経験単価：・SE枠85万円目安・PG枠70万円~75万円目安 |
- 1
- 2