
【週5日】ビッグデータ処理環境を設計するデータエンジニア
データ処理環境の設計を手がけるデータエンジニア募集🌟AWSを使用し、ETLや機械学習に関与します。
公開:1日前
- 雇用形態
- 業務委託・フリーランス
- 報酬
- 72万円〜88万円 / 人月
- 稼働日数
- 週40時間(5人日)
- 働き方
- フルリモート👍
- 勤務地
- -
募集内容
AIが募集内容をまとめました。
AIにより情報をまとめ直したものです。正確な内容は、もとの募集内容をご覧ください
・移動体の地理空間データの評価・比較およびデータ調達プロセスの支援
・地理空間データ処理ソリューションの設計・開発
・AWS環境におけるスケーラブルなデータパイプラインシステム(ETLプロセス)の設計・開発・維持
・機械学習モデルを活用した予測モデルの開発
・位置情報を含む大規模データの高速処理環境の設計・構築・改善
・上記に関わるドキュメント作成
求める人材
【必須条件】
・移動体や時系列の大規模なraw(生)データの処理経験
・データパイプラインシステム(データ処理基盤)の構築経験
・クラウド環境(特にAWS:S3,EC2,EKS,EMR,AWS Glue,Athena,RDSなど)での実務経験
・Apache Sparkなどのビッグデータフレームワークの利用経験
・Python,Java,SQL,Linux,Bashの実務経験
・生データの内容を把握した上でのデータ比較/加工/集計/分析要件定義、およびデータベースやサーバーサイドの設計/実装/ドキュメンテーション能力
【歓迎条件】
・Apache Airflow,AWS Step Functions,Dagsterなどのワークフローオーケストレーションツールの知識
・Docker,Kubernetes(特にEKS)などのコンテナ化/オーケストレーション技術の経験
・空間データ形式(GeoJSON,Shapefile,OSM,PBFなど)に関する知識
・PostgreSQLおよび空間拡張機能(PostGIS,pgRoutingなど)の実務経験
・データウェアハウス(DWH)およびレイクハウスアーキテクチャに関する理解
・PMサポートや開発リーダーとしてプロジェクトを牽引した経験
・顧客対応スキル
報酬・給与
【単価】
72~88万円
勤務時間
【稼働日数】
週5日
休日・休暇
💼 業務内容
あなたのデータスキルを活かして、次世代の地理空間データ処理ソリューションを一緒に設計・開発しませんか?
- 移動体の地理空間データの評価・比較およびデータ調達プロセスの支援
- 地理空間データ処理ソリューションの設計・開発
- AWS環境でのスケーラブルなデータパイプラインシステム(ETLプロセス)の設計・開発・維持
- 機械学習モデルを活用した予測モデルの開発
- 位置情報を含む大規模データの高速処理環境の設計・構築・改善
- 関連するドキュメント作成
✅ 応募条件・必須スキル
- 移動体や時系列の大規模なraw(生)データの処理経験
- データパイプラインシステムの構築経験
- AWS環境での実務経験
- Apache Sparkなどのビッグデータフレームワークの利用経験
- Python, Java, SQL, Linux, Bashの実務経験
- 生データの内容を把握した上でのデータ比較/加工/集計/分析要件定義能力
💰 報酬・給与
単価は72~88万円です。
🕐 働き方
週5日での勤務を予定しています。
📌 募集ポジション
ビッグデータ処理環境を設計するデータエンジニア
🌟 歓迎スキル
- Apache Airflow, AWS Step Functions, Dagsterなどの知識
- Docker, Kubernetes(特にEKS)などの経験
- 空間データ形式に関する知識
- PostgreSQLおよび空間拡張機能の実務経験
- データウェアハウスおよびレイクハウスアーキテクチャに関する理解
- PMサポートや開発リーダーとしての経験
- 顧客対応スキル
担当エージェント
もっと見るDYMテック
DYMテック


