【週5日】ビッグデータ処理環境を設計するデータエンジニア

New

【週5日】ビッグデータ処理環境を設計するデータエンジニア

🚀 地理空間データの処理とAWS活用のデータエンジニア募集！スケーラブルなデータパイプラインを設計・開発し、機械学習モデルを用いた予測モデルにも挑戦可能です。

エンジニアオンライン面談

がサポート

公開：約9時間前

雇用形態: 業務委託・フリーランス
報酬: 72万円〜88万円 / 人月
稼働日数: 週40時間（5人日）
働き方: フルリモート👍
勤務地: -

募集内容

AIが募集内容をまとめました。

AIにより情報をまとめ直したものです。正確な内容は、もとの募集内容をご覧ください

・移動体の地理空間データの評価・比較およびデータ調達プロセスの支援

・地理空間データ処理ソリューションの設計・開発

・AWS環境におけるスケーラブルなデータパイプラインシステム（ETLプロセス）の設計・開発・維持

・機械学習モデルを活用した予測モデルの開発

・位置情報を含む大規模データの高速処理環境の設計・構築・改善

・上記に関わるドキュメント作成

求める人材

【必須条件】

・移動体や時系列の大規模なraw（生）データの処理経験

・データパイプラインシステム（データ処理基盤）の構築経験

・クラウド環境（特にAWS：S3,EC2,EKS,EMR,AWS Glue,Athena,RDSなど）での実務経験

・Apache Sparkなどのビッグデータフレームワークの利用経験

・Python,Java,SQL,Linux,Bashの実務経験

・生データの内容を把握した上でのデータ比較/加工/集計/分析要件定義、およびデータベースやサーバーサイドの設計/実装/ドキュメンテーション能力

【歓迎条件】

・Apache Airflow,AWS Step Functions,Dagsterなどのワークフローオーケストレーションツールの知識

・Docker,Kubernetes（特にEKS）などのコンテナ化/オーケストレーション技術の経験

・空間データ形式（GeoJSON,Shapefile,OSM,PBFなど）に関する知識

・PostgreSQLおよび空間拡張機能（PostGIS,pgRoutingなど）の実務経験

・データウェアハウス（DWH）およびレイクハウスアーキテクチャに関する理解

・PMサポートや開発リーダーとしてプロジェクトを牽引した経験

・顧客対応スキル

報酬・給与

【単価】

72～88万円

勤務時間

【稼働日数】

週5日

休日・休暇

💼 業務内容

私たちのチームで、最新のデータ処理技術を駆使して、地理空間データの評価や比較を行い、データ調達プロセスをサポートします。具体的には、

地理空間データ処理ソリューションの設計・開発
AWS環境でのスケーラブルなデータパイプラインシステムの設計・開発・維持
機械学習モデルを活用した予測モデルの開発
大規模データの高速処理環境の設計・構築・改善
上記に関わるドキュメント作成

データを扱う楽しさを一緒に体験しませんか？

✅ 応募条件・必須スキル

移動体や時系列の大規模なrawデータの処理経験
データパイプラインシステムの構築経験
クラウド環境（特にAWS）の実務経験
Apache Sparkなどのビッグデータフレームワークの利用経験
Python, Java, SQL, Linux, Bashの実務経験
データの比較/加工/集計/分析要件定義の能力

💰 報酬・給与

単価は72～88万円です。あなたのスキルと経験に応じて、しっかり評価します！

🕐 働き方

週5日、フルタイムでの勤務となります。リモート勤務も検討可能ですので、ぜひご相談ください！

📌 募集ポジション

ビッグデータ処理環境を設計するデータエンジニア

🌟 歓迎スキル

Apache AirflowやAWS Step Functionsなどのワークフローオーケストレーションツールの知識
Docker,Kubernetesの経験
空間データ形式に関する知識
PostgreSQLおよび空間拡張機能の実務経験
データウェアハウスやレイクハウスアーキテクチャの理解
PMサポートや開発リーダーとしての経験
顧客対応スキル

担当エージェント

DYMテック

エージェント情報を見る