Apache Sparkのフリーランス求人・案件一覧(97件)
41 - 60/件 全97件
【Databricks/Azure/常駐】DWH/ETL基盤運用保守:運用エンジニアのフリーランス求人・案件
案件の内容
大手エネルギー業界向けの Azure Databricks DWH および周辺 ETL システムの運用・保守支援案件です。Databricks(Bronze/Silver/Gold)で段階加工しDWHへ格納、Domo Cloud Amplifier/Domo ETLで取り込み加工する構成の安定運用を中心に、障害調査・問い合わせ対応・PG改修・小規模開発を担当します。
求めるスキル
【AWS/インフラ/リモート併用】レポーティングシステム刷新:インフラ・ネットワークエンジニアのフリーランス求人・案件
案件の内容
顧客社内で利用しているレポーティングシステムを、Azure上の既存環境からAWSへ刷新するプロジェクトです。データ収集基盤の集約やシステム構成のシンプル化を目指すAWSアーキチームに参画いただきます。
求めるスキル
【AWS/インフラ/リモート併用】レポーティングシステム刷新:インフラ・ネットワークエンジニアのフリーランス求人・案件
案件の内容
顧客社内で利用しているレポーティングシステムを、Azure上の既存環境からAWSへ刷新するプロジェクトです。データ収集基盤の集約やシステム構成のシンプル化を目指すAWSアーキチームに参画いただきます。
求めるスキル
【AWS/インフラ/リモート併用】レポーティングシステム刷新:エンジニアリングマネージャーのフリーランス求人・案件
案件の内容
顧客社内で利用しているレポーティングシステムを、Azure上の既存環境からAWSへ刷新するプロジェクトです。データ収集基盤の集約やシステム構成のシンプル化を目指すAWSアーキチームに参画いただきます。
求めるスキル
【AWS/インフラ/リモート併用】レポーティングシステム刷新:エンジニアリングマネージャーのフリーランス求人・案件
案件の内容
顧客社内で利用しているレポーティングシステムを、Azure上の既存環境からAWSへ刷新するプロジェクトです。データ収集基盤の集約やシステム構成のシンプル化を目指すAWSアーキチームに参画いただきます。
求めるスキル
【LLMOps/Langfuse/リモート併用】大手インターネット企業向けLLM運用基盤:機械学習エンジニアのフリーランス求人・案件
案件の内容
大手インターネット企業のLLM運用基盤において、Langfuseを用いたLLMトレース・評価基盤の設計、自動評価/人手評価の運用、ログデータ分析による品質課題の特定、プロンプト/モデル改善提案と検証、改善サイクルの仕組み化、コスト・トークン最適化を担当いただきます。
求めるスキル
【Snowflake/Databricks/常駐】データプラットフォーム開発保守:データエンジニアのフリーランス求人・案件
案件の内容
クラウド系データプラットフォームの開発保守として、Snowflake・Databricks等へのデータ統合推進、マイグレーション・移行などを担当していただきます。トレーニングプログラムあり、ポテンシャル層も検討可能、外国籍可(日本語流暢必須)の案件です。
求めるスキル
【Snowflake/AWS/フルリモート】大手人材サービス企業データ基盤:データエンジニアのフリーランス求人・案件
案件の内容
大手人材サービス企業のエンド企業にてデータエンジニアとして参画いただきます。多種多様なデータソースとデータ基盤を接続し、必要なデータを安全に取得・保存し、データガバナンス担当と協力して適切な加工を行いユーザーへ提供します。要件定義から設計・製造・構築・テストまで一貫して担当いただきます。
求めるスキル
【AWS/BigQuery/常駐】データ分析基盤構築:MLエンジニア/データエンジニアのフリーランス求人・案件
案件の内容
全社データ分析基盤のアーキテクチャ設計・構築を担当していただきます。データレイク/DWH(BigQuery)基盤の設計・運用、ETL/ELTパイプラインの構築までを行います。
求めるスキル
【BigQuery/Terraform/リモート併用】データ基盤設計:MLエンジニア/データエンジニアのフリーランス求人・案件
案件の内容
大手インターネット企業にて、全社データ分析基盤のアーキテクチャ設計・構築を担当します。BigQueryを中心としたDWH/データレイクの設計・運用、ETL/ELTパイプラインの開発、クロスクラウドデータ連携の設計・実装、AIデータアクセス基盤の構築まで一貫して担う業務です。
求めるスキル
【BigQuery/Python/常駐】データ分析基盤構築:MLエンジニアのフリーランス求人・案件
案件の内容
全社データ分析基盤のアーキテクチャ設計・構築を担当していただきます。データレイク/DWH(BigQuery)の設計・運用、ETL/ELTパイプラインの設計・開発、クロスクラウドデータ連携(OCI → GCP)、データモデリング、Terraformによる IaC、AIデータアクセス基盤(MCP/Agent)の構築までを一貫して担当します。
求めるスキル
【Snowflake/AWS/フルリモート】大手人材サービス:データエンジニアのフリーランス求人・案件
案件の内容
大手人材サービス企業におけるデータエンジニアとして、データベースをはじめとする多種多様なデータソースとデータ基盤の接続、必要なデータの安全な取得・保存、データガバナンス担当との協働によるデータ加工・提供を担当していただきます。要件定義から設計・製造/構築・テストまでの一連の工程に従事します。
求めるスキル
【BigQuery/Terraform/常駐】大手インターネット企業データ基盤:MLエンジニアのフリーランス求人・案件
案件の内容
全社データ分析基盤のアーキテクチャ設計・構築、DWH(BigQuery)/データレイクの設計・運用、ETL/ELTパイプラインの設計・開発、クロスクラウドデータ連携、データモデリング、Terraformを用いたIaCによるインフラ管理、AIデータアクセス基盤(MCP/Agent)構築を担当いただきます。
求めるスキル
【Snowflake/AWS/フルリモート】大手人材サービス企業のデータエンジニア:データエンジニアのフリーランス求人・案件
案件の内容
大手人材サービス企業におけるデータエンジニア。データベースをはじめ多種多様なデータソースとデータ基盤を接続し、必要なデータを安全に取得してデータ基盤に保存。データガバナンス担当者と協力してデータに対して適切な加工を行いユーザーへ提供する。
求めるスキル
【BigQuery/Terraform/常駐】大手インターネット企業のデータ基盤構築:データエンジニアのフリーランス求人・案件
案件の内容
大手インターネット企業におけるMLエンジニアとして、データ基盤(DWH、データ処理、セキュリティ等)およびAIデータアクセス基盤の構築・運用に携わっていただきます。
求めるスキル
【AWS/Databricks/常駐】大手自動車メーカーAI活用基盤開発:データエンジニアのフリーランス求人・案件
案件の内容
大手自動車メーカーにおけるAI活用基盤の開発を担当。
求めるスキル
【AWS/Databricks/常駐】大手自動車メーカーAI活用基盤開発:データエンジニアのフリーランス求人・案件
案件の内容
大手自動車メーカーAI活用基盤の開発(Databricks/AWS等)を担当。
求めるスキル
【AWS/インフラ/リモート併用】レポーティングシステム刷新:インフラエンジニアのフリーランス求人・案件
案件の内容
顧客社内で利用しているレポーティングシステムをAzure上からAWSへ刷新し、データ収集基盤の集約やシステム構成のシンプル化を目指すPJ。AWSアーキチームへ参画します。
求めるスキル
【BigQuery/Python/常駐】大手インターネット企業データ基盤構築:MLエンジニアのフリーランス求人・案件
案件の内容
大手インターネット企業の全社データ分析基盤の設計・構築を担当いただきます。BigQuery基盤の設計・運用、ETL/ELTパイプライン設計・開発、クロスクラウドデータ連携(OCI→GCP)、データモデリング、Terraformによる IaC、ネットワーク・セキュリティ設計、AIデータアクセス基盤(MCP/Agent)構築が主な業務です。
求めるスキル
【Snowflake/AWS/フルリモート】大手人材サービス向けデータ基盤構築:データエンジニアのフリーランス求人・案件
案件の内容
大手人材サービス企業において、データエンジニアとして参画していただきます。多種データソースとデータ基盤を接続し、必要なデータを安全に取得・加工してユーザーに提供します。データガバナンス担当者と協力し、データに対して適切な加工を行います。
求めるスキル
41 - 60/件 全97件
Apache Sparkのフリーランス案件・求人に関する情報
Apache Sparkのフリーランス求人・案件について
Apache Sparkとは
Apache Sparkは、大規模データの高速処理を実現するオープンソースの分散処理フレームワークです。メモリ内(インメモリ)でデータを処理する仕組みにより、従来のHadoop MapReduceと比較して飛躍的に高速なデータ解析が可能であり、現在のビッグデータ処理におけるデファクトスタンダードとなっています。
主な特徴と役割
バッチ処理、ストリーミング処理(Spark Streaming)、機械学習(MLlib)、SQLクエリ(Spark SQL)など、多様なワークロードを単一のプラットフォームで統合的に扱える点が最大の特徴です。主にPython (PySpark)、Scala、Javaを用いて開発され、データパイプラインの構築や大規模ログ解析などで中心的な役割を果たします。
市場動向と将来性
AWS (EMR, Glue) や Google Cloud (Dataproc) といったクラウドサービスでの採用が進んでおり、データエンジニアやデータサイエンティストとしてのフリーランス案件は非常に豊富です。特に大規模データを扱うAI開発やデータ基盤構築の現場では必須スキルとされ、高単価で安定した需要が見込まれます。
