Apache Sparkのフリーランス求人・案件一覧(97件)
1 - 20/件 全97件
【Python/SQL/リモート併用】リサーチ業界向けデータ利活用基盤開発:データエンジニアのフリーランス求人・案件
案件の内容
リサーチ業界向けに、Web・アプリ・TV等の各種ログデータを対象とした抽出・クレンジング・集計処理システムの開発を担当していただきます。基本設計から本番環境移行・導入、運用・保守まで担当し、バッチ処理・データ処理系の仕組みが中心です。
求めるスキル
【Databricks/リモート併用】金融業界 データクレンジング/データ統合:データエンジニアのフリーランス求人・案件
案件の内容
金融業界のデータ統合・利活用案件において、データクレンジング・収集に伴うバッチ作成を担当していただきます。アプリ側ではなく、データ分析基盤周りの業務となります。
求めるスキル
【Next.js/TypeScript/AWS/リモート併用】Wi-Fi運用監視・分析システム新規構築:バックエンド/フロントエンドエンジニアのフリーランス求人・案件
案件の内容
オープンローミングを活用したWi-Fiアクセスポイントの稼働状況および利用状況(動体分析など)を可視化するシステムを新規構築。要件定義・基本設計フェーズからクラウドAIツールを活用し、プロトタイプベースで開発を推進する。
求めるスキル
【Databricks/データクレンジング/リモート併用】金融データ統合・利活用:データエンジニアのフリーランス求人・案件
案件の内容
金融業界のデータ統合・利活用案件において、データクレンジング・収集に伴うバッチ作成(データ分析基盤周りの業務)をご担当いただきます。
求めるスキル
【Databricks/Apache Spark/リモート併用】データクレンジング・データ分析基盤開発:チームメンバーのフリーランス求人・案件
案件の内容
大手金融機関のデータ統合・利活用において、データクレンジング・収集に伴うバッチ作成を担当していただきます。アプリ側ではなく、データ分析基盤周りの業務です。
求めるスキル
【Databricks/SQL/フルリモート】大手HR事業向けデータ抽出:データエンジニアのフリーランス求人・案件
案件の内容
HR系クライアントのデータ事業部にて、データ分析/活用プロジェクトに関わるデータ抽出を担当していただきます。クエリの読み書きに加え、ドメインへのキャッチアップと依頼者の用件を汲み取った仕様検討・データ抽出を行います。
求めるスキル
【Databricks/AWS/リモート併用】国内最大級リテールメディアデータ基盤構築:データエンジニアのフリーランス求人・案件
案件の内容
国内大手コンビニチェーンや携帯キャリアが保有する膨大なID-POSデータ(オフライン購買データ)を活用したデータプラットフォーム開発プロジェクトです。提携データの標準化・取り込み、広告効果測定レポート基盤構築、Databricks軸のETL運用改善、BI可視化連携、データサイエンティストとの分析ロジック統合を担当していただきます。
求めるスキル
【Databricks/Apache Spark/リモート併用】金融業界向けデータクレンジング基盤:データエンジニアのフリーランス求人・案件
案件の内容
金融業界のデータ統合・利活用において、データクレンジング・収集に伴うバッチ作成を担当いただきます。データ分析基盤周りの開発が主な業務です。
求めるスキル
【Java/Spring Boot/常駐】不動産業界向けシステム開発:バックエンドエンジニアのフリーランス求人・案件
案件の内容
不動産業界向けWebアプリケーションの新規開発・追加開発および維持保守を担当いただきます。バックエンド開発を中心に、大量データ処理やSQLを用いたデータ取得・分析にも対応いただき、要件定義から開発・テスト・運用保守まで一貫して携われるポジションです。
求めるスキル
【Databricks/SQL/フルリモート】HR事業データ抽出:データエンジニアのフリーランス求人・案件
案件の内容
HR系クライアントのデータ事業部にて、データ分析/活用プロジェクトに関わるデータ抽出をメインに担当していただきます。SQLの読み書きに加え、ドメインへのキャッチアップと依頼者の用件汲み取りを行い、仕様検討・データ抽出を行います。
求めるスキル
【Databricks/データクレンジング/リモート併用】金融業界データ統合・利活用:データエンジニアのフリーランス求人・案件
案件の内容
金融業界のデータ統合・利活用案件において、データクレンジングおよび収集に伴うバッチ作成を担当していただきます。アプリ側ではなくデータ分析基盤周りの業務となります。
求めるスキル
【Databricks/AWS/リモート併用】銀行向けAI基盤構築:仕様策定・開発推進のフリーランス求人・案件
案件の内容
大手金融機関向けAI基盤案件において、アプリ側担当者としてDatabricksを活用したAI基盤領域の要件定義~開発推進をご担当いただきます。既存のAWSデータ基盤(S3/Redshift等)と連携しながら、顧客・各ベンダー・関連部署と調整を行い、仕様策定~開発推進のリードまたはDatabricksの設計・技術サポートを行うポジションです。
求めるスキル
【AWS/Databricks/リモート併用】金融機関向けAI基盤構築:データエンジニアのフリーランス求人・案件
案件の内容
大手金融機関向けAI基盤案件において、Databricks Workspace設計または同等のキャッチアップを前提に、AWS環境でのアプリ開発を担当。AI基盤の技術サポートとして顧客・各ベンダー・関連部署と調整を行います。
求めるスキル
【AWS/Python/リモート併用】金融機関向けAI基盤構築:プログラマのフリーランス求人・案件
案件の内容
大手金融機関向けAI基盤案件において、アプリ側担当者としてDatabricksを活用したAI基盤領域の要件定義〜開発推進をご担当いただきます。既存のAWSデータ基盤(S3/Redshift等)と連携しながら、仕様策定〜開発推進のリードまたはDatabricks設計・技術サポートを行うポジションです。
求めるスキル
【Python/SQL/常駐】メーカー向けDXプラットフォーム開発:PGのフリーランス求人・案件
案件の内容
メーカー向けDXプラットフォームの開発案件です。Azure上に構築されたDXプラットフォームにおいて、対向システムとのインターフェース関連の開発を中心に担当していただきます。
求めるスキル
【AWS/Databricks/リモート併用】銀行向けAI基盤構築(仕様策定・開発推進):データエンジニアのフリーランス求人・案件
案件の内容
銀行向けのAI基盤案件において、アプリ側担当としてDatabricksを活用したAI基盤領域の要件定義から開発推進を担当していただきます。既存のAWSデータ基盤(S3/Redshift等)と連携しながら、仕様策定〜開発推進のリードを行い、顧客・各ベンダー・関連部署と調整します。
求めるスキル
【Databricks/AWS/リモート併用】銀行向けAI基盤構築:AIエンジニア/PMのフリーランス求人・案件
案件の内容
銀行向けAI基盤案件において、アプリ側担当としてDatabricksを活用したAI基盤領域の要件定義~開発推進を担当。既存のAWSデータ基盤(S3/Redshift等)と連携しながら、仕様策定~開発推進のリード、またはDatabricksの設計・技術サポートを行う。
求めるスキル
【AWS/リモート併用】損害保険会社向けデータ分析基盤追加開発:セキュリティエンジニアのフリーランス求人・案件
案件の内容
大手損害保険会社のデータ分析基盤における基盤追加開発。要件整理、設計~試験、導入、顧客向け資料作成および説明を担当いただきます。AWS上のインフラ基盤を設計し、数ヶ月ごとの小規模追加開発を継続的に行います。
求めるスキル
【Databricks/AWS/リモート併用】銀行向けAI基盤構築(仕様策定リード):データエンジニアのフリーランス求人・案件
案件の内容
銀行向けAI基盤案件において、アプリ側担当としてDatabricksを活用したAI基盤領域の要件定義~開発推進を担当いただきます。既存のAWSデータ基盤と連携しながら、顧客・各ベンダー・関連部署と調整し、仕様策定~開発推進をリードいただきます。
求めるスキル
【Databricks/Google Cloud/常駐】金融機関向けデータマネジメント基盤構築:メンバーのフリーランス求人・案件
案件の内容
大手金融機関向けに、Google Cloud(BigQuery)上で稼働するデータマネジメントシステムの構築・保守・追加開発プロジェクト。PM・リーダー・メンバーの計5名体制の中で、メンバーポジションとして実装・運用を担当いただきます。
求めるスキル
1 - 20/件 全97件
Apache Sparkのフリーランス案件・求人に関する情報
Apache Sparkのフリーランス求人・案件について
Apache Sparkとは
Apache Sparkは、大規模データの高速処理を実現するオープンソースの分散処理フレームワークです。メモリ内(インメモリ)でデータを処理する仕組みにより、従来のHadoop MapReduceと比較して飛躍的に高速なデータ解析が可能であり、現在のビッグデータ処理におけるデファクトスタンダードとなっています。
主な特徴と役割
バッチ処理、ストリーミング処理(Spark Streaming)、機械学習(MLlib)、SQLクエリ(Spark SQL)など、多様なワークロードを単一のプラットフォームで統合的に扱える点が最大の特徴です。主にPython (PySpark)、Scala、Javaを用いて開発され、データパイプラインの構築や大規模ログ解析などで中心的な役割を果たします。
市場動向と将来性
AWS (EMR, Glue) や Google Cloud (Dataproc) といったクラウドサービスでの採用が進んでおり、データエンジニアやデータサイエンティストとしてのフリーランス案件は非常に豊富です。特に大規模データを扱うAI開発やデータ基盤構築の現場では必須スキルとされ、高単価で安定した需要が見込まれます。
