Apache Sparkのフリーランス求人・案件一覧（133件）

案件の内容

大手企業向けデータ活用基盤構築プロジェクトにおいて、インフラ基盤領域の基本設計フェーズを担当いただきます。AWSおよびDatabricks環境の基本設計、クラウド・ネットワーク設計、Terraformを利用したIaC設計、運用監視・バックアップ設計、設計書・パラメータシート作成、顧客や他チームとの技術調整までを担います。

求めるスキル

案件の内容

大手企業向けデータ活用基盤構築プロジェクトにおいて、インフラ基盤領域を担当するチームリーダーとして参画いただきます。AWSおよびDatabricksを活用したデータ基盤環境の基本設計フェーズを担い、クラウド・ネットワーク設計、Databricks環境設計、Terraformを利用したIaC設計、運用監視・バックアップ設計、設計書作成、顧客や他チームとの技術調整、課題・進捗管理、設計方針の策定とチームリードまで担当いただきます。

求めるスキル

案件の内容

Azure SynapseからAzure Databricksへのデータ基盤移行プロジェクトで、Azure環境のインフラ・ネットワーク設計構築とTerraformによるIaC化を担当する案件です。Azure環境におけるリソース間ネットワークの設計・構築、Terraformを用いたAzureリソースのコード化と構成管理、Azure Databricks構築に伴うインフラ設計・設定、クライアントへのTerraformレクチャーやスキルトランスファーを担当します。

求めるスキル

案件の内容

大手企業向けのデータ活用基盤構築プロジェクトにおいて、インフラ基盤領域のチームリーダーとして参画いただきます。AWSおよびDatabricksを活用したデータ基盤環境の基本設計フェーズで、AWS基盤とDatabricks環境の基本設計、クラウド・ネットワーク設計、Terraformを利用したIaC設計、運用監視・バックアップ設計、設計書の作成を担当します。顧客折衝や設計方針の策定、課題管理・進捗管理を含むチーム推進も担います。

求めるスキル

案件の内容

Databricksを活用したデータ分析基盤の導入・構築プロジェクトです。要件定義から設計、構築、稼働後フォローまで、一連の工程に携わるリーダーポジションを担当いただきます。顧客折衝を行いながら、CLIコマンドを用いた構築作業もお任せします。

求めるスキル

案件の内容

大手企業向けデータ活用基盤構築プロジェクトにおいて、インフラ基盤領域を担当するチームリーダーを募集する案件です。AWSおよびDatabricksを活用した基盤環境の基本設計フェーズで、クラウド・ネットワーク設計、Databricks環境設計、運用設計などを担います。顧客折衝や設計方針の取りまとめ、課題・進捗管理、チーム推進を担い、AWS基盤とDatabricks環境の基本設計、Terraformを用いたIaC設計、運用監視・バックアップ設計、設計書作成にも携わります。

求めるスキル

案件の内容

マーケティング事業者の精算系分析基盤移行プロジェクトで、GCP上で運用中の精算データ基盤（DWH）をAWS環境へ統合・移行する案件です。AWS Glue（PySpark）とSQLを用いたデータ移行処理の開発、GCPからAWSへの移行対応、AWS Step FunctionsやEventBridgeを利用したワークフローの実装・改修、現行システムと新システムの比較検証と差分の改修までを担当いただきます。

求めるスキル

案件の内容

Databricks AIプラットフォームを活用し、エンタープライズ向けの生成AIソリューションを設計・開発する案件です。Data Genie、ベクターデータベース、RAG、AIエージェント、MLflow、プロンプトエンジニアリングの技術を組み合わせて取り組みます。データ基盤の導入や、知識検索ソリューションなど企業データプラットフォーム向けの施策の支援にも携わっていただく立場です。

求めるスキル

案件の内容

企業向けのデータ分析基盤の設計対応を担当していただく案件です。AWSを用いたデータ分析基盤の設計が主な業務で、状況に応じてデータ加工や開発にも関わっていただく可能性があります。

求めるスキル

案件の内容

アジャイル開発の中で、バックログに積まれた課題を順次解消していく案件です。新機能リリースに伴うセキュリティ要件を踏まえた対策の検討・設定や監視ジョブの作成、既存機能の改善に対応します。既存機能のヒアリングと調査、あるべき設計の検討、セキュリティリスクへの対応方針の設計、関係者との調整、Databricks上での設定・検証・テストまでが主な業務です。

求めるスキル

案件の内容

金融系のビッグデータ基盤とAIシステムの統合に伴う、基盤構築・検証案件です。既存メンバーが別プロジェクトへ段階的に移行することに伴う増員枠として、認証・プロキシ等の基盤設定、AWSリソースおよびDatabricksの検証作業（特にセキュリティ領域）を担当していただきます。一定期間は既存メンバーからのフォロー体制が整っています。

求めるスキル

案件の内容

Databricksを活用したデータ分析基盤の導入・構築を担当いただきます。要件定義からリリース、運用・保守までの一連の工程に携わり、顧客の要望や課題を整理したうえで、最適なサービス構成の提案を行います。

求めるスキル

案件の内容

基幹システム刷新プロジェクトにおける、原価管理領域のシステム開発です。VueJS/NodeJSを用いたアプリケーション開発のうち、システム間連携（API）開発と現行システムからのデータ移行を担当いただきます。バックエンドチームをリードする立場で、技術サポートや進捗管理も担います。

求めるスキル

案件の内容

基幹システム刷新プロジェクトにおける、原価管理領域のシステム開発です。VueJS/NodeJSを用いたアプリケーション開発のうち、システム画面の開発を担当いただきます。チーム開発となるため、メンバーと連携しながら自走して進めていただきます。

求めるスキル

案件の内容

Databricksを活用したデータ基盤の設計・構築を支援するプロジェクトです。各種データソースからのデータ取り込み・加工・統合、データパイプラインの設計・実装・改善、業務要件を踏まえたデータモデリングを担当していただきます。複数システムを横断したデータ構造の整理、新規データソース追加時の連携方式の検討、データ品質を踏まえた設計、関係部門との要件整理・技術検討支援も担います。

求めるスキル

案件の内容

損害保険会社の分析基盤システム開発案件において、プロジェクトの推進を支援していただきます。進捗管理、計画書・仕様書の作成、関連サブシステムとの調整や問い合わせ対応に加え、お客様・関連部署・開発ベンダー間の調整、変更設計書や作業計画書、各種報告書、議事録などのドキュメント作成を担当いただきます。

求めるスキル

案件の内容

大手金融グループのシステム会社において、グループ各社のDatabricks利用検討案件に対し、ヒアリングから構成検討、概算見積の作成支援、進捗管理、技術確認、案件化後の引き継ぎまでを一気通貫で支援していただきます。現行環境や引合プロセスの説明を受けた後は、自走して引合対応を進める上流ポジションです。

求めるスキル

案件の内容

金融機関向け情報システム会社において、暗黙知や非構造化データを構造化し、生成AI（AIエージェント）から参照できるデータへ整備するPoC案件です。社内ドキュメントや業務ナレッジのMarkdown化、チャンク化・ベクトル化、メタデータ付与・データモデル設計の実装と検証を一貫して担当いただきます。仕様が固まりきっていない環境で、試行錯誤しながらデータ変換・加工パイプラインを作り上げていただきます。

求めるスキル

案件の内容

大手製造業の工場・オンプレミス環境で発生する設備テレメトリー、ストリーミングデータ、画像・動画・音声などのファイルデータをクラウドへ収集・蓄積し、Databricksなどで利活用するデータ基盤の構築案件です。要件定義から方式設計、アーキテクチャ設計、PoC、構築までを担当し、ネットワーク切断時の一時保管・再送、メタデータとの紐付け、アーカイブ、データカタログ連携、ガバナンス設計まで含めたデータアーキテクチャを検討していただきます。

求めるスキル

案件の内容

建設業の原価管理システム開発プロジェクトにおいて、現行システムからのデータ移行（バックエンド）を中心に担当いただきます。データ移行の検討に加え、バックエンドチームの技術サポートと進捗管理を担い、要件定義、設計、開発、テスト、運用保守までをAI駆動開発で対応します。

求めるスキル