Dataprocとは？機能や特徴・製品の概要まとめ

データパイプライン

Dataproc

Google

プロダクト情報

レビュー0

アーキテクチャ

Dataproc

Google

プロダクト情報

レビュー0

アーキテクチャ

Dataprocのプロダクト概要

Dataprocとは

Apache Spark, Apache Hadoop, Apache Flink, Prestoなどのオープンソースデータ処理フレームワークをGoogle Cloud上で迅速かつ容易に実行できるフルマネージドサービス。

利用企業数	非公開	日本語サポート	なし	無料トライアル	なし
カスタマーサクセス	なし	公式ドキュメント	なし

Dataprocの特徴

1. 高速なクラスタ作成（数秒～数分）、柔軟な自動スケーリング、ジョブごとのクラスタ構成。

2. ジョブのスケジューリング、モニタリング、ロギングの統合管理。

3. コンポーネントゲートウェイを通じたJupyter Notebook, Zeppelin, Presto Web UIなどへのセキュアなアクセス。

Dataprocとよく比較されるサービス

dbt

dbt Labs, Inc.

Database Migration Service

Google

Transfer Appliance

Google

Amazon AppFlow

Amazon Web Services, Inc.

AWS Application Migration Service

Amazon Web Services, Inc.

AWS Data Pipeline

Amazon Web Services, Inc.

AWS DataSync

Amazon Web Services, Inc.

AWS Database Migration Service

Amazon Web Services, Inc.

Amazon EMR

Amazon Web Services, Inc.

AWS Glue

Amazon Web Services, Inc.

AWS IoT Analytics

Amazon Web Services, Inc.

AWS Snowball

Amazon Web Services, Inc.

AWS Storage Gateway

Amazon Web Services, Inc.

Amazon Managed Workflows for Apache Airflow

Amazon Web Services, Inc.

AWS Migration Hub

Amazon Web Services, Inc.

AWS Snowcone

Amazon Web Services, Inc.

AWS Snowmobile

Amazon Web Services, Inc.

AWS Transfer Family

Amazon Web Services, Inc.

Dataform

Google

Apache Airflow

OSS

Apache Beam

OSS

Prefect

Prefect Technologies

Dagster

Elementl

Luigi

OSS

Keboola

Google Cloud Workflows

Google Cloud

StreamSets

IBM

Dataprocとよく比較されるサービス

dbt

dbt Labs, Inc.

Database Migration Service

Google

Transfer Appliance

Google

Amazon AppFlow

Amazon Web Services, Inc.

AWS Application Migration Service

Amazon Web Services, Inc.

AWS Data Pipeline

Amazon Web Services, Inc.

AWS DataSync

Amazon Web Services, Inc.

AWS Database Migration Service

Amazon Web Services, Inc.

Amazon EMR

Amazon Web Services, Inc.

AWS Glue

Amazon Web Services, Inc.

AWS IoT Analytics

Amazon Web Services, Inc.

AWS Snowball

Amazon Web Services, Inc.

AWS Storage Gateway

Amazon Web Services, Inc.

Amazon Managed Workflows for Apache Airflow

Amazon Web Services, Inc.

AWS Migration Hub

Amazon Web Services, Inc.

AWS Snowcone

Amazon Web Services, Inc.

AWS Snowmobile

Amazon Web Services, Inc.

AWS Transfer Family

Amazon Web Services, Inc.

Dataform

Google

Apache Airflow

OSS

Apache Beam

OSS

Prefect

Prefect Technologies

Dagster

Elementl

Luigi

OSS

Keboola

Google Cloud Workflows

Google Cloud

StreamSets

IBM