Ementorhub

What you'll learn

どのように Apache Beam と Cloud Dataflow が連携して組織のデータ処理ニーズを満たすことができるかを示す

Beam Portability フレームワークの利点を要約し、Dataflow パイプラインに対してフレームワークを有効にする

Shuffle Engine と Streaming Engine をそれぞれバッチパイプラインとストリーミングパイプラインに対して有効にすることで、パフォーマンスを最大化する

Flexible Resource Scheduling を有効にして、さらに費用効率の高いパフォーマンスを実現する

Skills you'll gain

Cloud Security

Identity and Access Management

Dataflow

Scalability

Data Processing

Application Frameworks

Data Pipelines

Data Transformation

Containerization

Interoperability

Serverless Computing

Data Infrastructure

Cloud Engineering

There are 6 modules in this course

このコースは、Dataflow を使用したサーバーレスのデータ処理に関する 3 コースシリーズのパート 1 です。この最初のコースでは、始めに Apache Beam とは何か、そして Dataflow とどのように関係しているかを復習します。次に、Apache Beam のビジョンと Beam Portability フレームワークの利点について説明します。Beam Portability フレームワークによって、デベロッパーが好みのプログラミング言語と実行バックエンドを使用できるビジョンが実現します。続いて、Dataflow によってどのように費用を節約しながらコンピューティングとストレージを分離できるか、そして識別ツール、アクセスツール、管理ツールがどのように Dataflow パイプラインと相互に機能するかを紹介します。最後に、Dataflow でそれぞれのユースケースに合った適切なセキュリティモデルを実装する方法について学習します。

Beam Portability

Dataflow を使用したコンピューティングとストレージの分離

IAM、割り当て、権限

セキュリティ

まとめ