すべてのデータ パイプラインには、データレイクとデータ ウェアハウスという 2 つの主要コンポーネントがあります。このコースでは、それぞれのストレージのユースケースに焦点を当て、Google Cloud Platform で利用可能なデータレイクおよびデータ ウェアハウスのソリューションを技術的に詳しく説明します。 また、データ エンジニアの役割や、適切なデータ パイプラインが事業運営にもたらすメリットについて述べ、クラウド環境でデータ エンジニアリングを行うべき理由を説明します。受講者は Qwiklabs を使用して、Google Cloud Platform のデータレイクとデータ ウェアハウスを実際に使ってみることができます。
课程信息
2,098 次近期查看
可分享的证书
完成后获得证书
100% 在线
立即开始，按照自己的计划学习。
可灵活调整截止日期
根据您的日程表重置截止日期。
中级
完成时间大约为8 小时
日语
字幕：日语, 英语（English）
可分享的证书
完成后获得证书
100% 在线
立即开始，按照自己的计划学习。
可灵活调整截止日期
根据您的日程表重置截止日期。
中级
完成时间大约为8 小时
日语
字幕：日语, 英语（English）
提供方
Google 云端平台
We help millions of organizations empower their employees, serve their customers, and build what’s next for their businesses with innovative technology created in—and for—the cloud. Our products are engineered for security, reliability, and scalability, running the full stack from infrastructure to applications to devices and hardware. Our teams are dedicated to helping customers apply our technologies to create success.
教学大纲 - 您将从这门课程中学到什么
完成时间为 7 分钟
はじめに
このモジュールでは、データ エンジニアリングの専門講座とコースの内容を紹介します。
完成时间为 7 分钟
2 个视频 （总计 7 分钟）
完成时间为 2 小时
データ エンジニアリング
このモジュールでは、データ エンジニアの役割と、クラウドでデータ エンジニアリングを行うべき理由を説明します
完成时间为 2 小时
13 个视频 （总计 55 分钟）
13 个视频
データ エンジニアリングの課題を分析する8分钟
BigQuery の概要3分钟
データレイクとデータ ウェアハウス5分钟
デモ: BigQuery での連携クエリ6分钟
トランザクション データベースとデータ ウェアハウスの比較4分钟
他のデータチームと効果的に連携する6分钟
データアクセスとデータ ガバナンスを管理する2分钟
デモ: DLP API を使用してデータセット内の個人情報（PII）を検出する1分钟
本番環境向けパイプラインを構築する2分钟
GCP ユーザーの事例紹介3分钟
まとめ1分钟
ラボの概要: BigQuery を使用した分析17
1 个练习
データ エンジニアリングの概要30分钟
完成时间为 2 小时
データレイクの構築
このモジュールではデータレイクの概要のほか、Google Cloud Storage を GCP 上のデータレイクとして使用する方法について説明します
完成时间为 2 小时
10 个视频 （总计 58 分钟）
10 个视频
データレイクの概要10分钟
GCP のデータ ストレージと ETL のオプション4分钟
Cloud Storage を使用したデータレイクの構築10分钟
デモ: Google Cloud Storage のストレージ クラスと Cloud Functions を使用したコストの最適化7分钟
Cloud Storage のセキュリティ機能5分钟
あらゆる種類のデータの保存5分钟
デモ: BigQuery で Parquet ファイルと ORC ファイルに対して連携クエリを実行する4分钟
リレーショナル データのクラウドへの保存1分钟
リレーショナル データレイクとしての Cloud SQL7分钟
ラボ: タクシーデータを Cloud SQL に読み込む27
1 个练习
データレイクの構築4分钟
完成时间为 4 小时
データ ウェアハウスの構築
このモジュールでは、GCP のデータ ウェアハウスとして使用できる BigQuery について説明します
完成时间为 4 小时
17 个视频 （总计 93 分钟）
17 个视频
BigQuery の概要1分钟
デモ: テラバイト規模のデータを数秒でクエリする7分钟
はじめに9分钟
データの読み込み11分钟
ラボの概要: BigQuery にデータを読み込む21
スキーマの確認24
デモ: スキーマの確認10分钟
スキーマ設計3分钟
ネストされたフィールドと繰り返しフィールド8分钟
デモ: ネストされたフィールドと繰り返しフィールド15分钟
ラボの概要: BigQuery で JSON データと配列データを操作する13
パーティショニングとクラスタ化による最適化5分钟
デモ: パーティション分割テーブルの作成7分钟
デモ: パーティショニングとクラスタ化6分钟
プレビュー: バッチデータとストリーミング データの変換2分钟
まとめ1分钟
1 个练习
データ ウェアハウスの構築4分钟
关于 Data Engineering, Big Data and ML on Google Cloud 日本語版 专项课程
この 5 週間のオンライン速習専門講座は、Google Cloud Platform でデータ処理システムを設計、構築する方法を学ぶための実践的な入門コースです。講義、デモ、ハンズオンラボを通して、データ処理システムの設計、エンドツーエンドのデータ パイプラインの構築、データの分析、機械学習の実施方法を学びます。このコースでは、構造化、非構造化、ストリーミングの各種データを扱います。
このコースでは、次のスキルについて学習します。
• Google Cloud Platform 上でデータ処理システムを設計し構築する
• 非構造化データを Cloud Dataproc 上で Spark と ML の API を使って活用する
• バッチおよびストリーミングのデータを処理するために自動スケーリング データ パイプラインを Cloud Dataflow 上で実装する
• 巨大なデータセットからのビジネス分析情報を Google BigQuery を使用して引き出す
• 機械学習モデルを使用したトレーニング、評価、予測を TensorFlow と Cloud ML を使用して行う
• ストリーミング データからの迅速な分析を実現する
このクラスは、デベロッパーとしての経験があり、次のようなビッグデータ変換の管理を担当する方を対象としています。
• データの抽出、読み込み、変換、クリーニング、検証を行う
• データ処理用のパイプラインとアーキテクチャを設計する
• 機械学習モデルと統計モデルを作成して保守する
• データセットに対してクエリを実行し、クエリ結果を視覚化して、レポートを作成する
>>>この専門分野に登録することにより、これはQwiklabsの利用規約に同意し、FAQに記載されています。https://qwiklabs.com/terms_of_service <<<
常见问题
我能否在注册前预览课程？
是的，您可以在注册之前预览第一个视频和查看授课大纲。您必须购买课程，才能访问预览不包括的内容。
我什么时候能够访问课程视频和作业？
如果您决定在班次开始日期之前注册课程，那么您将可以访问课程的所有课程视频和阅读材料。班次开始之后，您便可以提交作业。
我注册之后会得到什么？
在您注册且班次开课之后，您将可以访问所有视频和其他资源，包括阅读材料内容和课程论坛。您将能够查看和提交练习作业，并完成所需的评分作业以获得成绩和课程证书。
我什么时候会收到课程证书？
如果您成功完成课程，您的电子课程证书将添加到您的成就页中，您可以通过该页打印您的课程证书或将其添加到您的领英档案中。
我为什么不能旁听此课程？
该课程是 Coursera 上提供的为数不多的课程之一，目前只对已购买课程或已获得助学金的学生开放。
What is the refund policy?
如果订阅，您可以获得 7 天免费试听，在此期间，您可以取消课程，无需支付任何罚金。在此之后，我们不会退款，但您可以随时取消订阅。请阅读我们完整的退款政策。
Is financial aid available?
是的，Coursera 可以为无法承担费用的学生提供助学金。通过点击左侧“注册”按钮下的“助学金”链接可以申请助学金。您可以根据屏幕提示完成申请，申请获批后会收到通知。您需要针对专项课程中的每一门课程完成上述步骤，包括毕业项目。了解更多。
完成课程后，我会获得大学学分吗？
此课程不提供大学学分，但部分大学可能会选择接受课程证书作为学分。查看您的合作院校，了解详情。Coursera 上的在线学位和 Mastertrack™ 证书提供获得大学学分的机会。
还有其他问题吗？请访问 学生帮助中心。
