データ パイプラインは通常、Extract-Load（抽出、読み込み）、Extract-Load-Transform（抽出、読み込み、変換）、Extract-Transform-Load（抽出、変換、読み込み）のいずれかの方式に分類されます。このコースでは、どの方式をどのような場合にバッチデータに対して使用すべきかを説明します。また、Google Cloud Platform 上のデータ変換技術（BigQuery など）、Cloud Dataproc での Spark の実行、Cloud Data Fusion でのパイプライン グラフ、Cloud Dataflow によるサーバーレスのデータ処理についても取り上げます。Qwiklabs を使用して、Google Cloud Platform でデータ パイプライン コンポーネントを実際に構築できます。
ofrecido por
Google CloudAcerca de este Curso
2,013 vistas recientes
Certificado para compartir
Obtén un certificado al finalizar
100 % en línea
Comienza de inmediato y aprende a tu propio ritmo.
Fechas límite flexibles
Restablece las fechas límite en función de tus horarios.
Nivel intermedio
Aprox. 13 horas para completar
Japonés
Subtítulos: Japonés, Inglés (English)
Certificado para compartir
Obtén un certificado al finalizar
100 % en línea
Comienza de inmediato y aprende a tu propio ritmo.
Fechas límite flexibles
Restablece las fechas límite en función de tus horarios.
Nivel intermedio
Aprox. 13 horas para completar
Japonés
Subtítulos: Japonés, Inglés (English)
ofrecido por
Google Cloud
We help millions of organizations empower their employees, serve their customers, and build what’s next for their businesses with innovative technology created in—and for—the cloud. Our products are engineered for security, reliability, and scalability, running the full stack from infrastructure to applications to devices and hardware. Our teams are dedicated to helping customers apply our technologies to create success.
Programa - Qué aprenderás en este curso
6 minutos para completar
はじめに
このモジュールでは、本コースの内容とアジェンダを紹介します
6 minutos para completar
2 videos (Total 6 minutos)
1 hora para completar
バッチデータ パイプラインの概要
このモジュールでは、EL、ELT、ETL というデータ読み込み方式と、各方式をどのような場合に使うべきかを確認します
1 hora para completar
5 videos (Total 18 minutos)
1 ejercicio de práctica
EL、ELT、ETL30m
2 horas para completar
Cloud Dataproc での Spark の実行
このモジュールでは、Cloud Dataproc で Hadoop を実行する方法、GCS の活用法、Dataproc ジョブを最適化する方法を説明します。
2 horas para completar
9 videos (Total 49 minutos)
9 videos
Cloud Dataproc での Hadoop の実行10m
HDFS の代わりに GCS を使用する6m
Dataproc の最適化5m
Dataproc ストレージの最適化9m
Dataproc のテンプレートと自動スケーリングの最適化4m
Dataproc のモニタリングの最適化3m
ラボの概要: Cloud Dataproc で Apache Spark ジョブを実行する27s
まとめ31s
1 ejercicio de práctica
Cloud Dataproc での Spark の実行4m
3 horas para completar
Cloud Data Fusion と Cloud Composer によるデータ パイプライン管理
このモジュールでは、Cloud Data Fusion と Cloud Composer を使ってデータ パイプラインを管理する方法を説明します。
3 horas para completar
11 videos (Total 45 minutos)
11 videos
概要7m
Data Fusion のコンポーネント2m
パイプラインの構築6m
Wrangler を使用したデータの調査1m
ラボ: Cloud Data Fusion でパイプライン グラフを構築し実行する17s
Cloud Composer を使用した GCP サービス間での処理のオーケストレーション1m
Apache Airflow 環境1m
DAG と演算子12m
ワークフローのスケジュール設定6m
モニタリングとロギング4m
ラボ: Cloud Composer の概要12s
1 ejercicio de práctica
Cloud Data Fusion と Cloud Composer30m
7 horas para completar
Cloud Dataflow によるサーバーレスのデータ処理
このモジュールでは、Cloud Dataflow を使ったデータ処理パイプライン構築を取り上げます。
7 horas para completar
12 videos (Total 40 minutos)
12 videos
Dataflow が評価される理由3m
Cloud Dataflow パイプライン構築のコード例3m
パイプラインの設計に関する主な考慮事項2m
PTransforms によるデータの変換3m
ラボ: シンプルな Dataflow パイプラインを構築する17s
GroupByKey と Combine を使用した集約7m
ラボ: Cloud Dataflow での MapReduce 18s
副入力とデータのウィンドウ4m
ラボ: パイプラインへの副入力を作成する11s
パイプライン テンプレートの作成と再利用3m
Cloud Dataflow SQL パイプライン3m
1 ejercicio de práctica
Cloud Dataflow によるデータ処理30m
4 minutos para completar
まとめ
このモジュールでは、本コースで学んだトピックを復習します
4 minutos para completar
1 video (Total 4 minutos)
1 video
コースのまとめ4m
Preguntas Frecuentes
¿Puedo acceder a una vista preliminar del curso antes de inscribirme?
Sí, puedes acceder a una vista preliminar del primer video y ver el programa antes de inscribirte. Debes comprar el curso para acceder a contenido que no está incluido en la vista preliminar
¿Qué recibiré cuando me inscriba?
Una vez que te inscribes y comienza la sesión, tendrás acceso a todos los videos y otros recursos, incluidos artículos de lectura y el foro de debate del curso. Podrás ver y enviar tareas de práctica y completar tareas con calificación obligatorias para obtener un título y un Certificado de curso
¿Cuándo recibiré mi Certificado de curso?
Si completas el curso de manera correcta, tu Certificado de curso electrónico se agregará a la página Logros. Desde allí, puedes imprimir tu Certificado de curso o agregarlo a tu perfil de LinkedIn
¿Por qué no puedo participar como oyente en este curso?
Este curso es uno de los pocos que se ofrecen en Coursera que está actualmente disponible solo para estudiantes que pagaron o que recibieron ayuda económica, si está disponible.
¿Recibiré crédito universitario por completar el Curso?
Este Curso no otorga crédito universitario, pero algunas universidades pueden aceptar los Certificados del curso para obtener crédito. Consulta con tu institución para obtener más información. Los Títulos en línea y los Certificados Mastertrack™ de Coursera brindan la oportunidad de obtener créditos universitarios.
¿Tienes más preguntas? Visita el Centro de Ayuda al Alumno.
