8/6 (水)
category
ブレイクアウト
D2-DA-10
BigQuery を中心としたオープン データ レイクハウスとデータ パイプライン
location_on
Room 1
schedule
13:00 - 13:30
昨今 Iceberg を中心としたオープンテーブル フォーマットへの注目が高まり、データ量の増加とそれに伴う大量データに対するリアルタイム分析への対応が求められています。
本セッションの前半では、Iceberg を活用するための BigQuery、Google Cloud Storage を用いたオープン AI レイクハウス構築によるデータ運用効率化と分析高度化を実現するアーキテクチャ・実践例を紹介します。
後半は、リアルタイム分析に重要なデータ パイプラインについて、Dataflow ジョブビルダー、BigQuery 継続的クエリ、リバース ETL など、BigQuery を中心とした最新データ パイプラインについて解説します。
取り上げる主な Google Cloud 製品 / サービス
・BigQuery
・Dataflow
中級者向け
データ エンジニア / アナリスト / サイエンティスト
IT マネージャー / リーダー
アーキテクチャ
データ分析
マルチクラウド
ストレージ
全業種向け