コース内容
紹介
0/5
講座タイトル
00:46
本コースの概要
02:46
講師の自己紹介
00:24
学習ロードマップ
00:18
レビューのお願い
00:19
データ分析基盤環境の立ち上げと初期設定
データ分析基盤環境の立ち上げと初期設定
0/3
構築システムの概要
19:38
データ分析基盤環境の立ち上げ
08:09
Metabaseの設定
04:52
バッチデータの流れを作ってみよう
バッチデータの流れを作ってみよう
0/6
バッチでの流れ
01:30
データソースからEmbulkを使ってデータを取得してSSDに配置してみよう
03:04
SSDに配置したデータをSparkでETLしてみよう
01:43
SparkでETLしたデータをEmbulkを使ってPostgresにロードしてみよう
02:47
PostgresにロードしたデータをMetabaseから覗いてみよう
09:00
データソースにpeopleテーブルがあります。そのデータを取得しETLし、Postgresにロードするワークフローを定義してみましょう。
ストリーミングデータの流れを作ってみよう
0/8
ストリーミングでのデータの流れ
00:34
Kafkaトピックの設定とWeb画面
03:16
kafkaのメモリシンクでデータを参照してみよう
05:45
kafkaのファイルシンクでデータを保存してみよう
03:54
digdagでファイルシンクしたデータをETLしよう
03:48
ETLしたデータをEmbulkを使ってPostgres にロードしてみよう
02:48
PostgresにロードしたデータをMetabaseから参照してみよう
03:59
web_actionsのデータをactionごとの件数として集計したデータをpostgersにロードしてみよう
【実戦で学ぶデータ分析基盤構築講座】ローカル端末で1から始めるデータ分析基盤の構築とデータ活用のための活動
レッスン内容

今回構築するデータ分析基盤の全体像を説明します。

  • データソース

  • プロセシングレイヤー

  • ストレージレイヤー

  • アクセスレイヤー

前
次
0% 完了