記事情報殿堂入り企業

クックパッドのデータ活用基盤

クックパッドのデータ活用基盤

インフラ部 & 技術部の青木峰郎です。クックパッドでは全社的にAmazon Redshiftを中心としたデータ活用基盤を構築しています。今日はその全体像についてお話ししたいと思います。データ活用基盤の全体像まず、以下にクックパッドのデータ活用基盤の全体像を示します。大きく分けると入力が2系統、内部処理が1系統、出力が3系統あります。入力はMySQLからのイン...

更新日: 2017-10-06
記事の見出し
  • クックパッドのデータ活用基盤
  • データ活用基盤の全体像
  • 入力その1: MySQLインポートシステム
  • 入力その2: ログをロードするStreaming Loadシステム
  • 入力その3: Redshift Spectrum向けロードシステム(未リリース)
  • データの加工: SQLバッチ
  • Redshift内のデータアーキテクチャ
  • 出力その1, 2: BIツールと管理アプリからの参照
  • 出力その3: バッチからの参照
  • データベースのドキュメント: dmemo
  • まとめ
  • [宣伝] 『ふつうのLinuxプログラミング』の第2版が出ました
テックブログ情報
クックパッドのデータ活用基盤
ブログクックパッド開発者ブログ
ブログ概要
QiitaQiita::cookpad
会社名株式会社クックパッド
会社概要国内6000万MAUのレシピ投稿・検索サービスの『クックパッド』を運営しています
上場情報Yahoo!ファイナンス