Atsushi2022の日記

データエンジニアリングに関連する記事を投稿してます

2022-08-01から1ヶ月間の記事一覧

Pythonのログ出力の仕組み

hackers-high.com python.civic-apps.com

GCP PDE模擬試験のメモ

概要 AutoML Vision Apache Hadoop BigTable 何百万台ものコンピュータのCPUとメモリの使用量を時系列で保存したい BigTableのクラスタサイズを増やすタイミングが知りたい パフォーマンスのボトルネックがある場合 Bigtable インスタンスを作成した後にスト…

読書メモ〜Google Cloudではじめるデータエンジニアリング入門

概要 「Google Cloudではじめるデータエンジニアリング入門」を読んだので、忘備としてメモしておく。 8章~11章のBigQueryへのデータ集約、BI、リアルタイム分析、発展的な分析はスキップする。 メモの順番は章立てと一致してない。なるべくサービス毎にメモ…