時系列データの成分分解とは、時系列データを、トレンド、季節性、残差の 3 つの成分に分解する手法です…
ローカルのJupyter NotebookからBigQueryのデータを簡単に取得する方法
ローカルPCで開発している場合、Jupyter Notebook から直接BigQueryのデータを…
知らなきゃ損!BigQuery クエリの連続実行
複数のクエリを一度に連続実行できたら便利ですよね。 クエリ1を実行し、その結果をpre1テーブルに保…
Google スプレッドシートをBigQueryの外部テーブルとして使ってみたら便利だった
BigQueryにCSVからデータを取り込むと、データを変更するときに洗い替えが必要になって大変だな…
BigQuery でクエリ結果が大きすぎて実行できない時の対処法
BigQueryでクエリ結果が大きすぎて実行できない時、クエリを分割したり、カラム数を減らしたり、W…
PoCで受領した大量の分割zipファイルを、GCS→BigQueryに一括で解凍&ロードする一番簡単な方法(Dataflow)
データをもらったはいいけど ・大量すぎて自社環境に移せない・ローカルでは解凍しきれない・手作業でアッ…
時系列データ同士(複数可)の波形の類似度を BigQuery のクエリ一発で計算する方法
複数の時系列データの波形の類似度を BigQuery のクエリ一発で調べる方法をご紹介します。だって…
BigQueryで期間を日別に展開&歯抜け補完するビフォーアフター
BigQueryのクエリ一発で期間データを日別レコードに展開し、歯抜けを補完、さらに正規化する方法を…
もうアプリ化とかしなくてよくない? BigQueryとVertexAIのノートブックでサクサク開発
こんにちは。自前PCはMacbookAirですが、ビッグデータを解析するコードを書いている私です。P…