BigQuery

| Google Cloud Platform | Angular | Flask | TypeScript | Firebase |

link

BigQueryとは

• https://www.topgate.co.jp/gcp12-how-to-analyze-big-data-with-bigquery
• SQL さえ覚えれば大量のデータを使って集計作業や解析作業を行うことが可能
• 利用に必要なのはデータを何らかの形で BigQuery にインポートすることだけ
• BigQuery はデータのインポート元として、 Google Cloud Storage 、 File Upload 、 Google ドライブをサポート
• 操作はすべて Web の UI から行える

Document

• https://cloud.google.com/bigquery/docs?hl=ja

クライアントライブラリの使用

• https://cloud.google.com/bigquery/docs/quickstarts/quickstart-client-libraries?hl=ja

Consle

• https://console.cloud.google.com/bigquery

Tips

一般公開データセット

• https://www.isoroot.jp/blog/2101/
• 一般公開データセットのひとつである、Stackoverflow データセットに対してクエリを実行

SELECT 
  title, answer_count, view_count
FROM
  `bigquery-public-data.stackoverflow.posts_questions`
ORDER BY
  view_count DESC
LIMIT 10

Cloud StorageからCloud Functions を使用

• Cloud Functions を使用した Cloud Storage から BigQuery へのデータのストリーミング

Firestore エクスポートからのデータの読み込み

• Firestore エクスポートからのデータの読み込み