BigQuery

Google Cloud

Fivetranを使用して、メールから送られてくるデータをBigQueryに格納してみた

クラウド型データ連携サービスであるFivetranを活用し、BigQueryに効率的にデータを格納する方法について解説します。データエンジニアリングの知識がなくても、Fivetranを使えば、簡単にデータ連携パイプラインを構築することができます。
Google Cloud

【Google Cloud】BigQuery の外部テーブル機能

BigQuery外部テーブル徹底解説!GCSのデータをロード不要で即分析。作成方法から活用例、注意点まで分かりやすく解説。データレイク連携や一時分析にも最適。
Google Cloud

【Google Cloud】BigQueryのビュー機能まとめ

BigQuery のビュー機能の基本的な概念から、具体的な活用例、そして知っておくべき重要なポイントまでを徹底解説します。今回は標準ビュー、承認済みビュー、マテリアライズドビューのそれぞれのメリット、ユースケースをまとめます。
Google Cloud

【Google Cloud】Agentspaceについてご存じですか?⑤「ブレンドRAG編」

今回はブレンドRAGの機能を活用し、複数のデータソースを精査した上で回答を生成させるデモを紹介します。対象のデータソースを一か所に集約させることなく、データソースを複数選択することができるので、現状の業務環境にフィットさせる形で利用を開始することが可能です。
Google Cloud

【Google Cloud】Agentspaceについてご存じですか?④「BigQuery編」

AgentspaceのデータソースとしてBigQueryテーブルを接続し、テーブル内の情報から回答を生成させるデモをご紹介します。
Google Cloud

【Google Cloud】BigQueryにCSVデータを取り込むときに遭遇したエラーと解消方法

BigQueryにCSVデータを取り込む際にあたったエラーを備忘録を兼ねてまとめました。大規模データの際は、これらのエラーが複合的に出てくることがあります。その際も、今回ご紹介した解消方法を組み合わせることで(だいたいは)解消可能です。
Google Cloud

【Google Cloud】Associate Data Practitioner 受験前レポート

今回は、Google Cloud認定資格に新しく追加された「Associate Data Practitioner」の受験前レポートです。実際にどんな対策をして臨んだのかを記録しようと思います。
Google Cloud

Google Workspaceの監査ログ 保持期間延長方法 ~BigQueryへ転送~

Google Workspaceの監査ログ保持期間を延長するために、Reports APIを使用してログをBigQueryへ転送する方法を紹介します。
Google Cloud

【GCP】BigQuery Explainable AI でモデルの予測結果を説明させる

BigQuery Explainable AI(XAI)を使って機会学習モデルが算出した予測値を説明させてみます。モデルの予測結果に影響を与えた特徴を数値化します。
Google Cloud

BigQueryで大きなテーブルを扱う際のTips~高額課金を防止したい~

BigQueryでTBレベルの大きなデータを扱うとき、意図しない高額課金のリスクを抑えたいと思ったことはありませんか?大きなテーブルを扱う上で、コスト削減につながるTipsをいくつかご紹介します。