AWS S3に設置されたCSVをGCP BigQueryで分析した時にやったこと

今年の夏は長いなと思っていたらこのところ急に涼しくなったりで、冷房をつけるか悩む日々です。寒暖差がありますが、皆様は体調いかがでしょうか? さて今回は、お客様のシステムデータを分析するにあたって実施したAWSとGCPの連携の話です。今回の分析では、お客様側のシステムがAWSで動作しており、S3に定期的にデータをCSV出力されていました。今回これをBigQueryに取り込んで分析する必要があり、取り…

続きを読む
【BigQuery】再帰的な階層テーブルをWITH RECURSIVEを使って結合する方法

GLASSでは様々なお客様の広告、サイト、業務データなどを分析しております。分析にはBigQueryを利用することが多く、例えば、業務データをお客様のシステムからBigQueryに転送してSQLを駆使して様々な角度からデータを整形、分析、可視化しています。 今回、お客様が扱う業務データの中に再帰的な自己参照を行う階層テーブルが含まれていたので、BiqQueryにてこれを分析しやすい形に展開する必要…

続きを読む
【2024年8月時点】GA4のマーケ活用の注目ニュース
【2024年8月時点】GA4のマーケ活用の注目ニュース

現役でGA4とBigQueryを使いこなすGLASSマーケターがGoogle アナリティクス(GA4)の最新の注目すべきニュースを抜粋して解説します。 https://support.google.com/analytics/answer/9164320?hl=ja GA4 の BigQuery Export でセッション トラフィック ソースの情報が利用可能に(7/19) GA4 の BigQu…

続きを読む
GA4でUAのページの価値を算出する
ECサイトの購買情報を使ってGA4でUAの「ページの価値」を再現する方法

暑い日が続きますね🌞 暑さを避けて部屋にこもりがちですが、運動不足を感じているこの頃です。 さて、今回はUA(Universal Analytics)からGA4(Google Analytics 4)に代わって無くなってしまった「ページの価値」をGA4でも算出できるようにするお話です。 UAの「ページの価値」について UAの「ページの価値」使っていましたか? 私は使っていました。新たにアナリティク…

続きを読む
【ディスプレイ広告】広告ごとの成果を媒体横断で可視化する方法

梅雨の季節になりましたね☔ 除湿機を買おうか悩んでいるGLASSテクノロジー部の森です。 WEB広告を運用されているの皆さま、ディスプレイ広告成果のレポートをどのように作成してますか?GDN(Google ディスプレイネットワーク )やYDN(Yahoo!広告 ディスプレイ広告 運用型)などの管理画面で指標となる数値を目視確認してExcelやスプレッドシートにコピーしたり、該当するディスプレイ広告…

続きを読む
SNS成果をLookerStudioで可視化する方法【Fivetran】【BigQuery】

1か月ぶりの投稿です。すっかり春になって暖かい日が続き、寒がりの私は嬉しいです😊 さて今回は、前回のHubspot(CRM/SFA)の可視化に続いて、SNSの可視化にチャレンジします。ここでいうSNSはSNS広告ではなく、SNSの投稿の方です。SNSといえばX(Twitter)、Instagram、Facebook、YouTube、TikTokなどが浮かびますが、これらをSNSの成果を1つのSNS…

続きを読む
HubSpotのCRM/SFAデータをLooker Studioで可視化する方法【Fivetran, BigQuery】

こんにちはGLASSのエンジニア森です。寒いのが苦手なので春が待ち遠しいこの頃です🌸 弊社ではデータに基づくWEBマーケティングを行うために様々なマーケティング指標を可視化、分析してマーケティング戦略を立案しています。指標の中の一つとしてCRM(Customer Relationship Management:顧客管理)のデータを使って顧客数の増減などをチェックすることがあります。 今回はそんなC…

続きを読む
【BigQuery x LookerStudio】複数のWeb広告成果を1つに統合して可視化するには?

あけましておめでとうございます。テクノロジー部の森です。今年最初の記事はマーケティング会社らしくWeb広告のデータの取り扱いと可視化についての話題です。 弊社はWebマーケティングの会社として、代表的なGoogle広告、Yahoo広告をはじめ、様々なWeb広告のコンサルティングや出稿のご支援を行っています。広告媒体が複数になると、それぞれの出稿実績はどうか?いったいどの広告が費用対効果がいいのか?…

続きを読む
GA4のBigQuery連携でデータは何時頃反映される?(2024年版)

恒例となったGA4のBigQueryはデータ更新時間定点観測です!GA4のBigQueryでは昨日分をいったい何時頃に反映してくれるのでしょうか?仕様ではなく実データとして集計してみました。 過去の調査結果と公式ヘルプ ちなみに、2022年と2023年にも記事を書きましたが、2023年時点では、「前日データの反映は当日10時で10%、17時で80%」という感じでした。 公式ヘルプは当時から変わらず…

続きを読む
BigQueryでGCS指定フォルダにある最新CSVファイルのみを動的に読み込む方法

どうしてもAPIでのデータ連携ができないシステムにおいてCSVファイルの定期更新で対応する場合など、CSVをGoogle Cloud Strage(GCS)経由でBigQueryに取り込んでデータ分析に利用したいケースがあります。 このような場合にデータ量が少なければ、Googleスプレッドシートのデータを読み込めばよいのですが、データ量が多すぎる場合は他の方法が必要です。今回はそのような場合のオ…

続きを読む