#異世界ツールへ転生してみる vol.57 【スプシのarrayformula関数】 スプシにはexcelにはない独自関数というものがあるらしい。なるほど。 特にarrayformulaは1セルで特定範囲の数式を一括制御できるので、ミス防止・メンテナンス性の高さという観点でとても良いなぁ。 blog.ja.dev/entry/blog/202…

#異世界ツールへ転生してみる vol.56 【スプシで配列を扱う】 使いどころによっては便利なんじゃないか、これ。BigQuery扱うまで配列に意識すら向いてなかった。 ちゃんと配列と向き合うことで割とお得が増えそうな予感はする。 support.google.com/docs/answer/62…

#異世界ツールへ転生してみる vol.55 【Looker Studioだけ言語変更】 URL末尾に「?hl=en」などをつければ、Looker Studioだけ言語変更できる。 Googleアカウントの設定でも変えられるけど、こちらは一括で言語変更される面倒臭さもあるので、使い分けできると便利。

#異世界ツールへ転生してみる vol.54 【Looker Studioのキャンバスサイズ】 レポートのページサイズは実際に触るまでドラックで調整するものだと思っていた。 ちゃんと設定する項目あるのね〜。 support.google.com/looker-studio/…

#異世界ツールへ転生してみる vol.53 【searchdata_site_impression】 url単位とsite単位とでクリック数の合算が合致しないとかは発生しうる。 bulk exportデータは「厳密にはローデータではない」ことをまず認識した方が扱いやすいのかも。集計は発生しているので。 support.google.com/webmasters/ans…

#異世界ツールへ転生してみる vol.52 【そういえばCTEってなんだ？】 Common Table Expression。 まぁ要はwith句のことか。 "CTE（共通テーブル式）は、 WITH 句で定義された名前付きサブクエリ" docs.snowflake.com/ja/user-guide/…

#異世界ツールへ転生してみる vol.51 【スプシで文字列フィルタ】 スプシのフィルタには値フィルタと条件フィルタがあるけど、文字列は条件フィルタで組んだほうがよい事に気付いた。 例えば「曲」という値でフィルタをかけようとすると「AKB 曲」は引っかかるが「AKB曲」は引っかからない。

#異世界ツールへ転生してみる vol.50 【STRUCTとARRAY】 BigQuery固有すぎて未だに慣れた感じはしないけど。 「確かにSTRUCTだと違うデータ型を持てるし、int_value,string_valueみたいな設計になっているのか〜」みたいな理屈は受け入れつつある。 blog.g-gen.co.jp/entry/array-an…

#異世界ツールへ転生してみる vol.49 【date_truncで始まりの曜日を指定】 weekで切り上げる時、日曜始まり以外を指定できないのかな〜と思って調べた。 割とあっさり指定できるもんなんすね〜。まぁそれもそうか。 zenn.dev/nanbunan/artic…

#異世界ツールへ転生してみる vol.48 【BigQueryのタイムトラベル機能】 データエンジニアよりの機能かな〜とは思うけど。「テーブルを自動更新する仕組みの不具合がいつから発生したのか」を知りたい時に便利そう。 cloud.google.com/bigquery/docs/…

#異世界ツールへ転生してみる vol.47 【サチコのsum_top_positionカラム】 これ中々秀逸な設計してるな〜と。 「表示ごとに順位足してって後で表示回数で割れば、環境による順位ブレ吸収できるんちゃう？」という発想。勉強になるな〜。 support.google.com/webmasters/ans…

#異世界ツールへ転生してみる vol.46 【ウィンドウ関数】 GROUP BY：「Aは～～」 ウィンドウ関数：「Aの中で考えると～～」 という整理が個人的には腑に落ちている(この理解が正確かどうかは分からない) あとpartitionを物理的なパーテ－ションに脳内変換した方がイメージしやすい気はしている。

#異世界ツールへ転生してみる vol.46 【ウィンドウ関数】 GROUP BY：「Aは～～」 ウィンドウ関数：「Aの中で考えると～～」 という整理が個人的には腑に落ちている(この理解が正確かどうかは分からない) あとpartitionを物理的なパーテションに脳内変換した方がイメージしやすい気はしている。

#異世界ツールへ転生してみる vol.45 【with recursive】 挙動は理解したが、あんまり使い所が思いつかないなぁ…。データを階層的に整理するのに使えそうな感じはするけど。 とりあえず頭の片隅においておく。 cloud.google.com/bigquery/docs/…

#異世界ツールへ転生してみる vol.44 【ウェイトバック集計】 セグメントごとのおおよその構成比は分かった。けど全体の構成比に直したらどうなるんだろ…？って時に使える考え方。 要は母集団の構成比に合わせて値を割り戻して集計するイメージ。 macromill.com/tabulation/kno…

#異世界ツールへ転生してみる vol.43 【Looker Studioを英語表記にしたい】 初歩的かもだけど地味に知らなかったので。 Googleアカウントを英語設定にすれば、Looker Studioも英語設定になるんだ〜。へぇ〜。 support.google.com/accounts/answe…

#異世界ツールへ転生してみる vol.44 【Looker Studioを英語表記にしたい】 初歩的かもだけど地味に知らなかったので。 Googleアカウントを英語設定にすれば、Looker Studioも英語設定になるんだ〜。へぇ〜。 support.google.com/accounts/answe…

#異世界ツールへ転生してみる vol.42 【colabでcausalimpactやってみる】 スプレッドシートからデータ取得して値がobjectになっているの気付かずに30分くらい悶えてたけど、形になった。わーい。 (メトリック・共変量どちらもランダム生成したのでめちゃくちゃなことになってるけど…w) pic.twitter.com/Mtg69bDtwF

#異世界ツールへ転生してみる vol.41 【pivot数表をオラっと作る】 FORMAT関数を上手く使って、テキストを値にもつpivotをオラっと作ってみた。 変数宣言 → 変数に表頭にしたい値を配列で突っ込む → 配列バラしてカンマ連結したものを引数にしてSQL文作る → 実行 pic.twitter.com/VWBtzfFxII

#異世界ツールへ転生してみる vol.40 【FORMAT関数】 引数とって値を挿入したい時に使える関数。なんか上手く使えば面白い使い道ありそうと気付いてやってみた図は明日。 ※注記：値はフィクションです。 pic.twitter.com/1MGlJLmWa3

#異世界ツールへ転生してみる vol.39 【GA4の日時カラムの処理について】 GA4からBigQueryエクスポートすると、event_dateは文字列、event_timestampは数値形式で入っており扱いにくい。 parse_dateやtimestamp_microsを使って、適宜使いやすい形に。 note.com/macmuko/n/n203…

#異世界ツールへ転生してみる vol.38 【_TABLE_SUFFIXについて】 あなたどこから湧いてきたの？と思っていたけど、優秀な子だった。 ワイルドカード使って複数テーブルにクエリ出来るだけじゃなくて、_TABLE_SUFFIX擬似列で条件指定もできちゃうのね。 cloud.google.com/bigquery/docs/…

#異世界ツールへ転生してみる vol.37 【クロールログの分析】 目にする機会があったので調べてみた。概要をざっと調べるだけなら、サチコの統計情報で良いかもだが。 クロール頻度やらページ群別の傾向やら、より詳細を見たいならローデータから見る必要がある。 tech.asoview.co.jp/entry/2020/12/…

#異世界ツールへ転生してみる vol.36 【BigQueryのdataform機能】 普段はお任せしている部分だけど、イメージはできた方が良いと思ったので。 dataformの各処理で作成されたテーブルを参照できるというのは強いな。同じ処理を何度も実行しなくて良くなる。 zenn.dev/google_cloud_j…

#異世界ツールへ転生してみる vol.35 【スプレッドシートの組織図tips】 初めて使ってみたら二つの気づきがあった。 ・重複しているデータはユニーク化されて表示される ・親子同じデータを入れることでツリーのない項目も作成できる pic.twitter.com/iC2QMfjsTt

#異世界ツールへ転生してみる vol.34 【ファインチューニング】 ちょっと気になったので調べた。LLMであれば追加学習自体は比較的簡単にできそうだけど… 学習済みデータとの兼ね合いもあるし、結果の緻密なコントロールはやや難しそう…？どうなんだろ。 qiita.com/ksonoda/items/…

#異世界ツールへ転生してみる vol.33 【dataLayerに入っている値の確認方法】 色々あることは知ったが、全体感を知りたい時はこの辺なのかな？と思うた！ <拡張機能> ・dataslayer <デベロッパーツールでコンソール叩く> ・console.log(window.dataLayer) ・console.table(window.dataLayer)

#異世界ツールへ転生してみる vol.32 【Accuracy/Recall/Precision】 予測精度の評価について上記の3つの考え方を知った。 Recallはどれだけ正解をpickしきれたか、Precisionはpickしたものにどれだけ正解が含まれていたか。 結果をただ評価する以上の話で面白い。 qiita.com/K5K/items/5da5…

#異世界ツールへ転生してみる vol.31 【GSCの順位取得って何位まで？】 公式ヘルプにちゃんと載ってた。表示された分だけ取得するってことか。 "掲載順位が記録されるためには、そのリンクが実際に表示されなければなりません。" support.google.com/webmasters/ans…

#異世界ツールへ転生してみる vol.30 【joinする際nullには気をつけよう】 joinするときに「on ~~ = ~~」だとnullは紐づかないことに気付いた。 こういう場合はどっちもnullという指定をかませるか、coalesceで予めnullを変換しておくのが良さそう。 まぁそりゃそうと言えばそれまで。

#異世界ツールへ転生してみる vol.29 【BigQueryで回したクエリを忘れた】 実行したクエリをうっかりどこにも保存せずに消してしまった。 そんな時は1からクエリを書き直す前に、ジョブ履歴を確認するといいかも。 qiita.com/amurty/items/a…

#異世界ツールへ転生してみる vol.21 【BigQueryのURL関数】 これ地味に便利だと思う。複雑な正規表現関数を使わなくてもホスト・ドメイン・TLDを取得できる。 cloud.google.com/bigquery/docs/…