DWH系のツールで監視するときに新規に入ったログだけ監視対象にするの、どうしてるのかな。
14.11.2024 05:15 — 👍 0 🔁 0 💬 0 📌 0DWH系のツールで監視するときに新規に入ったログだけ監視対象にするの、どうしてるのかな。
14.11.2024 05:15 — 👍 0 🔁 0 💬 0 📌 0
APIからログを取得する系、結局いまもみんな取得する君を書いている?Google CloudWorkflow系のツールでもいい感じに取得できる?
(僕はまだ書いている)
Storageに置いたログからカラム削除したりフィルタリングするの、どういい感じにやれるかな。GCSのPub/Sub通知をトリガーに使うとすると、いい感じのツールが見当たらない気がするのでなんか書くのが早そうかな
14.11.2024 05:04 — 👍 0 🔁 0 💬 1 📌 0
SnowflakeのVARIANT型、BigQueryのjson型みたいな半構造化データ型は両プロダクトとも内部的に列指向な形に変換されるぽい?
であればスキーマ管理はほぼ頑張らないで、時刻みたいな標準カラム+ログカラムみたいなだけ用意する方針もいけるかな
油断するとすぐSNSに書き込むのをやめてしまう
23.05.2024 06:18 — 👍 0 🔁 0 💬 0 📌 0家族全員で寝坊した。全員が他の家族を信頼しすぎた。
13.03.2024 00:46 — 👍 1 🔁 0 💬 0 📌 0waiwai!
07.02.2024 08:53 — 👍 1 🔁 0 💬 0 📌 0ほよ
07.02.2024 08:05 — 👍 2 🔁 0 💬 0 📌 0わー
31.01.2024 01:34 — 👍 2 🔁 0 💬 0 📌 0あ
12.01.2024 10:18 — 👍 5 🔁 0 💬 0 📌 0