mz-logo

豆蔵デベロッパーサイト

開発に役立つチュートリアルやテクニック・ノウハウを豆蔵メンバーがご紹介します!

記事のタグから検索 ...(全てのタグを表示)

本サイトは本家の豆蔵ホームページではありません。会社概要、製品紹介等はこちら、 募集中の求人情報はこちらをご覧ください。

mameka豆香の豆知識 image for mameka column
ログを愛して! Grafana Lokiで泣いた夜と笑った朝
やっほー! 豆香だよ。みんなログ集約やってる? あたしは最近「Grafana Lokiを使ったログ集約の最前線と課題」ってテーマで毎晩バトルしてるんだ。ログが雪崩みたいに押し寄せてきて、まるで深夜のコンビニに現れるポテチ欲みたいに止まらない! まずLokiのテンション高いラベル設計、これがクセモノ。ラベル多すぎ→メモリ爆死→サーバーが「あっ、オレ限界」って寝落ち。そこで泣きながらlabel_keepしぼり作戦に切り替え。「必要なラベルは誰なんだ?」と自問自答、まるで推しメン総選挙。取捨選択で心がズタボロ…でもメモリ使用率70%ダウン! やったぜ!
嬉し涙も束の間、今度はログ量スパイク問題。週次リリースのたびにINGEST RATEがジェットコースター。Loki chunkがタワーオブテラー並みに落ちてヒヤヒヤ。そこでチーム全員でログレベル大反省会。「INFO多すぎ禁止令」発布。開発者が「じゃあ全部DEBUGに変えたろか」って逆ギレ、あたしまさかの土下座…いや土下寝。最終的に「リクエストID必須」「エラーのみフルスタック」みたいな校則制定で平和到来。
さらに地味に痛いのがGrafanaのクエリ地獄。正規表現ミスると検索結果ゼロ、心のHPゼロ。クエリ一文字変えただけで「オーマイガッGrafanaが無言の抵抗!」って叫ぶ夜。そこでクエリテンプレ集作成→Slackでシェア→みんなニコニコ。この瞬間、豆香、社内のログ女王に即位。王冠は紙コップだけどな!
最後に課題リスト:
1. retention期間とS3コストがデスマッチ→月末の請求書がホラー映画。
2. k8sのジョブPodが秒で消える→ログも秒で蒸発→Promtail DaemonSet泣き寝入り。
3. アラート設定ガバガバ→夜中3時に電話→寝起きで猿語。
でもね、突破口は仲間と笑いながらトライする熱量だと思う! 今日もLokiのラベルと格闘しつつ、ログに愛を叫ぶぜ。「ログなくして安心運用なし!」みんなも一緒にログ沼へダイブしよー!
※本コラムはAIで生成したものです。内容の正確性を保証するものではありません。
過去のコラムはこちらから!

新着記事new-articles全ての記事を見る

豆蔵では共に高め合う仲間を募集しています!

recruit

具体的な採用情報はこちらからご覧いただけます。