Shou Arisakaの個人マイクロブログ（＝一人ツイッターのようなもの）。 ※某自作SNSから引越。
社会・技術の投稿が多め。つまらない諸事物への考察・持論を展開。

grafana。prometheus/node_exporterとNode

2024/10/21 22:57

grafana。prometheus/node_exporterとNode Exporter Fullダッシュボードを組み合わせ。
windowsでもlinuxでも作れます。
これが本来のgrafanaの使い方だよな…オブザーバビリティ。僕みたいなNLPとかnginxのアクセス分析とか使い方はちょっとアウェイ。
データ量がすごい。重そう……ここまでリッチだとnetdataとどう違うんだってなってしまうな。シンプルさはもはやない…

prometheus/node_exporter: Exporter for machine metrics

#技術

操作の一覧を開く前後の投稿を見る

GitHub - prometheus/node_exporter: Exporter for machine metrics

Exporter for machine metrics. Contribute to prometheus/node_exporter development by creating an account on GitHub. (github.com)

関連投稿（AI）

10 件表示中

Shou ArisakaN100開発者

2024/10/22 18:01

grafana。prometheusにupとかってスクレイピング先がサービスダウンしてるかどうかが0か1かで時系列データベースに記録されるメトリクスが標準搭載されてて、prometheusをメタ的に監視するのにやはり便利。

これは24hで見てるけど、まずup。一瞥で分かりやすい。
あと僕的にこれ付いたほうがいいよなって思って平均とデルタを付けている。（デルタは時間内での数量の全変動の合計）
つまり、meanで稼働率、deltaでサーバーダウン回数が実質的に分かる。

左下のscrape_series_addedは文字通りデータの追加量の推移。logにしてるから見えやすい。形態素解析のNLPのデータがnginxのログデータより平常2,3倍多く推移してることが分かった。
でもmaxとチャートを見て分かる通りnginxの方はたまにスパイクがある。これはどっかの一つのbotが分をわきまえない非常識クローリングを15分（データ取得のinterval）以内でしてきてたっぽいというのを表している。

#データ分析

操作の一覧を開く前後の投稿を見る

Shou ArisakaN100開発者

2024/10/31 21:35

Google検索結果順位のgrafana/prometheusトラッキング分析ツール。ちなみに。
検索からこの投稿見つけて欲しい人いれば作り方（使い方・ダッシュボード・コード）なら売れます。データは売れない。

#開発

操作の一覧を開く前後の投稿を見る

Shou ArisakaN100開発者

2024/10/13 10:26・2024/10/13 10:28（更新）

prometheusにてnodejsでパースしたnginxログ見てる図

何が増えてるのかと見てみるとrobots.txtだった。なるほどそうだよなって感じ
でもそんなにクローラーはrobotsを尊重するのか？robotsのdisallowなんて任意…みたいなもんだしな

扱い方が分かってなくてぐちゃぐちゃだけど
grafanaで上手く扱えるかのテスト段階

#技術

操作の一覧を開く前後の投稿を見る

Shou ArisakaN100開発者

2024/09/04 22:59・2024/09/06 01:15（更新）

prometheusなんとか動かせたっぽい
よさげ。
ちょっと時間の投資が必要だなこれ…

操作の一覧を開く前後の投稿を見る

Shou ArisakaN100開発者

2024/09/04 22:45・2024/09/06 01:15（更新）

prometheusってのを導入しようとしてるけど、
ちょっと骨が折れそう

操作の一覧を開く前後の投稿を見る

Shou ArisakaN100開発者

2024/10/12 14:30

prometheusからtradingviewとかに送れたら面白いのにな
grafanaはキャンドルスティック系の時系列分析は不得意というかサポートの中心外っぽいから。

#技術

操作の一覧を開く前後の投稿を見る

Shou ArisakaN100開発者

2024/10/18 22:02

yahoo realtimeのカウントとかprometheus埋めれたら面白そうだな
ginzaとかでの形態素解析と合わせても面白そう
ginza固有名詞の抽出精度少し微妙なんだけどな…でも個人レベルで使える日本語NLPだとginzaが最高精度な気がする。（カニンガム効果を期待）

操作の一覧を開く前後の投稿を見る

Shou ArisakaN100開発者

2024/09/04 23:02・2024/09/06 01:15（更新）

とりあえずで動かしてみてるから、prometheusが何なのか分かってない
prometheusって何

操作の一覧を開く前後の投稿を見る

Shou ArisakaN100開発者

2024/10/19 21:21・2024/10/19 21:21（更新）

grafanaにてttfb（ping・rtt）の分析。昨日くらいにセットアップして走らせていた。
面白い図。安定？してくれているっぽいのはいい。
example .comだけ異色。僕のサイト群、サーバーだけでなくipifyとか他のも含めているから、でもipifyとは連動している。
example .comだけ…超安定してるっぽい。これは何なんだろうな

しかしgrafanaは面白い。
使えるようになるまでの学習曲線がっていうか敷居めっちゃ高いけど（grafanaがっていうよりデータの用意、整形、サーバ設定、何よりprometheusとpromqlを含めた諸々が）

#技術

操作の一覧を開く前後の投稿を見る

Shou ArisakaN100開発者

2024/10/20 11:01

grafana。半日経ってデータもちょっと溜まったので

知恵袋 > ビジネス・SOHOカテゴリ

あんまり変化がないね。データソースの問題と思う
あんまり動かないっぽい
ちょっと信頼性低いかも
例えば"クラウドワークス"ってあるけどこれは一人（1件）だけのが反映されてる
まあここの数値入れ方よくないんだけど。prometheusのアグリゲーション上こうなってしまう。まあtodo

gigazine

ジモティー > 全国 > 友達

これが一番揺れてる。まあ他のニュース系とかと比べて流動性は高い。フロー情報性が高いと言える

例えば"募集"と"友達"は相関性が高そうと見て取れる
見なくても分かるけど
データに出てるってことで。

まあもうちょい観察が必要だな、いづれも
2週間くらいは取ってみないと

#開発

操作の一覧を開く前後の投稿を見る

前の投稿

Shou ArisakaN100開発者

2024/10/21 22:14・2024/10/21 22:37（更新）

たぶん僕の人生の中で出会ってきた100人くらいで直近で付き合い的なものがあった子が一番すごくなかったわ。凡庸以下。僕は凡庸だから凡庸以下の評価は適切正確にできる自信がある。
あらゆる側面でマイナス、ネガティブ、低評価。
いいとこもあったけど（建前）
1/1000くらいだな。なんであれ彼女は中学高校小学…小学校の頃はもっと変なやつ人間的下位なやついたわ…。
…僕より全然すごくなかったけど、英語もまあまあで知識もまあまあで、人間レベル終わってたけど、すごくない人口1/5くらいからはすごいだったのかもな。
いや。んなことはない…。
僕は真面目な話、彼女のことを境界知能かと疑ってたことがある。ようは事が出来なすぎる。本人は「他人と比べて何でも卒なく出来てきた」なんて自己評価していたが、ああ…高機能自閉症かと思えば、発達障害か…と。正直分からないし深い興味もない。
僕が得た教訓はシンプルだ。
…
まて、これは障害者差別禁止法みたいのに抵触するのか？
外国人を出入り禁止にする店がある。だがそれは自由だ。
「アスペルガー・発達障害・境界知能・グレーゾーンと決して付き合うな」
これは自戒・金言であり将来の家訓である。
あのな、本人は否定してたけど親が軽度発達障害で兄弟が重度知的障害（自閉症）でどうして僕の方の主張がおかしいって言われになる？
はっきり言ってな、
本人に障害があろうと親兄弟が精神病院にいようといたろうと、本人が健康で健全で人間的に出来てる奴なんだったら楽しく付き合えんだよ。
そうじゃないから無理。そうじゃない場合が残念ながら確率的にほとんどだからそれっぽい人も無理。それだけなんだよ。

#カサンドラ症候群

操作の一覧を開く前後の投稿を見る