X


【すずめ】stats.2ch.net指令所【からす・とんび・かもめ】★2©2ch.net

■ このスレッドは過去ログ倉庫に格納されています
2016/01/26(火) 17:38:18.01ID:SRZeh7MY
http://stats.2ch.net/ は、2ちゃんねるのいろいろな情報を収集しています

http://stats.2ch.net/suzume.cgi 当日の投稿数順位を板別に掲載。サーバ毎のもあります
http://stats.2ch.net/ichiban.html 当日いちばん始めの投稿から10番目までを掲載中。キリ番も同時掲載
http://stats.2ch.net/ichiban/ 過去一覧

http://stats.2ch.net/tonbi.cgi 時間帯毎の投稿数順位を板別に掲載

http://stats.2ch.net/karasu.cgi サーバ毎の投稿数

http://stats.2ch.net/kamome.cgi とんびの上位互換?虹色ですw

ーーーーーーーーーーーーーーーー
さてこのstats.2ch.netもご老体になっています
いろいろと不具合を抱えていますが
生暖かく末永く見守っていただければと
(前スレ1より)

・前スレ
【すずめ】stats.2ch.net指令所【からす・とんび・かもめ】
http://carpenter.2ch.net/test/read.cgi/operatex/1447206078/
2016/02/19(金) 15:57:57.94ID:CAP_USER?S★(824723)

ICHIBANはだいじょうぶだけれどもKIRIBANが微妙に違うのは何でだろ?
全クエリ採取してみた方がいいのかな(1日で3GBぐらいになるw)
2016/02/19(金) 15:58:56.60ID:CAP_USER?S★(824723)

旧SPARROW
KIRIBAN

OrderThread URL
500000th. http://aoi.bbspink.com/test/read.cgi/mobpink/1454753232/ 2016/02/19 07:39:48.53 Receive date: 2016/02/19 07:39:48.537
1000000th. http://wc2014.2ch.net/test/read.cgi/4sama/1455454647/ 2016/02/19 13:43:06.83 Receive date: 2016/02/19 13:43:06.879
1111111st. http://hanabi.2ch.net/test/read.cgi/ogame/1455625313/ 2016/02/19 14:50:14.47 Receive date: 2016/02/19 14:50:14.619

新SPARROW
KIRIBAN

OrderThread URL
500000th. http://nasu.bbspink.com/test/read.cgi/erocomic/1455009867/ 2016/02/19 07:39:48.33 Receive date: 2016/02/19 07:39:48.302
1000000th. http://wktk.2ch.net/test/read.cgi/mental/1455852589/ 2016/02/19 13:43:06.70 Receive date: 2016/02/19 13:43:06.648
1111111st. http://wktk.2ch.net/test/read.cgi/ghard/1455426679/ 2016/02/19 14:50:14.32 Receive date: 2016/02/19 14:50:14.262
2016/02/19(金) 16:03:55.68
なんだろうねー
データの総数に矛盾はなさそうなわけだから、クエリの到達が前後してるか、すべて一定に何レスぶんかずれてるのか
後者なら補正はききそうだけど
2016/02/19(金) 16:06:12.45ID:CAP_USER
前後してるだけかと
2016/02/19(金) 16:09:12.55ID:CAP_USER
Kafkaで
2016/02/19(金) 16:43:58.83ID:CAP_USER?S★(824723)

Size Used Avail Capacity Mounted on
222G 10G 194G 5% /

なので取ってみたw@全記録+カウント付き
2016/02/19(金) 19:28:02.70ID:CAP_USER?S★(824723)

新鯖の1,500,000
1500000 tamae slotj 1454338208 1455874569.71 1455874569.806
旧鯖の1,500,000
1500031 hanabi magazin 1454763623 1455874570.70 1455874570.802

マシンパワーの違いとかもあるのかなw
i7-5960X vs. E5620
2016/02/19(金) 19:30:56.81ID:CAP_USER
NICかとー。。
2016/02/19(金) 19:38:40.99
取りこぼしてるわけでなければ
どっちも正しい(あるいはそもそも目安)ってことでいいのでは
同時に100個の宅配便を発送したとして、届く順番は送った順とは限らないが、届けばオッケーみたいな
ちょっと違うな
2016/02/19(金) 19:43:29.68ID:a+0oaLt8
>>165
すごくわかりやすい説明だと思ったけど
ちょっと違うのか(・ω・)
2016/02/19(金) 19:45:15.48ID:CAP_USER
DNSの処理順とか
2016/02/19(金) 19:47:10.00ID:CAP_USER?S★(824723)

Intel(R) PRO/1000 Network Connection version - 2.4.0
ぐらいしかわかんなかったw

http://www.mellanox.com/page/products_dyn?product_family=201&;
とかだったらどうしようかとおもったけどw
2016/02/19(金) 19:48:14.43ID:CAP_USER?S★(824723)

>>165
そうそうそんな感じ
でもって旧statsは5%ほどどっかに置き忘れてくるみたいな感じ
2016/02/19(金) 19:48:38.95
中でどういう処理書いてるかひとつで変わっちゃうんじゃね?
コンパイラの最適化みたいなもんで
2016/02/19(金) 20:00:17.26ID:CAP_USER?S★(824723)

そのあたりはカーネルとBIND9が何とかこなしてるんじゃね?
旧statsはtinydns(djbdns)さん
2016/02/19(金) 20:40:52.39ID:CAP_USER
時間でソートすればいいかと。。。
2016/02/19(金) 20:44:10.51ID:CAP_USER?S★(824723)

あれstats消えた?
2016/02/19(金) 20:44:53.31
たとえば前50個、本命10個、後50個くらい採取しておいて
ソートして中央10個を取り出すとかそんな感じか
175trick
垢版 |
2016/02/19(金) 21:02:11.74ID:nQyGlQ5C
あれ?PV直したのか。
2016/02/19(金) 21:05:17.42ID:CAP_USER
一度DBに入れてやればいいじゃない
2016/02/19(金) 21:09:59.42
stats−−−−−−−−−−
178動け動けウゴウゴ2ちゃんねる
垢版 |
2016/02/19(金) 21:11:51.35ID:LKyYWiW9
TESTとだけ出てきた
2016/02/19(金) 21:11:55.46ID:CAP_USER?S★(824723)

「前50個」ってのをどうやってはじき出すのか?
基準が無いと「前50個」がどこなのか判んないです

ちなみに新旧共にDNSサーバとカウントのスクリプトは
パイプに繋がってるのでシーケンシャルにデータが流れてきます
と言う仕組みなのでそのまま受け取って単純に数えています

ということもあっていちばんの一覧を見ると
投稿時刻が前後しているのがわかります
2016/02/19(金) 21:16:35.82ID:CAP_USER
一度DBに入れてやればいいじゃない
2016/02/19(金) 21:26:16.32ID:CAP_USER?S★(824723)

そのメリットは?
2016/02/19(金) 21:30:19.45
>>179
極端におかしな日付のやつを弾くくらいにしかならんな
ICHIBANはともかくゾロ目はきついねー
厳密にやるなら確かに全件データベースにぶち込んでソートしかない
2016/02/19(金) 21:34:45.49
メリットは別にないだろ
やってみるならその方法だ!ってあれであって
2016/02/19(金) 21:35:48.23
大量のデータのソートは、一度データベースにぶち込んだ方が安定するし速いってのはまず確実だからな
2016/02/19(金) 21:36:53.98ID:CAP_USER?S★(824723)

厳密とは?
まさか投稿日時をソートするとか?
1/100秒でしか記録してないのに
2016/02/19(金) 21:38:27.19
>>185
どこまでいっても鯖の時刻設定以上の精確さは期待できんわな
2016/02/19(金) 21:40:08.27ID:CAP_USER
確実なのはおーぷん式のフルDB
2016/02/19(金) 21:44:27.86
個人的には、今のままでいいんじゃねと思ってる
こまけえこたいいんだよ
2016/02/19(金) 21:46:17.82
DBに突っ込むデータつうかソートに使う信頼できるキーがないよねって話だし
2016/02/19(金) 21:49:18.30ID:CAP_USER?S★(824723)

何が確実なのか判んないけどw

ってことで「仮」にホストネームを割り当てて貰いました
http://stat.2ch.net/SPARROW/20160219/

こちらは単純テキストです
http://stat.2ch.net/STATS/servers/20160219.txt
http://stat.2ch.net/STATS/boards/20160219.txt

しばらく同時に稼働させておいて
完全に移植が完了したら旧statsは退役する感じで
2016/02/19(金) 21:55:58.51
stats退役後、stat→stats襲名ってことでいいのかな
2016/02/19(金) 22:11:57.19ID:CAP_USER?S★(824723)

旧SPARROWの2000000は
2000072 wktk netgame 1455794757 1455886375.85 1455886375.929
でした

トータル数はあんまし変わんないけどね
NEW
2016/02/19 Total post count 2,054,035
latest: 2,914 posts/min. 2016/02/19 22:11:02

OLD
2016/02/19 Total post count 2,054,007
latest: 2,880 posts/min. 2016/02/19 22:11:01
2016/02/19(金) 22:12:30.92ID:CAP_USER?S★(824723)

>>191
そですそです
2016/02/19(金) 22:17:21.68
了解ー
テンプレとか変更いらんのね
195trick
垢版 |
2016/02/20(土) 00:16:47.72ID:0VNyBYuY
おおー、やっと見れる♪

しかしreadで20076851もあるんかい。
196動け動けウゴウゴ2ちゃんねる
垢版 |
2016/02/20(土) 01:46:06.53ID:xAaJ+yBt
各板のreadを並べて見るの初めてだけど本当すごいわこれ…
+がぶっちぎりでread.cgi呼ばれてる
なんJの専ブラ率は異常
2016/02/20(土) 02:07:39.70ID:CAP_USER?S★(824723)

ちなみにまだ計り始めだからw
read.cgiだけで50M/dayいくんかな
198trick
垢版 |
2016/02/20(土) 02:11:37.94ID:0VNyBYuY
面白いよねぇ、何が見たいって大きなイベント、事件等があった時
どんな数値になるかなんだよなぁ

しかし通常時でも結構呼ばれてんのねぇ
199trick
垢版 |
2016/02/20(土) 02:13:32.67ID:0VNyBYuY
これってdatとはまた別って事でいいんだよね?
悪魔でread.cgiが呼ばれた回数って事で。
2016/02/20(土) 02:26:00.81ID:CAP_USER?S★(824723)

そそ鵺の鳴く夜は恐ろしいread.cgiで
エラーじゃ無い呼び出しをカウントしてます
2016/02/20(土) 04:19:32.92ID:CAP_USER?S★(824723)

日付リストを取っつけてみた
選択するだけで飛ぶようにはしたけど
これだとJavaScriptが必須なのんね
2016/02/20(土) 04:44:22.33ID:CAP_USER?S★(824723)

read.cgi付きはどうすか
SHRIKE AGM-45Bとかw?
2016/02/20(土) 09:17:45.88ID:CAP_USER
read.cgiは呼ばれるごとにDNS投げてるのかね
2016/02/20(土) 14:36:36.35ID:CAP_USER?S★(824723)

4** 5**以外の時
304とか吐くのかな?
2016/02/20(土) 18:41:16.52ID:CAP_USER?S★(824723)

LASTPOST採取用のichibanファイルまだおかしい
最終100番以内採取のつもりなのに全部取ってるw

・・・でもこれでもいいのんかな
2016/02/20(土) 18:49:56.35
ディスクとか壊れそうw
ってのは昔の感覚みたいだからな
使い道がなければ戻してしまうのがいいとは思うが
2016/02/20(土) 19:34:55.12ID:CAP_USER?S★(824723)

PVはやっぱしnewsplusがダントツやね
yomogiがダントツというのはやっぱしあれだなw
2016/02/20(土) 19:36:09.73ID:CAP_USER?S★(824723)

> SPARROW of Post

何かやだなw@">"
2016/02/21(日) 00:46:47.50ID:CAP_USER?S★(824723)

1 newsplus 1,970,335
4 daily 1,948,278

過去ログを読んでいるって云うのがあるのか
2016/02/21(日) 11:23:11.08ID:CAP_USER?S★(824723)

やっぱりなんかおかしいな@PV
ので調整入ります

andアクセス制限要請来ちゃった
211trick
垢版 |
2016/02/21(日) 14:04:36.90ID:InpjmLgI
げろん、まあ呼び出しの度じゃなぁ
2016/02/22(月) 15:42:29.33ID:CAP_USER?S★(824723)

何か詰まってたw
いちおうクエリはバックアップしてるので再カウントは出来るけど
時刻がおかしくなるのは致し方なすw

PVの取り方でいろいろと思案中
2016/02/22(月) 15:45:53.17ID:CAP_USER
各サーバでログを一秒ごとに解析、件数を送信でいいんじゃね
2016/02/22(月) 15:46:52.15
負荷をかけない取り方かあ
身内用のを一か所にキャッシュして何度も取りに行かないようにするとか
取りに行く回数を減らすとか
リアルタイムではなくなんか適当なログからでっちあげるとか
うん、よくわからん
2016/02/22(月) 15:52:11.80ID:CAP_USER?S★(824723)

いやちがう、バックアップファイルを取り込む順番を間違えたのかw
2016/02/22(月) 15:55:39.32ID:CAP_USER?S★(824723)

負荷は全くっていいほど掛かってないかな?

今思案してるのは
過去ログ?
待避ログ?
存命ログ?
の判別
2016/02/22(月) 15:57:09.67ID:CAP_USER?S★(824723)

そう、思いの外、負荷が掛かってない
LAが1を越えることが無い
転送量もせいぜい2Mbps程度
2016/02/22(月) 16:04:18.03
アクセスされた時点で過去だったのか、の判別は頭が痛いな
219動け動けウゴウゴ2ちゃんねる
垢版 |
2016/02/22(月) 16:08:33.46ID:q+oJSBQ+
マーンゴさん
★2つ使い分けてじえーんして遊ぶの巻♪
2016/02/22(月) 16:26:05.89ID:CAP_USER?S★(824723)

2つ?
★全部自演だよ
2016/02/22(月) 16:27:53.40
よかった
コミュ症のマンゴーはいなかったんだ
2016/02/22(月) 16:30:20.87ID:CAP_USER
そうわたしはマンゴー



















死ね
223動け動けウゴウゴ2ちゃんねる
垢版 |
2016/02/22(月) 16:39:44.39ID:q+oJSBQ+
みんな楽し、大好き(∩´∀`∩)♪
2016/02/22(月) 17:03:58.18ID:CAP_USER
そして登場第3の★
225動け動けウゴウゴ2ちゃんねる
垢版 |
2016/02/22(月) 17:19:14.08ID:0gtVWUKs
ふふふ、チミは違うな( ̄∇ ̄)
226trick
垢版 |
2016/02/22(月) 17:49:52.06ID:irijbGdJ
問題なのはあくせく数って事?
2016/02/22(月) 17:53:40.06
たしかに、なんで警告食らったんだろ
いや、すり抜けられたんならOKなんだけど
2016/02/22(月) 19:34:45.06ID:CAP_USER?S★(824723)

http://maguro.2ch.net/test/read.cgi/ranking/1380512357/
過去ログなんだろうけど過去ログって表示しないもんなw
2016/02/22(月) 19:41:41.13
>レス数が900を超えています。1000を超えると表示できなくなるよ。
これはstats以前の問題じゃねえのかw
2016/02/22(月) 19:43:15.15ID:CAP_USER?S★(824723)

穴実はそのほとんどが「そんなスレ無い」って云われてるのねw
2016/02/22(月) 19:44:10.08ID:CAP_USER?S★(824723)

maguroは特殊
本来なら板全部移転して過去ログ鯖に移動するんだけどw
2016/02/22(月) 19:45:16.60ID:CAP_USER?S★(824723)

でもまあその点は「生きている板」判定は出来るので
大丈夫なんかな
板名と鯖名が一致していなければ「それ過去ログだろ?」
って感じ
2016/02/22(月) 19:46:05.89ID:CAP_USER
>>230
わろたw
2016/02/22(月) 19:46:30.10
p53インストールできねえよ問題とかもあるし
まあmaguroだから

>>230
それは事実だからしゃーない
2016/02/22(月) 19:49:16.95ID:CAP_USER
どこが特殊なんだろ
2016/02/22(月) 19:50:09.42
>>232
統計上は除外できるな
専ブラでは現行スレとして取得できてるっぽい
237trick
垢版 |
2016/02/23(火) 01:19:15.80ID:8+LHoi/1
ほんとに詰まってたんだな、数時間止まっても一気にカウントするというか。
挙動がオモロイ、早くPV復活しますように。
2016/02/24(水) 16:00:14.00ID:CAP_USER?S★(824723)

-- The rank of read.cgi PV by servers. -- latest:2016/02/24 15:57:02
ALL PV LIVE PV POOL PV PAST PV NONE PV
server /day /min. /day /min. /day /min. /day /min. /day /min.
TOTAL 17790836 21421 10933361 14434 3202 3 5854031 6074 1000242 910
--------------------------------------------------------------------------------
yomogi 1647762 1891 1014839 1363 61 0 615603 513 17259 15
potato 1594271 2007 1129042 1520 0 0 226871 317 238358 170
hayabusa8 1495623 2090 1280881 1756 0 0 117526 216 97216 118
hanabi 1250705 1793 929494 1406 1 0 191426 212 129784 175
peace 1210443 1698 776582 1178 12 0 411724 496 22125 24
daily 1194016 1356 704175 903 2 0 468106 446 21733 7
wc2014 1193907 1318 643527 814 136 0 527729 484 22515 20
mastiff 1055771 1197 525958 711 5 0 511423 473 18385 13
hayabusa7 1024671 909 495470 386 6 0 527325 522 1870 1
hayabusa6 866058 1070 552353 656 60 0 296682 405 16963 9
tamae 850742 1061 656380 753 4 0 108603 127 85755 181
hope 689046 885 330688 525 0 0 344308 354 14050 6
wktk 676105 960 317719 609 0 0 342048 330 16338 21
raptor 510260 506 287794 396 0 0 69068 75 153398 35
vipper 507533 504 235760 287 1498 0 233980 186 36295 31
fox 451831 428 202565 198 73 0 229766 216 19427 14
aoi 398953 473 239829 320 0 0 146115 137 13009 16
nhk 396596 455 189962 179 1336 3 202454 272 2844 1
nasu 361327 384 232718 245 0 0 99916 128 28693 11
maguro 188852 217 29769 52 8 0 128308 131 30767 34
tanuki 149157 138 110814 126 0 0 28757 4 9586 8
carpenter 77207 81 47042 51 0 0 26293 30 3872 0
--------------------------------------------------------------------------------

こんな感じ
やはり過去ログ系は重複があったりとかで
板別とは一致しないです
あと過去ログ鯖に移動したのはまだ計測していません
2016/02/24(水) 16:10:44.53
maguroのNONE PVが穴実のそんなスレねえよかな?
数字としては使えそうだから良さそうな気がする
2016/02/24(水) 16:24:03.42
なんか変更 → 大きくなった
なんか変更 → 小さくなった
みたいな変化を見るのには使えるかなと
2016/02/24(水) 16:45:10.87ID:CAP_USER?S★(824723)

maguroは移転前の過去ログ満載ですし
maguroにある過去ログを過去ログ鯖に移動して
今あるmaguro鯖名を変更する(名前の付け替え)って云うのも出来るんかな
2016/02/24(水) 16:52:58.09
使う側からすると移転と変わらないような…? > 改名・別名
243trick
垢版 |
2016/02/24(水) 18:12:36.41ID:DmLDA/GO
postとnewthreadの方も仕様が変わったのね。

PVの方も分かりやすいな
http://stat.2ch.net/PV/servers/20160224.txt
244trick
垢版 |
2016/02/24(水) 18:52:35.02ID:DmLDA/GO
たまーにこんな挙動をするね

2016/02/23 21:54:12 2043012 2877 31257 37
↑数分間このまま

2016/02/23 21:58:52 2055772 12760 31435 178
↑動いたと思ったらドバっと来る

2016/02/23 22:00:00 2059185 3413 31482 47
↑通常営業に戻る

通常であれば分更新してるし、まあ構築中のでーただしね。
2016/02/24(水) 21:39:23.43ID:BTrQ/E/u
maguro鯖の名前変更後はnamori鯖でオナシャス
246trick
垢版 |
2016/02/25(木) 02:29:32.83ID:3OnHbFNZ
作ってる途中で、PVも入れるとスレ立て数とか絵画すんの見えなくて意味なくね?と思い始めた。
https://pbs.twimg.com/media/Cb_wnqTUUAA7efj.jpg
247trick
垢版 |
2016/02/26(金) 16:20:46.96ID:mIPhFkP9
PVが見れなくなってるなぁ、えろえろ模索中なんだろか。

無理やり作ったサンプルグラフ(激重)↓
http://snowslide.s201.xrea.com/observation/stats_graph.html
2016/02/26(金) 16:30:53.97ID:ht/FXRHy
>>247
や〜、専ブラで何も考えずにクリックしたらまた観測状況報告にとんだ〜w
えぇちょろめで開きますよちょろめでw

ひどく重い感じはしなかったけど
あらほんと、PVが消えてる
249trick
垢版 |
2016/02/26(金) 17:01:02.53ID:mIPhFkP9
jsonのデータ数が138240もあるのでおんもいと思いますわー
2016/02/26(金) 17:10:06.91
すけーらぶるな何かを使った方がいいのだろうか
なんとかなってるからいいか
2016/02/26(金) 20:32:32.34ID:CAP_USER?S★(824723)

ふと板履歴なるものって存在するのだろうか?
news4vipだと
今vipper
前viper
そのもっと前・・・

とかって
2016/02/26(金) 20:34:26.39
ないというかあっても全部メモ帳に人力でじゃないのか
2016/02/26(金) 20:38:40.24ID:ht/FXRHy
常駐板のは10年以上前まで遡れるけど他板は無理(;´∀`)
2016/02/26(金) 20:46:11.21ID:CAP_USER
>>251
http://www.geocities.co.jp/SiliconValley-PaloAlto/7515/iten.txt
2016/02/26(金) 22:36:41.68ID:CAP_USER?S★(824723)

わははやっぱりあったのかw
というか何か見覚えがあるかもしれない

でもって過去ログ鯖をクローリングして最古スレを漁れば
稼働日が判明するのかと思って
2016/02/27(土) 05:47:18.45ID:CAP_USER?S★(824723)

http://stat.2ch.net/graphs.html
こちらに移動してみた
■ このスレッドは過去ログ倉庫に格納されています