【すずめ】stats.2ch.net指令所【からす・とんび・かもめ】★2©2ch.net
■ このスレッドは過去ログ倉庫に格納されています
http://stats.2ch.net/ は、２ちゃんねるのいろいろな情報を収集しています
http://stats.2ch.net/suzume.cgi 当日の投稿数順位を板別に掲載。サーバ毎のもあります
http://stats.2ch.net/ichiban.html 当日いちばん始めの投稿から10番目までを掲載中。キリ番も同時掲載
http://stats.2ch.net/ichiban/ 過去一覧
http://stats.2ch.net/tonbi.cgi 時間帯毎の投稿数順位を板別に掲載
http://stats.2ch.net/karasu.cgi サーバ毎の投稿数
http://stats.2ch.net/kamome.cgi とんびの上位互換？虹色ですｗ
ーーーーーーーーーーーーーーーー
さてこのstats.2ch.netもご老体になっています
いろいろと不具合を抱えていますが
生暖かく末永く見守っていただければと
（前スレ1より）
・前スレ
【すずめ】stats.2ch.net指令所【からす・とんび・かもめ】
http://carpenter.2ch.net/test/read.cgi/operatex/1447206078/ 
鯖別
-- The rank of posts by boards. -- latest:2016/02/17 00:49:00
total 116384 2167 2063 38
--------------------------------------------------------------------------------
livejupiter 12592 234 896 21
news4vip 9570 185 780 11
livebs2 5658 74 6 0
morningcoffee 4179 88 27 0
applism 3969 60 6 0
nanmin 3887 61 3 0
poverty 3573 74 35 0
板別
-- The rank of posts by servers. -- latest:2016/02/17 00:49:00
total 116384 2167 2063 38
--------------------------------------------------------------------------------
raptor 12592 234 896 21
hayabusa7 10073 226 13 1
vipper 9570 185 780 11
hanabi 9018 170 44 0
hayabusa8 8915 167 37 0
potato 8586 159 32 0
mastiff 7415 127 16 0
同じ数値だで（違ってたらあかんやろw）
それぞれ別集計の結果を表示してます
>>111
そして
【悲報】２ちゃんねるの新スレ半分がなんＪだったwwwwwwwww
ってスレが立つのですね
わかるます
さて。
今のstatsを移行するに当たって
やっぱり鯖のcanonical nameは
やっぱりstatsのままだよな
移行期間中は何か新しい鯖名が欲しいかな
それとすずめとかcgi類をどうするか
えぇ、思い切ってApacheを外そうと思ってるw そうなると、dai2hanさんの所の集計も死ぬのか・・・
もう既に死んでいるかも？
旧すずめ採取しっぱなしだし >>118
そっちは多分subjectからスレ立て数集計してるんだろうけど
VIPの方が多くなってるってことはなんJ分がかなり取りこぼされてるのかな
かわせみってなに？ >>120
なんJは一瞬で落ちるスレとかあるしクロール間隔の問題だと思う
アタックと判定されるほど頻度を上げる訳にもいかんだろうし 過去ログ倉庫だと今までずっとvipの方が多いけどこれも取りこぼしてんの? 鯖運用経験ゼロなんだが、なんとかなるならApache＆cgi群そのまま動いた方がみんなハッピーじゃね？
なにか壁があるんかな
そろそろApache自身が重荷になってきています
CGIはそのまま動くでしょう
Apacheに依存しているCGIってなんだろう？
bbonとかならもう止まっているし
ってことで、readcgi -> stats
てな事をやってみようかとw＠PV計測
500M/dayぐらいこなせるだろ？ってw@BIND9
-- The rank of posts by boards. -- latest:2016/02/17 12:11:00
total 812673 1624 13659 24
--------------------------------------------------------------------------------
livejupiter 96762 157 5359 9
news4vip 70867 120 5711 11
newsplus 31569 80 71 0
mnewsplus 30386 71 171 1
poverty 28594 76 245 1
VIPPERに抜かれてるぞw
もしかするといちばんPVの多かったスレッドが判るようになるかもしれませんw
いろいろと調整しているので新しい方、かなり欠測出ています
パイプはこれだから嫌w
-- The rank of posts by servers. -- latest:2016/02/17 15:50:00
total 1198783 1636 19200 32
--------------------------------------------------------------------------------
raptor 142710 185 7598 9
hayabusa8 118386 142 455 0
vipper 99182 147 7882 22
potato 96106 157 313 0
hayabusa7 93598 56 135 0
hanabi 91982 145 456 0
yomogi 76543 105 238 0
-- The rank of posts by boards. -- latest:2016/02/17 15:50:00
total 1198783 1636 19200 32
--------------------------------------------------------------------------------
livejupiter 142710 185 7598 9
news4vip 99182 147 7882 22
newsplus 46730 60 94 0
mnewsplus 44297 52 210 0
poverty 43630 63 375 0
morningcoffee 40273 66 277 0
applism 39039 67 47 0 >>131
PVってわからないこと多いからこれは面白そう >>128
流石に重くなりそう、APIはどうするの？、1分毎にログ集計して集約するほうがいいんじゃね
などなど
-- The rank of posts by servers. -- latest:2016/02/18 00:44:01
total 109384 2177 1798 36 270917 12609
--------------------------------------------------------------------------------
hayabusa7 12717 205 9 0 0 0
raptor 12481 248 810 11 0 0
vipper 9133 178 734 19 13142 614
hanabi 8093 180 36 1 0 0
hayabusa8 8042 156 16 1 0 0
potato 7689 144 13 0 0 0
mastiff 7158 173 16 1 29603 1312
yomogi 5548 109 5 0 40581 1797
peace 4999 89 13 0 36242 1645
tamae 4631 87 15 1 0 0
-- The rank of posts by boards. -- latest:2016/02/18 00:44:01
total 109384 2177 1798 36 269269 12555
--------------------------------------------------------------------------------
livejupiter 12481 248 810 11 0 0
news4vip 9133 178 734 19 13165 615
nanmin 3992 92 2 0 9730 442
weekly 3977 53 3 0 0 0
morningcoffee 3609 87 18 0 1 0
applism 3604 62 4 0 0 0
newsplus 3512 59 5 0 28269 1336
poverty 3174 59 26 1 14703 684
livebs2 2816 108 1 0 0 0
liveanb 2551 11 0 0 0 0
謎の数字追加w
read.cgiの総呼び出し数 read.cgiの呼び出し数/分
新しいところはまだ
そう言えば昨日の（消してしもたw）
-- The rank of posts by servers. -- latest:2016/02/18 00:01:00
total 2326576 3217 36327 72
--------------------------------------------------------------------------------
raptor 258196 336 13405 31
hayabusa8 210774 157 866 0
hayabusa7 209718 520 332 0
vipper 191472 297 15305 33
hanabi 184403 241 1011 3
potato 180741 236 614 0
yomogi 146901 137 471 0
mastiff 145258 166 422 0
peace 108733 137 247 1
tamae 104486 125 519 0
-- The rank of posts by boards. -- latest:2016/02/18 00:01:00
total 2326576 3217 36327 72
--------------------------------------------------------------------------------
livejupiter 258196 336 13405 31
news4vip 191472 297 15305 33
newsplus 91967 100 266 0
morningcoffee 86088 106 668 1
applism 80276 123 101 0
poverty 79975 94 710 1
mnewsplus 76613 45 357 0
nanmin 75828 83 84 0
livenhk 51351 70 58 1
liveanb 41263 266 69 0
スレ立てはやっぱりVIPPERの勝ちw
またqb5/7入れるの忘れてたw
いやしかし普通に接続するのももっさりするな
新鯖固まったw
新鯖
1111111st. http://hayabusa7.2ch.net/test/read.cgi/liveradio/1455771323/ 2016/02/18 14:50:49.46 Receive date: 2016/02/18 14:50:49.462
旧鯖
1111111st. http://wc2014.2ch.net/test/read.cgi/twwatch/1454985315/ 2016/02/18 14:50:51.09 Receive date: 2016/02/18 14:50:51.132
微妙に違うw 今日からserviceのPVが計測しなくなってるね。
こっちに集約するのかな？
鯖毎の24時間でーたが見れるといいなぁ これの中身出ないもんね
fox.2ch.netの人気スレランキング TOP10 ホントだｗ
その辺もaccess_logを見てたんでしょうなぁ 今現在PV計測が継続してるのは
hayabusa7、c、headline、stats、qb(5|7)、ken
の7鯖だけ。
ken関してはcronで独自に回しているはず、hayabusa7は忘れているのかな？
なるふぉど
そういうことか
判った直してくる
今度は上手くいくかな
実際の配管と同じでﾜﾛﾀ
今日一日中悩んでたのがアホらしくなったw ひとつのずれもいかん同期的仕組みだからなーパイプは
ちょっと苦手だ
ImagePatrolってなんだろ？@UserAgent http://akiba.geocities.jp/ys_hobby2006/imagepatrol.html
ImagePatrolとは
2chのBBSPINK内スレッド特化の予定で作り始めたMac用自動画像取得＆保存ソフトです。
現在はテスト中のため、2008年9月30日までの期限付きです。
期限後は自動更新機能が動作しなくなります。
なお、今後はメンテナンスリリースのみ行います。
動作対象OS
・MacOS X 10.4以降(Universal)
・MacOS X 10.3.9 (試験中)
cmu1-*****.mesh.ad.jp
これってどこかのMVNOかな？
そうでもないのか＠アクセスコミュファ
ICHIBANはだいじょうぶだけれどもKIRIBANが微妙に違うのは何でだろ？
全クエリ採取してみた方がいいのかな（１日で3GBぐらいになるw）
旧SPARROW
KIRIBAN
OrderThread URL
500000th. http://aoi.bbspink.com/test/read.cgi/mobpink/1454753232/ 2016/02/19 07:39:48.53 Receive date: 2016/02/19 07:39:48.537
1000000th. http://wc2014.2ch.net/test/read.cgi/4sama/1455454647/ 2016/02/19 13:43:06.83 Receive date: 2016/02/19 13:43:06.879
1111111st. http://hanabi.2ch.net/test/read.cgi/ogame/1455625313/ 2016/02/19 14:50:14.47 Receive date: 2016/02/19 14:50:14.619
新SPARROW
KIRIBAN
OrderThread URL
500000th. http://nasu.bbspink.com/test/read.cgi/erocomic/1455009867/ 2016/02/19 07:39:48.33 Receive date: 2016/02/19 07:39:48.302
1000000th. http://wktk.2ch.net/test/read.cgi/mental/1455852589/ 2016/02/19 13:43:06.70 Receive date: 2016/02/19 13:43:06.648
1111111st. http://wktk.2ch.net/test/read.cgi/ghard/1455426679/ 2016/02/19 14:50:14.32 Receive date: 2016/02/19 14:50:14.262 なんだろうねー
データの総数に矛盾はなさそうなわけだから、クエリの到達が前後してるか、すべて一定に何レスぶんかずれてるのか
後者なら補正はききそうだけど
Size Used Avail Capacity Mounted on
222G 10G 194G 5% /
なので取ってみたw＠全記録＋カウント付き
新鯖の1,500,000
1500000 tamae slotj 1454338208 1455874569.71 1455874569.806
旧鯖の1,500,000
1500031 hanabi magazin 1454763623 1455874570.70 1455874570.802
マシンパワーの違いとかもあるのかなw
i7-5960X vs. E5620 取りこぼしてるわけでなければ
どっちも正しい（あるいはそもそも目安）ってことでいいのでは
同時に100個の宅配便を発送したとして、届く順番は送った順とは限らないが、届けばオッケーみたいな
ちょっと違うな >>165
すごくわかりやすい説明だと思ったけど
ちょっと違うのか（・ω・）
Intel(R) PRO/1000 Network Connection version - 2.4.0
ぐらいしかわかんなかったw
http://www.mellanox.com/page/products_dyn?product_family=201&;
とかだったらどうしようかとおもったけどw
>>165
そうそうそんな感じ
でもって旧statsは5%ほどどっかに置き忘れてくるみたいな感じ 中でどういう処理書いてるかひとつで変わっちゃうんじゃね？
コンパイラの最適化みたいなもんで
そのあたりはカーネルとBIND9が何とかこなしてるんじゃね？
旧statsはtinydns(djbdns)さん
あれstats消えた？ たとえば前50個、本命10個、後50個くらい採取しておいて
ソートして中央10個を取り出すとかそんな感じか
「前50個」ってのをどうやってはじき出すのか？
基準が無いと「前50個」がどこなのか判んないです
ちなみに新旧共にDNSサーバとカウントのスクリプトは
パイプに繋がってるのでシーケンシャルにデータが流れてきます
と言う仕組みなのでそのまま受け取って単純に数えています
ということもあっていちばんの一覧を見ると
投稿時刻が前後しているのがわかります
そのメリットは？ >>179
極端におかしな日付のやつを弾くくらいにしかならんな
ICHIBANはともかくゾロ目はきついねー
厳密にやるなら確かに全件データベースにぶち込んでソートしかない メリットは別にないだろ
やってみるならその方法だ！ってあれであって 大量のデータのソートは、一度データベースにぶち込んだ方が安定するし速いってのはまず確実だからな
厳密とは？
まさか投稿日時をソートするとか？
1/100秒でしか記録してないのに >>185
どこまでいっても鯖の時刻設定以上の精確さは期待できんわな 個人的には、今のままでいいんじゃねと思ってる
こまけえこたいいんだよ DBに突っ込むデータつうかソートに使う信頼できるキーがないよねって話だし stats退役後、stat→stats襲名ってことでいいのかな
旧SPARROWの2000000は
2000072 wktk netgame 1455794757 1455886375.85 1455886375.929
でした
トータル数はあんまし変わんないけどね
NEW
2016/02/19 Total post count 2,054,035
latest: 2,914 posts/min. 2016/02/19 22:11:02
OLD
2016/02/19 Total post count 2,054,007
latest: 2,880 posts/min. 2016/02/19 22:11:01
>>191
そですそです おおー、やっと見れる♪
しかしreadで20076851もあるんかい。 各板のreadを並べて見るの初めてだけど本当すごいわこれ…
＋がぶっちぎりでread.cgi呼ばれてる
なんJの専ブラ率は異常
ちなみにまだ計り始めだからw
read.cgiだけで50M/dayいくんかな 面白いよねぇ、何が見たいって大きなイベント、事件等があった時
どんな数値になるかなんだよなぁ
しかし通常時でも結構呼ばれてんのねぇ これってdatとはまた別って事でいいんだよね？
悪魔でread.cgiが呼ばれた回数って事で。
そそ鵺の鳴く夜は恐ろしいread.cgiで
エラーじゃ無い呼び出しをカウントしてます
日付リストを取っつけてみた
選択するだけで飛ぶようにはしたけど
これだとJavaScriptが必須なのんね
read.cgi付きはどうすか
SHRIKE AGM-45Bとかw？ read.cgiは呼ばれるごとにDNS投げてるのかね
4** 5**以外の時
304とか吐くのかな？
LASTPOST採取用のichibanファイルまだおかしい
最終100番以内採取のつもりなのに全部取ってるw
・・・でもこれでもいいのんかな ディスクとか壊れそうｗ
ってのは昔の感覚みたいだからな
使い道がなければ戻してしまうのがいいとは思うが
PVはやっぱしnewsplusがダントツやね
yomogiがダントツというのはやっぱしあれだなw
> SPARROW of Post
何かやだなw@">"
1 newsplus 1,970,335
4 daily 1,948,278
過去ログを読んでいるって云うのがあるのか
やっぱりなんかおかしいな＠PV
ので調整入ります
andアクセス制限要請来ちゃった ■ このスレッドは過去ログ倉庫に格納されています
