X


【すずめ】stats.2ch.net指令所【からす・とんび・かもめ】★2©2ch.net

■ このスレッドは過去ログ倉庫に格納されています
2016/01/26(火) 17:38:18.01ID:SRZeh7MY
http://stats.2ch.net/ は、2ちゃんねるのいろいろな情報を収集しています

http://stats.2ch.net/suzume.cgi 当日の投稿数順位を板別に掲載。サーバ毎のもあります
http://stats.2ch.net/ichiban.html 当日いちばん始めの投稿から10番目までを掲載中。キリ番も同時掲載
http://stats.2ch.net/ichiban/ 過去一覧

http://stats.2ch.net/tonbi.cgi 時間帯毎の投稿数順位を板別に掲載

http://stats.2ch.net/karasu.cgi サーバ毎の投稿数

http://stats.2ch.net/kamome.cgi とんびの上位互換?虹色ですw

ーーーーーーーーーーーーーーーー
さてこのstats.2ch.netもご老体になっています
いろいろと不具合を抱えていますが
生暖かく末永く見守っていただければと
(前スレ1より)

・前スレ
【すずめ】stats.2ch.net指令所【からす・とんび・かもめ】
http://carpenter.2ch.net/test/read.cgi/operatex/1447206078/
121trick
垢版 |
2016/02/17(水) 02:06:53.53ID:bIW2CYIY
kawasemiのtxtは残してくださいな。
2016/02/17(水) 02:08:49.01ID:CAP_USER?S★(824723)

かわせみってなに?
123trick
垢版 |
2016/02/17(水) 02:13:39.84ID:bIW2CYIY
http://stats.2ch.net/kawasemi-h/

とか

http://stats.2ch.net/kawasemi-d/

とか。
2016/02/17(水) 02:16:13.97ID:8yiWVvKN
>>120
なんJは一瞬で落ちるスレとかあるしクロール間隔の問題だと思う
アタックと判定されるほど頻度を上げる訳にもいかんだろうし
2016/02/17(水) 02:30:00.61ID:hRZWpT5K
過去ログ倉庫だと今までずっとvipの方が多いけどこれも取りこぼしてんの?
2016/02/17(水) 03:15:16.28
鯖運用経験ゼロなんだが、なんとかなるならApache&cgi群そのまま動いた方がみんなハッピーじゃね?
なにか壁があるんかな
2016/02/17(水) 12:00:40.45ID:CAP_USER?S★(824723)

そろそろApache自身が重荷になってきています
CGIはそのまま動くでしょう
Apacheに依存しているCGIってなんだろう?
bbonとかならもう止まっているし
2016/02/17(水) 12:02:23.83ID:CAP_USER?S★(824723)

ってことで、readcgi -> stats
てな事をやってみようかとw@PV計測
500M/dayぐらいこなせるだろ?ってw@BIND9
2016/02/17(水) 12:11:38.19ID:CAP_USER?S★(824723)

-- The rank of posts by boards. -- latest:2016/02/17 12:11:00
total 812673 1624 13659 24
--------------------------------------------------------------------------------
livejupiter 96762 157 5359 9
news4vip 70867 120 5711 11
newsplus 31569 80 71 0
mnewsplus 30386 71 171 1
poverty 28594 76 245 1

VIPPERに抜かれてるぞw
130trick
垢版 |
2016/02/17(水) 12:12:01.79ID:bIW2CYIY
やたー!!ありがとうございます。
2016/02/17(水) 15:01:39.70ID:CAP_USER?S★(824723)

もしかするといちばんPVの多かったスレッドが判るようになるかもしれませんw
2016/02/17(水) 15:51:00.39ID:CAP_USER?S★(824723)

いろいろと調整しているので新しい方、かなり欠測出ています
パイプはこれだから嫌w

-- The rank of posts by servers. -- latest:2016/02/17 15:50:00
total 1198783 1636 19200 32
--------------------------------------------------------------------------------
raptor 142710 185 7598 9
hayabusa8 118386 142 455 0
vipper 99182 147 7882 22
potato 96106 157 313 0
hayabusa7 93598 56 135 0
hanabi 91982 145 456 0
yomogi 76543 105 238 0

-- The rank of posts by boards. -- latest:2016/02/17 15:50:00
total 1198783 1636 19200 32
--------------------------------------------------------------------------------
livejupiter 142710 185 7598 9
news4vip 99182 147 7882 22
newsplus 46730 60 94 0
mnewsplus 44297 52 210 0
poverty 43630 63 375 0
morningcoffee 40273 66 277 0
applism 39039 67 47 0
2016/02/17(水) 15:58:34.65ID:yIhg6IOm
>>131
PVってわからないこと多いからこれは面白そう
2016/02/17(水) 16:00:14.32ID:CAP_USER
>>128
流石に重くなりそう、APIはどうするの?、1分毎にログ集計して集約するほうがいいんじゃね
などなど
2016/02/18(木) 00:45:27.47ID:CAP_USER?S★(824723)

-- The rank of posts by servers. -- latest:2016/02/18 00:44:01
total 109384 2177 1798 36 270917 12609
--------------------------------------------------------------------------------
hayabusa7 12717 205 9 0 0 0
raptor 12481 248 810 11 0 0
vipper 9133 178 734 19 13142 614
hanabi 8093 180 36 1 0 0
hayabusa8 8042 156 16 1 0 0
potato 7689 144 13 0 0 0
mastiff 7158 173 16 1 29603 1312
yomogi 5548 109 5 0 40581 1797
peace 4999 89 13 0 36242 1645
tamae 4631 87 15 1 0 0

-- The rank of posts by boards. -- latest:2016/02/18 00:44:01
total 109384 2177 1798 36 269269 12555
--------------------------------------------------------------------------------
livejupiter 12481 248 810 11 0 0
news4vip 9133 178 734 19 13165 615
nanmin 3992 92 2 0 9730 442
weekly 3977 53 3 0 0 0
morningcoffee 3609 87 18 0 1 0
applism 3604 62 4 0 0 0
newsplus 3512 59 5 0 28269 1336
poverty 3174 59 26 1 14703 684
livebs2 2816 108 1 0 0 0
liveanb 2551 11 0 0 0 0
2016/02/18(木) 00:46:21.18ID:CAP_USER?S★(824723)

謎の数字追加w
read.cgiの総呼び出し数 read.cgiの呼び出し数/分

新しいところはまだ
2016/02/18(木) 02:44:43.02ID:CAP_USER?S★(824723)

そう言えば昨日の(消してしもたw)
-- The rank of posts by servers. -- latest:2016/02/18 00:01:00
total 2326576 3217 36327 72
--------------------------------------------------------------------------------
raptor 258196 336 13405 31
hayabusa8 210774 157 866 0
hayabusa7 209718 520 332 0
vipper 191472 297 15305 33
hanabi 184403 241 1011 3
potato 180741 236 614 0
yomogi 146901 137 471 0
mastiff 145258 166 422 0
peace 108733 137 247 1
tamae 104486 125 519 0

-- The rank of posts by boards. -- latest:2016/02/18 00:01:00
total 2326576 3217 36327 72
--------------------------------------------------------------------------------
livejupiter 258196 336 13405 31
news4vip 191472 297 15305 33
newsplus 91967 100 266 0
morningcoffee 86088 106 668 1
applism 80276 123 101 0
poverty 79975 94 710 1
mnewsplus 76613 45 357 0
nanmin 75828 83 84 0
livenhk 51351 70 58 1
liveanb 41263 266 69 0

スレ立てはやっぱりVIPPERの勝ちw
2016/02/18(木) 05:01:57.02ID:CAP_USER?S★(824723)

またqb5/7入れるの忘れてたw

いやしかし普通に接続するのももっさりするな
2016/02/18(木) 07:34:52.94ID:CAP_USER?S★(824723)

新鯖固まったw
2016/02/18(木) 07:46:47.03
2016/02/18(木) 14:58:16.58ID:CAP_USER?S★(824723)

新鯖
1111111st. http://hayabusa7.2ch.net/test/read.cgi/liveradio/1455771323/ 2016/02/18 14:50:49.46 Receive date: 2016/02/18 14:50:49.462

旧鯖
1111111st. http://wc2014.2ch.net/test/read.cgi/twwatch/1454985315/ 2016/02/18 14:50:51.09 Receive date: 2016/02/18 14:50:51.132

微妙に違うw
142trick
垢版 |
2016/02/18(木) 17:31:10.35ID:Q4wgXBim
今日からserviceのPVが計測しなくなってるね。
こっちに集約するのかな?

鯖毎の24時間でーたが見れるといいなぁ
2016/02/18(木) 17:34:50.89
これの中身出ないもんね
fox.2ch.netの人気スレランキング TOP10
144trick
垢版 |
2016/02/18(木) 17:47:39.80ID:Q4wgXBim
ホントだw

その辺もaccess_logを見てたんでしょうなぁ
145trick
垢版 |
2016/02/18(木) 17:57:01.07ID:Q4wgXBim
今現在PV計測が継続してるのは
hayabusa7、c、headline、stats、qb(5|7)、ken
の7鯖だけ。

ken関してはcronで独自に回しているはず、hayabusa7は忘れているのかな?
2016/02/18(木) 19:54:09.14ID:CAP_USER?S★(824723)

なるふぉど
そういうことか

判った直してくる
2016/02/18(木) 20:12:59.70
直った@TOP10
2016/02/19(金) 00:28:23.76ID:CAP_USER?S★(824723)

今度は上手くいくかな
実際の配管と同じでワロタ
今日一日中悩んでたのがアホらしくなったw
2016/02/19(金) 00:36:14.29
ひとつのずれもいかん同期的仕組みだからなーパイプは
ちょっと苦手だ
2016/02/19(金) 00:53:01.53ID:CAP_USER?S★(824723)

ImagePatrolってなんだろ?@UserAgent
2016/02/19(金) 00:54:44.98
http://akiba.geocities.jp/ys_hobby2006/imagepatrol.html
ImagePatrolとは

2chのBBSPINK内スレッド特化の予定で作り始めたMac用自動画像取得&保存ソフトです。
現在はテスト中のため、2008年9月30日までの期限付きです。
期限後は自動更新機能が動作しなくなります。
なお、今後はメンテナンスリリースのみ行います。

動作対象OS
・MacOS X 10.4以降(Universal)
・MacOS X 10.3.9 (試験中)
2016/02/19(金) 01:08:04.41ID:F5p1AACS
>>150
弾いちゃって良いよ
2016/02/19(金) 02:03:50.93ID:CAP_USER?S★(824723)

cmu1-*****.mesh.ad.jp
これってどこかのMVNOかな?
2016/02/19(金) 02:08:50.83
>>153
嫌なもん出てきた
http://www8.atwiki.jp/remotehost/pages/15.html
×××△△△△△△△.○○○.mesh.ad.jp
CMU コミュファ光
2016/02/19(金) 02:10:00.10ID:CAP_USER?S★(824723)

そうでもないのか@アクセスコミュファ
156動け動けウゴウゴ2ちゃんねる
垢版 |
2016/02/19(金) 10:01:12.42ID:H8ucJCX4
>>153
コミュファ光&ビグロユーザーかと
http://hayabusa6.2ch.net/test/read.cgi/accuse/1391599624/
2016/02/19(金) 15:57:57.94ID:CAP_USER?S★(824723)

ICHIBANはだいじょうぶだけれどもKIRIBANが微妙に違うのは何でだろ?
全クエリ採取してみた方がいいのかな(1日で3GBぐらいになるw)
2016/02/19(金) 15:58:56.60ID:CAP_USER?S★(824723)

旧SPARROW
KIRIBAN

OrderThread URL
500000th. http://aoi.bbspink.com/test/read.cgi/mobpink/1454753232/ 2016/02/19 07:39:48.53 Receive date: 2016/02/19 07:39:48.537
1000000th. http://wc2014.2ch.net/test/read.cgi/4sama/1455454647/ 2016/02/19 13:43:06.83 Receive date: 2016/02/19 13:43:06.879
1111111st. http://hanabi.2ch.net/test/read.cgi/ogame/1455625313/ 2016/02/19 14:50:14.47 Receive date: 2016/02/19 14:50:14.619

新SPARROW
KIRIBAN

OrderThread URL
500000th. http://nasu.bbspink.com/test/read.cgi/erocomic/1455009867/ 2016/02/19 07:39:48.33 Receive date: 2016/02/19 07:39:48.302
1000000th. http://wktk.2ch.net/test/read.cgi/mental/1455852589/ 2016/02/19 13:43:06.70 Receive date: 2016/02/19 13:43:06.648
1111111st. http://wktk.2ch.net/test/read.cgi/ghard/1455426679/ 2016/02/19 14:50:14.32 Receive date: 2016/02/19 14:50:14.262
2016/02/19(金) 16:03:55.68
なんだろうねー
データの総数に矛盾はなさそうなわけだから、クエリの到達が前後してるか、すべて一定に何レスぶんかずれてるのか
後者なら補正はききそうだけど
2016/02/19(金) 16:06:12.45ID:CAP_USER
前後してるだけかと
2016/02/19(金) 16:09:12.55ID:CAP_USER
Kafkaで
2016/02/19(金) 16:43:58.83ID:CAP_USER?S★(824723)

Size Used Avail Capacity Mounted on
222G 10G 194G 5% /

なので取ってみたw@全記録+カウント付き
2016/02/19(金) 19:28:02.70ID:CAP_USER?S★(824723)

新鯖の1,500,000
1500000 tamae slotj 1454338208 1455874569.71 1455874569.806
旧鯖の1,500,000
1500031 hanabi magazin 1454763623 1455874570.70 1455874570.802

マシンパワーの違いとかもあるのかなw
i7-5960X vs. E5620
2016/02/19(金) 19:30:56.81ID:CAP_USER
NICかとー。。
2016/02/19(金) 19:38:40.99
取りこぼしてるわけでなければ
どっちも正しい(あるいはそもそも目安)ってことでいいのでは
同時に100個の宅配便を発送したとして、届く順番は送った順とは限らないが、届けばオッケーみたいな
ちょっと違うな
2016/02/19(金) 19:43:29.68ID:a+0oaLt8
>>165
すごくわかりやすい説明だと思ったけど
ちょっと違うのか(・ω・)
2016/02/19(金) 19:45:15.48ID:CAP_USER
DNSの処理順とか
2016/02/19(金) 19:47:10.00ID:CAP_USER?S★(824723)

Intel(R) PRO/1000 Network Connection version - 2.4.0
ぐらいしかわかんなかったw

http://www.mellanox.com/page/products_dyn?product_family=201&;
とかだったらどうしようかとおもったけどw
2016/02/19(金) 19:48:14.43ID:CAP_USER?S★(824723)

>>165
そうそうそんな感じ
でもって旧statsは5%ほどどっかに置き忘れてくるみたいな感じ
2016/02/19(金) 19:48:38.95
中でどういう処理書いてるかひとつで変わっちゃうんじゃね?
コンパイラの最適化みたいなもんで
2016/02/19(金) 20:00:17.26ID:CAP_USER?S★(824723)

そのあたりはカーネルとBIND9が何とかこなしてるんじゃね?
旧statsはtinydns(djbdns)さん
2016/02/19(金) 20:40:52.39ID:CAP_USER
時間でソートすればいいかと。。。
2016/02/19(金) 20:44:10.51ID:CAP_USER?S★(824723)

あれstats消えた?
2016/02/19(金) 20:44:53.31
たとえば前50個、本命10個、後50個くらい採取しておいて
ソートして中央10個を取り出すとかそんな感じか
175trick
垢版 |
2016/02/19(金) 21:02:11.74ID:nQyGlQ5C
あれ?PV直したのか。
2016/02/19(金) 21:05:17.42ID:CAP_USER
一度DBに入れてやればいいじゃない
2016/02/19(金) 21:09:59.42
stats−−−−−−−−−−
178動け動けウゴウゴ2ちゃんねる
垢版 |
2016/02/19(金) 21:11:51.35ID:LKyYWiW9
TESTとだけ出てきた
2016/02/19(金) 21:11:55.46ID:CAP_USER?S★(824723)

「前50個」ってのをどうやってはじき出すのか?
基準が無いと「前50個」がどこなのか判んないです

ちなみに新旧共にDNSサーバとカウントのスクリプトは
パイプに繋がってるのでシーケンシャルにデータが流れてきます
と言う仕組みなのでそのまま受け取って単純に数えています

ということもあっていちばんの一覧を見ると
投稿時刻が前後しているのがわかります
2016/02/19(金) 21:16:35.82ID:CAP_USER
一度DBに入れてやればいいじゃない
2016/02/19(金) 21:26:16.32ID:CAP_USER?S★(824723)

そのメリットは?
2016/02/19(金) 21:30:19.45
>>179
極端におかしな日付のやつを弾くくらいにしかならんな
ICHIBANはともかくゾロ目はきついねー
厳密にやるなら確かに全件データベースにぶち込んでソートしかない
2016/02/19(金) 21:34:45.49
メリットは別にないだろ
やってみるならその方法だ!ってあれであって
2016/02/19(金) 21:35:48.23
大量のデータのソートは、一度データベースにぶち込んだ方が安定するし速いってのはまず確実だからな
2016/02/19(金) 21:36:53.98ID:CAP_USER?S★(824723)

厳密とは?
まさか投稿日時をソートするとか?
1/100秒でしか記録してないのに
2016/02/19(金) 21:38:27.19
>>185
どこまでいっても鯖の時刻設定以上の精確さは期待できんわな
2016/02/19(金) 21:40:08.27ID:CAP_USER
確実なのはおーぷん式のフルDB
2016/02/19(金) 21:44:27.86
個人的には、今のままでいいんじゃねと思ってる
こまけえこたいいんだよ
2016/02/19(金) 21:46:17.82
DBに突っ込むデータつうかソートに使う信頼できるキーがないよねって話だし
2016/02/19(金) 21:49:18.30ID:CAP_USER?S★(824723)

何が確実なのか判んないけどw

ってことで「仮」にホストネームを割り当てて貰いました
http://stat.2ch.net/SPARROW/20160219/

こちらは単純テキストです
http://stat.2ch.net/STATS/servers/20160219.txt
http://stat.2ch.net/STATS/boards/20160219.txt

しばらく同時に稼働させておいて
完全に移植が完了したら旧statsは退役する感じで
2016/02/19(金) 21:55:58.51
stats退役後、stat→stats襲名ってことでいいのかな
2016/02/19(金) 22:11:57.19ID:CAP_USER?S★(824723)

旧SPARROWの2000000は
2000072 wktk netgame 1455794757 1455886375.85 1455886375.929
でした

トータル数はあんまし変わんないけどね
NEW
2016/02/19 Total post count 2,054,035
latest: 2,914 posts/min. 2016/02/19 22:11:02

OLD
2016/02/19 Total post count 2,054,007
latest: 2,880 posts/min. 2016/02/19 22:11:01
2016/02/19(金) 22:12:30.92ID:CAP_USER?S★(824723)

>>191
そですそです
2016/02/19(金) 22:17:21.68
了解ー
テンプレとか変更いらんのね
195trick
垢版 |
2016/02/20(土) 00:16:47.72ID:0VNyBYuY
おおー、やっと見れる♪

しかしreadで20076851もあるんかい。
196動け動けウゴウゴ2ちゃんねる
垢版 |
2016/02/20(土) 01:46:06.53ID:xAaJ+yBt
各板のreadを並べて見るの初めてだけど本当すごいわこれ…
+がぶっちぎりでread.cgi呼ばれてる
なんJの専ブラ率は異常
2016/02/20(土) 02:07:39.70ID:CAP_USER?S★(824723)

ちなみにまだ計り始めだからw
read.cgiだけで50M/dayいくんかな
198trick
垢版 |
2016/02/20(土) 02:11:37.94ID:0VNyBYuY
面白いよねぇ、何が見たいって大きなイベント、事件等があった時
どんな数値になるかなんだよなぁ

しかし通常時でも結構呼ばれてんのねぇ
199trick
垢版 |
2016/02/20(土) 02:13:32.67ID:0VNyBYuY
これってdatとはまた別って事でいいんだよね?
悪魔でread.cgiが呼ばれた回数って事で。
2016/02/20(土) 02:26:00.81ID:CAP_USER?S★(824723)

そそ鵺の鳴く夜は恐ろしいread.cgiで
エラーじゃ無い呼び出しをカウントしてます
2016/02/20(土) 04:19:32.92ID:CAP_USER?S★(824723)

日付リストを取っつけてみた
選択するだけで飛ぶようにはしたけど
これだとJavaScriptが必須なのんね
2016/02/20(土) 04:44:22.33ID:CAP_USER?S★(824723)

read.cgi付きはどうすか
SHRIKE AGM-45Bとかw?
2016/02/20(土) 09:17:45.88ID:CAP_USER
read.cgiは呼ばれるごとにDNS投げてるのかね
2016/02/20(土) 14:36:36.35ID:CAP_USER?S★(824723)

4** 5**以外の時
304とか吐くのかな?
2016/02/20(土) 18:41:16.52ID:CAP_USER?S★(824723)

LASTPOST採取用のichibanファイルまだおかしい
最終100番以内採取のつもりなのに全部取ってるw

・・・でもこれでもいいのんかな
2016/02/20(土) 18:49:56.35
ディスクとか壊れそうw
ってのは昔の感覚みたいだからな
使い道がなければ戻してしまうのがいいとは思うが
2016/02/20(土) 19:34:55.12ID:CAP_USER?S★(824723)

PVはやっぱしnewsplusがダントツやね
yomogiがダントツというのはやっぱしあれだなw
2016/02/20(土) 19:36:09.73ID:CAP_USER?S★(824723)

> SPARROW of Post

何かやだなw@">"
2016/02/21(日) 00:46:47.50ID:CAP_USER?S★(824723)

1 newsplus 1,970,335
4 daily 1,948,278

過去ログを読んでいるって云うのがあるのか
2016/02/21(日) 11:23:11.08ID:CAP_USER?S★(824723)

やっぱりなんかおかしいな@PV
ので調整入ります

andアクセス制限要請来ちゃった
211trick
垢版 |
2016/02/21(日) 14:04:36.90ID:InpjmLgI
げろん、まあ呼び出しの度じゃなぁ
2016/02/22(月) 15:42:29.33ID:CAP_USER?S★(824723)

何か詰まってたw
いちおうクエリはバックアップしてるので再カウントは出来るけど
時刻がおかしくなるのは致し方なすw

PVの取り方でいろいろと思案中
2016/02/22(月) 15:45:53.17ID:CAP_USER
各サーバでログを一秒ごとに解析、件数を送信でいいんじゃね
2016/02/22(月) 15:46:52.15
負荷をかけない取り方かあ
身内用のを一か所にキャッシュして何度も取りに行かないようにするとか
取りに行く回数を減らすとか
リアルタイムではなくなんか適当なログからでっちあげるとか
うん、よくわからん
2016/02/22(月) 15:52:11.80ID:CAP_USER?S★(824723)

いやちがう、バックアップファイルを取り込む順番を間違えたのかw
2016/02/22(月) 15:55:39.32ID:CAP_USER?S★(824723)

負荷は全くっていいほど掛かってないかな?

今思案してるのは
過去ログ?
待避ログ?
存命ログ?
の判別
2016/02/22(月) 15:57:09.67ID:CAP_USER?S★(824723)

そう、思いの外、負荷が掛かってない
LAが1を越えることが無い
転送量もせいぜい2Mbps程度
2016/02/22(月) 16:04:18.03
アクセスされた時点で過去だったのか、の判別は頭が痛いな
219動け動けウゴウゴ2ちゃんねる
垢版 |
2016/02/22(月) 16:08:33.46ID:q+oJSBQ+
マーンゴさん
★2つ使い分けてじえーんして遊ぶの巻♪
2016/02/22(月) 16:26:05.89ID:CAP_USER?S★(824723)

2つ?
★全部自演だよ
2016/02/22(月) 16:27:53.40
よかった
コミュ症のマンゴーはいなかったんだ
■ このスレッドは過去ログ倉庫に格納されています
5ちゃんねるの広告が気に入らない場合は、こちらをクリックしてください。