防U統計部 (655)

←← 掲示板一覧に戻る ← スレッド一覧に戻る

1 - アフィサイトへの転載は禁止です。 2023/03/23(木) 20:51:58.21 ID:k4vr2Ovz0

無かったので


※追記 2023/03/23(木) 22:20:59

さんG統計部さんU支部
http://etc.3chan.jp/test/read.cgi/liveuranus/1678975374/
※tlv=5

2 - アフィサイトへの転載は禁止です。 2023/03/23(木) 21:07:26.04 ID:7OSiuxhi0

統計ニキじゃないけど助かる

3 - アフィサイトへの転載は禁止です。 (sage) 2023/03/23(木) 21:17:30.16 ID:1rBwq4DF0

統計ニキ来るかね

4 - アフィサイトへの転載は禁止です。 2023/03/23(木) 21:20:53.02 ID:7OSiuxhi0

あっちにスレ告知はしたよ

5 - アフィサイトへの転載は禁止です。 2023/03/23(木) 21:29:54.34 ID:7OSiuxhi0

!hogoで>>1は5日ルール回避できるけど忍法帖lv5消費するかもしれないから気をつけて

6 - アフィサイトへの転載は禁止です。 (L0) (sage) 2023/03/23(木) 22:10:52.23 ID:OLPbEzjGa

122 アフィサイトへの転載は禁止です。 2023/03/23(木) 21:40:59.76 ID:XBqgyxP00
防弾Uは5日間ルールあるの?
133 管理モメン ★ 2023/03/23(木) 21:45:52.69 ID:ADMIN
> >122
防弾Uにはないです
スレ主や運営が落とすか保持数をスレ番が下回るときのみ落ちます

7 - アフィサイトへの転載は禁止です。 2023/03/23(木) 22:11:48.10 ID:7OSiuxhi0

通常のスレ順dat落ちはあるのね

8 - アフィサイトへの転載は禁止です。 2023/03/23(木) 22:13:04.40 ID:7OSiuxhi0

関連スレ
さんG統計部さんU支部
http://etc.3chan.jp/test/read.cgi/liveuranus/1678975374/
一応

9 - アフィサイトへの転載は禁止です。 2023/03/23(木) 22:20:59.28 ID:k4vr2Ovz0

!hogo
まだよう分からんけど書いとくで!

!add
さんG統計部さんU支部
http://etc.3chan.jp/test/read.cgi/liveuranus/1678975374/

10 - アフィサイトへの転載は禁止です。 2023/03/23(木) 22:23:13.17 ID:k4vr2Ovz0

せっかくデータ溜まってきたのに崩壊して草

11 - アフィサイトへの転載は禁止です。 2023/03/23(木) 22:39:13.16 ID:Cu2lMDt1M

魚拓取っとくんやぞ

12 - ◆DxPGfb7WCc 2023/03/23(木) 22:40:57.19 ID:nEfUGjn10

>>1
サンガツやで〜

13 - アフィサイトへの転載は禁止です。 2023/03/23(木) 22:45:57.74 ID:7OSiuxhi0

防弾Gは野球実況の可否で3Gと大きく変わってくるかもしれない

14 - アフィサイトへの転載は禁止です。 2023/03/23(木) 22:53:30.12 ID:k4vr2Ovz0

来たわね
前に問題出してくれてたニキもおるやろか
最近の書籍は見てないから分からんけど、p値について前にワイが見たのだとこういうのがあるんや。既に知っとるかもしれんけど紹介しとくで

佐藤俊哉. ASA 声明と疫学研究における P 値 The ASA Statement and P-values in Epidemiologic Research
https://www.jstage.jst.go.jp/article/jjb/38/2/38_109/_pdf
統計的有意性と P 値に関する ASA 声明
https://www.biometrics.gr.jp/news/all/ASA.pdf

15 - アフィサイトへの転載は禁止です。 2023/03/23(木) 22:56:29.03 ID:Cu2lMDt1M

イッチ!subで統計ニキ福スレ主に指定してくれんか?

16 - 【忍法帖Lv.4】 2023/03/23(木) 23:06:03.64 ID:k4vr2Ovz0

!sub: nEfUGjn10

指定はスレのIDとかでええんやろか
コマンド一覧
https://wiki.sannan.nl/w/index.php/%E3%82%B3%E3%83%9E%E3%83%B3%E3%83%89%E3%83%BB%E6%A9%9F%E8%83%BD

17 - 【忍法帖Lv.4】 2023/03/23(木) 23:06:27.02 ID:k4vr2Ovz0

sub:nEfUGjn10

18 - 管理モメン ★ 2023/03/23(木) 23:14:37.03 ID:ADMIN

すみません指定は忍法帖ID(名前欄に表示される6桁のもの)で行います
副主になる人が名前欄に!ninidを入力されれば表示できるので
主はそれを指定してください

今回はこちらで指定しておきます

19 - 管理モメン ★ 2023/03/23(木) 23:15:14.99 ID:ADMIN

!sub:f9b6f5


★f9b6f5を副主に追加

20 - 【忍法帖ID:f9b6f5✅】 2023/03/23(木) 23:17:18.32 ID:nEfUGjn10

こうか?

>>18
移住先ありがとやで。
ここで活動について質問してるんで、
よかったらみててクレメンス
https://sannan.nl/test/read.cgi/unsaku/1658627617/662

もともとさんGで発作的につくったもんやから
ダメならダメでまあええで。
もしくは、管理モメンが公式で作る予定なら
それでもええんや

21 - 【忍法帖ID:a0c3a2】 2023/03/23(木) 23:17:58.87 ID:k4vr2Ovz0

サンキュー管理モメン!

22 - 【忍法帖ID:f9b6f5✅】 2023/03/23(木) 23:18:37.85 ID:nEfUGjn10

お、もうやってくれてんのか!
サンガツ!

23 - 【忍法帖ID:f9b6f5✅】 2023/03/23(木) 23:19:38.50 ID:nEfUGjn10

もちろん部への参加も歓迎やで!

24 - 【忍法帖ID:f9b6f5✅】 2023/03/23(木) 23:21:13.12 ID:nEfUGjn10

662 アフィサイトへの転載は禁止です。 (L5-f9b6f5✅) (ワ HwdU-d0aI):2023/03/23(木) 23:14:55.88 ID:yu0qb/3U0
さんGでsubject.txtから各スレのdatファイルスクレイピングして、
こういうの作ってたんやが、防弾なんGでやってもええか?
https://i.imgur.com/weYyAEf.png

今のアクセス間隔はだいたい15分に一回や
ちょっと感覚狭すぎたり、そもそもダメなら諦めるやで。

仕様はここも3chもあんまり変わらんからちょっと修正すればいけると思う。
↓ここで活動する予定や

さんG統計部さんU支部
https://etc.3chan.jp/test/read.cgi/liveuranus/1678975374/

663 管理モメン ★:2023/03/23(木) 23:19:08.80 ID:ADMIN
>>662
いいですよ

25 - アフィサイトへの転載は禁止です。 2023/03/23(木) 23:23:25.46 ID:7OSiuxhi0

管理モメンの公認貰えたのか よかったよかった

26 - アフィサイトへの転載は禁止です。 2023/03/23(木) 23:30:16.43 ID:nEfUGjn10

防儲も書き込み増えてるな
ええことや。防Gやったら防儲もスクレイピングするか

27 - アフィサイトへの転載は禁止です。 2023/03/23(木) 23:30:42.38 ID:nEfUGjn10

ワイ実はもともとケンモメンなんや

28 - アフィサイトへの転載は禁止です。 2023/03/23(木) 23:55:47.99 ID:k4vr2Ovz0

防儲も増えてるんか
経緯的には元々防儲がメイン?なんだよね。あんま見たことないけど

29 - アフィサイトへの転載は禁止です。 2023/03/24(金) 00:33:33.13 ID:JgRDeAg+M

>>28
せやね
ケンモメンの理想郷目指して作られた

30 - アフィサイトへの転載は禁止です。 (sage) 2023/03/24(金) 00:41:04.34 ID:BeJ+ENST0

板のほぼ初期からのデータとれるのは楽しいな

31 - 名無しさん@転載禁止 2023/03/24(金) 19:41:49.59 ID:yrbNeQdU0

さんG統計部さんU支部、お亡くなりになりました😭

32 - ◆DxPGfb7WCc 2023/03/24(金) 19:42:44.75 ID:2WGYr01t0副

南無南無

33 - 名無しさん@転載禁止 2023/03/24(金) 19:52:26.18 ID:yrbNeQdU0

書き込んだら息吹き返したわ

34 - 名無しさん@転載禁止 2023/03/24(金) 20:04:06.24 ID:c3iYBdtZ0

因みに書き込み数は3G時代と比べてどうなったんや?

35 - 名無しさん@転載禁止 2023/03/24(金) 20:17:58.77 ID:2WGYr01t0副

>>34
まだとってない、2.3日まって・・

36 - 名無しさん@転載禁止 2023/03/24(金) 20:25:25.98 ID:c3iYBdtZ0

>>35
はいさい!

37 - 名無しさん@転載禁止 2023/03/25(土) 03:58:42.77 ID:HPio98wGM

>>14
サンキュー読んどく
なん見たことある気がするけど

38 - 名無しさん@転載禁止 2023/03/25(土) 09:56:46.11 ID:L0gcIPSh0

dat落ちしちゃったわね

39 - 名無しさん@転載禁止 2023/03/25(土) 15:18:09.57 ID:7lTT4iSy0

統計部は5chも頼むわ
いつも使ってるサイトが使えん

40 - 名無しさん@転載禁止 2023/03/26(日) 00:13:56.61 ID:QkiZD9RiM

アマゾンのあの書籍リストとgistのURLみたいわ

41 - 名無しさん@転載禁止 2023/03/26(日) 00:36:24.64 ID:25XGYRB30

アマゾンのはこれかな?gistはわからない
https://www.amazon.jp/hz/wishlist/ls/NKQK1KIT3L1D?ref_=wl_share

42 - 名無しさん@転載禁止 2023/03/26(日) 01:51:44.54 ID:QkiZD9RiM

>>41
助かる

43 - ◆DxPGfb7WCc 2023/03/26(日) 04:11:48.57 ID:ejUpuZY00副

こっちはこっちで独自機能があるから
スクレイピングの関数修正しなきゃあかんかったわ、もうちょい時間かかりそう
忍法帖と安倍晋三ガチャでエラーでる

44 - ◆DxPGfb7WCc 2023/03/26(日) 04:20:23.33 ID:ejUpuZY00副

上できかれたから、ここまでのソースあげておくわ、汚いよ

https://gist.github.com/dory-dd/4cef97914ce3dd45d2b3d3f4cd1b5feb

45 - ◆DxPGfb7WCc 2023/03/26(日) 04:20:59.01 ID:ejUpuZY00副

いまここのスクレイピングの修正してる

https://gist.github.com/dory-dd/4cef97914ce3dd45d2b3d3f4cd1b5feb#file-scraper-py

46 - ◆DxPGfb7WCc 2023/03/26(日) 04:24:59.96 ID:ejUpuZY00副

extract_thread_content_from_dat関数のところで頭が働かなくて止まってる

47 - ◆DxPGfb7WCc 2023/03/26(日) 04:28:55.67 ID:ejUpuZY00副

scraper.pyでdatファイルをスクレイピング
db_thread_detail_data.pyで上記をDB保存
analize_thread.pyで分析用のviewを作成
index.pyでグラフを表示してる

保存と分析は結構あいまいな感じでやっちゃってるけど

48 - ◆DxPGfb7WCc 2023/03/26(日) 04:33:55.53 ID:ejUpuZY00副

キモは
extract_thread_content_from_datのルールと
いま、mainで書き換えようとしているscrape_all_thread_contents_from_list(url)をマルチスレッドで実行すること
あとは insert_to_table1だね
他の部分は基本viewだから、あとからなんとでもなるし

49 - ◆DxPGfb7WCc 2023/03/26(日) 04:35:15.74 ID:ejUpuZY00副

viewの作成はちょっとだけ複雑なことやろうとしてたから、sqlite3の方言SQLになっちゃってるところもあってごめん

50 - ◆DxPGfb7WCc 2023/03/26(日) 04:39:30.87 ID:ejUpuZY00副

なんかポリシーがあると、すれば、
・スレの内容をすべて保存する
・分析は可能な限りSQLでやる
・SQLで無理な部分をpythonでやる

かなあ

51 - ◆DxPGfb7WCc 2023/03/26(日) 04:44:36.91 ID:ejUpuZY00副

こんなん作ってると頭FAXになるよ

#fax_word = ["酸妄","在る","在るな","下民", "折れ","マンカス","だからな","どうする?","である","FAX時代","FAX氏","ノレカス","鼻ゴミ","障害者共","知恵遅れ"]

52 - 名無しさん@転載禁止 2023/03/26(日) 04:50:31.52 ID:ejUpuZY00副

extract_thread_content_from_dat(data)はもう配列の番号で指定しない方がいいのかなあ

53 - 名無しさん@転載禁止 2023/03/26(日) 09:08:09.49 ID:QkiZD9RiM

雑やけどイッチscrapy使うつもりある?
多分サーバーへの負荷減らせるで

54 - 名無しさん@転載禁止 2023/03/26(日) 09:12:05.49 ID:QkiZD9RiM

エラーバンドリングしてて偉い🤗

55 - 名無しさん@転載禁止 2023/03/26(日) 09:13:16.07 ID:QkiZD9RiM

scraper.pyでdatファイルをスクレイピング
db_thread_detail_data.pyで上記をDB保存
ここはscrapyで出来るから結構楽になるはずや

56 - 名無しさん@転載禁止 2023/03/26(日) 10:15:40.32 ID:ejUpuZY00副

>>53
そんなんあるんか、ちょっと調べてみるわ

57 - 名無しさん@転載禁止 2023/03/27(月) 00:32:24.43 ID:k+Pn1GISM

>>50
SQLで処理は面倒やな
そこそこ難しいものでも出来ちゃうからやりたくないんや

58 - 名無しさん@転載禁止 2023/03/27(月) 00:32:41.75 ID:yvyyxnAt0

解析たまに見てるで
支援age

59 - 名無しさん@転載禁止 2023/03/27(月) 01:42:48.42 ID:We58qZDy0副

scrapyはちょっとでかすぎるから、とりあえず既存のコード修正で対応することにするよ

>>57
このスクリプトはワイのデスクトップPCでWSLで実行してるんや、だからPCの稼働に影響でない程度の速度を出したいから、なるべくSQLでやりたいんよ

60 - 名無しさん@転載禁止 2023/03/27(月) 02:18:20.55 ID:k+Pn1GISM

>>59
SQLのほうがnumpyより軽いんやな
以外やわ
あれCで書かれてるのに

61 - 名無しさん@転載禁止 2023/03/27(月) 03:41:50.18 ID:We58qZDy0副

あー、numpyかあ
numpyは使ってないねえ

62 - 名無しさん@転載禁止 2023/03/27(月) 03:43:57.43 ID:We58qZDy0副

なんとなくselectでまず抽出した方がメモリを抑えられるかと思ってたんだけど、viewだからあんま変わらないかな・・
その方がデータ層とビジネスロジック層を明確に分離できる気がして

63 - 名無しさん@転載禁止 2023/03/27(月) 03:45:20.97 ID:We58qZDy0副

ということは早さというか、ロジックの明快さかな?

64 - 名無しさん@転載禁止 2023/03/27(月) 03:45:59.62 ID:We58qZDy0副

といっても、まだそんな高度な分析はしてないから、時系列分析程度だからという理由もある

65 - 名無しさん@転載禁止 2023/03/27(月) 03:46:39.89 ID:We58qZDy0副

今後、高度な分析になったら、numpyで分析した結果をinsertする機会もあるかも

66 - 名無しさん@転載禁止 2023/03/27(月) 03:47:21.74 ID:We58qZDy0副

正直子宮で考えてるから・・・子宮ないけど

67 - 名無しさん@転載禁止 2023/03/27(月) 03:48:19.27 ID:We58qZDy0副

やっぱり安倍晋三ガチャでエラー出る

68 - 名無しさん@転載禁止 2023/03/27(月) 05:09:37.26 ID:We58qZDy0副

いや、微妙に仕様違うな・・

69 - 名無しさん@転載禁止 2023/03/27(月) 23:29:43.69 ID:d3E2FooM0

datファイルとかってどこかに共同で保存しとるんか?
それともスクレイピングオンリーなんか?

70 - 名無しさん@転載禁止 2023/03/27(月) 23:34:57.72 ID:f3ObtA+o0

各々が纏めて上げる場所があるとええな
getuploaderだと容量少なすぎるか?

71 - 名無しさん@転載禁止 2023/03/28(火) 00:17:31.36 ID:jPOGB0Uy0副

>>69
現行はこの形式やね
https://sannan.nl/livegalileo/dat/1679922260.dat

データだけDBに保存しとる

72 - 名無しさん@転載禁止 2023/03/28(火) 00:43:19.44 ID:jPOGB0Uy0副

光明が見えてきた
嫌儲もやろうと思ってたんやが、この方法だとちょっと苦しいな・・・
というか、嫌儲って4万レスあるうちの半分以上安倍晋三ガチャやないか?

73 - 名無しさん@転載禁止 2023/03/28(火) 01:17:02.08 ID:jPOGB0Uy0副

ええやろ、件数調べるだけなら

実行時間は 3.737229108810425 秒です。
db_livegalileoの登録レコードは: 5489
正しい値は: 5491
一致率は:99.96357676197414%

74 - 名無しさん@転載禁止 2023/03/28(火) 01:30:41.56 ID:jPOGB0Uy0副

エラーが出るから大体ないように置き換え件数
[('[梨] 防G安倍晋三部2発\u3000コンマゾロ目で虚偽答弁00で山上99でビデオレター29で美しい国14でジューシー', 665), ('防G無職ニートフリーター部', 7), ('FAX特定して殺したいけど勝川は遠い', 5), ('防弾なんG文化保存部', 2)]

75 - 名無しさん@転載禁止 2023/03/28(火) 01:32:29.93 ID:jPOGB0Uy0副

安倍ガチャ除けば0.2%のエラーレコードだから、まあええやろ

76 - 名無しさん@転載禁止 2023/03/28(火) 01:32:58.02 ID:jPOGB0Uy0副

なんUは少し事情がちがうな

[('🥺防U絵文字部🥺', 72), ('[梨] 😐ぬぇーふ', 61), ('[梨] 🥺ぷゆゆ集落🥺', 23), ('防弾遊戯王マスターデュエル部', 15), ('🏮防U酒部🏮', 14), ('[梨] キチゲ解放所', 13), ('⚾防U野球雑談総合部⚾', 6), ('[レスOK]防Uチラシの裏部', 3), ('新設しました [管理モメン★]', 2), ('防U統計部', 2), ('ぷよぷよ&テトリス部【その他パズルゲームもいいよ♥】', 2), ('【告知】忍法帖レベル4になるとレベル上げに認証が必要です [管理モメン★]', 2), ('防U 将棋部【雑談・実況・対局・リレー将棋あり】', 1), ('【ゲームから】防G割れ部総合【B-CASまで】', 1), ('BB2Cから書き込めないんだけど', 1), ('防G無職ニートフリーター部避難所', 1), ('【告知】!sub:相手の忍法帖ID\u3000で副主を指定できるので、複数人でスレを管理できます [管理モメン★]', 1)]

77 - 名無しさん@転載禁止 2023/03/28(火) 01:34:52.36 ID:jPOGB0Uy0副

絵文字部とぷゆゆあたりはコマンド使いすぎてまったくとれないけど、まあしゃあないやろ・・

78 - 名無しさん@転載禁止 2023/03/28(火) 01:37:36.30 ID:jPOGB0Uy0副

エラーレコード:220
db_liveuranusの登録レコードは: 3103
エラー率7%か
うーん、たぶん最大でこんなもんかな。許容したい

79 - 名無しさん@転載禁止 2023/03/28(火) 01:38:35.07 ID:jPOGB0Uy0副

大体こういうスレってIDないから、分析の対象外になるんよな・・

80 - 名無しさん@転載禁止 2023/03/28(火) 01:42:08.51 ID:jPOGB0Uy0副

あっ忍法帖のレベル集計とかするう?

81 - 名無しさん@転載禁止 2023/03/28(火) 01:52:55.34 ID:jPOGB0Uy0副

しねーよなー

82 - 名無しさん@転載禁止 2023/03/28(火) 01:53:20.39 ID:jPOGB0Uy0副

ちょっと横道に逸れたけど、日付変わってからのユニークID数823だって

83 - 名無しさん@転載禁止 2023/03/28(火) 02:11:20.61 ID:+4DUAgKrM

>>80
結果とかそろそろ匿名化して言ったほうがいいラインに到達しつつある気がするわ
おすすめ(ワイはまだ読めてない)
https://images-fe.ssl-images-amazon.com/images/I/91t9cyxxJaL._AC_UL210_SR210,210_.jpg
https://images-fe.ssl-images-amazon.com/images/I/81lgrsYtXGL._AC_UL210_SR210,210_.jpg

84 - 名無しさん@転載禁止 2023/03/28(火) 02:35:21.88 ID:jPOGB0Uy0副

あ、マスキングね

85 - 名無しさん@転載禁止 2023/03/28(火) 02:36:07.27 ID:jPOGB0Uy0副

Error code 520だってなにこれ

86 - 名無しさん@転載禁止 2023/03/28(火) 02:36:51.82 ID:jPOGB0Uy0副

不明なエラーってなんやねん
ちょっとアクセスしすぎたか

87 - 名無しさん@転載禁止 2023/03/28(火) 02:48:48.93 ID:jPOGB0Uy0副

うーん、急にアクセスしすぎだか

88 - 名無しさん@転載禁止 2023/03/28(火) 02:52:45.07 ID:jPOGB0Uy0副

gistを最新にした。とりあえずanalize_thread.pyとindex.py以外は動く

89 - 名無しさん@転載禁止 2023/03/28(火) 02:54:13.66 ID:jPOGB0Uy0副

https://gist.github.com/dory-dd/4cef97914ce3dd45d2b3d3f4cd1b5feb

90 - 名無しさん@転載禁止 2023/03/28(火) 23:42:06.44 ID:jPOGB0Uy0副

cloudflareがさぁ!
VPNがさぁ!

91 - 名無しさん@転載禁止 2023/03/28(火) 23:48:40.65 ID:+4DUAgKrM

やから遅くしたりするんやで

92 - 名無しさん@転載禁止 2023/03/28(火) 23:49:39.20 ID:+4DUAgKrM

現状のコードならスマホで実行出来るからルート化すりゃええんちゃうかな

93 - 名無しさん@転載禁止 2023/03/28(火) 23:50:05.62 ID:+4DUAgKrM

ルート化すればIP切り替えるの楽やし

94 - 名無しさん@転載禁止 2023/03/29(水) 01:30:25.61 ID:E7woEsPx0副

https://sannan.nl/test/read.cgi/livegalileo/1680016003/

95 - 名無しさん@転載禁止 2023/03/29(水) 01:32:11.90 ID:E7woEsPx0副

テーブルの例
https://i.imgur.com/NdOjcIs.png

extract_thread_info_from_lines()の概念
https://i.imgur.com/FRKsdNF.png

96 - 名無しさん@転載禁止 (!) 2023/03/29(水) 09:14:43.64 ID:ONpxV26+0

防弾嫌儲で統計取ってる人がいた🙄

【独自研究】防弾嫌儲、さんG移民が流れ込み書き込み数が8倍になる [ioT3★]
http://sannan.nl/test/read.cgi/news1/1680048325/

97 - 名無しさん@転載禁止 2023/03/29(水) 09:32:37.76 ID:Vu43BKX10

やっぱりどこも統計部あるんだな

98 - 名無しさん@転載禁止 (sage) 2023/03/29(水) 12:51:17.28 ID:8ZOtyatq0

てか5chではやらないんか?

99 - 名無しさん@転載禁止 2023/03/29(水) 13:49:35.91 ID:Vu43BKX10

発祥が3Gだし5chはsparrowがある上にレコード数多すぎるから厳しいのでは?
まあ統計ニキ次第だけど

100 - 名無しさん@転載禁止 2023/03/29(水) 16:43:36.96 ID:GRV1dh370

そもそも発端が3chに勢い可視化する機能がないみたいな話じゃなかったんけ
5chにはあるから要らんって事ちゃう

101 - 名無しさん@転載禁止 2023/03/29(水) 18:19:10.89 ID:E7woEsPx0副

>>96
それワイだよ

102 - 名無しさん@転載禁止 2023/03/29(水) 18:23:52.60 ID:E7woEsPx0副

だいたい三男は全部の板に対応できるから、
G,U,嫌儲はデータとった
特に嫌儲はあんまり動きがないし、スレ保持数が多くて現状のスレだけでもかなり分析できそうだったから

103 - 名無しさん@転載禁止 2023/03/29(水) 18:31:37.26 ID:E7woEsPx0副

>>98
めんどうくさいし、ワイ5chみてないからあんまり興味もないかなって

104 - 名無しさん@転載禁止 2023/03/29(水) 18:55:40.45 ID:E7woEsPx0副

520エラーのせいで、ついにだんGをみれなくなって草

105 - 名無しさん@転載禁止 (L1) (sage) 2023/03/29(水) 21:27:49.92 ID:RyI334oN0

dat取得せずに、subject.txtだけで勢力図できないものだろうか?
subject.txtだけなら、5chでも取得できるから、いろんな勢力図作れそう

106 - 名無しさん@転載禁止 (L1) 2023/03/29(水) 21:38:53.21 ID:t6fyZQG20

5chの過去ログって専ブラじゃなければ普通にGETできるんやな
時間毎にsubject.txtを取得&前回のと比較して、落ちたkeyのスレをread.cgiで過去ログ取得&htmlをパースってやるとリアルタイム性は落ちるけどリクエストの回数減らせるから弾かれなさそうな感じ
まだ30分くらいしかぶん回してないからこの先わからんけど

107 - 名無しさん@転載禁止 (L1) (sage) 2023/03/29(水) 22:02:09.11 ID:RyI334oN0

ほほー。もう対応してましたか。
subject.txtだけなら、10分に1度ぐらいは大丈夫じゃない?

落ちたやつは、あきらめてもいいかもしれませんね
(10分以内のレス増加数は誤差範囲内として)

108 - 名無しさん@転載禁止 2023/03/29(水) 23:25:06.53 ID:E7woEsPx0副

>>105
>subject.txtだけなら、5chでも取得できる
そうなんだ、これは知らなかった

109 - 名無しさん@転載禁止 2023/03/29(水) 23:26:36.17 ID:E7woEsPx0副

弾かれるのはもう大丈夫っぽい

110 - 名無しさん@転載禁止 2023/03/29(水) 23:28:01.96 ID:E7woEsPx0副

なんUと嫌儲は一日一回クローニングで大丈夫そうだな

111 - 名無しさん@転載禁止 2023/03/29(水) 23:35:11.03 ID:E7woEsPx0副

>>105
自然言語処理が必要そうだね
統計処理だけでいけるのかな?

112 - 名無しさん@転載禁止 2023/03/30(木) 00:00:39.37 ID:SlgDGBHXM

dat取得すればガチの勢力図作れるけど面倒やわ
今日はコード書けんかった

113 - 名無しさん@転載禁止 2023/03/30(木) 00:09:20.03 ID:4I6M3wJj0副

htmlパースはちょっとなあ・・・

114 - 名無しさん@転載禁止 2023/03/30(木) 00:19:50.41 ID:4I6M3wJj0副

でも5chのsubject.txt収集は既存の関数使い回せるからいいね。テーブルを一つ用意するだけで事足りるし。こんな感じかね

CREATE TABLE IF NOT EXISTS {table_name} (
site_name varchar(10),
board_name varchar(30),
thread_key(11) NOT NULL,
thread_title varchar(256),
res_number INTEGER NOT NULL,
created_by TIMESTAMP NOT NULL,
PRIMARY KEY (thread_key, res_number)
);

115 - 名無しさん@転載禁止 2023/03/30(木) 00:26:33.70 ID:4I6M3wJj0副

board_name varchar(30)もいらないか。20で充分だな

116 - 名無しさん@転載禁止 2023/03/30(木) 00:30:33.86 ID:SlgDGBHXM

50はgone規制あるからここみたいにクソみたいなリクエスト送ると即何も取れなくなるで

117 - 名無しさん@転載禁止 2023/03/30(木) 00:30:57.20 ID:4I6M3wJj0副

>>107
あと、そのままだとdatのnot foundでエラーでるよ。scraper.pyのmain処理にエラーハンドリング追加しといたからみといて
これで動いてる

118 - 名無しさん@転載禁止 2023/03/30(木) 00:34:10.50 ID:4I6M3wJj0副

>>116
そういえばそうだったね、前やられたことあるわ

119 - 名無しさん@転載禁止 (L1) 2023/03/30(木) 00:55:58.31 ID:BMRAYjkT0

5chのgoneはUA設定してないなら設定する・UA設定してても別のUAに変えるとワンチャン乗り切れるかもしれない
勿論引っかからないのが第一だけどあんまり細かくは見てないっぽいので万が一引っかかっても次からリクエスト間隔にさえ気を付ければ最悪User-Agent:unkoなんかでも通る説が濃厚

120 - 名無しさん@転載禁止 2023/03/30(木) 01:43:43.09 ID:4I6M3wJj0副

ちょっとgistだと使いづらくなってきたから整理するわ

121 - 名無しさん@転載禁止 (L1) 2023/03/30(木) 11:00:32.38 ID:BMRAYjkT0

>>106やけど昨晩の5Gの約6万書き込み分のデータまとめたので置いとくわ
時系列ぐちゃぐちゃやし整形もしてないけど一応試行段階でこんな感じで取れたってことで
https://dotup.org/uploda/dotup.org2965239.csv.html

ちなみに今もVPSからぶん回してるけど規制かかったりはしてなさそう

122 - 名無しさん@転載禁止 2023/03/30(木) 18:36:28.45 ID:4I6M3wJj0副

>>121
ええやん!自分でコード書いてたんやな!
5chと比較できると色々できるな最高やん

123 - 名無しさん@転載禁止 2023/03/30(木) 18:38:17.57 ID:4I6M3wJj0副

あとで精査してみるな

124 - 名無しさん@転載禁止 2023/03/30(木) 20:07:16.28 ID:SlgDGBHXM

スクレイピングの参考になるスレのURL知らない?
安倍晋三とかjienとかワッチョイとか

125 - 名無しさん@転載禁止 2023/03/30(木) 20:08:24.20 ID:SlgDGBHXM

これ下手にdatでスクレイピングするよりhtmlからパースしたほうが正確にスクレイピング出来そうだな…

126 - 名無しさん@転載禁止 2023/03/30(木) 20:31:02.21 ID:Kt+JLYAT

>>121
なんGやな

key,
thread_title,
res_num,
name,
email,
comment_date,
post_id,
comment,

やね、だいたいワイのと同じやね

127 - 名無しさん@転載禁止 2023/03/30(木) 20:34:49.04 ID:SlgDGBHXM

ここよりなんGとかのほうがコード書くの楽やな
途中の変更起こらんから

128 - 名無しさん@転載禁止 2023/03/30(木) 21:08:36.00 ID:SlgDGBHXM

gist消えとるな
パースの参考にしようと思ってたやんけど

129 - 名無しさん@転載禁止 2023/03/31(金) 00:49:48.36 ID:/BzSrrF7M

>>121
このデータpandasで読み込もうとしてるけどダブルコーテーションがついてたり付いてなかったりしてpandas君で素直に読み込んでくれなくて悲C
前処理に一番時間かかるやつやね😔

130 - 名無しさん@転載禁止 2023/03/31(金) 00:51:57.54 ID:/BzSrrF7M

>>129
って書いた瞬間に上手く行くやつやね
かなC
2時間くらい消費したのに

131 - 名無しさん@転載禁止 2023/03/31(金) 00:52:33.58 ID:/BzSrrF7M

まあでもスレタイにカンマ使われてたら壊れるやろな

132 - 名無しさん@転載禁止 2023/03/31(金) 01:51:07.74 ID:rQAeK7710主

ワイも触発されてメカブまで入れてみた明後日あたりデータで遊んでみよう

133 - 名無しさん@転載禁止 2023/03/31(金) 06:30:18.76 ID:UrnYU53k0副

お、ワイなんGデータ洗浄したよ。
あげなおそうか

134 - 名無しさん@転載禁止 2023/03/31(金) 06:31:08.10 ID:UrnYU53k0副

とりあえずれこれなhttps://i.imgur.com/AU1aQmF.png

135 - 名無しさん@転載禁止 2023/03/31(金) 06:37:00.72 ID:UrnYU53k0副

https://anonfiles.com/h6weW4h4z4/nanG_csv

136 - 名無しさん@転載禁止 2023/03/31(金) 07:35:00.97 ID:UrnYU53k0副

これでdfにできてる

# カラム名の指定
columns = ["key", "thread_title", "res_num", "name", "email", "comment_date", "post_id", "comment"]

# データ型の指定
dtype = {"key": "Int64", "thread_title": str, "res_num": "Int64", "name": str, "email": str, "comment_date": str, "post_id": str, "comment": str}

# CSVファイルの読み込み
df = pd.read_csv(csv_path, names=columns, dtype=dtype, parse_dates=["comment_date"], na_values=[""])

# 欠損値の埋め方を指定
df = df.fillna({"key": 0, "res_num": 0})

# 「Over 1000」を除外
df = df[df["comment_date"] != "Over 1000"]
# comment_dateカラムを日付型に変換
df["comment_date"] = pd.to_datetime(df["comment_date"], format="%Y/%m/%d(%a) %H:%M:%S.%f")

137 - 名無しさん@転載禁止 2023/03/31(金) 07:38:03.13 ID:/BzSrrF7M

>>133
なんGのCSVの方は大丈夫や多分
防Gのデータ拾ってくるときのパースとかが正確にやるの面倒やなってくらいやな
スレの途中で変わるからしゃーないんやが

138 - 名無しさん@転載禁止 2023/03/31(金) 10:08:13.47 ID:UrnYU53k0副

https://i.imgur.com/GhfYvyh.png

139 - 名無しさん@転載禁止 2023/03/31(金) 20:04:50.80 ID:UrnYU53k0副

https://i.imgur.com/epyHF5w.png

140 - 名無しさん@転載禁止 2023/03/31(金) 20:49:02.72 ID:/BzSrrF7M

>>121
pandasで素直に取るとレス内にカンマが含まれてるとpandasのreadcsvが壊れるから
,"[^"]+,[^"]+"$
とかで該当レスの前処理してカンマを変換するなりしてくら使うとうまく行くわ
またはread_csvのerror_bad_lines=False,とかでエラーの行ガン無視か

141 - 名無しさん@転載禁止 2023/03/31(金) 20:56:15.42 ID:/BzSrrF7M

https://i.imgur.com/FTaDklj.png
このデータを可視化
https://dotup.org/uploda/dotup.org2965239.csv.html

青がIDで赤がスレ
IDとスレを繋いだ画像や
黒いのはスレタイの文字が重なりまくって読めない
NIKUは除去済み
一応gmlとdotに変換はしたんやが重いからおすすめしないわ
https://anonfiles.com/Z093c7iezf/_G_zip
csvからやったほうがええかな

データが一部やしなんとも言えんが立ったばっかりのアフィスレは他と繋がり少なそうなイメージやわ
次数解析とかはしてないからデータクリーニングして真ん中部分だけやりたいところやな

142 - 名無しさん@転載禁止 2023/03/31(金) 20:59:19.54 ID:/BzSrrF7M

>>141
配置はforce-directed placement(spring layout)で日本語やとバネ配置とか力指向配置とか言われるやつや

143 - 名無しさん@転載禁止 2023/03/31(金) 21:00:55.16 ID:/BzSrrF7M

dotからsvgに変換しようとしてるけど3時間くらい回しても画像一向に完成さなくて草
Google colabとか使ったほうが良かったかも知れん
普通に他のCPU空いてるから他のことは出来るけど

144 - 名無しさん@転載禁止 2023/03/31(金) 22:23:49.66 ID:BSyB3zDf0

さんGのログ今すぐ取れる?
あと2時間で取れるだけ取ってほしい

145 - 名無しさん@転載禁止 2023/03/31(金) 22:25:46.43 ID:/BzSrrF7M

>>144
ログなら簡単やけど過去ログは無理やで
もう無くなったのは取れない

146 - 名無しさん@転載禁止 2023/03/31(金) 22:27:15.61 ID:BSyB3zDf0

>>145
十分や
今取れるぶんだけでええ

147 - 名無しさん@転載禁止 2023/03/31(金) 22:30:28.89 ID:/BzSrrF7M

>>146
魚拓を取るのかログを取るのかがわからん

148 - 名無しさん@転載禁止 2023/03/31(金) 22:35:38.97 ID:BSyB3zDf0

>>147
すまんワイもよくわかっとらん
とりあえず取れるもんを取ってほしい

149 - 名無しさん@転載禁止 2023/03/31(金) 22:36:24.95 ID:/BzSrrF7M

>>148
いまスレ一覧にあるのは3分もあれば全部取れるで

150 - 名無しさん@転載禁止 2023/03/31(金) 22:36:36.28 ID:/BzSrrF7M

ダウンロードだけならや

151 - 名無しさん@転載禁止 2023/03/31(金) 22:36:47.00 ID:/BzSrrF7M

魚拓もそんなに時間はかからん

152 - 名無しさん@転載禁止 2023/03/31(金) 22:41:46.53 ID:BSyB3zDf0

ありがとう

153 - 名無しさん@転載禁止 2023/03/31(金) 22:46:21.88 ID:/BzSrrF7M

今ざっとURL抜き出しといたからニキも魚拓のコード走らせとくんやで
https://pastebin.com/CaEFnbju

154 - 名無しさん@転載禁止 2023/04/02(日) 19:24:41.92 ID:FO7Vu4BeM

スクレイピングの本体はざっくり書いたんやけどDB入れるのがよくわからんから困る

155 - 名無しさん@転載禁止 2023/04/05(水) 13:10:05.88 ID:iCzFShzu0

ワイは体感的に人口が減ったように感じるわ
統計的には微増なんかな

156 - 名無しさん@転載禁止 2023/04/05(水) 13:14:22.37 ID:ypEPNXucM

移住直後は微増で今は減ってそうな体感

157 - 名無しさん@転載禁止 2023/04/05(水) 13:29:48.16 ID:iCzFShzu0

>>156
簡潔に言えばこれ

158 - 名無しさん@転載禁止 2023/04/07(金) 03:06:39.83 ID:mOsDRYRE0副

これやで

https://i.imgur.com/4SAB7j1.png

159 - 名無しさん@転載禁止 2023/04/07(金) 06:27:12.65 ID:zJkrOk1rM

テキストマイニングのええ本知らんか?

160 - 名無しさん@転載禁止 (sage) 2023/04/07(金) 09:47:34.62 ID:/7EDf5CwM

ワイ今年統計検定2級勉強するから😡
ちな参考書未購入

161 - 名無しさん@転載禁止 2023/04/07(金) 17:12:29.96 ID:mOsDRYRE0副

>>160
ワイもちょっと考えとる
まず3級からやな、、、

162 - 名無しさん@転載禁止 2023/04/07(金) 17:22:19.60 ID:zJkrOk1rM

3級とか高校生でもないならいらんで

163 - 名無しさん@転載禁止 2023/04/07(金) 17:26:08.50 ID:zJkrOk1r0

2級は2011-から2015までの過去問は絶対に回しとくんやぞ

164 - 名無しさん@転載禁止 2023/04/07(金) 17:45:02.91 ID:mOsDRYRE0副

>>162
ちょっと言葉の使い方気をつけた方がええで

165 - 名無しさん@転載禁止 2023/04/07(金) 19:34:31.69 ID:zJkrOk1rM

>>164
何がどう触れたのかわからんが気分害したならすまんな
統計検定の公式サイトの説明にもあるように「高等学校の必修科目である数学Iの「データ分析」相当の統計内容の知識と実際にそれらを身近な問題解決に活かすことが出来る統計的問題解決力を〜〜〜」とあるように内容は高校相当なんや
なんでやっても意味が薄いというか足らないからよほど数学等が苦手でないなら2級スタートをおすすめするわ
英検4級みたいな感覚

166 - 名無しさん@転載禁止 2023/04/07(金) 20:47:56.27 ID:mOsDRYRE0副

>>165
ええんやで
ワイ頭悪いし、趣味やから家の近くで初歩から受けたいんや🤗

167 - 名無しさん@転載禁止 2023/04/07(金) 22:17:31.90 ID:zJkrOk1rM

>>166
2級のCBT近くでやってないんか
それはどんまいやわ
とりあえず3級だろうと統計web完璧にしとけばオーバーキルできると思うで
あれは2級用やがわかりやすいやつや

168 - 名無しさん@転載禁止 2023/04/08(土) 21:32:55.64 ID:Hx4CPqFgd

>>158
これ統計部のやつだと聞いてやって来た
計算お疲れ様です

169 - 名無しさん@転載禁止 2023/04/09(日) 02:50:14.15 ID:mHm9AwCp0副

>>168
それ貼ったの多分ワイだよ🤗

170 - 名無しさん@転載禁止 2023/04/11(火) 09:10:03.78 ID:rwB1tVZC0副

https://i.imgur.com/pVqgdEd.png

171 - 名無しさん@転載禁止 2023/04/11(火) 09:13:05.38 ID:zvGKgsWv0

狂騒も終わったから落ち着いてきたのかな?

172 - 名無しさん@転載禁止 2023/04/11(火) 16:00:20.64 ID:zDXY5RDx0

統計部いつもようやっとるサンガツ
出来事も載ってて見やすいわね
ここ数日は大きな仕様変更がないのとリアルだと年度の切り替えとプロ野球の開幕から少し経って落ち着いたのもあるのかな

173 - 名無しさん@転載禁止 2023/04/11(火) 23:29:18.35 ID:rwB1tVZC0副

>>172
こちらこそサンガツ
精度が怪しいから少しずつ改修していくよ🙄

174 - 名無しさん@転載禁止 2023/04/12(水) 00:53:37.48 ID:NnNG4r/QM

時系列分析の本読んだから触りたいけどデータ集めるのめんどくさいのと3ch時代のがないから触れないわ

175 - 名無しさん@転載禁止 2023/04/12(水) 06:15:00.82 ID:UpO9QJGZ0副

>>174
あげる🥺👉https://anonfiles.com/b9AdEdkez2/livegalileo_all_csv

176 - 名無しさん@転載禁止 2023/04/12(水) 06:17:23.30 ID:UpO9QJGZ0副

あ、ごめんよく読んだら不要だった?

177 - 名無しさん@転載禁止 2023/04/12(水) 06:17:34.76 ID:NnNG4r/QM

>>175
助かる

178 - 名無しさん@転載禁止 2023/04/12(水) 06:18:51.12 ID:UpO9QJGZ0副

データクレンジングしてねー

179 - 名無しさん@転載禁止 2023/04/12(水) 06:19:40.23 ID:NnNG4r/QM

datファイルは脳死でmongodbに突っ込むのが良さそうな感じ
他のことで忙しいからこっちのコード書く時間なかなか取れないけど

180 - 名無しさん@転載禁止 2023/04/14(金) 01:56:30.95 ID:Es/z8Iz1d

>>170
お疲れ様

181 - 名無しさん@転載禁止 2023/04/15(土) 00:26:10.92 ID:HOQDsQV80副

>>180
ありがとー🤗

182 - 名無しさん@転載禁止 2023/04/15(土) 00:44:46.34 ID:biAbO+WfM

>>181
この画像アップも自動化や

183 - 名無しさん@転載禁止 2023/04/16(日) 15:10:06.61 ID:Dj4pihFe0

体感この1週間で人が減った気する

184 - 名無しさん@転載禁止 2023/04/16(日) 15:24:09.81 ID:hB6Uny7o0

社畜部、ニーフリ部、ソシャゲ部
この辺とその他で分けるとその他のほうが減ってる気はする

185 - 名無しさん@転載禁止 2023/04/18(火) 15:43:01.58 ID:FrgQBFYT0

統計の結果って何曜日に出すとか決まってる?

186 - 【35日目】 2023/04/18(火) 16:31:17.30 ID:Mj/Bn6NZ0

完全に偏見だけど3G初期中期に頑張ってネタ考えてスレ立てたりしてた人はなんPに行った印象

187 - 名無しさん@転載禁止 2023/04/18(火) 16:36:38.59 ID:coyu9RZz0

5chの障害がいつ直るかわからないし 当分人口は増えそうね

188 - 名無しさん@転載禁止 2023/04/18(火) 18:27:07.27 ID:y81yn6wy0

土曜の朝とは別の障害?

189 - 名無しさん@転載禁止 2023/04/18(火) 18:32:17.68 ID:yX4qZdf70

ちゃんとは見てないけどAPI鯖が逝った?っぽい
避難民かなり来てるね、次の統計が気になるわ

190 - 名無しさん@転載禁止 2023/04/18(火) 18:34:50.70 ID:yX4qZdf70

>>186
ワイもそう思う
なんPは大出世前のさんGを感じる

191 - 名無しさん@転載禁止 2023/04/19(水) 08:26:12.20 ID:EpX6XjoD0

統計気になるよね

192 - 名無しさん@転載禁止 2023/04/19(水) 15:58:46.16 ID:lqRFhMEk0

見当もつかないけどID数は普段の10〜30倍とかかな🤔

193 - 名無しさん@転載禁止 2023/04/22(土) 22:39:23.04 ID:u5WNmY2R0

保守

194 - 名無しさん@転載禁止 2023/04/24(月) 01:04:52.99 ID:OsDuK2L50副

!tlv5

195 - 名無しさん@転載禁止 2023/04/25(火) 00:14:20.37 ID:7qwDWNLb0主

!mirror


★スレをMIRRORモードに設定

196 - 名無しさん@転載禁止 2023/04/25(火) 00:22:48.01 ID:7qwDWNLb0主

防Uのスレ紹介BOT機能mirrorコマンドが実装されたよぉ🥺

197 - 名無しさん@転載禁止 2023/04/25(火) 00:23:12.30 ID:7qwDWNLb0主

!kaijo:mirror


★MIRRORモードを解除

198 - 名無しさん@転載禁止 (sage) 2023/04/25(火) 00:24:17.09 ID:/d0SoQiO0

次のミラーコマンドが使われると前のミラーコマンド解除されるっぽいな
>>196がコピペされてない

199 - 名無しさん@転載禁止 2023/04/25(火) 00:26:07.70 ID:JHsLFTDp0

宣伝用じゃないレスまでコピーされちゃうのは恥ずかしいからそれぐらいで良いかも

200 - 名無しさん@転載禁止 (sage) 2023/04/26(水) 01:41:01.27 ID:72o0Hhn3r

最近動いてるのか?

201 - 名無しさん@転載禁止 2023/04/26(水) 09:52:45.37 ID:nGXvMxJJa

わからんね

202 - 名無しさん@転載禁止 2023/04/26(水) 10:35:45.14 ID:Z+ImqpgD0副

最近忙しくて・・・

203 - 名無しさん@転載禁止 2023/04/26(水) 10:36:26.31 ID:Z+ImqpgD0副

ここはみてるよ

204 - 名無しさん@転載禁止 2023/04/28(金) 14:57:08.47 ID:84IWZGRy0

ワイも見てるぞ

205 - 名無しさん@転載禁止 2023/04/29(土) 01:54:47.64 ID:jph0lgJ60

たまに覗いてます

206 - 名無しさん@転載禁止 2023/05/03(水) 14:46:02.30 ID:264DSLOtd

もう統計見なくてもわかるけど結果出せないくらい減ってるんだろうなぁ…

207 - 名無しさん@転載禁止 2023/05/04(木) 23:14:14.52 ID:dt8Dep1m0副

ちょっと試しに動かしてみようか

208 - 名無しさん@転載禁止 2023/05/04(木) 23:32:53.33 ID:dt8Dep1m0副

丸二日くらいかかりそうだけど、一応動かした。結果がちゃんと出たらここに貼る

209 - 名無しさん@転載禁止 2023/05/05(金) 00:11:55.79 ID:IPki0jYM0

了解 楽しみに待ってます

210 - 名無しさん@転載禁止 2023/05/05(金) 09:43:29.52 ID:owaKXzvd0副

意外とやはかった
https://i.imgur.com/CMb1lSX.png

211 - 名無しさん@転載禁止 2023/05/05(金) 09:46:05.31 ID:owaKXzvd0副

安倍ガチャとか、名前欄変更とか、IDなしとかは含まれてないから、本当の数かと言われると疑問が残るけど、条件は同じだから、まあ、参考までに

212 - 名無しさん@転載禁止 2023/05/05(金) 09:47:02.40 ID:owaKXzvd0副

4/18はなんG落ちてたやつかな?
すごいね。さんGでもここまでいかなかった

213 - 名無しさん@転載禁止 2023/05/05(金) 09:51:22.75 ID:IPki0jYM0

野球実況で勢い1万越え達成したのその日だけだし退避民効果だろうね
昨日一昨日のレス数が減ってるのはGWだからかな

214 - 名無しさん@転載禁止 2023/05/05(金) 10:39:02.22 ID:FAKq43pK0

はぇ〜こんな感じなんか
!mirrorでこの情報周知はしないんけ?

215 - 名無しさん@転載禁止 2023/05/05(金) 10:55:09.61 ID:IPki0jYM0

一応統計ニキがスレ建てとる

久々に書き込み数の統計とったから、参考までに
http://sannan.nl/test/read.cgi/livegalileo/1683247839/

216 - 名無しさん@転載禁止 2023/05/05(金) 12:09:32.62 ID:vJeI+oPM0

GWはやっぱり人が少ないわね

217 - !mirror 2023/05/07(日) 09:37:32.68 ID:CUOOov4W0副

これでええんか?

218 - 名無しさん@転載禁止 2023/05/07(日) 09:41:41.53 ID:S9xbFwR20

>>217
できてる
防Gにスレ立てるほどじゃない時とか軽く周知できて便利

219 - !mirror 2023/05/07(日) 10:38:37.77 ID:NYkNwKj50主

統計部の直近の報告です

4月18日は5chAPIサーバー障害により避難民が押し寄せその後微増傾向、GWはみんなお出かけで書き込み数激減
https://i.imgur.com/CMb1lSX.png

久々に書き込み数の統計とったから、参考までに
http://kako.sannan.nl/test/read.cgi/livegalileo/1683247839/

220 - !mirror 2023/05/07(日) 10:39:21.97 ID:NYkNwKj50主

みたいなね

221 - !mirror 2023/05/07(日) 10:44:41.64 ID:NYkNwKj50主

!mirrorされてない😡


★スレをMIRRORモードに設定

222 - 名無しさん@転載禁止 2023/05/07(日) 10:53:14.23 ID:NX9UCk1O0

おつおつ
ミラーのクールタイムとかの仕様がわからないから微妙に使い勝手が悪い時あるね

223 - 名無しさん@転載禁止 2023/05/07(日) 11:05:34.81 ID:NYkNwKj50主

!kaijo:mirror
いつの間にかクールタイムとかあったんやね。間隔が短すぎたんか


★MIRRORモードを解除

224 - 名無しさん@転載禁止 2023/05/07(日) 11:24:03.97 ID:S9xbFwR20

クールタイムの仕様は今のところどこにも記載なさそうなんよな
217が反映されてて219は反映されてないから1時間は確定っぽいけど

225 - 名無しさん@転載禁止 2023/05/08(月) 11:03:32.00 ID:u5S5BHBr0

防弾嫌儲の方はどうなってるやろ
良ければ調べてもらえますか

226 - !mirror 2023/05/09(火) 20:29:56.03 ID:csv/2AXh0主

ここら辺でもう一度🤗
統計部の直近の報告です

4月18日は5chAPIサーバー障害により避難民が押し寄せ、その後微増傾向、GW期間はみんなお出かけで書き込み数が激減していました
https://i.imgur.com/CMb1lSX.png

出典
久々に書き込み数の統計とったから、参考までに
http://kako.sannan.nl/test/read.cgi/livegalileo/1683247839/

227 - !mirror 2023/05/09(火) 20:31:48.13 ID:csv/2AXh0主

!mirror
妙だな🤔


★スレをMIRRORモードに設定

228 - !mirror 2023/05/09(火) 20:40:12.86 ID:csv/2AXh0主

ダメみたいだねぇ🤥

229 - 名無しさん@転載禁止 2023/05/09(火) 21:00:25.55 ID:csv/2AXh0主

いや反映されてたわ。チンクルのログ壊れて見えてないだけでした
!kaijo:mirror


★MIRRORモードを解除

230 - 名無しさん@転載禁止 2023/05/09(火) 21:51:59.36 ID:3etapsZP0

やっぱりGW期間は皆出かけてたんだな

231 - 名無しさん@転載禁止 2023/05/09(火) 23:42:26.36 ID:knK8eGRw0

GW明けの状況も気になるわね

232 - !mirror 2023/05/10(水) 14:13:00.77 ID:5e38k3ZW0副

>>225
嫌儲最近やってないねぇ
ぼちぼちやってみるね

ぼんGはそのあとやってみるね

233 - !mirror 2023/05/10(水) 14:13:56.51 ID:5e38k3ZW0副

あらミラーつけっぱなしだった。まあいいか

234 - !mirror 2023/05/10(水) 14:14:59.56 ID:5e38k3ZW0副

別に日時バッチで処理すればいいんだろうけど、いままとめる気力がないのすまんね🥺

235 - 名無しさん@転載禁止 2023/05/10(水) 14:45:13.15 ID:gXHrhdSha

気力ある時に進めてください
無茶はよくない

236 - 名無しさん@転載禁止 2023/05/10(水) 16:07:22.49 ID:5e38k3ZW0副

ありがとね、カクテルあげる🍸

237 - 名無しさん@転載禁止 2023/05/10(水) 20:17:32.14 ID:gXHrhdSh0

ありがと🤗

238 - !mirror 2023/05/13(土) 08:14:48.58 ID:jPUXqFt/0主

[統計部]防Gの過去ログ、スレ数が2万7千を超える
http://kako.sannan.nl/test/read.cgi/livegalileo/1683910514/
https://i.imgur.com/Wf0790r.png

今回はsubject.txtだけで処理してみました
日別スレ数立て数の推移
https://i.imgur.com/6S4SIb0.png

レス数推移の簡易集計
subject.txtより、スレごとのレス数をそのスレの立てられた日にカウントすることにより集計。速報版として使えるかも
https://i.imgur.com/8IfGTDv.png
csvデータ
https://pastebin.pl/view/raw/df0b08a0

スレごとのレス数の統計
中央値8
平均値37.6
IQR 4.0-18.0
最大値9404([梨] 安倍ガチャ雑談)
https://i.imgur.com/zPtbj9v.png
1のみで落ちたスレは1089。2以下で抽出すると3564で全体の約12.9%でした

239 - 名無しさん@転載禁止 2023/05/13(土) 08:58:42.44 ID:+GVLGlmb0副

ようやっとる

240 - 名無しさん@転載禁止 2023/05/13(土) 09:24:19.70 ID:3VpeeSeD0

管理モメンのレスする時間を集計して活動時間を分析するとかできますかね🙄
全ログ取得済みなら管理モメン☆で集計すれば分かるかな🤔

241 - 名無しさん@転載禁止 2023/05/13(土) 09:32:12.07 ID:LMRhSmGJ0

部長もようやっとるよ本当に
>>240
それは悪用されそうなので(主にFAXが不在時間を狙い撃ちする)やめた方がよろしいかと
やっぱり体感増えたというのは感覚として間違っていなかったか

242 - 名無しさん@転載禁止 2023/05/13(土) 09:40:51.62 ID:3VpeeSeD0

>>241
管理人も増えてるから平気じゃないかな🤔
まぁやつが死ぬまでは避けたほうがええか
また最近5ch攻撃してそうだし
Pは見てないからどうか分からんけど

243 - 管理モメン ★ 2023/05/13(土) 09:43:09.75 ID:ADMIN

起こる時間バラバラだからなぁ

244 - 名無しさん@転載禁止 2023/05/13(土) 09:45:53.14 ID:3VpeeSeD0

>>243
即レスがすぎる😳
全レス巡回しとるんか😳
管理してて偉い👊😳

245 - 名無しさん@転載禁止 2023/05/13(土) 12:37:50.77 ID:jPUXqFt/0主

管理モメンに比べてだんG民が規則正し過ぎる

時間帯別スレ立て数
https://i.imgur.com/t2qcefO.png

subject.txtによる時間帯別レス数推計
https://i.imgur.com/bWE3DOa.png
20時20分にスレが立つウォッチパ部のピークが見える

現在の防弾なんGの過去ログは、27700スレに対して224MBのようでした

246 - 名無しさん@転載禁止 (sage) 2023/05/13(土) 12:44:38.43 ID:u0Vp1IJs0

うーんこの昼休み

247 - 名無しさん@転載禁止 2023/05/13(土) 12:54:39.79 ID:F4N2WL5aM

平日の深夜と正午以外の昼間に勢いがない掲示板があるらしい

248 - 名無しさん@転載禁止 2023/05/13(土) 12:57:13.26 ID:3VpeeSeD0

社畜の動きが見えますね…
通勤昼休み退勤時間
ウォッチパとか毎日固定でレス増えるからピークが見えるんやなぁ
0時から急激にスレ立てもレス数も落ちる
面白いねこれ😆

249 - 名無しさん@転載禁止 2023/05/13(土) 13:00:34.89 ID:LMRhSmGJ0

とても規則正しい生活だなぁ

250 - 名無しさん@転載禁止 2023/05/13(土) 20:51:05.27 ID:w8zSX3w90

>>245
昼休みの∧草
規則正しいの分かってたけどデータでも綺麗に出るんやね
統計部いつもサンガツ😘

!send:3:ID:jPUXqFt/0主


★ID:jPUXqFt/0に3🌷を送りました。

251 - 名無しさん@転載禁止 2023/05/13(土) 23:46:30.31 ID:jPUXqFt/0主

サンガツやで

【統計部】だんG民に規則正しい生活をしている社畜が多いことが統計から明らかに
http://sannan.nl/test/read.cgi/livegalileo/1683985173/
http://kako.sannan.nl/test/read.cgi/livegalileo/1683985173/
時間帯別のスレッド数
https://i.imgur.com/tgWX8iC.png
時間帯別のレス数 ※簡易集計
https://i.imgur.com/2QVU3Vb.png

5/3〜5/7のGW期間中のみ
https://i.imgur.com/lD0jwhm.png
https://i.imgur.com/d86TNVU.png
影響してそうな個別スレの抽出
11-14時
https://i.imgur.com/nCUKFYj.png
19-21時
https://i.imgur.com/0g5hSTZ.png

252 - 名無しさん@転載禁止 2023/05/13(土) 23:47:13.73 ID:jPUXqFt/0主

これよく見たらレス数もスレッド数に間違っとるやん

253 - 名無しさん@転載禁止 2023/05/13(土) 23:52:55.93 ID:PLkYKLo50

防Gスヤスヤで草

254 - 名無しさん@転載禁止 2023/05/13(土) 23:56:06.13 ID:jPUXqFt/0主

>>251
https://i.imgur.com/DghBFTA.png
https://i.imgur.com/VJ2GcbV.png
レス数のグラフはy軸の説明が間違ってたので修正版や

ちな解析と図作るのにワイもR使いまくっとるで!
部長はpythonとDBでやってるのかな?

255 - 名無しさん@転載禁止 2023/05/14(日) 18:47:41.00 ID:bvcS9Qe60副

さすがRはグラフが綺麗な気がするね
ワイちゃんはpythonとDBだよ
なんか他の人からも違う角度で統計が出てくると部活動っぽくていいね😎

256 - 名無しさん@転載禁止 2023/05/14(日) 18:48:53.66 ID:bvcS9Qe60副

嫌儲より先になっちゃったけど、だんGのグラフだよ。本日分は無視してね。

https://i.imgur.com/rZspZFh.png

257 - !mirror 2023/05/14(日) 19:00:12.84 ID:bvcS9Qe60副

防弾なんG 書き込み数(〜5/13)
https://i.imgur.com/rZspZFh.png

こうか

258 - 名無しさん@転載禁止 2023/05/14(日) 19:13:24.23 ID:WW9p9lhI0

人数的には安定期に入ったのかな

259 - 名無しさん@転載禁止 2023/05/14(日) 23:02:57.55 ID:YN3j/0c9a主

>>257
やっぱりGW最後は盛り上がってたんだねえ

260 - 名無しさん@転載禁止 2023/05/14(日) 23:05:54.83 ID:Yonz4/XS0

土曜日比較だとGW明けて人減ってるのか

261 - !mirror 2023/05/15(月) 09:22:05.04 ID:bL6ksPtt0副

■防儲 書き込み統計

月別書き込み数とID
https://i.imgur.com/nHa2n8X.png

週別書き込み数
https://i.imgur.com/zdkpw1d.png

曜日別書き込み数平均
https://i.imgur.com/Fb6WUtr.png

時間別書き込み数平均
https://i.imgur.com/riRNgbm.png


※過去ログから集計しているため、現行の書き込みは反映されてません
※一部の特殊機能をつかった書き込みは集計対象外です

262 - 名無しさん@転載禁止 2023/05/15(月) 11:53:24.92 ID:hjFlAQk+0

防弾嫌儲は微減位なのかな🤔

263 - 名無しさん@転載禁止 2023/05/15(月) 21:29:15.67 ID:SVYxD2Nu0主


防儲もうちょっと増えてるのかと思ったけどそうでもないんやね
よく考えたらワイもちょっとスレ立てたくらいやった

264 - 名無しさん@転載禁止 2023/05/15(月) 22:23:59.59 ID:bL6ksPtt0副

さんG民の流入は、長期的には板の盛り上がりにはにつながってないみたいだねー

265 - 名無しさん@転載禁止 (sage) 2023/05/16(火) 12:10:42.39 ID:4Lzrm+uka

5chおったときはかけ持っちゃんやったけどさんGの煽りのない世界になれてからはさんG系譜の板以外に行く気にならんのよな
おんも怖い🥺

266 - !mirror 2023/05/20(土) 21:25:19.89 ID:VZVvRQ+U0

移動平均を追加してみた
https://i.imgur.com/KR4K7MF.png

267 - 名無しさん@転載禁止 2023/05/20(土) 21:27:14.77 ID:VZVvRQ+U0

副権限とれてるね
まあいいけど

268 - 名無しさん@転載禁止 2023/05/20(土) 21:27:43.08 ID:lFY1x5cd0

やっぱり避難騒動からの増加分含めて安定してるな

269 - 名無しさん@転載禁止 2023/05/20(土) 21:47:50.43 ID:VZVvRQ+U0

あんまり意味ないから出してないけど、
実は週の集計もあって、先週は多かった
https://i.imgur.com/7Vsc6sl.png

270 - 名無しさん@転載禁止 2023/05/20(土) 21:49:30.81 ID:VZVvRQ+U0

>>269
あ、ごめんこれおかしい
やっぱなしで

271 - 名無しさん@転載禁止 2023/05/20(土) 22:42:24.78 ID:2DiMU7pA0主

!subID:VZVvRQ+U0

272 - 名無しさん@転載禁止 2023/05/21(日) 08:50:52.51 ID:Ph/KlTU60

あんまり参考にならないからID出してなかったんだけど、chid有料化以降もスパイクがあるから、これは外部要因なのでは?と思ってきた

273 - 名無しさん@転載禁止 2023/05/21(日) 08:50:57.99 ID:Ph/KlTU60

https://i.imgur.com/AeYkLI9.png

274 - 名無しさん@転載禁止 2023/05/21(日) 10:22:18.30 ID:pxk4qhd30

直近で何度か小さな避難騒動はあったけどそこの寄与は弱そうだな
ZAQ騒動以外になにか起こってたっけ?

275 - 名無しさん@転載禁止 2023/05/21(日) 23:39:35.88 ID:AxSweJo00主

あれ
!sub:ID:Ph/KlTU60


★ID:Ph/KlTU60を副主に追加

276 - 名無しさん@転載禁止 2023/05/21(日) 23:40:07.83 ID:AxSweJo00主

ID数の振れ幅デカくて草

277 - 名無しさん@転載禁止 2023/05/22(月) 23:09:02.41 ID:B6xYibCf0

意外と人増えてないんやな
梨スレが有料化したのがでかいか?

278 - 名無しさん@転載禁止 2023/05/23(火) 11:27:04.60 ID:En1Pj6ct0

今日?から5G規制された人たちが防弾にやってきた

279 - 名無しさん@転載禁止 2023/05/23(火) 19:19:02.49 ID:BR5RSWlx0副

これ簡易的にならできるなあ

1 撃たれても動く名無し@転載禁止[] 2023/05/23(火) 18:37:44.45 ID:pzvPAqLm0主

・うんちうんこ論争
うんち派97.1%
うんこ派2.8%
その他(糞派、大便派、うんうん派等)0.1%

・防G弾G論争
防G(ぼうG)派72.6%
弾G(だんG)派22.4%
ぼんG派3.5%
その他(男子派、蘭G派等)1.5%

・noabe/yamagami論争
noabe派99.4%
yamagami派0.6%

以上です
参考にしてください

280 - 名無しさん@転載禁止 2023/05/24(水) 21:53:22.72 ID:2MUZGYQ80

前にアレの簡単な特徴語マップ?作ってたよね

281 - 名無しさん@転載禁止 2023/05/25(木) 09:19:21.47 ID:PlybEi540副

>>280
うん、作ってたよ
潜伏してる時にはあんまり役に立つとは思えないけど・・

282 - 名無しさん@転載禁止 2023/05/25(木) 09:45:10.60 ID:RCf5r30ja

>>281
潜伏してても多少臭うには臭うけどアレはそういう小賢しさもあるから厄介なのよな
排水溝から這い上がるウジ虫みたいなしぶとさ
あの特徴語マップで執着を可視化できたのは大きな功績

283 - !mirror 2023/05/25(木) 17:52:24.44 ID:3iKKgGND0主

何の参考にもならんと思うが…
https://i.imgur.com/ybhzXWE.png
https://i.imgur.com/bLxjZfx.png
https://i.imgur.com/Fh2BXH2.png
直近のうんち/うんこスレタイを抽出、うんこ派の陰謀によりうんちが単語としてカウントされていませんが実際の出現数としてはうんち派がダブルスコア以上みたいですね

284 - 名無しさん@転載禁止 2023/05/25(木) 20:21:40.13 ID:ghaKkM1d0

アナル でる ひり出す やばい

285 - 名無しさん@転載禁止 2023/05/25(木) 20:33:30.32 ID:RCf5r30j0

うんちうんこの関連ワードとはいえインパクトが強い

286 - 名無しさん@転載禁止 (sage) 2023/05/25(木) 21:45:24.02 ID:bSKhtOdO0

単語のラインナップが臭すぎる😰

287 - 名無しさん@転載禁止 (sage) 2023/05/25(木) 21:45:54.98 ID:bSKhtOdO0

>>284
いれるが入ってこなくてよかったな

288 - 名無しさん@転載禁止 2023/05/25(木) 22:21:45.96 ID:ueIWIFWF0

payはどっから来たんやこれ草

289 - 名無しさん@転載禁止 (sage) 2023/05/25(木) 22:29:49.35 ID:bSKhtOdO0

payはたぶんチューリップ送金コマンドや
ちのちゃんが安倍晋三よりもでかいの草

290 - 名無しさん@転載禁止 2023/05/26(金) 00:54:21.22 ID:zHuM6VFw0主

payはたぶん前処理で除去しきれずスレタイに残ってたコマンドみたい

291 - 名無しさん@転載禁止 2023/05/26(金) 07:52:28.14 ID:IrIam/V+0副

>>283
面白いねwe

292 - !mirror 2023/05/26(金) 10:19:58.33 ID:IrIam/V+0副

ログから出してみると、こうなる

・うんちうんこ論争
うんち:69%
うんこ:31%

・防G弾G論争
防G(ぼうG)派:59.4%
弾G(だんG)派:40.5%

・noabe/yamagami論争
noabe派:78%
yamagami派:22%

293 - 名無しさん@転載禁止 2023/05/26(金) 15:56:47.83 ID:zHuM6VFw0主

略称は案外拮抗してるンダ😳

294 - 名無しさん@転載禁止 (sage) 2023/05/26(金) 19:22:30.05 ID:q0GTg73S0

ワイはぼんG派😡

295 - 名無しさん@転載禁止 2023/05/26(金) 20:23:10.82 ID:byJxuiir0

>>292
0.1%の中にぼんGとか蘭GとかぼだGとか入ってんのか🤔

296 - 名無しさん@転載禁止 2023/05/26(金) 20:27:10.92 ID:v4aoFLci0

小数点切り下げ上げの関係だと思う
特定の単語2組抽出の割合だろうしこれ

297 - 名無しさん@転載禁止 2023/05/26(金) 21:30:29.72 ID:IrIam/V+0副

https://i.imgur.com/Bq8Kr9n.png
https://i.imgur.com/TzJWI6P.png

298 - !mirror 2023/05/26(金) 21:32:30.75 ID:IrIam/V+0副

ちょっと治安について定量分析のアイディアあるので、
なんGでスレを立てたい

299 - 名無しさん@転載禁止 2023/05/26(金) 21:41:54.08 ID:iqiZQVjE0

もうこの掲示板安定飛行してるんやな🙄
他に仕事やらあるとここだけでやっていける😆
多分仕事してないと日中は暇になるかも分からん

300 - 名無しさん@転載禁止 2023/05/26(金) 21:56:41.95 ID:IrIam/V+0副

立てたよ

【だんG統計部】治安に関しての定量分析について [独]
現行
https://sannan.nl/test/read.cgi/livegalileo/1685105736/
過去
https://kako.sannan.nl/test/read.cgi/livegalileo/1685105736/

301 - 名無しさん@転載禁止 2023/05/27(土) 08:32:05.29 ID:0+sPDYXJ0主

スレ立て数の推移
https://i.imgur.com/jUIqzO8.png

302 - 名無しさん@転載禁止 2023/05/27(土) 11:25:55.00 ID:9hYtYtFBM

平日との差が出てないから時系列分析っぽくならんのよな今

303 - 名無しさん@転載禁止 2023/05/27(土) 12:02:43.95 ID:0+sPDYXJ0主

【だんG統計部】💩に関しての定量分析について [独] [実]
http://sannan.nl/test/read.cgi/livegalileo/1685156435/
http://kako.sannan.nl/test/read.cgi/livegalileo/1685156435/
たてました🙋‍♂

304 - 名無しさん@転載禁止 2023/05/27(土) 13:40:12.38 ID:0+sPDYXJ0主

このくらいなら管理モメンにも怒られなさそうなので、解析に使ったデータとRスクリプトをあげてみた
前Rに興味ありそうな部員がいたので
anonfilesに上げたので広告ブロック推奨
下処理済のスレタイ一覧csvファイル
https://anonfiles.com/t7l9J4t5za/unchi_threads_csv
解析用Rファイル
https://anonfiles.com/Tdh5K3t1za/boudan2_R

csvの説明
"dat_file"datファイル名、"title"スレタイ、"num_replies"レス数、"date"スレ立て日時 "day" 年月日、"hour"時間、"wday"曜日、"土日"土日が1、他は0、"month"月、"week"第何週かiso week、"呼称"スレタイにうんち/うんこ/うんちANDうんこが含まれているか、"unchi"うんちを含めばTRUE、"unko" うんこを含めばTRUE

グループ別のスレッド数集計済のcsvファイル
https://anonfiles.com/ral7Jft9zb/daily_unchi_csv
https://anonfiles.com/sel1J3taz8/weekly_unchi_csv

Rスクリプトはスレタイ一覧ファイルで処理済の部分はコメントアウトあり
実行するときはカレントディレクトリを揃えるかファイル名のパス指定を変更で
R studioでブロックごとに逐次実行すればグラフと集計済のcsvファイルが作れるはず

305 - 名無しさん@転載禁止 2023/05/28(日) 17:10:11.06 ID:5Dlzegxa0副

ほーい
https://i.imgur.com/opI0GT2.png

306 - 名無しさん@転載禁止 2023/05/28(日) 17:10:29.37 ID:5Dlzegxa0副

tian = ["ちくちく", "治安", "荒れ", "自治"]
tikutiku = ["くっさ","ガイジ","ハッタショ","発達","発達障害","対立","対立煽り","FAX","通報","安倍晋三になれ","過疎","キッモ","キショ","キモ","つまらん","死ね","氏ね","しね","あっそ","だから","きもちわり","逃亡","帰れ","かえれ","つまんね","つまんない"]

307 - 名無しさん@転載禁止 2023/05/28(日) 17:23:25.51 ID:5DlzegxaM副

・副部長の提案はうまくいかなかった。提案どおりにすると、書き込み数と完璧に同じ傾向になる
・ワードリスト少し更新した
・全期間出してみた
・いくつかの指標と連動してるか確認したが、そうでもなさそうだった

以上から

・治安は拮抗状態の上に成り立っており、きっかけがあると急に悪化するのか?(ボラティリティが高そう)下げ圧力を測る必要がある?
・拮抗状態だと仮定すると、ちくちく対ふわふわで指標とするべきか?
・全体的にこの試みはうまくいってなさそう。ワードリストに問題がありそう

308 - 名無しさん@転載禁止 2023/05/28(日) 17:24:38.41 ID:5DlzegxaM副

市場の恐怖指数が参考になるかも?

309 - 名無しさん@転載禁止 2023/05/28(日) 17:32:57.85 ID:5Dlzegxa0副

・自然言語解析で感情分析やるのが1番簡単そう
・板を感情市場だと捉えるのは興味深いが、結局車輪の再発明になりそうで、労多く益が少なそうに感じる

310 - 名無しさん@転載禁止 2023/05/28(日) 23:22:48.33 ID:Gg/8RZGQ0主


ボラリティ、変動の大きさが体感に影響してそうなのはあり得そう
思いつきなんだけどワードとしてあぼ〜ん、あぼーん?は例のあれや通報が通ったレスとしてシグナルにならないかな

311 - 名無しさん@転載禁止 2023/05/28(日) 23:30:03.90 ID:Gg/8RZGQ0主

手元にdatファイルは溜まったけどプログラミングがクソ雑魚なのでChatGPT君にパースしてくれるようお願いしてる🥺

312 - 名無しさん@転載禁止 2023/05/29(月) 00:22:22.74 ID:yRbwBSUH0

社畜スレvsニーフリみたいな感じで常駐スレの相関と得意性みたいなのは見れたりするん?

313 - 名無しさん@転載禁止 2023/05/29(月) 02:38:09.31 ID:I1uTQfGZ0主

とあるチクチクしたなあと感じたスレ2つからのテキストマイニング
あんまり広めるのもあれだからここに画像まとめといた
https://imgur.com/a/636TwFR
個別性の高そうなワードはマスキング済
ワードクラウドは出現頻度順
“自治”は6回使われていたので自治スレ寄りかも

荒らす、煽る、荒れる、叩くなどの動詞に加えて言う、言われる、言いたい、思うといった心情の表明する言葉が多く使われている傾向

「おる、おった」は治安への言及として使われやすいワード
「立つ、立てる、立ってる」は「スレ」と組み合わせて使われ、同様に治安への言及や評価や議論が多かった

管理モメン、安倍晋三あたりは規制系への言及。通報、規制も同様

シンプルに「悪い、悪く」のような表現もポジ/ネガに関わらず使われていた

センチメント分析としては
[ポジティブ3.2%、ネガティブ43.6%、中立53.2%]
[怒り83.6%、悲しみ62.5%]と概ね主観的な印象通り

314 - 名無しさん@転載禁止 2023/05/29(月) 02:45:59.40 ID:I1uTQfGZ0主

画像はURLからブラウザで開いてね
そろそろローカルでテキストマイニング環境整えたい🥺

315 - !mirror 2023/05/29(月) 05:57:13.25 ID:I1uTQfGZ0主

ゆめちゃん🤥vs社畜vsニーフリスレの投稿数推移の比較だよぉ🥺
https://i.imgur.com/tssIlRN.png
時間帯別分析
https://i.imgur.com/mpi7Qbd.png

スレタイに社畜ANDニートを含むスレを除外して、
”ゆめちゃん”、”社畜”、”フリーター”の順に抽出&グループ分けしたよぉ🥺

316 - 名無しさん@転載禁止 2023/05/29(月) 10:35:58.40 ID:8ZsizGPVM副

>>313
ありがとなンダ
これをワードリストに入れたら、前よりよくなったンダ

317 - !mirror 2023/05/29(月) 10:46:01.00 ID:8ZsizGPV0副

tian = ["通報", "規制", "言う", "思う", "自治"]
tikutiku = ["荒らす", "煽る", "叩く"]

https://i.imgur.com/RYXRXHN.png

なんとなく体感的なものに近くなったような気がするンダ

318 - !mirror 2023/05/29(月) 10:48:41.34 ID:8ZsizGPV0副

単独IDと相関係数 0.02817664
体感治安とちくちく言葉相関係数 0.999665082
ID数と治安係数相関 -0.43741459
書き込み数30日移動平均と治安係数移動平均相関 -0.657622345

319 - 名無しさん@転載禁止 2023/05/29(月) 11:08:00.95 ID:MyomGI5ka

ID=ユーザが多くなると体感の治安が悪くなるのは体感として間違ってはいないのか

320 - 名無しさん@転載禁止 2023/05/29(月) 11:30:21.73 ID:yRbwBSUH0

おぉありがとう土日に落ちるあたり社畜の健全性わかって草
追加で悪いんだけどその3つでテキストマイニングも頼んでいい?

321 - 名無しさん@転載禁止 2023/05/29(月) 11:32:12.44 ID:yRbwBSUH0

社畜スレに自由業民も入ってて社畜ってなんやろってのがよく分からんくなったんよ
ニーフリとの違いが解ったら言語化出来るかなって

322 - 名無しさん@転載禁止 2023/05/29(月) 12:45:30.34 ID:2WT+RwMSM

>>318
相関係数とかはちゃんと信頼区間かp値出さないとあかん気がしなくもない

323 - 名無しさん@転載禁止 2023/05/29(月) 12:45:45.51 ID:2WT+RwMSM

自動で出るはずや

324 - 名無しさん@転載禁止 2023/05/29(月) 13:00:47.12 ID:8ZsizGPV0副

>>322
そろそろRでやらんとね・・

325 - 名無しさん@転載禁止 2023/05/29(月) 13:05:31.60 ID:2WT+RwMSM

>>324
pwrとか普通にpythonでもできるはずやで
完全な自動ではないけど

326 - 名無しさん@転載禁止 2023/05/29(月) 13:05:32.20 ID:8ZsizGPV0副

治安とは逆向きに、ポジティブな感情を測るために草を指数にしてみたんだけど、
>>317と同じような傾向なンダ
単発ID率と負の相関がありそうで、色々考えられて面白いンダ

327 - 名無しさん@転載禁止 2023/05/29(月) 13:06:32.54 ID:8ZsizGPV0副

>>325
あれこれ試行錯誤してるから、収集だけPythonで、集計はEXCELでやってるンダ

328 - 名無しさん@転載禁止 2023/05/29(月) 13:09:04.13 ID:2WT+RwMSM

statsmodelsでp値出せるで
>>327
エクセルでもできなくはないやろうけどだるいやろな

329 - 名無しさん@転載禁止 2023/05/29(月) 13:27:28.94 ID:I1uTQfGZ0主

普段どのスレも見ないから分からないけどニーフリ梨スレが消えて以降いくらかゆめちゃん🤥に吸収されてる?

>>320
多分量多く読み込まなないといけなくて外部サービスに頼るのは難しいからテキストマイニングは少し待ってねえ

330 - 名無しさん@転載禁止 2023/05/29(月) 13:49:10.71 ID:v4fBwV79H

>>316
はえー両パラメータで散布図にしてほしい

331 - 名無しさん@転載禁止 2023/05/29(月) 14:42:26.30 ID:E4KWgmzcd

統計部のスレ面白いわ
お気に入り登録させてもらうやで

332 - 名無しさん@転載禁止 2023/05/29(月) 15:35:40.02 ID:I1uTQfGZ0主

>>303の画像だけここにも貼っておくンダ
スレタイにおけるうんちうんこ論争
https://i.imgur.com/av0NWVa.png
💩関連スレッド数の推移
https://i.imgur.com/u88ETqh.png
週ごとに集計
https://i.imgur.com/msXeQgV.png

スレタイサンプル
管理モメン
https://i.imgur.com/CCcm5zg.png
派閥抗争
https://i.imgur.com/oXp5jyD.png
安倍晋三
https://i.imgur.com/2kf5STi.png

333 - 名無しさん@転載禁止 2023/05/29(月) 22:40:07.44 ID:I1uTQfGZ0主

>>317
単純に一致したワードで検索かけるなら動詞や形容詞は活用形も入れた方がいいかも
形態素解析で出てきた上位の単語はいろんな活用形のがひとまとめにされてるから

334 - 名無しさん@転載禁止 2023/05/29(月) 22:46:27.91 ID:8ZsizGPV0副

とりあえずほーい
https://i.imgur.com/4OsWejj.png

335 - 名無しさん@転載禁止 2023/05/29(月) 22:47:10.56 ID:8ZsizGPV0副

https://i.imgur.com/ZPruEPa.png

336 - 名無しさん@転載禁止 2023/05/29(月) 22:59:56.73 ID:I1uTQfGZ0主

草率で草
単発ID率との関係も興味深い

337 - 名無しさん@転載禁止 2023/06/01(木) 11:09:41.47 ID:e1Cxt7Sxa

そういえば↓のスレに無断転載されてる
お前らが防弾なんGに来ない理由、ガチで謎wlwlwllwlwlwl
https://nova.5ch.net/test/read.cgi/livegalileo/1685570695/

86 それでも動く名無し 2023/06/01(木) 07:36:38.76 ID:qYT2dW2Ka
でも治安は下がってるらしいで

317 !mirror 2023/05/29(月) 10:46:01.00 ID:8ZsizGPV0副
tian = ["通報", "規制", "言う", "思う", "自治"]
tikutiku = ["荒らす", "煽る", "叩く"]

https://i.imgur.com/RYXRXHN.png

なんとなく体感的なものに近くなったような気がするンダ

338 - 名無しさん@転載禁止 2023/06/01(木) 11:12:05.44 ID:e1Cxt7Sxa

こういうのって統計部としてどう対応する
末尾同じだけど誓って転載はしていません

339 - 名無しさん@転載禁止 2023/06/01(木) 12:58:31.34 ID:k7/DUcYa0

画像ごと転載されてるなら著作権者名乗れるから通報しやすいと思うよ

340 - 名無しさん@転載禁止 2023/06/01(木) 18:57:41.52 ID:rt7RMA0l0主

とりあえずなんかウォーターマーク的なの入れとくか

341 - 名無しさん@転載禁止 2023/06/01(木) 22:34:03.97 ID:c+mFMVCT0副

>>337
あーそれオラも見た。
やめてほしいンダ
ウォーターマーク入れるのは簡単だけど、
見づらくなるンダ

342 - 名無しさん@転載禁止 2023/06/01(木) 23:52:28.18 ID:rt7RMA0l0主

ggplot2でのメモ
labs(caption="ここに入れる")か
annotate(geom="text", label=“ここに入れる”, でいろいろ調整
前者くらいでも十分かな

343 - 名無しさん@転載禁止 2023/06/02(金) 09:15:08.81 ID:1tWfTo7ma

>>341
こういうことやられると今後無断転載禁止等ウォーターマーク入れるしかないのかもしれない
視認性低下は避けられないのだけど…

344 - 名無しさん@転載禁止 2023/06/02(金) 09:18:30.63 ID:yAhrr7Pp0

今のところ唯一と言っていい具体的なデータだから悪意なくとも引用されてしまうだろうね

345 - 名無しさん@転載禁止 2023/06/02(金) 12:55:52.20 ID:g3xWFlZZa

無断転載禁止だけじゃなくてなんGに転載禁止って具体的に併記しても良いんじゃない?

346 - 名無しさん@転載禁止 2023/06/04(日) 19:42:33.82 ID:K0aUe1+30副

https://i.imgur.com/1XD3iWC.png
https://i.imgur.com/AAZ4cgt.png
https://i.imgur.com/nTlRzYT.png

347 - 名無しさん@転載禁止 2023/06/06(火) 02:02:53.78 ID:Q/AFZUuV0副

>>322
出してみた

data: kusa and tandoku_id
t = -4.5715, df = 65, p-value = 2.226e-05
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
-0.6557619 -0.2870519
sample estimates:
cor
-0.4932498

348 - 名無しさん@転載禁止 2023/06/06(火) 02:04:22.59 ID:Q/AFZUuV0副

>>326>>347について

349 - 名無しさん@転載禁止 2023/06/06(火) 02:10:14.84 ID:Q/AFZUuV0副

https://i.imgur.com/vHKn2G7.jpg

350 - 名無しさん@転載禁止 2023/06/06(火) 02:31:56.41 ID:Q/AFZUuV0副

ID数と治安
data: ids and tian
t = 6.6207, df = 65, p-value = 8.074e-09
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
0.4653638 0.7591167
sample estimates:
cor
0.6346306 https://i.imgur.com/z0avkwo.jpg

351 - 名無しさん@転載禁止 2023/06/06(火) 02:33:13.65 ID:qdwD+1c9H

やっぱり散布図はええなあ
単位と意味を添えてくれると絶頂しそう

352 - 名無しさん@転載禁止 2023/06/06(火) 02:38:50.17 ID:Q/AFZUuV0副

ID数とちくちく言葉

data: ids and tikutiku
t = 6.6587, df = 65, p-value = 6.924e-09
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
0.4682121 0.7606556
sample estimates:
cor
0.6368006
https://i.imgur.com/vAeKr8e.jpg

353 - 名無しさん@転載禁止 2023/06/06(火) 02:51:51.03 ID:V7elKlqbM

>>352
これ√xみたいな感じのほぼ収束する関数取っとるように見えるわ

354 - 名無しさん@転載禁止 2023/06/06(火) 02:54:23.25 ID:Q/AFZUuV0副

言ってる意味がよくわからないけど、ちくちく言葉は書き込み数で割って1書き込み数あたりにしてるのが何か問題かな

355 - 名無しさん@転載禁止 2023/06/06(火) 02:58:43.56 ID:Q/AFZUuV0副

書き込み数:ID数:書き込み数/ちくちく言葉
こういう関係にはなっている

356 - 名無しさん@転載禁止 2023/06/06(火) 02:59:28.11 ID:Q/AFZUuV0副

数学的になんていうかわからないけど、自己言及的でトートロジーに陥ってるから、何も説明してない、みたいな感じ?

357 - 名無しさん@転載禁止 2023/06/06(火) 03:00:41.61 ID:Q/AFZUuV0副

それは実はずっと感じてる
だからたぶんこのあたりは無視して
>>347だけが意味ありそう

358 - 名無しさん@転載禁止 2023/06/06(火) 03:06:04.72 ID:Q/AFZUuV0副

なんとなく最近、統計学という分野の魅力がわかってきた。手法そのものというよりは、結果に解釈が必要な部分ではあるけど
英語翻訳みたいに文脈と行間を読むところに感性が必要なのがいい

359 - 名無しさん@転載禁止 2023/06/07(水) 11:38:44.41 ID:GL1kNNvpa

この調子でがんばってください
!pay:30:ID:Q/AFZUuV0副


★ID:Q/AFZUuV0に30🌷を送りました。

360 - 名無しさん@転載禁止 2023/06/07(水) 19:21:33.27 ID:Cd9/O5GI0副

>>359
いっぱいくれた。
ありがと🤗

361 - 名無しさん@転載禁止 2023/06/07(水) 19:34:25.31 ID:zoPpuO3y0主

>>354
あるところまではID数が増加するとちくちく言葉率?も増加するけど、ID数が一定の数以上の場合、ちくちく率は特定の範囲内に収束しそうということじゃなかろうか

362 - 名無しさん@転載禁止 2023/06/07(水) 20:09:55.70 ID:Cd9/O5GI0副

>>361
解説サンガツ

363 - 名無しさん@転載禁止 2023/06/07(水) 20:12:51.07 ID:Cd9/O5GI0副

数字と、体感的を総合すると

・人は増えてるが、そこまで増えてない
・体感的にちくちく言葉が増えているように感じる
・やっぱりちくちく言葉の増加率が体感と関係あるのか

364 - 名無しさん@転載禁止 2023/06/08(木) 22:31:35.98 ID:xU6uzFSY0主

はえ〜学生意外と多いんや

だんGアンケート部 (随時更新受付中)
http://sannan.nl/test/read.cgi/livegalileo/1686228790/
http://kako.sannan.nl/test/read.cgi/livegalileo/1686228790/

防人の年齢層調査結果
http://kako.sannan.nl/test/read.cgi/livegalileo/1685641490/

365 - 名無しさん@転載禁止 2023/06/08(木) 23:09:11.57 ID:y8S6g4jG0

学生確かにちょくちょく見かけると思ったけどかなりいるもんだな

366 - 名無しさん@転載禁止 2023/06/10(土) 21:12:07.12 ID:bw5EjtDm0

治安と通報の件数ってグラフにしたら相関出るのかな?

367 - 名無しさん@転載禁止 2023/06/10(土) 22:21:01.17 ID:UErKAecS0副

>>366
なるほど。そういう答え合わせができるね

368 - 名無しさん@転載禁止 2023/06/11(日) 15:45:30.77 ID:kj9a8RVu0副

とりあえず通報をパースできるようになった。https://i.imgur.com/x5NYJWC.png

369 - 名無しさん@転載禁止 2023/06/11(日) 15:49:19.13 ID:kj9a8RVu0副

忍法帖IDがも取得してるので、ランキングも出せる

■通報回数ランキング
Rank 1: Count=22
Rank 2: Count=16
Rank 3: Count=16
Rank 4: Count=15
Rank 5: Count=12
Rank 6: Count=10
Rank 7: Count=9
Rank 8: Count=9
Rank 9: Count=7
Rank 10: Count=7

370 - 名無しさん@転載禁止 2023/06/11(日) 15:51:59.00 ID:kj9a8RVu0副

ちなみに1位は4日間で22回通報してる
内容は殆どがFAX関連

371 - 名無しさん@転載禁止 (sage) 2023/06/11(日) 15:55:59.34 ID:AfDeifria

>>368
おお

372 - 名無しさん@転載禁止 2023/06/11(日) 15:56:31.32 ID:kj9a8RVu0副

通報ユーザ数は466(ユーザフォームのみ)

Min. 1st Qu. Median Mean 3rd Qu. Max.
1.000 1.000 1.000 2.036 2.000 22.000

373 - 名無しさん@転載禁止 2023/06/11(日) 16:08:24.78 ID:kj9a8RVu0副

一応ヒストグラム
https://i.imgur.com/VKOBPiw.jpg

374 - 名無しさん@転載禁止 (sage) 2023/06/11(日) 16:09:50.76 ID:GGbxfvggH

はえー
住民数と比例しとるんやろか
してなければどこかのタイミングで急に荒れて通報増えてきたとか

375 - 名無しさん@転載禁止 2023/06/11(日) 16:11:19.00 ID:kj9a8RVu0副

https://i.imgur.com/8UbQjIu.jpg
ちょっとだけみやすくした
まあ見るまでもないけど

376 - 名無しさん@転載禁止 2023/06/11(日) 16:13:40.35 ID:kj9a8RVu0副

>>374
そのあたりの相関とかはあとで出すね
Rが上手く使えない

377 - 名無しさん@転載禁止 2023/06/11(日) 16:14:06.70 ID:k1dDi1gF0

やっぱりここのところ通報異様に多かったよね

378 - 名無しさん@転載禁止 2023/06/11(日) 16:15:04.96 ID:kj9a8RVu0副

>>377
6/2から急に増えた感じあるね

379 - 名無しさん@転載禁止 2023/06/11(日) 16:25:39.65 ID:kj9a8RVu0副

3/18〜今日までで通報フォームから通報されたのは1207件。うちだんGが949件

380 - 名無しさん@転載禁止 2023/06/11(日) 16:27:40.38 ID:kj9a8RVu0副

単純に考えると三男の管理労力の78%はだんG関連というわけか

381 - 名無しさん@転載禁止 2023/06/11(日) 16:35:15.11 ID:kj9a8RVu0副

先週から急に通報増えたのは、LRの追加のせいもありそうだなあ

382 - 名無しさん@転載禁止 2023/06/11(日) 20:08:03.64 ID:kj9a8RVu0副

https://i.imgur.com/qiCBWOX.png

383 - 名無しさん@転載禁止 2023/06/11(日) 20:22:56.75 ID:YMtjIDUa0

2日ってなんかあったっけ?

384 - 名無しさん@転載禁止 2023/06/11(日) 20:36:07.02 ID:kj9a8RVu0副

【統計部】通報スレの通報理由ランキングトップ10 [独]
https://kako.sannan.nl/test/read.cgi/livegalileo/1686480784/

385 - 名無しさん@転載禁止 2023/06/11(日) 20:49:57.48 ID:kj9a8RVu0副

https://i.imgur.com/O3HSEf3.png
https://i.imgur.com/bW5nM6A.png
https://i.imgur.com/f9nz3b1.png

386 - 名無しさん@転載禁止 2023/06/11(日) 21:43:55.34 ID:sKeeWZg7d

ID数が減って若干書き込みが増えつつある?
誤差の範囲だろうか

387 - 名無しさん@転載禁止 2023/06/11(日) 22:49:42.11 ID:3y3kI6I90

ここしばらく部スレが毎日のように立ってたからそれが影響してるのかな?
アモアス、フォールガイズとか数百レス行くのを一週間に数回あると2万のうち占める割合は結構でかい

388 - 名無しさん@転載禁止 2023/06/11(日) 22:53:46.15 ID:k1dDi1gF0

単に安定しつつあるのだろうと思う

389 - 名無しさん@転載禁止 2023/06/13(火) 00:19:30.41 ID:2AVInQ660副

賛否のあるテーマのスレで、賛成と反対を可視化するには自然言語処理するしかないのかなあ

390 - 名無しさん@転載禁止 2023/06/14(水) 00:17:20.87 ID:EideWsGn0副

https://i.imgur.com/kfwOlkP.png

391 - !mirror 2023/06/14(水) 01:27:55.04 ID:eQcNMt7q0主

https://i.imgur.com/O3HSEf3.png
https://i.imgur.com/bW5nM6A.png
https://i.imgur.com/f9nz3b1.png

https://i.imgur.com/kfwOlkP.png

当スレ385, 390より転載

392 - 名無しさん@転載禁止 2023/06/14(水) 01:48:03.35 ID:OcOtW08KH

おつ
レス数の微増に対して通報数の急増が気になるわね
日によって跳ねてるから荒れやすい話題がポツポツ増えてきたのかな

393 - 名無しさん@転載禁止 2023/06/14(水) 02:00:32.45 ID:EideWsGn0副

https://i.imgur.com/AaE3WWG.jpg
data: tikutiku and report_count
t = 4.2642, df = 64, p-value = 6.74e-05
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
0.2576769 0.6395920
sample estimates:
cor
0.4703742

394 - 名無しさん@転載禁止 2023/06/14(水) 02:00:58.10 ID:EideWsGn0副

↑通報数とちくちく言葉

395 - 名無しさん@転載禁止 2023/06/14(水) 02:02:03.40 ID:EideWsGn0副

書き込み数と通報件数
https://i.imgur.com/viwVhZq.jpg
Pearson's product-moment correlation

data: kakikomi and report_count
t = 4.2644, df = 64, p-value = 6.735e-05
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
0.2576998 0.6396065
sample estimates:
cor
0.4703933

396 - 名無しさん@転載禁止 2023/06/14(水) 02:04:37.22 ID:EideWsGn0副

使用したデータはこちら
4/18は外れ値として外してある

397 - 名無しさん@転載禁止 2023/06/14(水) 02:04:44.85 ID:EideWsGn0副

https://anonfiles.com/w2J08bwfze/_csv

398 - 名無しさん@転載禁止 2023/06/14(水) 02:08:14.10 ID:EideWsGn0副

https://i.imgur.com/sI7bRwt.png
通報件数みやすくしてある

399 - 名無しさん@転載禁止 2023/06/14(水) 02:14:31.06 ID:EideWsGn0副

通報スレは、フォームから通報機能のおかげでほぼ完全にパースできるし、忍法帖必須だから分析のやり甲斐があるね
水曜日を起点にして、直近一週間の多重通報ユーザ率とか出しても面白いかもね

400 - 名無しさん@転載禁止 2023/06/14(水) 02:21:25.93 ID:XgUByDESM

>>395
対数グラフでプロットしてそれで相関係数取ってみ

401 - 名無しさん@転載禁止 2023/06/14(水) 02:21:31.73 ID:EideWsGn0副

通報スレの通算の期間からは、特にユーザ別書き込み分布と大差ないように思える
つまり、通報するユーザはごく一部で、その分布は書き込みのヘビーユーザーと同じで、同じ層が通報してると考えると自然
結論としては、いわゆる通報厨=ヘビーユーザーの関係が推定できる

402 - 名無しさん@転載禁止 2023/06/14(水) 02:22:14.53 ID:EideWsGn0副

>>400
難しいこと言うなあ

403 - 名無しさん@転載禁止 2023/06/14(水) 02:23:15.14 ID:XgUByDESM

>>402
単純
y=a+b log x
でやるだけや

404 - 名無しさん@転載禁止 2023/06/14(水) 02:24:35.02 ID:XgUByDESM

とりあえずx軸logった状態でプロットしてみ
そこそこ面白いもん出てくるかも知れんで

405 - 名無しさん@転載禁止 2023/06/14(水) 02:30:32.84 ID:EideWsGn0副

https://i.imgur.com/myYgzj2.jpg
こうかな

406 - 名無しさん@転載禁止 2023/06/14(水) 02:32:05.38 ID:EideWsGn0副

Pearson's product-moment correlation

data: log_kakikomi and report_count
t = 3.3123, df = 64, p-value = 0.001525
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
0.1548489 0.5716492
sample estimates:
cor
0.3825444

407 - 名無しさん@転載禁止 2023/06/14(水) 02:33:11.17 ID:EideWsGn0副

もう寝るよ😡
寝ないけど

408 - 名無しさん@転載禁止 2023/06/14(水) 02:34:52.74 ID:EideWsGn0副

>>391
ありがとう
なんだか最近限界が見えてきて、勝手に部長の自然言語処理のローカル環境に期待を寄せているよ🤗

409 - 名無しさん@転載禁止 2023/06/14(水) 02:35:50.79 ID:EideWsGn0副

あと70万のPC買った人の参加も期待してるよ🤗

410 - 名無しさん@転載禁止 2023/06/14(水) 02:39:43.72 ID:XgUByDESM

>>405
あってるけどだめか
最初のプロットをなんとか斜めの直線状にしたかったんや
そうすることでその式が適切ならば予想がつくからや

411 - 名無しさん@転載禁止 2023/06/14(水) 02:41:24.52 ID:XgUByDESM

https://i.imgur.com/f9nz3b1.png
とか社畜スレとかを時系列分析するのは多分楽しいと思うけど自力でスクレイピングするのがだるくてやれてないわ

412 - 名無しさん@転載禁止 2023/06/14(水) 02:41:57.29 ID:EideWsGn0副

>>410
なるほどね、書き込み数は安定してるからねー4/18を確認したけど、追加したとしてもあんまり影響なさそう

413 - 名無しさん@転載禁止 2023/06/14(水) 02:42:14.05 ID:XgUByDESM

因果推論の本ちゃんと読みたいけどまっっっったく読む時間なくて辛い
そこにより詳しくいい感じのことが書いてあると思うわ

414 - 名無しさん@転載禁止 2023/06/14(水) 02:43:44.09 ID:XgUByDESM

ベイズでランダムウォーク入れてstanでほわーーーって予測させて書いてもええんやけど面白みないしこっちのやりたかできれいに行ったら気持ちいいからそれが出来たらなぁ

415 - 名無しさん@転載禁止 2023/06/14(水) 02:47:19.20 ID:EideWsGn0副

社畜スレは同じ形式でスレが続いてるから、やりやすいかな。書き込み内容は無視して、メタ分析のみに絞ればそんな難しくはないかな

416 - 名無しさん@転載禁止 2023/06/14(水) 02:52:55.78 ID:eQcNMt7q0主

>>408
いつの間にか部長に昇格されてて草
ワードクラウド作るところまでやって止まってた🥺
頑張れば機械学習で判別とかできそうなんやけど
あとdatの処理であぼーんとかイレギュラーなレスがうまくパース出来てなかったり
時間あればRの統計処理とggplot講座のスレでもやりたいなあ

417 - 名無しさん@転載禁止 2023/06/14(水) 02:56:35.63 ID:EideWsGn0副

>>416
副部長だっけw
ネガポジ判定って深層学習なのかな?
>>389やりたいんだよね
パースは対象を教えてくれれば、テキストは渡せるようにやってみる

418 - 名無しさん@転載禁止 2023/06/14(水) 03:04:20.72 ID:EideWsGn0副

自分でやればいいのか!
オラも自分で環境作る、そのうち

419 - 名無しさん@転載禁止 2023/06/14(水) 03:08:26.00 ID:OcOtW08KH

対数でもなけりゃ二次関数とかどうやろか

420 - 名無しさん@転載禁止 2023/06/14(水) 03:09:07.29 ID:eQcNMt7q0主

./dat/以下のdatファイルを逐一読み込んで、ファイル名、スレタイ、レスの番号、名前、時刻、本文もろもろを1レス1行のCSVにまとめるような感じにしてるんやけど
たぶんイレギュラーなレスがレス番ごとすっ飛ばされちゃってる
テキスト抽出くらいなら無視しても大丈夫かなとは思うんだけど

421 - 名無しさん@転載禁止 2023/06/14(水) 03:09:14.53 ID:OcOtW08KH

書き込み数少ない時のデータが不十分か

422 - 名無しさん@転載禁止 2023/06/14(水) 04:04:58.11 ID:eQcNMt7q0主

データは5/25まで?合ってるかなこれ
https://i.imgur.com/vPNYmio.png
https://i.imgur.com/eVqivTp.png
https://i.imgur.com/mgICWeK.png

423 - 名無しさん@転載禁止 2023/06/14(水) 04:08:56.04 ID:eQcNMt7q0主

ちなみに6月2日はFAXのマルチポストによる通報が多かった
うんさくにも多数あぼーんの痕跡が

424 - 名無しさん@転載禁止 2023/06/14(水) 12:28:35.05 ID:EideWsGnM副

>>420
オラもそんな感じでやってる
>>422
いいね

425 - 名無しさん@転載禁止 2023/06/14(水) 12:40:41.46 ID:hYjXtzFLa

3枚目のグラフ、一度極大迎えるのも興味深いわね

426 - 名無しさん@転載禁止 2023/06/15(木) 00:13:40.49 ID:DSEo7eLY0副

https://i.imgur.com/i02WoIB.png

427 - 名無しさん@転載禁止 2023/06/15(木) 00:14:16.99 ID:DSEo7eLY0副

>>426は、複数回通報している忍法帖IDの割合

428 - 名無しさん@転載禁止 2023/06/15(木) 00:20:04.12 ID:+Ui8zh7HH

通報って癖になるんかな

429 - 名無しさん@転載禁止 2023/06/15(木) 05:23:25.15 ID:/sHZZ8bg0

今のGは重大な変革期(というか侵攻)なのかもしらんね
これまで使えてた治安係数も使えなくなるかもしれない。(治安が悪くなったとかは聞かなくなるだろうけど悪化はするだろう)

430 - 名無しさん@転載禁止 2023/06/16(金) 00:03:02.32 ID:0tQYlnYV0主

【だんG統計部】防弾なんG板のID数の推移を調べました
http://sannan.nl/test/read.cgi/livegalileo/1686841188/
🙋‍♂️

431 - 名無しさん@転載禁止 2023/06/16(金) 00:36:48.34 ID:0tQYlnYV0主

複数回線のIDを統合した防弾なんGのID数推移
じわじわ増えてる

独/梨スレあり
https://i.imgur.com/z5Qp6Yx.png
独スレあり、梨スレなし
https://i.imgur.com/WnnMUCa.png
IDに含まれる主、副を削除→回線を示す末尾を削除→集計
2023年6月14日までのデータ

参考までに末尾未処理の梨スレ無しで集計した結果
https://i.imgur.com/YsgY8g7.png

432 - 名無しさん@転載禁止 2023/06/16(金) 06:44:33.31 ID:CeyIZ+Qc0副

学びがある

https://kako.sannan.nl/test/read.cgi/livegalileo/1686841188/

433 - 名無しさん@転載禁止 2023/06/16(金) 11:48:41.38 ID:d1mcG8eNr

本屋でブルーバックスのRの入門本見つけたわ
最近出たやつやし良さそうやった

434 - 名無しさん@転載禁止 2023/06/16(金) 19:52:05.50 ID:0tQYlnYV0主

IDがみんな変わって今の時間帯は末尾無効っぽい
【イベント】

435 - 名無しさん@転載禁止 2023/06/16(金) 19:53:44.77 ID:0tQYlnYV0主

と思ったら一瞬で直った

436 - !mirror 2023/06/17(土) 05:27:03.49 ID:0+F7usyr0主

スレ立て数推移
https://i.imgur.com/7Tyr7d0.png
ユニークID数推移
https://i.imgur.com/SbFhXgR.png
新規さんをカウントする試み
https://i.imgur.com/WP2cD02.png

437 - 名無しさん@転載禁止 2023/06/17(土) 05:32:01.10 ID:0+F7usyr0主

>>433
GUIフロントエンドのRコマンダー使ってるらしい
GUIだとEZR、jamovi(独自色が強い)なんかも統計処理のメニュー画面が分かりやすくて良いよ
細かいことやりたくなったらR studio入れるのがおすすめ

438 - 名無しさん@転載禁止 2023/06/17(土) 06:41:13.74 ID:GOQOhId00

>>436
これID追跡まですればL6まで追えそうだな

439 - 名無しさん@転載禁止 2023/06/17(土) 09:10:40.02 ID:dMmrNq680副

>>436
グラフきれい
書き込み数は出した?
ワイのより正確なの出そう

440 - 名無しさん@転載禁止 2023/06/17(土) 09:49:46.54 ID:JMOvKxkJM

Rも実はvscodeのJupiterで動く

441 - 名無しさん@転載禁止 2023/06/17(土) 09:52:40.59 ID:AHvIWPUX0

やっぱりじわりじわりと人の数増えてるんね
あとみんな馴れてきたのかスレ立ても徐々に活発かして

442 - 名無しさん@転載禁止 2023/06/17(土) 11:53:44.88 ID:dMmrNq68M副

>>440
エッッッ

443 - 名無しさん@転載禁止 2023/06/17(土) 12:28:08.08 ID:0+F7usyra主

>>439
パースにちょっと自信ないから家帰ったら集計したデータ上げてみる

444 - 名無しさん@転載禁止 2023/06/17(土) 12:47:30.84 ID:JMOvKxkJM

Rは一応Android上でも4.3とか動かす方法あるんやけどクソほど時間かかるからおすすめせん
あとGUI周りに問題あるのかちまちま
configureのログ見ながらビルドしないとあかんからかなり面倒くさい
ネットにはそんなに方法載ってないわ

445 - 名無しさん@転載禁止 2023/06/17(土) 13:04:21.20 ID:7IWcklhx0

>>437
あ、ワイはR使いや
初心者にオススメしたくて書いた😎👍

446 - 名無しさん@転載禁止 2023/06/17(土) 17:57:25.20 ID:0+F7usyra主

>>445
ナイス👍
tidyverse系の処理と可視化、統計手法まとまってるのあると嬉しいんやけど、これ!って本がなかなか無くておすすめ難しい

447 - 名無しさん@転載禁止 2023/06/17(土) 22:06:01.39 ID:0+F7usyr0主

>>439
https://anonfiles.com/Pdlcmex2zf/count_replies_csv
だんGの書き込み数のデータです

n_datがdatファイルから集計したやつで(あぼーん等の抜けあり)
n_subjecttxtが過去ログのsubject.txtからレス数の数字をスレ立て日ごとに足して推計したやつ

448 - 名無しさん@転載禁止 2023/06/17(土) 23:31:38.47 ID:dMmrNq680副

https://i.imgur.com/ea8lYrk.png
はえー

449 - 名無しさん@転載禁止 2023/06/17(土) 23:32:36.22 ID:dMmrNq680副

ワイのほうはなんか仕様変更に対応できない感じがする

450 - 名無しさん@転載禁止 2023/06/17(土) 23:34:35.16 ID:dMmrNq680副

まあでもトレンドには対応してるから、ええか

451 - 名無しさん@転載禁止 2023/06/17(土) 23:47:22.09 ID:0+F7usyr0主

思ったより差が出てる😳
なんだろう仕様変更スレ見るとrandmojiあたりの仕様変更?

452 - 名無しさん@転載禁止 2023/06/18(日) 00:15:52.38 ID:lFC4Go4C0副

そのあたりは、全部例外でカウントしてないからねえ

453 - !mirror 2023/06/18(日) 00:16:48.56 ID:lFC4Go4C0副

3/20からの通報スレの対応数
https://i.imgur.com/6ggAN2o.png

454 - 名無しさん@転載禁止 2023/06/18(日) 00:55:08.75 ID:1rYSdvt2H

ころころ★結構上位で対応してるのに…

455 - 名無しさん@転載禁止 2023/06/18(日) 00:59:02.81 ID:QX74u8m4M

>>454
F関連は痕跡ごと消してるっぽいから見つからんで

456 - 名無しさん@転載禁止 2023/06/18(日) 21:31:11.26 ID:lFC4Go4C0副

だんU盛り上がってきたな

457 - 名無しさん@転載禁止 2023/06/19(月) 17:44:54.42 ID:LqaiZkBua主

>>447
datファイルからとスレタイ一覧からの書き込み数比較
https://i.imgur.com/UCOcbSt.jpg

458 - 名無しさん@転載禁止 2023/06/19(月) 21:53:55.41 ID:3ta5g0a3H

やっぱ少しづつやが着実に人口増えてるんやな

459 - 名無しさん@転載禁止 2023/06/19(月) 22:23:57.50 ID:LqaiZkBu0主

Uの大型移住はいいね👍

謎のunchi_listが失われてる🥺
https://i.imgur.com/FyVHlNx.png

460 - !mirror 2023/06/19(月) 22:24:47.17 ID:LqaiZkBu0主

防弾なんGのレス数推移
https://i.imgur.com/3Gy8loV.png

461 - 名無しさん@転載禁止 2023/06/20(火) 07:28:25.87 ID:6gZ2i5PN0

>>460
はぇ〜漸増してる

462 - 名無しさん@転載禁止 2023/06/20(火) 14:51:22.31 ID:0batLnw50

20000も書き込み数あるんか
すごE

463 - 名無しさん@転載禁止 2023/06/20(火) 22:02:18.42 ID:fCTIopBh0

>>460
マジで綺麗に増加してるな
人数の予測できそう

464 - 名無しさん@転載禁止 2023/06/21(水) 01:00:55.84 ID:YKoS24UH0

荒れてた月曜がどうなってたか気になる

465 - !mirror 2023/06/22(木) 19:25:19.50 ID:mEVzC/NC0主

防弾なんGの時間帯別の1日のスレ立て数
https://i.imgur.com/GqA2Ant.png

466 - 名無しさん@転載禁止 2023/06/22(木) 20:08:33.31 ID:8FrVCedc0

21時頃に凹みがあるの面白いな
みんな風呂入ってるかな

467 - 名無しさん@転載禁止 2023/06/22(木) 20:12:54.89 ID:Rth5lEbC0

ウォッチパとか色んなスレが盛り上がってて新しくスレを立てないだけかも🤔
これどういう集計なんや🙄

468 - 名無しさん@転載禁止 2023/06/22(木) 20:41:40.28 ID:mEVzC/NC0主

6/1から1時間ごとにスレ立て時刻をもとにスレ数を集計したものを、時間帯別に箱ひげ図(IQRの1.5倍超えてるのは外れ値)にしたんや

469 - !mirror 2023/06/22(木) 21:51:40.22 ID:mEVzC/NC0主

防弾なんGレス数推移
https://i.imgur.com/4E5UziZ.png
ID数推移
https://i.imgur.com/8BvCxEJ.png
ユニークID数推移
https://i.imgur.com/fMaClTE.png
新規ID数推移(安倍晋三を除くL1〜L5のID)
https://i.imgur.com/3BXtLbi.png

少し落ち着いた?

470 - 名無しさん@転載禁止 (sage) 2023/06/23(金) 14:40:59.45 ID:+RTo2nq90

書き込み数は右肩上がり
IDは微増
新規は6月から増えたって感じ?

471 - 名無しさん@転載禁止 2023/06/23(金) 14:42:05.73 ID:KAdSE3oza

スクリプト爆撃食らい続けてるからねあっち

472 - 名無しさん@転載禁止 2023/06/26(月) 23:56:13.86 ID:RdxPKnzS0

なんかまた人増えているような気がする
スクリプトの影響って結構あんのかな

473 - 名無しさん@転載禁止 2023/06/26(月) 23:59:41.26 ID:Xepkauf4d

忍法帖のLv分布棒グラフって作れるのかな
人口増加と相関が見えるか?

474 - 名無しさん@転載禁止 (sage) 2023/06/27(火) 10:47:34.20 ID:9LciNN+Oa

あるやろなあ

475 - 名無しさん@転載禁止 2023/06/27(火) 22:09:32.10 ID:hNxRNbj20主

Lv分布の棒グラフってこんな感じ?
https://i.imgur.com/i33iiAC.png
何と何の相関になるんや

レベルごとにIDの数をカウント
group_by(level) %>% summarise(user_id = n_distinct(id))

476 - 名無しさん@転載禁止 2023/06/27(火) 22:42:42.20 ID:RCojCCNc0

x軸に日付、y軸に総書き込み数、z軸にlvで新規と総書き込み数の変化とか?

477 - 名無しさん@転載禁止 2023/06/28(水) 14:57:35.71 ID:T3pINQVQd

レベルの割合によって新規さん書き込み率がわかるかも?
常連はレベル高そうだし

478 - !mirror 2023/06/29(木) 20:49:28.02 ID:eBMGGRQU0主

防弾なんGの時間帯別スレ立て数推移(6時始まり)
https://i.imgur.com/Rs3EcSp.png
最近スレが落ちやすくなったなあと思って出してみた

479 - 名無しさん@転載禁止 2023/07/01(土) 13:59:39.76 ID:s3jN+GLX0

スレを立てたID数の統計ってとれますか?

480 - 名無しさん@転載禁止 2023/07/01(土) 14:06:15.69 ID:sDcMRrqea

>>478
規則正しいわね土日でも真夜中~早朝のスレ立て数が少ない

481 - 名無しさん@転載禁止 2023/07/02(日) 01:35:28.57 ID:xqxoDyIW0

>>478
全時間帯のスレ立て数が増加してるってことは
やっぱ全体としてスレ立て数は増加傾向か

土曜日の22時の6月〜7月の特異なピークはなんだろう?

482 - 名無しさん@転載禁止 2023/07/02(日) 02:30:02.00 ID:gM8+QgqzH

>>481
帰宅後に飯や風呂を終えて一息ついた社畜がスレ建てしとるんやろ🙄

483 - 名無しさん@転載禁止 2023/07/02(日) 11:45:58.63 ID:xqxoDyIW0

>>482
うーん
土曜日やからなぁ…
あと明らかに特異的なピークとしてでとるから
違う気がする

484 - 名無しさん@転載禁止 2023/07/02(日) 22:10:32.72 ID:H3ssxO3P0主

>>479
できるはず

>>481-482
22時のは6月11日に[👁★]の人による乱立があった模様

485 - 名無しさん@転載禁止 2023/07/02(日) 22:48:53.65 ID:9SbfrkQ50

特定一人しかおらんわね
なんか管理モメンがマークしてる人

486 - 名無しさん@転載禁止 2023/07/03(月) 02:41:35.08 ID:kjdM4zYy0

そういえばここ最近の治安指数ってどうなってますか?
結構移住民が増えて雰囲気も変わりつつあるように感じます

487 - 名無しさん@転載禁止 2023/07/03(月) 02:49:29.02 ID:BLL6vH7dH

治安悪化を示すワードの選び方も難しいよなあ

488 - 名無しさん@転載禁止 2023/07/03(月) 03:16:44.24 ID:ufQ7rqyO0主

前のはあからさまに荒れたスレをデータに使ったんだったけど色々人増えと細かい差も変わってそうなんだよね
勉強が進むないから形態素解析最小限のでやれるのあるかなー

489 - 名無しさん@転載禁止 2023/07/03(月) 03:17:29.46 ID:ufQ7rqyO0主

明日は久しぶりにスレでも立ててみようかな

490 - 名無しさん@転載禁止 2023/07/03(月) 22:57:50.71 ID:ufQ7rqyO0主

【だんG統計部】最近の書き込み数やスレ立て数の動向 [独]
http://sannan.nl/test/read.cgi/livegalileo/1688388911/
http://kako.sannan.nl/test/read.cgi/livegalileo/1688388911/
色々まとめた

491 - 名無しさん@転載禁止 2023/07/04(火) 00:30:10.22 ID:bM0t4JJk0

ありがたい
仕事が早いね

492 - 名無しさん@転載禁止 2023/07/08(土) 02:02:55.99 ID:KP6h5C/f0

安倍晋三スレがどれくらい立てられてるか気になるな
今日一日がどれくらい跳ね上がるか見えたら面白そう

493 - 名無しさん@転載禁止 2023/07/08(土) 10:57:28.12 ID:xbGT+VzX0

今日は5g落ちもあったしちょっとグラフに変化出るのかな

494 - 名無しさん@転載禁止 2023/07/10(月) 18:27:24.54 ID:zczlLwIIa

5chでjaneがapi切ったとかで急速に避難民が移動してるから統計的にはすごいことになりそう

495 - 名無しさん@転載禁止 2023/07/10(月) 19:42:38.02 ID:S0eSx+0p0

急激に人口と書き込み数増えるはずだな

496 - 名無しさん@転載禁止 2023/07/10(月) 20:38:36.09 ID:PzwMq1f60主

今日は何者かの攻撃が5chにも三男にもあって、JaneStyleやTwinkleがtalkに移行で他の専ブラがAPI鯖から締め出されたり忙しい日やね

【告知】何者かによるread.cgiへの大量アクセスがあったので一時的にwebブラウザでスレは開けません [管理モメン★]
http://sannan.nl/test/read.cgi/livegalileo/1688970176/
http://kako.sannan.nl/test/read.cgi/livegalileo/1688970176/

【MACKEREL HAS BEEN DOWN】サーバダウン情報 03
https://agree.5ch.net/test/read.cgi/operate/1664418619/
647 Ace ★[] 2023/07/10(月) 13:11:51.07 ID:CAP_USER
ただいま全鯖へアタックがあるようで、鋭意対応中とのことです。

497 - 名無し@アフィ転載禁止 2023/07/11(火) 01:23:38.03 ID:rq6jqSmU0

mateとtwinkle民が移住してきたから凄いことになってそう

498 - 名無し@アフィ転載禁止 (sage) 2023/07/12(水) 14:23:29.33 ID:V/ZlWvPrr

今回の騒動で最終的に人は増えたのだろうか減ったのだろうか

499 - 名無し@アフィ転載禁止 2023/07/12(水) 14:30:29.10 ID:5TmxaoC80

ワクワクするけど時間掛かりそうだし途中落ちたから今回は難しそう

500 - 名無し@アフィ転載禁止 2023/07/12(水) 18:17:54.43 ID:qx9s0T6ha主

今クローラー切ってるし🇸🇪は過去ログも無いからからなかなか厳しい🥺

501 - 名無し@アフィ転載禁止 2023/07/12(水) 20:38:29.27 ID:V/ZlWvPrr

そもそもまだ騒動が終わってなくてキレそう

502 - 名無し@アフィ転載禁止 2023/07/12(水) 22:34:42.20 ID:qx9s0T6h0主

過去ログのsubject.txtからの簡易集計で、7月11日までのデータ

レス数推移
https://i.imgur.com/Gm9X9Xb.png
スレ立て数推移
https://i.imgur.com/Me4rAFi.png

datからとsubject.txtからの書き込み数比較は>>457

503 - 名無し@アフィ転載禁止 2023/07/13(木) 01:25:54.32 ID:Ov8XzqMA0

やっぱ急激に増えたか

504 - 名無し@アフィ転載禁止 2023/07/13(木) 01:28:16.50 ID:Ov8XzqMA0

てかこの時間にしては書き込み多い気がする
今後の平均移動線の動向に注目だな

505 - 名無し@アフィ転載禁止 2023/07/13(木) 01:29:44.43 ID:Ov8XzqMA0

>>504
いや違うか
まだ反映されてないか

506 - 名無し@アフィ転載禁止 2023/07/13(木) 03:50:35.48 ID:x4+ieUoy0主

基本1日分は切ってます。メンテで落ちるらしい

❗【告知】4時30分からメンテするので、開けない場合はスウェーデン鯖に避難してください [管理モメン★]
http://sannan.nl/test/read.cgi/livegalileo/1689187451/

507 - 名無し@アフィ転載禁止 (sage) 2023/07/13(木) 08:21:05.91 ID:sYqUG5m5M

これきっと非連続見たな感じで増えてるよな
まだわからないけど

508 - 名無し@アフィ転載禁止 2023/07/13(木) 19:30:14.83 ID:x4+ieUoy0主

次から7日間の指数平滑移動平均EMAも追加してみるンダ
これまではggplotのgeom_smooth()でLOESS(Locally Weighted Scatterplot Smoother)かGAM(一般化加法モデル)で青い線描いてたンダけど

509 - !mirror 2023/07/13(木) 22:29:39.38 ID:x4+ieUoy0主

クローラー停止中のためsubject.txtによる簡易集計です
〜7月12日まで

レス数推移
https://i.imgur.com/YAOVsFr.png
スレ立て数推移
https://i.imgur.com/tOJREu4.png

変化を捉えやすいよう7日間の指数平滑移動平均EMAを点線で追加。(従来の青い線はLOESS (locally estimated scatterplot smoothing)による平滑化
昨日の7月12日は、攻撃や🇸🇪に避難を繰り返したこともあり6月21日以来、2万2500レスを割っていたようです

0レススレを回収してもらうチャンスかも😎
https://i.imgur.com/Oo7ngD4.png
https://i.imgur.com/HWAURxt.png

510 - 名無し@アフィ転載禁止 2023/07/13(木) 22:45:39.98 ID:M8yclLpvr

攻撃されまくってるけど思ったより減ってないね
知名度は上がっただろうしまた増えていくのかな

511 - 名無し@アフィ転載禁止 (sage) 2023/07/13(木) 23:03:16.40 ID:sYqUG5m5M

なんGよりも他の板が今回は変化激しいやろな
そもそも0やったんやもん

512 - 名無し@アフィ転載禁止 2023/07/13(木) 23:08:58.22 ID:bCtrS1wJ0

どうなるのか気になる傾向ね

513 - 名無し@アフィ転載禁止 2023/07/21(金) 18:41:45.10 ID:bxMvcKas0

3chanの件でメールくれた部員さんへ
メール見てるので明日やりますね
今はもう飲んでるので

514 - 名無し@アフィ転載禁止 2023/07/22(土) 00:31:14.38 ID:wOtMcKMD0主

サンガツ
3chanドメイン落札ニキにサブドメインを申請してみたので統計部のサーバーができます
部長はSimpleXやSession使ってる?

515 - 名無し@アフィ転載禁止 2023/07/22(土) 00:33:33.62 ID:wsGTs03n0

すごい

516 - 名無し@アフィ転載禁止 2023/07/22(土) 21:53:31.87 ID:V2Zz4YP/H

今人口どれくらいなんや

517 - 名無し@アフィ転載禁止 2023/07/23(日) 02:06:19.61 ID:t6yLZLUB0

>>514
設定しときました

518 - 名無し@アフィ転載禁止 2023/07/23(日) 07:02:29.43 ID:nIdKPl1R0主

>>517
ありがとうございます
調べたらCloudflareフリープランだとサブドメインの権限委任とかはできないんやね…
あともう一つだけ、出来たらDNSの設定でproxyをオンに(Cloudflareを経由するように)してもらえないでしょうか🙇‍♂️
https://i.imgur.com/AAOtlrP.jpg

519 - !mirror 2023/07/23(日) 07:25:53.94 ID:nIdKPl1R0主

うおおおおさんG!!🙋‍♂️
https://i.imgur.com/tlYZWB7.jpg
https://i.imgur.com/e2Ezk1I.png
https://i.imgur.com/beY29mV.png

520 - 名無し@アフィ転載禁止 2023/07/23(日) 08:23:21.27 ID:6wr+vdZT0

とうとうホームページが

521 - 名無し@アフィ転載禁止 2023/07/23(日) 10:39:47.71 ID:t6yLZLUB0

>>518
フリープランだと出来ないみたいですね
ワイも調べてた
プロキシオンにしときました

522 - 名無し@アフィ転載禁止 2023/07/23(日) 17:27:46.76 ID:nIdKPl1Ra主

助かる
サーバーサイドで完結させたい思ったけど、よく考えたらそのままだとメモリドカ食い気絶部だからダメじゃん😱
512MBでもpythonならいけるんかな

523 - 名無し@アフィ転載禁止 2023/07/23(日) 20:37:22.25 ID:nIdKPl1R0主

おまけにRのパッケージ入れようとしたら依存関係でコケまくる🥺
もしかしてdebianはaptで入れた方が良いの🥺

524 - 名無し@アフィ転載禁止 2023/07/24(月) 07:02:37.77 ID:slQ9aOpW0主

まだデータ更新してないけどええか
統計部のサイトが出来ました
https://stat.3chan.jp/
https://stat.3chan.jp/gallery.html
もう少しであぼーん含むレスも削除日時込みで処理出来そう

525 - 名無し@アフィ転載禁止 2023/07/24(月) 17:22:40.07 ID:jfef/vtta

ようやっとる
そういえば諸データの更新やアーカイブって検討してる?

526 - 名無し@アフィ転載禁止 2023/07/24(月) 17:43:58.56 ID:slQ9aOpWa主

ドメイン所有者しかCloudflareの設定を変えられないのと、SSL証明書更新の際にlets encryptedでhttp通さないといけないらしくてhttpからhttpsにリダイレクトしてません
なんかいい解決法あったら教えて🥺
統計部の鯖は一応防弾のVPSにあります

>>526
今後集計済みのcsvなんかは置きたい
あとさんGのアーカイブデータも手元にある

527 - 名無し@アフィ転載禁止 2023/07/24(月) 17:45:08.38 ID:slQ9aOpWa主

安価ずれた。>>525

528 - 名無し@アフィ転載禁止 2023/07/24(月) 17:53:10.63 ID:jfef/vtta

>>526
了解 いいね
統計データの更新毎に以前の統計データを保存する場所あればいいなと思ったけどこれまでのデータは蓄積されるし半期で区切って新たに表を作るとかでもないならまだ重要性は低いか

宣伝スレ建ってたから気になって

だんG統計部公式サイトが爆誕!
http://sannan.nl/test/read.cgi/livegalileo/1690183762/

529 - 名無し@アフィ転載禁止 2023/07/24(月) 21:01:33.47 ID:slQ9aOpW0主

でもパースの方法変わったり、部長と副部長ワイでも差があったりするからスナップショット的なのがあってもいいかも

530 - 名無し@アフィ転載禁止 2023/07/25(火) 12:36:10.72 ID:IhMBVIiQa主

ドメイン落札ニキに度々申し訳ないんですが、CloudflareのSSLの設定を変えてもらう必要がありそう
SSLの設定がフル以上でないとhttpsにリダイレクトさせると無限ループになってしまうらしい
>>528のレスを参考にディレクトリで分けようと思ったけどそれ以前の問題だった

531 - 名無し@アフィ転載禁止 2023/07/25(火) 13:23:50.60 ID:lW09kUW70副

>>530
これわいもなったことあるわ

532 - 名無し@アフィ転載禁止 2023/07/25(火) 20:46:10.23 ID:oC8YFt540

>>530
さっきメールも見たので後で確認して設定してみますね
Cloudflairは初めて触るんでよくわからんのです
適宜指示していただければ幸いです

533 - 名無し@アフィ転載禁止 2023/07/25(火) 21:30:08.14 ID:IhMBVIiQ0主

>>532
メニューのSSL/TLSを開くと出てくるこれやね!🙏
https://i.imgur.com/1gAKOII.jpg

DanGに統計部が載ってて急いで作った甲斐があったンダ🤗
https://i.imgur.com/2dANo9h.png
だんG民向けライフスタイル誌、月刊『DanG』2023年8月号発売のお知らせ
http://kako.sannan.nl/test/read.cgi/livegalileo/1690282487/

534 - 名無し@アフィ転載禁止 2023/07/25(火) 22:50:17.80 ID:oC8YFt540

>>533
フルにしときました

535 - 名無し@アフィ転載禁止 2023/07/25(火) 23:10:54.92 ID:oC8YFt540

>>514
もしかしてSimplexとかSessionってワイに言ってた?

536 - 名無し@アフィ転載禁止 2023/07/25(火) 23:21:06.55 ID:+SZomlBA0

"部長"はここではsubで副の統計ニキ
副部長がスレ主だから多分統計ニキに呼びかけたのかも

537 - 名無し@アフィ転載禁止 2023/07/25(火) 23:38:53.09 ID:+j+2ixIkM

もう誰が誰だかわからん

538 - 名無し@アフィ転載禁止 2023/07/25(火) 23:42:13.04 ID:oC8YFt540

>>536
サンガツ
とりあえずメールもらったらこっちかちゃんと返信できてたらメールで返すようにします

539 - 名無し@アフィ転載禁止 2023/07/26(水) 01:49:33.84 ID:puzeK+oC0主

>>535
紛らわしくてすまん
536の通りでサイトもできるし統計ニキにちょっと相談しようとかと思って書いてたんや

リダイレクトの設定も完了しました
連絡先ページも作ってみた
https://stat.3chan.jp/contact.html

540 - 名無し@アフィ転載禁止 2023/07/26(水) 02:40:20.23 ID:iOpqYfrAH

>>526
CF単体でHTTPS対応できた希ガス

541 - 名無し@アフィ転載禁止 2023/07/26(水) 20:41:26.16 ID:puzeK+oC0主

そうなんやけど細かい設定のとこは分からんし何回も変更必要になったら申し訳ないと思って…

542 - !mirror 2023/07/27(木) 19:15:12.56 ID:eSSlKh3y0主

さんGアーカイブのスレタイ一覧を見やすく検索できるサイトが出来ました🥳
https://stat.3chan.jp/sang/
https://i.imgur.com/hy4G91l.png

使用例
https://i.imgur.com/rv65P75.mp4
https://i.imgur.com/X8GQZ3h.jpg

絵文字も🙆‍♂️
https://i.imgur.com/B16gMnq.png

543 - 名無し@アフィ転載禁止 2023/07/27(木) 19:32:26.01 ID:f6YEvz3B0

過去ログも読めるようになってるのか

544 - 名無し@アフィ転載禁止 2023/07/28(金) 14:00:27.78 ID:433yHmeh0

はえーすっごい

545 - !mirror 2023/07/29(土) 03:35:14.43 ID:PXbxCK360主

統計部も週末出張進出してこようかしら

546 - 名無し@アフィ転載禁止 2023/07/30(日) 02:33:08.38 ID:728khqK60主

7月28日まで
ここ数日はスレタイ一覧のsubject.txtが吹っ飛ぶトラブルの影響でスレ立て数が多い模様

防弾なんGのレス数推移
https://i.imgur.com/EHUxJMO.png
防弾なんGのスレ立て数推移
https://i.imgur.com/Igpo28s.png

ユニークID数推移(ただし独スレを含む)
https://i.imgur.com/GVWtfNo.png
ID数推移
https://i.imgur.com/9PcuBon.png
新規ID数推移
https://i.imgur.com/D7H2Hip.png

だんG統計部の公式サイトが完成 [独]
http://kako.sannan.nl/test/read.cgi/livegalileo/1690644065/

547 - 名無し@アフィ転載禁止 2023/07/31(月) 13:25:57.06 ID:CT1letFV0

stat鯖結構多角的な運営してるわね

548 - 名無し@アフィ転載禁止 2023/08/04(金) 17:09:49.19 ID:SlrCIjlaM

昨日今日で少し大きめの移住が起きたかも

549 - 名無し@アフィ転載禁止 2023/08/05(土) 14:50:05.71 ID:KURhtimK0

昨日今日の書き込み数すごそう

550 - 名無し@アフィ転載禁止 2023/08/05(土) 15:07:43.68 ID:8tBWBkTHa

最近安倍晋三の数が増えてきた印象だし流入はあると思う

551 - 名無し@アフィ転載禁止 2023/08/05(土) 15:33:57.92 ID:GKg6vnNEH

昨日馬鹿早かったな

552 - 名無し@アフィ転載禁止 (sage) 2023/08/06(日) 01:52:15.23 ID:moh9psB40

ここで聞くことじゃないかもしれんが
なんで移住騒ぎ起きたんや?

553 - 名無し@アフィ転載禁止 2023/08/06(日) 01:57:49.14 ID:V3eW5MmE0

多分スクリプト
一時的な避難所としか見てないはずだから定住はしない…はず

554 - 名無し@アフィ転載禁止 2023/08/06(日) 02:24:45.44 ID:94ei+qrY0

どうせ爆撃喰らうから初めからこっちでやろうって言ってた実況スレもあったし一定数は残るかもね

555 - 名無し@アフィ転載禁止 2023/08/06(日) 02:42:33.27 ID:NpWi2eoo0主

5Gで聞いた方が詳しそうな気がするけど、スクリプトがgjm複数板に爆撃を始めて板間避難が困難になったのと、鯖にアクセスすら出来なくなったりした時間があったから避難所需要が増えたんだと思うンダ

556 - 名無し@アフィ転載禁止 2023/08/07(月) 01:40:03.50 ID:qqmnQ1BI0主

【3G統計部】レス数とスレ立て数、ID数の動向📊 [独]
http://sannan.nl/test/read.cgi/livegalileo/1691334947/
http://kako.sannan.nl/test/read.cgi/livegalileo/1691334947/

安倍さんのおかげで防弾なんGから3Gに変わったよ
https://i.imgur.com/YetJ9Lk.jpg

557 - 名無し@アフィ転載禁止 2023/08/07(月) 02:01:07.35 ID:rFEvDxfba

防弾3Gになったことで統計的な影響がでるのか楽しみですね

558 - !mirror 2023/08/07(月) 02:35:55.15 ID:qqmnQ1BI0主

最新版です

レス数推移
https://i.imgur.com/ZBWDzRp.png
スレ立て数推移
https://i.imgur.com/8wHVIMk.png

1時間ごとに集計した時間帯別のレス数
https://i.imgur.com/V429MKb.png
連続版
https://i.imgur.com/vdELkds.png

ユニークID数の推移
https://i.imgur.com/aQ9o8ih.png
ID末尾未処理版
https://i.imgur.com/o39WcWC.png

新規ID数の推移
https://i.imgur.com/OADLNEq.png

実況スレを分離 縦に積み上げ
https://i.imgur.com/ttrJzVJ.png
横に棒グラフを並べる
https://i.imgur.com/5kFKI3f.png

559 - 名無し@アフィ転載禁止 2023/08/07(月) 06:05:04.47 ID:HZ30fssvH

>>558
やっぱり実況の民が大量に流入しとるのな

560 - 名無し@アフィ転載禁止 2023/08/07(月) 09:34:29.60 ID:MlwCjNlp0副

試してないけど

https://i.imgur.com/cdV9xv7.png

561 - 名無し@アフィ転載禁止 2023/08/07(月) 16:27:55.25 ID:Q7ApTY3J0

これまでない大規模移住でまた傾向変わりそうね

562 - 名無し@アフィ転載禁止 2023/08/07(月) 17:13:20.25 ID:S3c0DNJw0

やっぱ増えとるんやね

563 - 名無し@アフィ転載禁止 2023/08/08(火) 21:17:58.96 ID:5FFEmluo0

昨日今日あたり
猛烈に人口増加した感ある
それに伴う治安指数の変化が気になるね

悲しきかな体感ではちくちく増えてる気がするが…

564 - 名無し@アフィ転載禁止 2023/08/08(火) 21:20:04.29 ID:gh4Oj8gu0

関連してなんTの統計調査はする?
過去ログ実装されたらしいから恒久的に設置されるだろうし

565 - 名無し@アフィ転載禁止 2023/08/09(水) 01:29:13.89 ID:m68Kgp1b0主

もう一いっそ全部取るか、
容量やばいを追体験出来そう

566 - 名無し@アフィ転載禁止 2023/08/09(水) 09:32:53.72 ID:343oxgES0

これ今までの防弾Gの統計意味なくなりそうだな…
チューリップとGで住人分断されちゃったし
住人の質も違うから単純な比較できなさそう

567 - 名無し@アフィ転載禁止 2023/08/09(水) 09:35:15.01 ID:qIibZh8c0

治安指数も急激に悪化するだろうね
色々起こりすぎてモメン壊れちゃったし…

568 - 名無し@アフィ転載禁止 2023/08/09(水) 10:06:48.18 ID:8hJ4btNzH

後々もっとひどいことになりそう

569 - 名無し@アフィ転載禁止 2023/08/09(水) 10:10:32.73 ID:qIibZh8c0

今頃5Gの人等が移住計画とかで舌なめずりしてるだろうし 管理放棄して安倍晋三解き放ったからさてどうなるか

570 - 名無し@アフィ転載禁止 2023/08/09(水) 10:21:18.08 ID:343oxgES0

あくまでも数字として見れるか気になるわね
色々意見はあるけど
数字としてどのように現れるか
これが結構興味深い

571 - 名無し@アフィ転載禁止 2023/08/09(水) 11:37:29.32 ID:343oxgES0

人口増加に伴って
治安指数が加速度的に悪くなってたら
少しのやばいユーザーが周りに非常に大きい影響を及ぼすって見れるのかな?
まあ元々の移住民の治安がアレやったり
データ取れる日数が少ないから変化としては急激に大きくなるやろし
正確なデータ検証できんけど
これから2週間くらいでデータ徐々に集まっていくかしら

572 - 名無し@アフィ転載禁止 2023/08/09(水) 11:40:34.22 ID:NDZegutD0

三男掲示板各板書き込み数ランキング作ってみてほしい
5chみたいに

573 - 名無し@アフィ転載禁止 2023/08/09(水) 12:07:05.55 ID:m68Kgp1ba主

うおお展開が早すぎて付いていけない。現行スレも把握するようにコード書き換えないといけないか
今こそ統計ニキのうんさく分析時系列版を見てみたい

574 - 名無し@アフィ転載禁止 2023/08/09(水) 13:38:01.29 ID:SGFA8jVF0

無いとは思うけど言いがかりつけてきた人がいたらと思って確認して言質はいただけました

【告知】GR6で三男掲示板内のスレや板のヲチ(晒し上げ)行為を禁止します [管理モメン★]

55 野に咲く名無し@アフィ転載禁止[] 2023/08/09(水) 13:19:15.49 ID:8CVRRcfP0

これ統計部とか良スレ部はヲチとか晒し上げじゃないしセーフだよね?

57 管理晋三 ★[] 2023/08/09(水) 13:20:09.01 ID:ADMIN

>>55
悪意のある晒し上げ行為を想定しているので
そういうのはセーフ

575 - 名無し@アフィ転載禁止 2023/08/09(水) 14:23:20.41 ID:44TOCNoB0

よかった

576 - 名無し@アフィ転載禁止 2023/08/09(水) 15:31:33.67 ID:qIibZh8c0

>>574
一応URLも
http://sannan.nl/test/read.cgi/livetulip/1691526247/
http://kako.sannan.nl/test/read.cgi/livetulip/1691526247/

577 - 名無し@アフィ転載禁止(M) 2023/08/09(水) 15:42:18.06 ID:1A1linUf

末尾が名前欄に移動

578 - 名無し@アフィ転載禁止 2023/08/09(水) 15:46:12.24 ID:qIibZh8c

これもまた影響のある変更ね

579 - 名無し@アフィ転載禁止 (r) 2023/08/09(水) 18:01:00.51 ID:I0LiRmum

波乱が過ぎて統計大変そう

580 - 名無し@アフィ転載禁止 2023/08/09(水) 18:04:49.34 ID:B+t5FRQj

次からはどこで発表するんやろ🤔
ここが基幹だからここ見てればええんかな🙄

581 - 名無し@アフィ転載禁止 (sage) 2023/08/09(水) 18:07:05.00 ID:l0gw1e/z

全部でやろう😎
これマルチポストになる?

582 - 名無し@アフィ転載禁止 (主) 2023/08/09(水) 19:14:34.59 ID:m68Kgp1b

>>576
>>577
ID末尾はここで名前欄に切り替わったのか
助かる

主マークや新規の場合はこんな風になるんだね
例:
撃たれても動く名無し@アフィ転載禁止 (a) (主)
116 '新規spmode'@転載禁止 ◆MivqMJ8/oTPh (d) (L0)[] 2023/08/09(水) 18:03:55.53 ID:cndunJaa

583 - 名無し@アフィ転載禁止 (主) 2023/08/09(水) 21:25:31.08 ID:m68Kgp1b

そっかスレ紹介botも新設の防Tへ行ったか
とりあえずワイはクローラーの他板対応からやね

584 - 名無し@アフィ転載禁止 (M) 2023/08/10(木) 02:06:11.12 ID:tEndgyYa

>>581
ならんと思うけどGはもうやめたほうがええんちゃう?

585 - 名無し@アフィ転載禁止 2023/08/10(木) 02:38:01.31 ID:oiQ40390

>>581
今Gに立てても新規の人多すぎて前みたいな反応はもらえないんちゃう?

586 - 名無し@アフィ転載禁止 (H) 2023/08/10(木) 02:51:16.90 ID:tJRu1ars

それはそれでええんちゃうか?
説明丁寧に入れるくらいで
板別に統計部大使館作るくらいのノリでww

587 - 名無し@アフィ転載禁止 (主) 2023/08/12(土) 04:53:52.56 ID:mY5x4BUE

github風のサイトにRのコードを置いてみた
https://stat.3chan.jp/git/stat-tools/statsannan/src/branch/main/sannan_subjecttxt.R

588 - 名無し@アフィ転載禁止 (M) 2023/08/12(土) 08:27:09.91 ID:imMWNoNO

実況スレ(実際になんか実況してるスレ)は他のスレに比べて有意に認証してない(Lv4以下)の可能性あるな

589 - 名無し@アフィ転載禁止 (M) 2023/08/12(土) 08:27:48.20 ID:imMWNoNO

より正確に言うとアニメ実況スレ

590 - 名無し@アフィ転載禁止 (M) 2023/08/12(土) 09:12:56.97 ID:imMWNoNO

統計部開くとgstatic.comも使っとるやんけ……

591 - 名無し@アフィ転載禁止 (H) 2023/08/12(土) 11:54:09.76 ID:ALqkro1Z

防弾コードホスティングやん

592 - 名無し@アフィ転載禁止 (M) 2023/08/12(土) 12:04:47.58 ID:imMWNoNO

もう3chanのドメインに何があるのか何もわからんわ
とりあえず防弾アップローダーはええとしてこのgitlab的なのは防弾なんやろか?

593 - 名無し@アフィ転載禁止 (a) (主) 2023/08/12(土) 12:15:07.15 ID:mY5x4BUE

>>590
トップページにある?フォント関係のなんかやろか
今CDNへのリンク貼ってるのはあるけど、なるべく外部リソースは減らしていきたいので後で見てみる

gitlab的なのはForgejoで今のところワイが気楽にコード上げたいがために使ってる。登録も無効で。鯖の余裕もあんま無いし

594 - 名無し@アフィ転載禁止 2023/08/12(土) 13:09:57.47 ID:MpRlnQh6

<link rel="stylesheet" type="text/css" href="//fonts.googleapis.com/css?family=Lato:300,400,700,400italic%7CJosefin+Sans:400,700,300italic">

595 - 名無し@アフィ転載禁止 (M) 2023/08/12(土) 15:19:15.07 ID:imMWNoNO

>>593
サービスとしては動いとらんのね
さんがつ
原因何なんやろな
こいつのせいでここえの通信止めてると動かないサイトたくさんあるから嫌やわ

596 - 名無し@アフィ転載禁止 (主) 2023/08/12(土) 20:12:10.61 ID:mY5x4BUE

>>594-595
サンガツ
やっぱりこの部分やったから消しとく

597 - 名無し@アフィ転載禁止 (M) 2023/08/12(土) 23:01:43.11 ID:imMWNoNO

>>596
さんがつ
Googleとかトラッキング嫌いマンやからすごく嬉しいわ

598 - 名無し@アフィ転載禁止 2023/08/20(日) 00:26:30.20 ID:gdo7hMJK

今どんな具合ですか
TG共に統計データ取る感じ?

599 - 名無し@アフィ転載禁止 (a) (主) 2023/08/20(日) 12:20:44.74 ID:l8eVCr1q

言わばまさに。他の板も含めてやりたい

600 - 名無し@アフィ転載禁止 2023/08/20(日) 12:36:44.47 ID:l4zs3j68

(a)や (M)って何?

601 - 名無し@アフィ転載禁止 (H) 2023/08/20(日) 12:42:16.06 ID:coQnSpI/

>>600
末尾
0は非表示

602 - 名無し@アフィ転載禁止 2023/08/20(日) 12:42:48.61 ID:BWHv3wMb

5chで言うとこの末尾だよ

603 - 名無し@アフィ転載禁止 2023/08/20(日) 12:43:28.64 ID:UarbQqRE

回線の末尾
仕様変更で固定回線以外は名前欄に(a)とか(M)が付くようになった

604 - 名無し@アフィ転載禁止 2023/08/20(日) 21:13:18.84 ID:gdo7hMJK

>>599
がんばってください💪

605 - 名無し@アフィ転載禁止 (d) 2023/08/21(月) 10:17:18.00 ID:t5Hc15VS

>>599
応援してるで
一番大事なデータの部分を抽出してくれる
有能

606 - 名無し@アフィ転載禁止 2023/08/21(月) 11:49:18.40 ID:o4bcLh3/

>>605
(d)ocomoかな

607 - 名無し@アフィ転載禁止 2023/08/21(月) 23:46:45.72 ID:Ka0XYoTr

こういうの見るの好きだからいつも楽しみにしてる

608 - 名無し@アフィ転載禁止 2023/08/22(火) 09:42:23.88 ID:0jyfOF+o

ゲーム板も統計しますか?最近人増えてます

609 - 名無し@アフィ転載禁止 (d) 2023/08/22(火) 10:49:47.14 ID:j2tY7YEc

書き込みの勢いはゲーム板の方がありそうな気がする

610 - 名無し@アフィ転載禁止 (H) 2023/08/22(火) 18:17:42.12 ID:fp03mUK+

そろそろ見たい

611 - 名無し@アフィ転載禁止 2023/08/22(火) 20:41:40.84 ID:zobVSfqQ

最新版まだかな

612 - 名無し@アフィ転載禁止 2023/08/23(水) 02:38:54.50 ID:kPRrhsHs

統計民いつもご苦労様やで

これって書き込み数やんな?
ROM含めた人口の概数って管理モメンとかに聞かんと分からんのやろうか

ざっとスレリストが更新された時間当たり数と
時間当たりのユニークIDの書き込み数から推定できそうな気がするんやが
まずは係数を決めるベースのデータが必要よな…

613 - 名無し@アフィ転載禁止 (主) 2023/08/23(水) 04:09:30.37 ID:igxFeuEO

ROMは管理モメンに聞いた方が早いかもね
アクセス解析系だとgoaccessが比較的軽くてwebサーバーのアクセスログを良い感じにhtmlに加工してくれて見やすかったから紹介してみるか

614 - 名無し@アフィ転載禁止 (主) 2023/08/23(水) 05:31:38.12 ID:igxFeuEO

ちな7/31のお昼時(12時過ぎくらい〜13:20)にstat.3chan.jpへのユニークアクセスが1584だった

615 - 名無し@アフィ転載禁止 2023/08/23(水) 08:18:31.82 ID:7y/GXITJ

>>614
結構多いんやな

616 - 名無し@アフィ転載禁止 2023/08/23(水) 10:44:30.46 ID:imP78OPG

>>615
その割にはなんか過疎ってるよな

617 - 名無し@アフィ転載禁止 2023/08/23(水) 10:45:44.57 ID:imP78OPG

>>616
すまん、統計部サイトの話やったわ

618 - 名無し@アフィ転載禁止 (主) 2023/08/23(水) 21:10:27.60 ID:igxFeuEO

開発もたもたしてる間にDDoSの余波でクローラーも締め出しくらって草

619 - 名無し@アフィ転載禁止 2023/08/23(水) 21:29:39.14 ID:senKL7vB

>>618
モメンに相談しにいかないとね

620 - 名無し@アフィ転載禁止 (主) 2023/08/24(木) 19:18:25.46 ID:IAI7QWtc

APIでファイヤーウォールの設定を切り替えられるようだから、スクリプトで攻撃を検知した時に規制を強化するように出来ないか管理モメンに聞いてみる

621 - 名無し@アフィ転載禁止 (主) 2023/08/24(木) 19:56:37.15 ID:IAI7QWtc

こういうのってhttpがタイムアウトするかを監視するシェルスクリプト無限ループで良いのかな?

622 - 名無し@アフィ転載禁止 (H) 2023/08/25(金) 20:46:55.52 ID:c5J+5Q2F

>>618
ほんーま山下遼太殺す

623 - 名無し@アフィ転載禁止 (主) 2023/08/27(日) 02:13:47.90 ID:vUiDQXNw

三男サーバー監視所設置予定地です
https://stat.3chan.jp/kanshi/
ここにファイル置いてるんだけどCloudflareにキャッシュされてるせいか更新クッソ遅い。どうしよう
https://stat.3chan.jp/kanshi/health_checker_sannan.csv

624 - 名無し@アフィ転載禁止 (主) 2023/08/27(日) 06:00:50.15 ID:vUiDQXNw

なんとか形にはなった
https://i.imgur.com/gJRxtrK.png
csvなんだけど拡張子をhtmlにしてキャッシュ回避するようにした

625 - 名無し@アフィ転載禁止 2023/08/27(日) 09:23:38.37 ID:v5WjSwKx

>>623
視覚的にわかりやすくなったわね

626 - 名無し@アフィ転載禁止 (H) 2023/08/27(日) 17:22:31.92 ID:aNpONe7g

>>624
ようやっとる

627 - 名無し@アフィ転載禁止 2023/08/27(日) 19:36:40.51 ID:Fwg23cY/

三男掲示板サーバー監視所がおかしい
スウェーデン鯖がONLINEなのにONLINEになってない
サイト接続の安全性を確認しています
人間であることを確認します
se.sannan.nl では、続行する前に接続の安全性を確認する必要があります。

628 - 名無し@アフィ転載禁止 2023/08/27(日) 19:38:30.17 ID:Fwg23cY/

stat.3chan.jpに、さんG統計部(ブックマーク)と3G統計部(画像)の2つ名前がある
統一すべき

629 - 名無し@アフィ転載禁止 (主) 2023/08/28(月) 20:03:38.66 ID:rP5eivFA

報告サンキュー
認証ONはそのま403でイエローにした
ロゴだけ意図的に3Gにしてます

630 - 名無し@アフィ転載禁止 2023/08/29(火) 11:49:42.09 ID:Lh9/M2ew

stat.3chan.jpの2つの名前の関係は?
同格か違いがあるのか?

631 - 名無し@アフィ転載禁止 (sage) 2023/08/29(火) 18:33:24.48 ID:TPrJ7k4s

嫌儲から来ました。死活ログありがたいです
スクリプトの動作状況など取得できればと考えている統計やさんですが、避難所かdiscordのようなものはありますか?
ここもたびたびDDoSの餌食になってるようで、スレ民の居場所が気になった次第

632 - 名無し@アフィ転載禁止 (sage) 2023/08/31(木) 16:31:10.67 ID:kIRZ/SiE

確か統計部の鯖にぜろちゃんねるプラスなかったっけ?

633 - 名無し@アフィ転載禁止 (sage) 2023/08/31(木) 16:37:04.19 ID:WOjrvO9B

1スレの避難所というものを見たことがない
https://misskey.kindworld.one/@sannanbot

634 - 名無し@アフィ転載禁止 (sage) 2023/08/31(木) 17:21:32.08 ID:3Nq8a+Ua

統計部員さま、こちらで取り組んでいること:
・他避難所およびtalk.jpの死活監視(既に稼働されていたら余計ですけども)
・荒らしスクリプトの動作状況集約(同上)
です。

discord部スレッドから避難所の存在を知り、この手のお話をしたところ
「統計部・wiki編集部」チャンネルに興味ありそうな人が(まだ人数少ないですが)集まっている模様です
もし興味ございましたら覗いてみてください

URLの誘導はこのあたりのスレッドで発行されるようです
https://sannan.nl/test/read.cgi/liveuranus/1687691127/
https://se.sannan.nl/test/read.cgi/lgse/1693393972/

635 - 名無し@アフィ転載禁止 (sage) 2023/08/31(木) 17:24:27.68 ID:3Nq8a+Ua

https://i.imgur.com/KsJlhau.png
サーバーのダウンタイムはこんな具合に描くと、日付をまたいだ状況がわかりやすいと思われます
(余計なお世話でしたら蹴り飛ばしておいてください)
そんなところで

636 - 名無し@アフィ転載禁止 (a) (主) 2023/08/31(木) 18:43:43.16 ID:S3Zqaor8

じっけんもー@0ch掲示板
https://stat.3chan.jp/exp0/
再開発プロジェクトの動作確認用だけど家着く前に落ちたら困るのでとりあえず取り急ぎ

>>635
ナイス👍

637 - 名無し@アフィ転載禁止 2023/08/31(木) 23:13:25.78 ID:3/FJ2oxD

サーバー状況のサイト助かってるわ
サンクス

638 - 名無し@アフィ転載禁止 (主) 2023/08/31(木) 23:27:36.81 ID:S3Zqaor8

防U統計部避難所
https://stat.3chan.jp/test/read.cgi/exp0/1693481757/l50
立ててみた。クローラー停滞してたけど死活監視の方で統計部スレに需要があるんやね

>>634
ディスコはやってないけど避難所としてURL貼られてたSimpleXは見てるよー https://33-4.me/M8n06c
避難先にもDDoSが来てるので検討はしてたけど動かしてはないのでありがたい!
なんか良い情報あればここか避難所に貼ってみてね


スレが立ってたのでメモ
三男の文化保存部 [bGxcjo0hM★]
http://sannan.nl/test/read.cgi/livegalileo/1693466221/
三男掲示板サーバー監視所 [KTvN★]
http://sannan.nl/test/read.cgi/news1/1693469189/

639 - 名無し@アフィ転載禁止 (H) 2023/08/31(木) 23:30:48.41 ID:B4BsBszW

今日はなんか攻撃来なかったな
しばらくして一週間ぐらい攻撃され続けるかこのまま一生来ないか

後者であってくれ

640 - 名無し@アフィ転載禁止 (主) 2023/08/31(木) 23:32:05.27 ID:S3Zqaor8

なんか監視者最新版csvの切り出し壊れてるかな?

641 - 名無し@アフィ転載禁止 (主) 2023/08/31(木) 23:32:59.17 ID:S3Zqaor8

ん、直ったよく分からん
ログ取るようにするか

642 - 名無し@アフィ転載禁止 (主) 2023/09/01(金) 00:00:33.06 ID:9xAGxmB7

>>630
防GだんGみたいな表記揺れで、元のスレタイがさんGだったけどロゴのデザイン的に3Gが良いかなくらいの理由やね
同格と言えば同格

>>637
サンガツ。役に立たなくなる日が来るといいな

643 - 名無し@アフィ転載禁止 2023/09/01(金) 11:37:30.62 ID:C89D6zjs

>>642
名前が2つあるのって初めて見た
興味深い
名前は1つって思うのだが
ここ以外で例があったら知りたい
画像やロゴでは3GだがテキストではさんGというほうがまだ理解できる
ロゴの画像のaltに代替テキストがないがどっちで書く?
鯖の生存確認のために三男鯖に行くユーザーの負荷を避けるのに役立ってる

644 - 名無し@アフィ転載禁止 (sage) 2023/09/01(金) 11:38:33.21 ID:C89D6zjs

ここ以外で例があったら知りたい>all

645 - 名無し@アフィ転載禁止 (sage) 2023/09/01(金) 11:53:28.25 ID:C89D6zjs

防GとだんGで2つあると思われるかもしれないが管理木綿に聞いたとしても2つあって同格だは言わないだろう(答える名前は1つ)ってことね

646 - 名無し@アフィ転載禁止 (a) (主) 2023/09/04(月) 18:50:59.51 ID:kaw8x8gp

DDoS👈🥺ツンツン

同格と言ったけどドメイン落札の流れから今は亡きサイトの名前を冠したネタ要素強めのサイトなので特に深い意味は無いんやで
3ちゃんねるもトップや看板画像で表記色々混在してたし

647 - 名無し@アフィ転載禁止 (a) (主) 2023/09/04(月) 18:51:41.23 ID:kaw8x8gp

防儲の嫌儲統計局とかいう謎の有能組織のおかけで三男サーバー監視所で分かりやすい可視化画像が自動更新されるようになったよ
https://stat.3chan.jp/kanshi/

648 - 名無し@アフィ転載禁止 2023/09/05(火) 04:42:01.79 ID:wmB+nFso

とりあえず

http://stat.3chan.jp/test/read.cgi/exp0/1693481757/5
5 【忍法帖Lv.2】【総カキコ数:3】 (ワッチョイ u9J6-QALp) 2023/09/03(日) 23:53:00.06 ID:GAVhPIgK
Cloudflareを挟んで更新ごとにキャッシュを差し替える形にしてしまったので
監視所さんの転送量がお困りであれば直リンでも大丈夫です
URLは下記のとおりです。IP直打ちはドメイン名にリダイレクトかかるため参照はどちらでも可です

防弾三男(sannan.nl)
https://ch-stat.kenmo-db.net/pub/isalive_sannan.nl.png
各避難所
https://ch-stat.kenmo-db.net/pub/isalive_servers.png

6 【忍法帖Lv.2】【総カキコ数:4】 (ワッチョイ u9J6-QALp) 2023/09/04(月) 00:09:08.13 ID:0/8Uk/s6
追伸。直リンの際はドメイン名にてお願い申し上げます

649 - !mirror 2023/09/12(火) 09:16:21.36 ID:v+K70MYn

5分おきに更新されるCSV(をhtmlに変換したもの)にレコード追加するためのリクエスト投げて返答を見るコードってどこかに公開されてますか?

650 - 名無し@アフィ転載禁止 2023/09/18(月) 14:04:27.94 ID:/R0OtxKY

もう統計結果もボロボロになりそう
鯖落ちの影響がデカすぎる

統計部の本スレってここで合ってる?
OffShoreでやってるとかってことはないよな?

651 - 名無し@アフィ転載禁止 (a) 2023/09/18(月) 14:09:51.63 ID:6OMwqp93

一応ここのはずだけど統計ニキと副部長は軸足をオフショアに移しているかもしれない

652 - 名無し@アフィ転載禁止 2023/09/18(月) 14:39:17.04 ID:/R0OtxKY

>>651
2人の意見次第で場所移るかもしれんのね

現状鯖落ちまくりだし
書き込みクロールして2鯖体制で
スレ運用できれば良さそうだけど技術的に厳しいしなぁ

653 - 名無し@アフィ転載禁止 2023/09/19(火) 05:26:41.56 ID:bVgAsmCw

>>652
主にその二人が積極的に活動しているからってかんじ
まあ統計データなんて取りようもないかもねここまで苛烈な攻撃が続いてると

654 - 名無し@アフィ転載禁止 2023/09/23(土) 14:39:10.98 ID:DfxuTmWF

https://ch-stat.kenmo-db.net/pub/isalive_sannan.nl.png
https://i.imgur.com/mAe05M9.png
この画像はミチミチになってきたね

655 - 名無し@アフィ転載禁止 (M) 2023/09/26(火) 06:01:32.16 ID:LE9JObV3

https://ch-stat.kenmo-db.net/pub/isalive_sannan.nl.png
https://i.imgur.com/9Iuk3y5.png
もう限界だから拡げてほしい