アフィサイトへの転載は禁止です。<><>2023/03/23(木) 20:51:58.21 ID:k4vr2Ovz0<> 無かったので
※追記 2023/03/23(木) 22:20:59
さんG統計部さんU支部
http://etc.3chan.jp/test/read.cgi/liveuranus/1678975374/
※tlv=5<>防U統計部
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 21:07:26.04 ID:7OSiuxhi0<> 統計ニキじゃないけど助かる <>
アフィサイトへの転載は禁止です。<>sage<>2023/03/23(木) 21:17:30.16 ID:1rBwq4DF0<> 統計ニキ来るかね <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 21:20:53.02 ID:7OSiuxhi0<> あっちにスレ告知はしたよ <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 21:29:54.34 ID:7OSiuxhi0<> !hogoで>>1は5日ルール回避できるけど忍法帖lv5消費するかもしれないから気をつけて <>
アフィサイトへの転載は禁止です。 (L0)<>sage<>2023/03/23(木) 22:10:52.23 ID:OLPbEzjGa<> 122 アフィサイトへの転載は禁止です。 2023/03/23(木) 21:40:59.76 ID:XBqgyxP00
防弾Uは5日間ルールあるの？
133 管理モメン ★ 2023/03/23(木) 21:45:52.69 ID:ADMIN
> >122
防弾Uにはないです
スレ主や運営が落とすか保持数をスレ番が下回るときのみ落ちます <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 22:11:48.10 ID:7OSiuxhi0<> 通常のスレ順dat落ちはあるのね <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 22:13:04.40 ID:7OSiuxhi0<> 関連スレ
さんG統計部さんU支部
http://etc.3chan.jp/test/read.cgi/liveuranus/1678975374/
一応 <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 22:20:59.28 ID:k4vr2Ovz0<> !hogo
まだよう分からんけど書いとくで！
!add
さんG統計部さんU支部
http://etc.3chan.jp/test/read.cgi/liveuranus/1678975374/ <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 22:23:13.17 ID:k4vr2Ovz0<> せっかくデータ溜まってきたのに崩壊して草 <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 22:39:13.16 ID:Cu2lMDt1M<> 魚拓取っとくんやぞ <>
◆DxPGfb7WCc <><>2023/03/23(木) 22:40:57.19 ID:nEfUGjn10<> >>1
サンガツやで〜 <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 22:45:57.74 ID:7OSiuxhi0<> 防弾Gは野球実況の可否で3Gと大きく変わってくるかもしれない <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 22:53:30.12 ID:k4vr2Ovz0<> 来たわね
前に問題出してくれてたニキもおるやろか
最近の書籍は見てないから分からんけど、p値について前にワイが見たのだとこういうのがあるんや。既に知っとるかもしれんけど紹介しとくで
佐藤俊哉. ASA 声明と疫学研究における P 値 The ASA Statement and P-values in Epidemiologic Research
https://www.jstage.jst.go.jp/article/jjb/38/2/38_109/_pdf
統計的有意性と P 値に関する ASA 声明
https://www.biometrics.gr.jp/news/all/ASA.pdf <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 22:56:29.03 ID:Cu2lMDt1M<> イッチ!subで統計ニキ福スレ主に指定してくれんか？ <>
【忍法帖Lv.4】<><>2023/03/23(木) 23:06:03.64 ID:k4vr2Ovz0<> !sub: nEfUGjn10
指定はスレのIDとかでええんやろか
コマンド一覧
https://wiki.sannan.nl/w/index.php/%E3%82%B3%E3%83%9E%E3%83%B3%E3%83%89%E3%83%BB%E6%A9%9F%E8%83%BD <>
【忍法帖Lv.4】<><>2023/03/23(木) 23:06:27.02 ID:k4vr2Ovz0<> sub:nEfUGjn10 <>
管理モメン ★<><>2023/03/23(木) 23:14:37.03 ID:ADMIN<> すみません指定は忍法帖ID（名前欄に表示される6桁のもの）で行います
副主になる人が名前欄に!ninidを入力されれば表示できるので
主はそれを指定してください
今回はこちらで指定しておきます <>
管理モメン ★<><>2023/03/23(木) 23:15:14.99 ID:ADMIN<> !sub:f9b6f5
★f9b6f5を副主に追加 <>
【忍法帖ID:f9b6f5✅】<><>2023/03/23(木) 23:17:18.32 ID:nEfUGjn10<> こうか？
>>18
移住先ありがとやで。
ここで活動について質問してるんで、
よかったらみててクレメンス
https://sannan.nl/test/read.cgi/unsaku/1658627617/662
もともとさんGで発作的につくったもんやから
ダメならダメでまあええで。
もしくは、管理モメンが公式で作る予定なら
それでもええんや <>
【忍法帖ID:a0c3a2】<><>2023/03/23(木) 23:17:58.87 ID:k4vr2Ovz0<> サンキュー管理モメン！ <>
【忍法帖ID:f9b6f5✅】<><>2023/03/23(木) 23:18:37.85 ID:nEfUGjn10<> お、もうやってくれてんのか！
サンガツ！ <>
【忍法帖ID:f9b6f5✅】<><>2023/03/23(木) 23:19:38.50 ID:nEfUGjn10<> もちろん部への参加も歓迎やで！ <>
【忍法帖ID:f9b6f5✅】<><>2023/03/23(木) 23:21:13.12 ID:nEfUGjn10<> 662 アフィサイトへの転載は禁止です。 (L5-f9b6f5✅) (ﾜ HwdU-d0aI)：2023/03/23(木) 23:14:55.88 ID:yu0qb/3U0
さんGでsubject.txtから各スレのdatファイルスクレイピングして、
こういうの作ってたんやが、防弾なんGでやってもええか？
https://i.imgur.com/weYyAEf.png
今のアクセス間隔はだいたい15分に一回や
ちょっと感覚狭すぎたり、そもそもダメなら諦めるやで。
仕様はここも3chもあんまり変わらんからちょっと修正すればいけると思う。
↓ここで活動する予定や
さんG統計部さんU支部
https://etc.3chan.jp/test/read.cgi/liveuranus/1678975374/
663 管理モメン ★：2023/03/23(木) 23:19:08.80 ID:ADMIN
>>662
いいですよ <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 23:23:25.46 ID:7OSiuxhi0<> 管理モメンの公認貰えたのか よかったよかった <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 23:30:16.43 ID:nEfUGjn10<> 防儲も書き込み増えてるな
ええことや。防Gやったら防儲もスクレイピングするか <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 23:30:42.38 ID:nEfUGjn10<> ワイ実はもともとケンモメンなんや <>
アフィサイトへの転載は禁止です。<><>2023/03/23(木) 23:55:47.99 ID:k4vr2Ovz0<> 防儲も増えてるんか
経緯的には元々防儲がメイン？なんだよね。あんま見たことないけど <>
アフィサイトへの転載は禁止です。<><>2023/03/24(金) 00:33:33.13 ID:JgRDeAg+M<> >>28
せやね
ケンモメンの理想郷目指して作られた <>
アフィサイトへの転載は禁止です。<>sage<>2023/03/24(金) 00:41:04.34 ID:BeJ+ENST0<> 板のほぼ初期からのデータとれるのは楽しいな <>
名無しさん＠転載禁止<><>2023/03/24(金) 19:41:49.59 ID:yrbNeQdU0<> さんG統計部さんU支部、お亡くなりになりました😭 <>
◆DxPGfb7WCc <><>2023/03/24(金) 19:42:44.75 ID:2WGYr01t0副<> 南無南無 <>
名無しさん＠転載禁止<><>2023/03/24(金) 19:52:26.18 ID:yrbNeQdU0<> 書き込んだら息吹き返したわ <>
名無しさん＠転載禁止<><>2023/03/24(金) 20:04:06.24 ID:c3iYBdtZ0<> 因みに書き込み数は3G時代と比べてどうなったんや？ <>
名無しさん＠転載禁止<><>2023/03/24(金) 20:17:58.77 ID:2WGYr01t0副<> >>34
まだとってない、2.3日まって・・ <>
名無しさん＠転載禁止<><>2023/03/24(金) 20:25:25.98 ID:c3iYBdtZ0<> >>35
はいさい！ <>
名無しさん＠転載禁止<><>2023/03/25(土) 03:58:42.77 ID:HPio98wGM<> >>14
サンキュー読んどく
なん見たことある気がするけど <>
名無しさん＠転載禁止<><>2023/03/25(土) 09:56:46.11 ID:L0gcIPSh0<> dat落ちしちゃったわね <>
名無しさん＠転載禁止<><>2023/03/25(土) 15:18:09.57 ID:7lTT4iSy0<> 統計部は5chも頼むわ
いつも使ってるサイトが使えん <>
名無しさん＠転載禁止<><>2023/03/26(日) 00:13:56.61 ID:QkiZD9RiM<> アマゾンのあの書籍リストとgistのURLみたいわ <>
名無しさん＠転載禁止<><>2023/03/26(日) 00:36:24.64 ID:25XGYRB30<> アマゾンのはこれかな？gistはわからない
https://www.amazon.jp/hz/wishlist/ls/NKQK1KIT3L1D?ref_=wl_share <>
名無しさん＠転載禁止<><>2023/03/26(日) 01:51:44.54 ID:QkiZD9RiM<> >>41
助かる <>
◆DxPGfb7WCc <><>2023/03/26(日) 04:11:48.57 ID:ejUpuZY00副<> こっちはこっちで独自機能があるから
スクレイピングの関数修正しなきゃあかんかったわ、もうちょい時間かかりそう
忍法帖と安倍晋三ガチャでエラーでる <>
◆DxPGfb7WCc <><>2023/03/26(日) 04:20:23.33 ID:ejUpuZY00副<> 上できかれたから、ここまでのソースあげておくわ、汚いよ
https://gist.github.com/dory-dd/4cef97914ce3dd45d2b3d3f4cd1b5feb <>
◆DxPGfb7WCc <><>2023/03/26(日) 04:20:59.01 ID:ejUpuZY00副<> いまここのスクレイピングの修正してる
https://gist.github.com/dory-dd/4cef97914ce3dd45d2b3d3f4cd1b5feb#file-scraper-py <>
◆DxPGfb7WCc <><>2023/03/26(日) 04:24:59.96 ID:ejUpuZY00副<> extract_thread_content_from_dat関数のところで頭が働かなくて止まってる <>
◆DxPGfb7WCc <><>2023/03/26(日) 04:28:55.67 ID:ejUpuZY00副<> scraper.pyでdatファイルをスクレイピング
db_thread_detail_data.pyで上記をDB保存
analize_thread.pyで分析用のviewを作成
index.pyでグラフを表示してる
保存と分析は結構あいまいな感じでやっちゃってるけど <>
◆DxPGfb7WCc <><>2023/03/26(日) 04:33:55.53 ID:ejUpuZY00副<> キモは
extract_thread_content_from_datのルールと
いま、mainで書き換えようとしているscrape_all_thread_contents_from_list(url)をマルチスレッドで実行すること
あとは insert_to_table1だね
他の部分は基本viewだから、あとからなんとでもなるし <>
◆DxPGfb7WCc <><>2023/03/26(日) 04:35:15.74 ID:ejUpuZY00副<> viewの作成はちょっとだけ複雑なことやろうとしてたから、sqlite3の方言SQLになっちゃってるところもあってごめん <>
◆DxPGfb7WCc <><>2023/03/26(日) 04:39:30.87 ID:ejUpuZY00副<> なんかポリシーがあると、すれば、
・スレの内容をすべて保存する
・分析は可能な限りSQLでやる
・SQLで無理な部分をpythonでやる
かなあ <>
◆DxPGfb7WCc <><>2023/03/26(日) 04:44:36.91 ID:ejUpuZY00副<> こんなん作ってると頭FAXになるよ
#fax_word = ["酸妄","在る","在るな","下民", "折れ","マンカス","だからな","どうする？","である","FAX時代","FAX氏","ノレカス","鼻ゴミ","障害者共","知恵遅れ"] <>
名無しさん＠転載禁止<><>2023/03/26(日) 04:50:31.52 ID:ejUpuZY00副<> extract_thread_content_from_dat(data)はもう配列の番号で指定しない方がいいのかなあ <>
名無しさん＠転載禁止<><>2023/03/26(日) 09:08:09.49 ID:QkiZD9RiM<> 雑やけどイッチscrapy使うつもりある？
多分サーバーへの負荷減らせるで <>
名無しさん＠転載禁止<><>2023/03/26(日) 09:12:05.49 ID:QkiZD9RiM<> エラーバンドリングしてて偉い🤗 <>
名無しさん＠転載禁止<><>2023/03/26(日) 09:13:16.07 ID:QkiZD9RiM<> scraper.pyでdatファイルをスクレイピング
db_thread_detail_data.pyで上記をDB保存
ここはscrapyで出来るから結構楽になるはずや <>
名無しさん＠転載禁止<><>2023/03/26(日) 10:15:40.32 ID:ejUpuZY00副<> >>53
そんなんあるんか、ちょっと調べてみるわ <>
名無しさん＠転載禁止<><>2023/03/27(月) 00:32:24.43 ID:k+Pn1GISM<> >>50
SQLで処理は面倒やな
そこそこ難しいものでも出来ちゃうからやりたくないんや <>
名無しさん＠転載禁止<><>2023/03/27(月) 00:32:41.75 ID:yvyyxnAt0<> 解析たまに見てるで
支援age <>
名無しさん＠転載禁止<><>2023/03/27(月) 01:42:48.42 ID:We58qZDy0副<> scrapyはちょっとでかすぎるから、とりあえず既存のコード修正で対応することにするよ
>>57
このスクリプトはワイのデスクトップPCでWSLで実行してるんや、だからPCの稼働に影響でない程度の速度を出したいから、なるべくSQLでやりたいんよ <>
名無しさん＠転載禁止<><>2023/03/27(月) 02:18:20.55 ID:k+Pn1GISM<> >>59
SQLのほうがnumpyより軽いんやな
以外やわ
あれCで書かれてるのに <>
名無しさん＠転載禁止<><>2023/03/27(月) 03:41:50.18 ID:We58qZDy0副<> あー、numpyかあ
numpyは使ってないねえ <>
名無しさん＠転載禁止<><>2023/03/27(月) 03:43:57.43 ID:We58qZDy0副<> なんとなくselectでまず抽出した方がメモリを抑えられるかと思ってたんだけど、viewだからあんま変わらないかな・・
その方がデータ層とビジネスロジック層を明確に分離できる気がして <>
名無しさん＠転載禁止<><>2023/03/27(月) 03:45:20.97 ID:We58qZDy0副<> ということは早さというか、ロジックの明快さかな？ <>
名無しさん＠転載禁止<><>2023/03/27(月) 03:45:59.62 ID:We58qZDy0副<> といっても、まだそんな高度な分析はしてないから、時系列分析程度だからという理由もある <>
名無しさん＠転載禁止<><>2023/03/27(月) 03:46:39.89 ID:We58qZDy0副<> 今後、高度な分析になったら、numpyで分析した結果をinsertする機会もあるかも <>
名無しさん＠転載禁止<><>2023/03/27(月) 03:47:21.74 ID:We58qZDy0副<> 正直子宮で考えてるから・・・子宮ないけど <>
名無しさん＠転載禁止<><>2023/03/27(月) 03:48:19.27 ID:We58qZDy0副<> やっぱり安倍晋三ガチャでエラー出る <>
名無しさん＠転載禁止<><>2023/03/27(月) 05:09:37.26 ID:We58qZDy0副<> いや、微妙に仕様違うな・・ <>
名無しさん＠転載禁止<><>2023/03/27(月) 23:29:43.69 ID:d3E2FooM0<> datファイルとかってどこかに共同で保存しとるんか？
それともスクレイピングオンリーなんか？ <>
名無しさん＠転載禁止<><>2023/03/27(月) 23:34:57.72 ID:f3ObtA+o0<> 各々が纏めて上げる場所があるとええな
getuploaderだと容量少なすぎるか？ <>
名無しさん＠転載禁止<><>2023/03/28(火) 00:17:31.36 ID:jPOGB0Uy0副<> >>69
現行はこの形式やね
https://sannan.nl/livegalileo/dat/1679922260.dat
データだけDBに保存しとる <>
名無しさん＠転載禁止<><>2023/03/28(火) 00:43:19.44 ID:jPOGB0Uy0副<> 光明が見えてきた
嫌儲もやろうと思ってたんやが、この方法だとちょっと苦しいな・・・
というか、嫌儲って4万レスあるうちの半分以上安倍晋三ガチャやないか？ <>
名無しさん＠転載禁止<><>2023/03/28(火) 01:17:02.08 ID:jPOGB0Uy0副<> ええやろ、件数調べるだけなら
実行時間は 3.737229108810425 秒です。
db_livegalileoの登録レコードは: 5489
正しい値は: 5491
一致率は:99.96357676197414% <>
名無しさん＠転載禁止<><>2023/03/28(火) 01:30:41.56 ID:jPOGB0Uy0副<> エラーが出るから大体ないように置き換え件数
[('[梨] 防G安倍晋三部2発\u3000コンマゾロ目で虚偽答弁00で山上99でビデオレター29で美しい国14でジューシー', 665), ('防G無職ニートフリーター部', 7), ('FAX特定して殺したいけど勝川は遠い', 5), ('防弾なんG文化保存部', 2)] <>
名無しさん＠転載禁止<><>2023/03/28(火) 01:32:29.93 ID:jPOGB0Uy0副<> 安倍ガチャ除けば0.2％のエラーレコードだから、まあええやろ <>
名無しさん＠転載禁止<><>2023/03/28(火) 01:32:58.02 ID:jPOGB0Uy0副<> なんUは少し事情がちがうな
[('🥺防U絵文字部🥺', 72), ('[梨] 😐ぬぇーふ', 61), ('[梨] 🥺ぷゆゆ集落🥺', 23), ('防弾遊戯王マスターデュエル部', 15), ('🏮防U酒部🏮', 14), ('[梨] キチゲ解放所', 13), ('⚾防U野球雑談総合部⚾', 6), ('［レスOK］防Uチラシの裏部', 3), ('新設しました [管理モメン★]', 2), ('防U統計部', 2), ('ぷよぷよ&テトリス部【その他パズルゲームもいいよ♥】', 2), ('【告知】忍法帖レベル4になるとレベル上げに認証が必要です [管理モメン★]', 2), ('防U 将棋部【雑談・実況・対局・リレー将棋あり】', 1), ('【ゲームから】防G割れ部総合【B-CASまで】', 1), ('BB2Cから書き込めないんだけど', 1), ('防G無職ニートフリーター部避難所', 1), ('【告知】!sub:相手の忍法帖ID\u3000で副主を指定できるので、複数人でスレを管理できます [管理モメン★]', 1)] <>
名無しさん＠転載禁止<><>2023/03/28(火) 01:34:52.36 ID:jPOGB0Uy0副<> 絵文字部とぷゆゆあたりはコマンド使いすぎてまったくとれないけど、まあしゃあないやろ・・ <>
名無しさん＠転載禁止<><>2023/03/28(火) 01:37:36.30 ID:jPOGB0Uy0副<> エラーレコード：220
db_liveuranusの登録レコードは: 3103
エラー率7％か
うーん、たぶん最大でこんなもんかな。許容したい <>
名無しさん＠転載禁止<><>2023/03/28(火) 01:38:35.07 ID:jPOGB0Uy0副<> 大体こういうスレってIDないから、分析の対象外になるんよな・・ <>
名無しさん＠転載禁止<><>2023/03/28(火) 01:42:08.51 ID:jPOGB0Uy0副<> あっ忍法帖のレベル集計とかするう？ <>
名無しさん＠転載禁止<><>2023/03/28(火) 01:52:55.34 ID:jPOGB0Uy0副<> しねーよなー <>
名無しさん＠転載禁止<><>2023/03/28(火) 01:53:20.39 ID:jPOGB0Uy0副<> ちょっと横道に逸れたけど、日付変わってからのユニークID数823だって <>
名無しさん＠転載禁止<><>2023/03/28(火) 02:11:20.61 ID:+4DUAgKrM<> >>80
結果とかそろそろ匿名化して言ったほうがいいラインに到達しつつある気がするわ
おすすめ（ワイはまだ読めてない）
https://images-fe.ssl-images-amazon.com/images/I/91t9cyxxJaL._AC_UL210_SR210,210_.jpg
https://images-fe.ssl-images-amazon.com/images/I/81lgrsYtXGL._AC_UL210_SR210,210_.jpg <>
名無しさん＠転載禁止<><>2023/03/28(火) 02:35:21.88 ID:jPOGB0Uy0副<> あ、マスキングね <>
名無しさん＠転載禁止<><>2023/03/28(火) 02:36:07.27 ID:jPOGB0Uy0副<> Error code 520だってなにこれ <>
名無しさん＠転載禁止<><>2023/03/28(火) 02:36:51.82 ID:jPOGB0Uy0副<> 不明なエラーってなんやねん
ちょっとアクセスしすぎたか <>
名無しさん＠転載禁止<><>2023/03/28(火) 02:48:48.93 ID:jPOGB0Uy0副<> うーん、急にアクセスしすぎだか <>
名無しさん＠転載禁止<><>2023/03/28(火) 02:52:45.07 ID:jPOGB0Uy0副<> gistを最新にした。とりあえずanalize_thread.pyとindex.py以外は動く <>
名無しさん＠転載禁止<><>2023/03/28(火) 02:54:13.66 ID:jPOGB0Uy0副<> https://gist.github.com/dory-dd/4cef97914ce3dd45d2b3d3f4cd1b5feb <>
名無しさん＠転載禁止<><>2023/03/28(火) 23:42:06.44 ID:jPOGB0Uy0副<> cloudflareがさぁ！
VPNがさぁ！ <>
名無しさん＠転載禁止<><>2023/03/28(火) 23:48:40.65 ID:+4DUAgKrM<> やから遅くしたりするんやで <>
名無しさん＠転載禁止<><>2023/03/28(火) 23:49:39.20 ID:+4DUAgKrM<> 現状のコードならスマホで実行出来るからルート化すりゃええんちゃうかな <>
名無しさん＠転載禁止<><>2023/03/28(火) 23:50:05.62 ID:+4DUAgKrM<> ルート化すればIP切り替えるの楽やし <>
名無しさん＠転載禁止<><>2023/03/29(水) 01:30:25.61 ID:E7woEsPx0副<> https://sannan.nl/test/read.cgi/livegalileo/1680016003/ <>
名無しさん＠転載禁止<><>2023/03/29(水) 01:32:11.90 ID:E7woEsPx0副<> テーブルの例
https://i.imgur.com/NdOjcIs.png
extract_thread_info_from_lines()の概念
https://i.imgur.com/FRKsdNF.png <>
名無しさん＠転載禁止<>!<>2023/03/29(水) 09:14:43.64 ID:ONpxV26+0<> 防弾嫌儲で統計取ってる人がいた🙄
【独自研究】防弾嫌儲、さんG移民が流れ込み書き込み数が8倍になる [ioT3★]
http://sannan.nl/test/read.cgi/news1/1680048325/ <>
名無しさん＠転載禁止<><>2023/03/29(水) 09:32:37.76 ID:Vu43BKX10<> やっぱりどこも統計部あるんだな <>
名無しさん＠転載禁止<>sage<>2023/03/29(水) 12:51:17.28 ID:8ZOtyatq0<> てか5chではやらないんか？ <>
名無しさん＠転載禁止<><>2023/03/29(水) 13:49:35.91 ID:Vu43BKX10<> 発祥が3Gだし5chはsparrowがある上にレコード数多すぎるから厳しいのでは？
まあ統計ニキ次第だけど <>
名無しさん＠転載禁止<><>2023/03/29(水) 16:43:36.96 ID:GRV1dh370<> そもそも発端が3chに勢い可視化する機能がないみたいな話じゃなかったんけ
5chにはあるから要らんって事ちゃう <>
名無しさん＠転載禁止<><>2023/03/29(水) 18:19:10.89 ID:E7woEsPx0副<> >>96
それワイだよ <>
名無しさん＠転載禁止<><>2023/03/29(水) 18:23:52.60 ID:E7woEsPx0副<> だいたい三男は全部の板に対応できるから、
G,U,嫌儲はデータとった
特に嫌儲はあんまり動きがないし、スレ保持数が多くて現状のスレだけでもかなり分析できそうだったから <>
名無しさん＠転載禁止<><>2023/03/29(水) 18:31:37.26 ID:E7woEsPx0副<> >>98
めんどうくさいし、ワイ5chみてないからあんまり興味もないかなって <>
名無しさん＠転載禁止<><>2023/03/29(水) 18:55:40.45 ID:E7woEsPx0副<> 520エラーのせいで、ついにだんGをみれなくなって草 <>
名無しさん＠転載禁止 (L1)<>sage<>2023/03/29(水) 21:27:49.92 ID:RyI334oN0<> dat取得せずに、subject.txtだけで勢力図できないものだろうか？
subject.txtだけなら、5chでも取得できるから、いろんな勢力図作れそう <>
名無しさん＠転載禁止 (L1)<><>2023/03/29(水) 21:38:53.21 ID:t6fyZQG20<> 5chの過去ログって専ブラじゃなければ普通にGETできるんやな
時間毎にsubject.txtを取得＆前回のと比較して、落ちたkeyのスレをread.cgiで過去ログ取得＆htmlをパースってやるとリアルタイム性は落ちるけどリクエストの回数減らせるから弾かれなさそうな感じ
まだ30分くらいしかぶん回してないからこの先わからんけど <>
名無しさん＠転載禁止 (L1)<>sage<>2023/03/29(水) 22:02:09.11 ID:RyI334oN0<> ほほー。もう対応してましたか。
subject.txtだけなら、10分に1度ぐらいは大丈夫じゃない？
落ちたやつは、あきらめてもいいかもしれませんね
（１０分以内のレス増加数は誤差範囲内として） <>
名無しさん＠転載禁止<><>2023/03/29(水) 23:25:06.53 ID:E7woEsPx0副<> >>105
＞subject.txtだけなら、5chでも取得できる
そうなんだ、これは知らなかった <>
名無しさん＠転載禁止<><>2023/03/29(水) 23:26:36.17 ID:E7woEsPx0副<> 弾かれるのはもう大丈夫っぽい <>
名無しさん＠転載禁止<><>2023/03/29(水) 23:28:01.96 ID:E7woEsPx0副<> なんUと嫌儲は一日一回クローニングで大丈夫そうだな <>
名無しさん＠転載禁止<><>2023/03/29(水) 23:35:11.03 ID:E7woEsPx0副<> >>105
自然言語処理が必要そうだね
統計処理だけでいけるのかな？ <>
名無しさん＠転載禁止<><>2023/03/30(木) 00:00:39.37 ID:SlgDGBHXM<> dat取得すればガチの勢力図作れるけど面倒やわ
今日はコード書けんかった <>
名無しさん＠転載禁止<><>2023/03/30(木) 00:09:20.03 ID:4I6M3wJj0副<> htmlパースはちょっとなあ・・・ <>
名無しさん＠転載禁止<><>2023/03/30(木) 00:19:50.41 ID:4I6M3wJj0副<> でも5chのsubject.txt収集は既存の関数使い回せるからいいね。テーブルを一つ用意するだけで事足りるし。こんな感じかね
CREATE TABLE IF NOT EXISTS {table_name} (
site_name varchar(10),
board_name varchar(30),
thread_key(11) NOT NULL,
thread_title varchar(256),
res_number INTEGER NOT NULL,
created_by TIMESTAMP NOT NULL,
PRIMARY KEY (thread_key, res_number)
); <>
名無しさん＠転載禁止<><>2023/03/30(木) 00:26:33.70 ID:4I6M3wJj0副<> board_name varchar(30)もいらないか。20で充分だな <>
名無しさん＠転載禁止<><>2023/03/30(木) 00:30:33.86 ID:SlgDGBHXM<> 50はgone規制あるからここみたいにクソみたいなリクエスト送ると即何も取れなくなるで <>
名無しさん＠転載禁止<><>2023/03/30(木) 00:30:57.20 ID:4I6M3wJj0副<> >>107
あと、そのままだとdatのnot foundでエラーでるよ。scraper.pyのmain処理にエラーハンドリング追加しといたからみといて
これで動いてる <>
名無しさん＠転載禁止<><>2023/03/30(木) 00:34:10.50 ID:4I6M3wJj0副<> >>116
そういえばそうだったね、前やられたことあるわ <>
名無しさん＠転載禁止 (L1)<><>2023/03/30(木) 00:55:58.31 ID:BMRAYjkT0<> 5chのgoneはUA設定してないなら設定する・UA設定してても別のUAに変えるとワンチャン乗り切れるかもしれない
勿論引っかからないのが第一だけどあんまり細かくは見てないっぽいので万が一引っかかっても次からリクエスト間隔にさえ気を付ければ最悪User-Agent:unkoなんかでも通る説が濃厚 <>
名無しさん＠転載禁止<><>2023/03/30(木) 01:43:43.09 ID:4I6M3wJj0副<> ちょっとgistだと使いづらくなってきたから整理するわ <>
名無しさん＠転載禁止 (L1)<><>2023/03/30(木) 11:00:32.38 ID:BMRAYjkT0<> >>106やけど昨晩の5Gの約6万書き込み分のデータまとめたので置いとくわ
時系列ぐちゃぐちゃやし整形もしてないけど一応試行段階でこんな感じで取れたってことで
https://dotup.org/uploda/dotup.org2965239.csv.html
ちなみに今もVPSからぶん回してるけど規制かかったりはしてなさそう <>
名無しさん＠転載禁止<><>2023/03/30(木) 18:36:28.45 ID:4I6M3wJj0副<> >>121
ええやん！自分でコード書いてたんやな！
5chと比較できると色々できるな最高やん <>
名無しさん＠転載禁止<><>2023/03/30(木) 18:38:17.57 ID:4I6M3wJj0副<> あとで精査してみるな <>
名無しさん＠転載禁止<><>2023/03/30(木) 20:07:16.28 ID:SlgDGBHXM<> スクレイピングの参考になるスレのURL知らない？
安倍晋三とかjienとかワッチョイとか <>
名無しさん＠転載禁止<><>2023/03/30(木) 20:08:24.20 ID:SlgDGBHXM<> これ下手にdatでスクレイピングするよりhtmlからパースしたほうが正確にスクレイピング出来そうだな… <>
名無しさん＠転載禁止<><>2023/03/30(木) 20:31:02.21 ID:Kt+JLYAT<> >>121
なんGやな
key,
thread_title,
res_num,
name,
email,
comment_date,
post_id,
comment,
やね、だいたいワイのと同じやね <>
名無しさん＠転載禁止<><>2023/03/30(木) 20:34:49.04 ID:SlgDGBHXM<> ここよりなんGとかのほうがコード書くの楽やな
途中の変更起こらんから <>
名無しさん＠転載禁止<><>2023/03/30(木) 21:08:36.00 ID:SlgDGBHXM<> gist消えとるな
パースの参考にしようと思ってたやんけど <>
名無しさん＠転載禁止<><>2023/03/31(金) 00:49:48.36 ID:/BzSrrF7M<> >>121
このデータpandasで読み込もうとしてるけどダブルコーテーションがついてたり付いてなかったりしてpandas君で素直に読み込んでくれなくて悲C
前処理に一番時間かかるやつやね😔 <>
名無しさん＠転載禁止<><>2023/03/31(金) 00:51:57.54 ID:/BzSrrF7M<> >>129
って書いた瞬間に上手く行くやつやね
かなC
2時間くらい消費したのに <>
名無しさん＠転載禁止<><>2023/03/31(金) 00:52:33.58 ID:/BzSrrF7M<> まあでもスレタイにカンマ使われてたら壊れるやろな <>
名無しさん＠転載禁止<><>2023/03/31(金) 01:51:07.74 ID:rQAeK7710主<> ワイも触発されてメカブまで入れてみた明後日あたりデータで遊んでみよう <>
名無しさん＠転載禁止<><>2023/03/31(金) 06:30:18.76 ID:UrnYU53k0副<> お、ワイなんGデータ洗浄したよ。
あげなおそうか <>
名無しさん＠転載禁止<><>2023/03/31(金) 06:31:08.10 ID:UrnYU53k0副<> とりあえずれこれなhttps://i.imgur.com/AU1aQmF.png <>
名無しさん＠転載禁止<><>2023/03/31(金) 06:37:00.72 ID:UrnYU53k0副<> https://anonfiles.com/h6weW4h4z4/nanG_csv <>
名無しさん＠転載禁止<><>2023/03/31(金) 07:35:00.97 ID:UrnYU53k0副<> これでdfにできてる
# カラム名の指定
columns = ["key", "thread_title", "res_num", "name", "email", "comment_date", "post_id", "comment"]
# データ型の指定
dtype = {"key": "Int64", "thread_title": str, "res_num": "Int64", "name": str, "email": str, "comment_date": str, "post_id": str, "comment": str}
# CSVファイルの読み込み
df = pd.read_csv(csv_path, names=columns, dtype=dtype, parse_dates=["comment_date"], na_values=[""])
# 欠損値の埋め方を指定
df = df.fillna({"key": 0, "res_num": 0})
# 「Over 1000」を除外
df = df[df["comment_date"] != "Over 1000"]
# comment_dateカラムを日付型に変換
df["comment_date"] = pd.to_datetime(df["comment_date"], format="%Y/%m/%d(%a) %H:%M:%S.%f") <>
名無しさん＠転載禁止<><>2023/03/31(金) 07:38:03.13 ID:/BzSrrF7M<> >>133
なんGのCSVの方は大丈夫や多分
防Gのデータ拾ってくるときのパースとかが正確にやるの面倒やなってくらいやな
スレの途中で変わるからしゃーないんやが <>
名無しさん＠転載禁止<><>2023/03/31(金) 10:08:13.47 ID:UrnYU53k0副<> https://i.imgur.com/GhfYvyh.png <>
名無しさん＠転載禁止<><>2023/03/31(金) 20:04:50.80 ID:UrnYU53k0副<> https://i.imgur.com/epyHF5w.png <>
名無しさん＠転載禁止<><>2023/03/31(金) 20:49:02.72 ID:/BzSrrF7M<> >>121
pandasで素直に取るとレス内にカンマが含まれてるとpandasのreadcsvが壊れるから
,"[^"]+,[^"]+"$
とかで該当レスの前処理してカンマを変換するなりしてくら使うとうまく行くわ
またはread_csvのerror_bad_lines=False,とかでエラーの行ガン無視か <>
名無しさん＠転載禁止<><>2023/03/31(金) 20:56:15.42 ID:/BzSrrF7M<> https://i.imgur.com/FTaDklj.png
このデータを可視化
https://dotup.org/uploda/dotup.org2965239.csv.html
青がIDで赤がスレ
IDとスレを繋いだ画像や
黒いのはスレタイの文字が重なりまくって読めない
NIKUは除去済み
一応gmlとdotに変換はしたんやが重いからおすすめしないわ
https://anonfiles.com/Z093c7iezf/_G_zip
csvからやったほうがええかな
データが一部やしなんとも言えんが立ったばっかりのアフィスレは他と繋がり少なそうなイメージやわ
次数解析とかはしてないからデータクリーニングして真ん中部分だけやりたいところやな <>
名無しさん＠転載禁止<><>2023/03/31(金) 20:59:19.54 ID:/BzSrrF7M<> >>141
配置はforce-directed placement（spring layout）で日本語やとバネ配置とか力指向配置とか言われるやつや <>
名無しさん＠転載禁止<><>2023/03/31(金) 21:00:55.16 ID:/BzSrrF7M<> dotからsvgに変換しようとしてるけど3時間くらい回しても画像一向に完成さなくて草
Google colabとか使ったほうが良かったかも知れん
普通に他のCPU空いてるから他のことは出来るけど <>
名無しさん＠転載禁止<><>2023/03/31(金) 22:23:49.66 ID:BSyB3zDf0<> さんGのログ今すぐ取れる？
あと2時間で取れるだけ取ってほしい <>
名無しさん＠転載禁止<><>2023/03/31(金) 22:25:46.43 ID:/BzSrrF7M<> >>144
ログなら簡単やけど過去ログは無理やで
もう無くなったのは取れない <>
名無しさん＠転載禁止<><>2023/03/31(金) 22:27:15.61 ID:BSyB3zDf0<> >>145
十分や
今取れるぶんだけでええ <>
名無しさん＠転載禁止<><>2023/03/31(金) 22:30:28.89 ID:/BzSrrF7M<> >>146
魚拓を取るのかログを取るのかがわからん <>
名無しさん＠転載禁止<><>2023/03/31(金) 22:35:38.97 ID:BSyB3zDf0<> >>147
すまんワイもよくわかっとらん
とりあえず取れるもんを取ってほしい <>
名無しさん＠転載禁止<><>2023/03/31(金) 22:36:24.95 ID:/BzSrrF7M<> >>148
いまスレ一覧にあるのは3分もあれば全部取れるで <>
名無しさん＠転載禁止<><>2023/03/31(金) 22:36:36.28 ID:/BzSrrF7M<> ダウンロードだけならや <>
名無しさん＠転載禁止<><>2023/03/31(金) 22:36:47.00 ID:/BzSrrF7M<> 魚拓もそんなに時間はかからん <>
名無しさん＠転載禁止<><>2023/03/31(金) 22:41:46.53 ID:BSyB3zDf0<> ありがとう <>
名無しさん＠転載禁止<><>2023/03/31(金) 22:46:21.88 ID:/BzSrrF7M<> 今ざっとURL抜き出しといたからニキも魚拓のコード走らせとくんやで
https://pastebin.com/CaEFnbju <>
名無しさん＠転載禁止<><>2023/04/02(日) 19:24:41.92 ID:FO7Vu4BeM<> スクレイピングの本体はざっくり書いたんやけどDB入れるのがよくわからんから困る <>
名無しさん＠転載禁止<><>2023/04/05(水) 13:10:05.88 ID:iCzFShzu0<> ワイは体感的に人口が減ったように感じるわ
統計的には微増なんかな <>
名無しさん＠転載禁止<><>2023/04/05(水) 13:14:22.37 ID:ypEPNXucM<> 移住直後は微増で今は減ってそうな体感 <>
名無しさん＠転載禁止<><>2023/04/05(水) 13:29:48.16 ID:iCzFShzu0<> >>156
簡潔に言えばこれ <>
名無しさん＠転載禁止<><>2023/04/07(金) 03:06:39.83 ID:mOsDRYRE0副<> これやで
https://i.imgur.com/4SAB7j1.png <>
名無しさん＠転載禁止<><>2023/04/07(金) 06:27:12.65 ID:zJkrOk1rM<> テキストマイニングのええ本知らんか？ <>
名無しさん＠転載禁止<>sage<>2023/04/07(金) 09:47:34.62 ID:/7EDf5CwM<> ワイ今年統計検定２級勉強するから😡
ちな参考書未購入 <>
名無しさん＠転載禁止<><>2023/04/07(金) 17:12:29.96 ID:mOsDRYRE0副<> >>160
ワイもちょっと考えとる
まず3級からやな、、、 <>
名無しさん＠転載禁止<><>2023/04/07(金) 17:22:19.60 ID:zJkrOk1rM<> 3級とか高校生でもないならいらんで <>
名無しさん＠転載禁止<><>2023/04/07(金) 17:26:08.50 ID:zJkrOk1r0<> 2級は2011-から2015までの過去問は絶対に回しとくんやぞ <>
名無しさん＠転載禁止<><>2023/04/07(金) 17:45:02.91 ID:mOsDRYRE0副<> >>162
ちょっと言葉の使い方気をつけた方がええで <>
名無しさん＠転載禁止<><>2023/04/07(金) 19:34:31.69 ID:zJkrOk1rM<> >>164
何がどう触れたのかわからんが気分害したならすまんな
統計検定の公式サイトの説明にもあるように「高等学校の必修科目である数学Iの「データ分析」相当の統計内容の知識と実際にそれらを身近な問題解決に活かすことが出来る統計的問題解決力を〜〜〜」とあるように内容は高校相当なんや
なんでやっても意味が薄いというか足らないからよほど数学等が苦手でないなら2級スタートをおすすめするわ
英検4級みたいな感覚 <>
名無しさん＠転載禁止<><>2023/04/07(金) 20:47:56.27 ID:mOsDRYRE0副<> >>165
ええんやで
ワイ頭悪いし、趣味やから家の近くで初歩から受けたいんや🤗 <>
名無しさん＠転載禁止<><>2023/04/07(金) 22:17:31.90 ID:zJkrOk1rM<> >>166
2級のCBT近くでやってないんか
それはどんまいやわ
とりあえず3級だろうと統計web完璧にしとけばオーバーキルできると思うで
あれは2級用やがわかりやすいやつや <>
名無しさん＠転載禁止<><>2023/04/08(土) 21:32:55.64 ID:Hx4CPqFgd<> >>158
これ統計部のやつだと聞いてやって来た
計算お疲れ様です <>
名無しさん＠転載禁止<><>2023/04/09(日) 02:50:14.15 ID:mHm9AwCp0副<> >>168
それ貼ったの多分ワイだよ🤗 <>
名無しさん＠転載禁止<><>2023/04/11(火) 09:10:03.78 ID:rwB1tVZC0副<> https://i.imgur.com/pVqgdEd.png <>
名無しさん＠転載禁止<><>2023/04/11(火) 09:13:05.38 ID:zvGKgsWv0<> 狂騒も終わったから落ち着いてきたのかな？ <>
名無しさん＠転載禁止<><>2023/04/11(火) 16:00:20.64 ID:zDXY5RDx0<> 統計部いつもようやっとるサンガツ
出来事も載ってて見やすいわね
ここ数日は大きな仕様変更がないのとリアルだと年度の切り替えとプロ野球の開幕から少し経って落ち着いたのもあるのかな <>
名無しさん＠転載禁止<><>2023/04/11(火) 23:29:18.35 ID:rwB1tVZC0副<> >>172
こちらこそサンガツ
精度が怪しいから少しずつ改修していくよ🙄 <>
名無しさん＠転載禁止<><>2023/04/12(水) 00:53:37.48 ID:NnNG4r/QM<> 時系列分析の本読んだから触りたいけどデータ集めるのめんどくさいのと3ch時代のがないから触れないわ <>
名無しさん＠転載禁止<><>2023/04/12(水) 06:15:00.82 ID:UpO9QJGZ0副<> >>174
あげる🥺👉https://anonfiles.com/b9AdEdkez2/livegalileo_all_csv <>
名無しさん＠転載禁止<><>2023/04/12(水) 06:17:23.30 ID:UpO9QJGZ0副<> あ、ごめんよく読んだら不要だった？ <>
名無しさん＠転載禁止<><>2023/04/12(水) 06:17:34.76 ID:NnNG4r/QM<> >>175
助かる <>
名無しさん＠転載禁止<><>2023/04/12(水) 06:18:51.12 ID:UpO9QJGZ0副<> データクレンジングしてねー <>
名無しさん＠転載禁止<><>2023/04/12(水) 06:19:40.23 ID:NnNG4r/QM<> datファイルは脳死でmongodbに突っ込むのが良さそうな感じ
他のことで忙しいからこっちのコード書く時間なかなか取れないけど <>
名無しさん＠転載禁止<><>2023/04/14(金) 01:56:30.95 ID:Es/z8Iz1d<> >>170
お疲れ様 <>
名無しさん＠転載禁止<><>2023/04/15(土) 00:26:10.92 ID:HOQDsQV80副<> >>180
ありがとー🤗 <>
名無しさん＠転載禁止<><>2023/04/15(土) 00:44:46.34 ID:biAbO+WfM<> >>181
この画像アップも自動化や <>
名無しさん＠転載禁止<><>2023/04/16(日) 15:10:06.61 ID:Dj4pihFe0<> 体感この1週間で人が減った気する <>
名無しさん＠転載禁止<><>2023/04/16(日) 15:24:09.81 ID:hB6Uny7o0<> 社畜部、ニーフリ部、ソシャゲ部
この辺とその他で分けるとその他のほうが減ってる気はする <>
名無しさん＠転載禁止<><>2023/04/18(火) 15:43:01.58 ID:FrgQBFYT0<> 統計の結果って何曜日に出すとか決まってる？ <>
【35日目】 <><>2023/04/18(火) 16:31:17.30 ID:Mj/Bn6NZ0<> 完全に偏見だけど3G初期中期に頑張ってネタ考えてスレ立てたりしてた人はなんPに行った印象 <>
名無しさん＠転載禁止<><>2023/04/18(火) 16:36:38.59 ID:coyu9RZz0<> 5chの障害がいつ直るかわからないし 当分人口は増えそうね <>
名無しさん＠転載禁止<><>2023/04/18(火) 18:27:07.27 ID:y81yn6wy0<> 土曜の朝とは別の障害？ <>
名無しさん＠転載禁止<><>2023/04/18(火) 18:32:17.68 ID:yX4qZdf70<> ちゃんとは見てないけどAPI鯖が逝った？っぽい
避難民かなり来てるね、次の統計が気になるわ <>
名無しさん＠転載禁止<><>2023/04/18(火) 18:34:50.70 ID:yX4qZdf70<> >>186
ワイもそう思う
なんPは大出世前のさんGを感じる <>
名無しさん＠転載禁止<><>2023/04/19(水) 08:26:12.20 ID:EpX6XjoD0<> 統計気になるよね <>
名無しさん＠転載禁止<><>2023/04/19(水) 15:58:46.16 ID:lqRFhMEk0<> 見当もつかないけどID数は普段の10〜30倍とかかな🤔 <>
名無しさん＠転載禁止<><>2023/04/22(土) 22:39:23.04 ID:u5WNmY2R0<> 保守 <>
名無しさん＠転載禁止<><>2023/04/24(月) 01:04:52.99 ID:OsDuK2L50副<> !tlv5 <>
名無しさん＠転載禁止<><>2023/04/25(火) 00:14:20.37 ID:7qwDWNLb0主<> !mirror
★スレをMIRRORモードに設定 <>
名無しさん＠転載禁止<><>2023/04/25(火) 00:22:48.01 ID:7qwDWNLb0主<> 防Uのスレ紹介BOT機能mirrorコマンドが実装されたよぉ🥺 <>
名無しさん＠転載禁止<><>2023/04/25(火) 00:23:12.30 ID:7qwDWNLb0主<> !kaijo:mirror
★MIRRORモードを解除 <>
名無しさん＠転載禁止<>sage<>2023/04/25(火) 00:24:17.09 ID:/d0SoQiO0<> 次のミラーコマンドが使われると前のミラーコマンド解除されるっぽいな
>>196がコピペされてない <>
名無しさん＠転載禁止<><>2023/04/25(火) 00:26:07.70 ID:JHsLFTDp0<> 宣伝用じゃないレスまでコピーされちゃうのは恥ずかしいからそれぐらいで良いかも <>
名無しさん＠転載禁止<>sage<>2023/04/26(水) 01:41:01.27 ID:72o0Hhn3r<> 最近動いてるのか？ <>
名無しさん＠転載禁止<><>2023/04/26(水) 09:52:45.37 ID:nGXvMxJJa<> わからんね <>
名無しさん＠転載禁止<><>2023/04/26(水) 10:35:45.14 ID:Z+ImqpgD0副<> 最近忙しくて・・・ <>
名無しさん＠転載禁止<><>2023/04/26(水) 10:36:26.31 ID:Z+ImqpgD0副<> ここはみてるよ <>
名無しさん＠転載禁止<><>2023/04/28(金) 14:57:08.47 ID:84IWZGRy0<> ワイも見てるぞ <>
名無しさん＠転載禁止<><>2023/04/29(土) 01:54:47.64 ID:jph0lgJ60<> たまに覗いてます <>
名無しさん＠転載禁止<><>2023/05/03(水) 14:46:02.30 ID:264DSLOtd<> もう統計見なくてもわかるけど結果出せないくらい減ってるんだろうなぁ… <>
名無しさん＠転載禁止<><>2023/05/04(木) 23:14:14.52 ID:dt8Dep1m0副<> ちょっと試しに動かしてみようか <>
名無しさん＠転載禁止<><>2023/05/04(木) 23:32:53.33 ID:dt8Dep1m0副<> 丸二日くらいかかりそうだけど、一応動かした。結果がちゃんと出たらここに貼る <>
名無しさん＠転載禁止<><>2023/05/05(金) 00:11:55.79 ID:IPki0jYM0<> 了解 楽しみに待ってます <>
名無しさん＠転載禁止<><>2023/05/05(金) 09:43:29.52 ID:owaKXzvd0副<> 意外とやはかった
https://i.imgur.com/CMb1lSX.png <>
名無しさん＠転載禁止<><>2023/05/05(金) 09:46:05.31 ID:owaKXzvd0副<> 安倍ガチャとか、名前欄変更とか、IDなしとかは含まれてないから、本当の数かと言われると疑問が残るけど、条件は同じだから、まあ、参考までに <>
名無しさん＠転載禁止<><>2023/05/05(金) 09:47:02.40 ID:owaKXzvd0副<> 4/18はなんG落ちてたやつかな？
すごいね。さんGでもここまでいかなかった <>
名無しさん＠転載禁止<><>2023/05/05(金) 09:51:22.75 ID:IPki0jYM0<> 野球実況で勢い1万越え達成したのその日だけだし退避民効果だろうね
昨日一昨日のレス数が減ってるのはGWだからかな <>
名無しさん＠転載禁止<><>2023/05/05(金) 10:39:02.22 ID:FAKq43pK0<> はぇ〜こんな感じなんか
!mirrorでこの情報周知はしないんけ？ <>
名無しさん＠転載禁止<><>2023/05/05(金) 10:55:09.61 ID:IPki0jYM0<> 一応統計ニキがスレ建てとる
久々に書き込み数の統計とったから、参考までに
http://sannan.nl/test/read.cgi/livegalileo/1683247839/ <>
名無しさん＠転載禁止<><>2023/05/05(金) 12:09:32.62 ID:vJeI+oPM0<> GWはやっぱり人が少ないわね <>
!mirror<><>2023/05/07(日) 09:37:32.68 ID:CUOOov4W0副<> これでええんか？ <>
名無しさん＠転載禁止<><>2023/05/07(日) 09:41:41.53 ID:S9xbFwR20<> >>217
できてる
防Gにスレ立てるほどじゃない時とか軽く周知できて便利 <>
!mirror<><>2023/05/07(日) 10:38:37.77 ID:NYkNwKj50主<> 統計部の直近の報告です
4月18日は5chAPIサーバー障害により避難民が押し寄せその後微増傾向、GWはみんなお出かけで書き込み数激減
https://i.imgur.com/CMb1lSX.png
久々に書き込み数の統計とったから、参考までに
http://kako.sannan.nl/test/read.cgi/livegalileo/1683247839/ <>
!mirror<><>2023/05/07(日) 10:39:21.97 ID:NYkNwKj50主<> みたいなね <>
!mirror<><>2023/05/07(日) 10:44:41.64 ID:NYkNwKj50主<> !mirrorされてない😡
★スレをMIRRORモードに設定 <>
名無しさん＠転載禁止<><>2023/05/07(日) 10:53:14.23 ID:NX9UCk1O0<> おつおつ
ミラーのクールタイムとかの仕様がわからないから微妙に使い勝手が悪い時あるね <>
名無しさん＠転載禁止<><>2023/05/07(日) 11:05:34.81 ID:NYkNwKj50主<> !kaijo:mirror
いつの間にかクールタイムとかあったんやね。間隔が短すぎたんか
★MIRRORモードを解除 <>
名無しさん＠転載禁止<><>2023/05/07(日) 11:24:03.97 ID:S9xbFwR20<> クールタイムの仕様は今のところどこにも記載なさそうなんよな
217が反映されてて219は反映されてないから1時間は確定っぽいけど <>
名無しさん＠転載禁止<><>2023/05/08(月) 11:03:32.00 ID:u5S5BHBr0<> 防弾嫌儲の方はどうなってるやろ
良ければ調べてもらえますか <>
!mirror<><>2023/05/09(火) 20:29:56.03 ID:csv/2AXh0主<> ここら辺でもう一度🤗
統計部の直近の報告です
4月18日は5chAPIサーバー障害により避難民が押し寄せ、その後微増傾向、GW期間はみんなお出かけで書き込み数が激減していました
https://i.imgur.com/CMb1lSX.png
出典
久々に書き込み数の統計とったから、参考までに
http://kako.sannan.nl/test/read.cgi/livegalileo/1683247839/ <>
!mirror<><>2023/05/09(火) 20:31:48.13 ID:csv/2AXh0主<> !mirror
妙だな🤔
★スレをMIRRORモードに設定 <>
!mirror<><>2023/05/09(火) 20:40:12.86 ID:csv/2AXh0主<> ダメみたいだねぇ🤥 <>
名無しさん＠転載禁止<><>2023/05/09(火) 21:00:25.55 ID:csv/2AXh0主<> いや反映されてたわ。チンクルのログ壊れて見えてないだけでした
!kaijo:mirror
★MIRRORモードを解除 <>
名無しさん＠転載禁止<><>2023/05/09(火) 21:51:59.36 ID:3etapsZP0<> やっぱりGW期間は皆出かけてたんだな <>
名無しさん＠転載禁止<><>2023/05/09(火) 23:42:26.36 ID:knK8eGRw0<> GW明けの状況も気になるわね <>
!mirror<><>2023/05/10(水) 14:13:00.77 ID:5e38k3ZW0副<> >>225
嫌儲最近やってないねぇ
ぼちぼちやってみるね
ぼんGはそのあとやってみるね <>
!mirror<><>2023/05/10(水) 14:13:56.51 ID:5e38k3ZW0副<> あらミラーつけっぱなしだった。まあいいか <>
!mirror<><>2023/05/10(水) 14:14:59.56 ID:5e38k3ZW0副<> 別に日時バッチで処理すればいいんだろうけど、いままとめる気力がないのすまんね🥺 <>
名無しさん＠転載禁止<><>2023/05/10(水) 14:45:13.15 ID:gXHrhdSha<> 気力ある時に進めてください
無茶はよくない <>
名無しさん＠転載禁止<><>2023/05/10(水) 16:07:22.49 ID:5e38k3ZW0副<> ありがとね、カクテルあげる🍸 <>
名無しさん＠転載禁止<><>2023/05/10(水) 20:17:32.14 ID:gXHrhdSh0<> ありがと🤗 <>
!mirror<><>2023/05/13(土) 08:14:48.58 ID:jPUXqFt/0主<> [統計部]防Gの過去ログ、スレ数が2万7千を超える
http://kako.sannan.nl/test/read.cgi/livegalileo/1683910514/
https://i.imgur.com/Wf0790r.png
今回はsubject.txtだけで処理してみました
日別スレ数立て数の推移
https://i.imgur.com/6S4SIb0.png
レス数推移の簡易集計
subject.txtより、スレごとのレス数をそのスレの立てられた日にカウントすることにより集計。速報版として使えるかも
https://i.imgur.com/8IfGTDv.png
csvデータ
https://pastebin.pl/view/raw/df0b08a0
スレごとのレス数の統計
中央値8
平均値37.6
IQR 4.0-18.0
最大値9404（[梨] 安倍ガチャ雑談）
https://i.imgur.com/zPtbj9v.png
1のみで落ちたスレは1089。2以下で抽出すると3564で全体の約12.9%でした <>
名無しさん＠転載禁止<><>2023/05/13(土) 08:58:42.44 ID:+GVLGlmb0副<> ようやっとる <>
名無しさん＠転載禁止<><>2023/05/13(土) 09:24:19.70 ID:3VpeeSeD0<> 管理モメンのレスする時間を集計して活動時間を分析するとかできますかね🙄
全ログ取得済みなら管理モメン☆で集計すれば分かるかな🤔 <>
名無しさん＠転載禁止<><>2023/05/13(土) 09:32:12.07 ID:LMRhSmGJ0<> 部長もようやっとるよ本当に
>>240
それは悪用されそうなので(主にFAXが不在時間を狙い撃ちする)やめた方がよろしいかと
やっぱり体感増えたというのは感覚として間違っていなかったか <>
名無しさん＠転載禁止<><>2023/05/13(土) 09:40:51.62 ID:3VpeeSeD0<> >>241
管理人も増えてるから平気じゃないかな🤔
まぁやつが死ぬまでは避けたほうがええか
また最近5ch攻撃してそうだし
Pは見てないからどうか分からんけど <>
管理モメン ★<><>2023/05/13(土) 09:43:09.75 ID:ADMIN<> 起こる時間バラバラだからなぁ <>
名無しさん＠転載禁止<><>2023/05/13(土) 09:45:53.14 ID:3VpeeSeD0<> >>243
即レスがすぎる😳
全レス巡回しとるんか😳
管理してて偉い👊😳 <>
名無しさん＠転載禁止<><>2023/05/13(土) 12:37:50.77 ID:jPUXqFt/0主<> 管理モメンに比べてだんG民が規則正し過ぎる
時間帯別スレ立て数
https://i.imgur.com/t2qcefO.png
subject.txtによる時間帯別レス数推計
https://i.imgur.com/bWE3DOa.png
20時20分にスレが立つウォッチパ部のピークが見える
現在の防弾なんGの過去ログは、27700スレに対して224MBのようでした <>
名無しさん＠転載禁止<>sage<>2023/05/13(土) 12:44:38.43 ID:u0Vp1IJs0<> うーんこの昼休み <>
名無しさん＠転載禁止<><>2023/05/13(土) 12:54:39.79 ID:F4N2WL5aM<> 平日の深夜と正午以外の昼間に勢いがない掲示板があるらしい <>
名無しさん＠転載禁止<><>2023/05/13(土) 12:57:13.26 ID:3VpeeSeD0<> 社畜の動きが見えますね…
通勤昼休み退勤時間
ウォッチパとか毎日固定でレス増えるからピークが見えるんやなぁ
0時から急激にスレ立てもレス数も落ちる
面白いねこれ😆 <>
名無しさん＠転載禁止<><>2023/05/13(土) 13:00:34.89 ID:LMRhSmGJ0<> とても規則正しい生活だなぁ <>
名無しさん＠転載禁止<><>2023/05/13(土) 20:51:05.27 ID:w8zSX3w90<> >>245
昼休みの∧草
規則正しいの分かってたけどデータでも綺麗に出るんやね
統計部いつもサンガツ😘
!send:3:ID:jPUXqFt/0主
★ID:jPUXqFt/0に3🌷を送りました。 <>
名無しさん＠転載禁止<><>2023/05/13(土) 23:46:30.31 ID:jPUXqFt/0主<> サンガツやで
【統計部】だんG民に規則正しい生活をしている社畜が多いことが統計から明らかに
http://sannan.nl/test/read.cgi/livegalileo/1683985173/
http://kako.sannan.nl/test/read.cgi/livegalileo/1683985173/
時間帯別のスレッド数
https://i.imgur.com/tgWX8iC.png
時間帯別のレス数 ※簡易集計
https://i.imgur.com/2QVU3Vb.png
5/3〜5/7のGW期間中のみ
https://i.imgur.com/lD0jwhm.png
https://i.imgur.com/d86TNVU.png
影響してそうな個別スレの抽出
11-14時
https://i.imgur.com/nCUKFYj.png
19-21時
https://i.imgur.com/0g5hSTZ.png <>
名無しさん＠転載禁止<><>2023/05/13(土) 23:47:13.73 ID:jPUXqFt/0主<> これよく見たらレス数もスレッド数に間違っとるやん <>
名無しさん＠転載禁止<><>2023/05/13(土) 23:52:55.93 ID:PLkYKLo50<> 防Ｇスヤスヤで草 <>
名無しさん＠転載禁止<><>2023/05/13(土) 23:56:06.13 ID:jPUXqFt/0主<> >>251
https://i.imgur.com/DghBFTA.png
https://i.imgur.com/VJ2GcbV.png
レス数のグラフはy軸の説明が間違ってたので修正版や
ちな解析と図作るのにワイもR使いまくっとるで！
部長はpythonとDBでやってるのかな？ <>
名無しさん＠転載禁止<><>2023/05/14(日) 18:47:41.00 ID:bvcS9Qe60副<> さすがRはグラフが綺麗な気がするね
ワイちゃんはpythonとDBだよ
なんか他の人からも違う角度で統計が出てくると部活動っぽくていいね😎 <>
名無しさん＠転載禁止<><>2023/05/14(日) 18:48:53.66 ID:bvcS9Qe60副<> 嫌儲より先になっちゃったけど、だんGのグラフだよ。本日分は無視してね。
https://i.imgur.com/rZspZFh.png <>
!mirror<><>2023/05/14(日) 19:00:12.84 ID:bvcS9Qe60副<> 防弾なんG 書き込み数（〜5/13）
https://i.imgur.com/rZspZFh.png
こうか <>
名無しさん＠転載禁止<><>2023/05/14(日) 19:13:24.23 ID:WW9p9lhI0<> 人数的には安定期に入ったのかな <>
名無しさん＠転載禁止<><>2023/05/14(日) 23:02:57.55 ID:YN3j/0c9a主<> >>257
やっぱりGW最後は盛り上がってたんだねえ <>
名無しさん＠転載禁止<><>2023/05/14(日) 23:05:54.83 ID:Yonz4/XS0<> 土曜日比較だとGW明けて人減ってるのか <>
!mirror<><>2023/05/15(月) 09:22:05.04 ID:bL6ksPtt0副<> ■防儲 書き込み統計
月別書き込み数とID
https://i.imgur.com/nHa2n8X.png
週別書き込み数
https://i.imgur.com/zdkpw1d.png
曜日別書き込み数平均
https://i.imgur.com/Fb6WUtr.png
時間別書き込み数平均
https://i.imgur.com/riRNgbm.png
※過去ログから集計しているため、現行の書き込みは反映されてません
※一部の特殊機能をつかった書き込みは集計対象外です <>
名無しさん＠転載禁止<><>2023/05/15(月) 11:53:24.92 ID:hjFlAQk+0<> 防弾嫌儲は微減位なのかな🤔 <>
名無しさん＠転載禁止<><>2023/05/15(月) 21:29:15.67 ID:SVYxD2Nu0主<> 乙
防儲もうちょっと増えてるのかと思ったけどそうでもないんやね
よく考えたらワイもちょっとスレ立てたくらいやった <>
名無しさん＠転載禁止<><>2023/05/15(月) 22:23:59.59 ID:bL6ksPtt0副<> さんG民の流入は、長期的には板の盛り上がりにはにつながってないみたいだねー <>
名無しさん＠転載禁止<>sage<>2023/05/16(火) 12:10:42.39 ID:4Lzrm+uka<> 5chおったときはかけ持っちゃんやったけどさんGの煽りのない世界になれてからはさんG系譜の板以外に行く気にならんのよな
おんも怖い🥺 <>
!mirror<><>2023/05/20(土) 21:25:19.89 ID:VZVvRQ+U0<> 移動平均を追加してみた
https://i.imgur.com/KR4K7MF.png <>
名無しさん＠転載禁止<><>2023/05/20(土) 21:27:14.77 ID:VZVvRQ+U0<> 副権限とれてるね
まあいいけど <>
名無しさん＠転載禁止<><>2023/05/20(土) 21:27:43.08 ID:lFY1x5cd0<> やっぱり避難騒動からの増加分含めて安定してるな <>
名無しさん＠転載禁止<><>2023/05/20(土) 21:47:50.43 ID:VZVvRQ+U0<> あんまり意味ないから出してないけど、
実は週の集計もあって、先週は多かった
https://i.imgur.com/7Vsc6sl.png <>
名無しさん＠転載禁止<><>2023/05/20(土) 21:49:30.81 ID:VZVvRQ+U0<> >>269
あ、ごめんこれおかしい
やっぱなしで <>
名無しさん＠転載禁止<><>2023/05/20(土) 22:42:24.78 ID:2DiMU7pA0主<> !subID:VZVvRQ+U0 <>
名無しさん＠転載禁止<><>2023/05/21(日) 08:50:52.51 ID:Ph/KlTU60<> あんまり参考にならないからID出してなかったんだけど、chid有料化以降もスパイクがあるから、これは外部要因なのでは？と思ってきた <>
名無しさん＠転載禁止<><>2023/05/21(日) 08:50:57.99 ID:Ph/KlTU60<> https://i.imgur.com/AeYkLI9.png <>
名無しさん＠転載禁止<><>2023/05/21(日) 10:22:18.30 ID:pxk4qhd30<> 直近で何度か小さな避難騒動はあったけどそこの寄与は弱そうだな
ZAQ騒動以外になにか起こってたっけ？ <>
名無しさん＠転載禁止<><>2023/05/21(日) 23:39:35.88 ID:AxSweJo00主<> あれ
!sub:ID:Ph/KlTU60
★ID:Ph/KlTU60を副主に追加 <>
名無しさん＠転載禁止<><>2023/05/21(日) 23:40:07.83 ID:AxSweJo00主<> ID数の振れ幅デカくて草 <>
名無しさん＠転載禁止<><>2023/05/22(月) 23:09:02.41 ID:B6xYibCf0<> 意外と人増えてないんやな
梨スレが有料化したのがでかいか？ <>
名無しさん＠転載禁止<><>2023/05/23(火) 11:27:04.60 ID:En1Pj6ct0<> 今日？から5G規制された人たちが防弾にやってきた <>
名無しさん＠転載禁止<><>2023/05/23(火) 19:19:02.49 ID:BR5RSWlx0副<> これ簡易的にならできるなあ
1 撃たれても動く名無し＠転載禁止[] 2023/05/23(火) 18:37:44.45 ID:pzvPAqLm0主
・うんちうんこ論争
うんち派97.1%
うんこ派2.8%
その他（糞派、大便派、うんうん派等）0.1%
・防G弾G論争
防G（ぼうG）派72.6%
弾G（だんG）派22.4%
ぼんG派3.5%
その他（男子派、蘭G派等）1.5%
・noabe/yamagami論争
noabe派99.4%
yamagami派0.6%
以上です
参考にしてください <>
名無しさん＠転載禁止<><>2023/05/24(水) 21:53:22.72 ID:2MUZGYQ80<> 前にアレの簡単な特徴語マップ？作ってたよね <>
名無しさん＠転載禁止<><>2023/05/25(木) 09:19:21.47 ID:PlybEi540副<> >>280
うん、作ってたよ
潜伏してる時にはあんまり役に立つとは思えないけど・・ <>
名無しさん＠転載禁止<><>2023/05/25(木) 09:45:10.60 ID:RCf5r30ja<> >>281
潜伏してても多少臭うには臭うけどアレはそういう小賢しさもあるから厄介なのよな
排水溝から這い上がるウジ虫みたいなしぶとさ
あの特徴語マップで執着を可視化できたのは大きな功績 <>
!mirror<><>2023/05/25(木) 17:52:24.44 ID:3iKKgGND0主<> 何の参考にもならんと思うが…
https://i.imgur.com/ybhzXWE.png
https://i.imgur.com/bLxjZfx.png
https://i.imgur.com/Fh2BXH2.png
直近のうんち/うんこスレタイを抽出、うんこ派の陰謀によりうんちが単語としてカウントされていませんが実際の出現数としてはうんち派がダブルスコア以上みたいですね <>
名無しさん＠転載禁止<><>2023/05/25(木) 20:21:40.13 ID:ghaKkM1d0<> アナル でる ひり出す やばい <>
名無しさん＠転載禁止<><>2023/05/25(木) 20:33:30.32 ID:RCf5r30j0<> うんちうんこの関連ワードとはいえインパクトが強い <>
名無しさん＠転載禁止<>sage<>2023/05/25(木) 21:45:24.02 ID:bSKhtOdO0<> 単語のラインナップが臭すぎる😰 <>
名無しさん＠転載禁止<>sage<>2023/05/25(木) 21:45:54.98 ID:bSKhtOdO0<> >>284
いれるが入ってこなくてよかったな <>
名無しさん＠転載禁止<><>2023/05/25(木) 22:21:45.96 ID:ueIWIFWF0<> payはどっから来たんやこれ草 <>
名無しさん＠転載禁止<>sage<>2023/05/25(木) 22:29:49.35 ID:bSKhtOdO0<> payはたぶんチューリップ送金コマンドや
ちのちゃんが安倍晋三よりもでかいの草 <>
名無しさん＠転載禁止<><>2023/05/26(金) 00:54:21.22 ID:zHuM6VFw0主<> payはたぶん前処理で除去しきれずスレタイに残ってたコマンドみたい <>
名無しさん＠転載禁止<><>2023/05/26(金) 07:52:28.14 ID:IrIam/V+0副<> >>283
面白いねwe <>
!mirror<><>2023/05/26(金) 10:19:58.33 ID:IrIam/V+0副<> ログから出してみると、こうなる
・うんちうんこ論争
うんち：69％
うんこ：31％
・防G弾G論争
防G（ぼうG）派：59.4%
弾G（だんG）派：40.5%
・noabe/yamagami論争
noabe派：78%
yamagami派：22% <>
名無しさん＠転載禁止<><>2023/05/26(金) 15:56:47.83 ID:zHuM6VFw0主<> 略称は案外拮抗してるンダ😳 <>
名無しさん＠転載禁止<>sage<>2023/05/26(金) 19:22:30.05 ID:q0GTg73S0<> ワイはぼんG派😡 <>
名無しさん＠転載禁止<><>2023/05/26(金) 20:23:10.82 ID:byJxuiir0<> >>292
0.1％の中にぼんGとか蘭GとかぼだGとか入ってんのか🤔 <>
名無しさん＠転載禁止<><>2023/05/26(金) 20:27:10.92 ID:v4aoFLci0<> 小数点切り下げ上げの関係だと思う
特定の単語2組抽出の割合だろうしこれ <>
名無しさん＠転載禁止<><>2023/05/26(金) 21:30:29.72 ID:IrIam/V+0副<> https://i.imgur.com/Bq8Kr9n.png
https://i.imgur.com/TzJWI6P.png <>
!mirror<><>2023/05/26(金) 21:32:30.75 ID:IrIam/V+0副<> ちょっと治安について定量分析のアイディアあるので、
なんGでスレを立てたい <>
名無しさん＠転載禁止<><>2023/05/26(金) 21:41:54.08 ID:iqiZQVjE0<> もうこの掲示板安定飛行してるんやな🙄
他に仕事やらあるとここだけでやっていける😆
多分仕事してないと日中は暇になるかも分からん <>
名無しさん＠転載禁止<><>2023/05/26(金) 21:56:41.95 ID:IrIam/V+0副<> 立てたよ
【だんG統計部】治安に関しての定量分析について [独]
現行
https://sannan.nl/test/read.cgi/livegalileo/1685105736/
過去
https://kako.sannan.nl/test/read.cgi/livegalileo/1685105736/ <>
名無しさん＠転載禁止<><>2023/05/27(土) 08:32:05.29 ID:0+sPDYXJ0主<> スレ立て数の推移
https://i.imgur.com/jUIqzO8.png <>
名無しさん＠転載禁止<><>2023/05/27(土) 11:25:55.00 ID:9hYtYtFBM<> 平日との差が出てないから時系列分析っぽくならんのよな今 <>
名無しさん＠転載禁止<><>2023/05/27(土) 12:02:43.95 ID:0+sPDYXJ0主<> 【だんG統計部】💩に関しての定量分析について [独] [実]
http://sannan.nl/test/read.cgi/livegalileo/1685156435/
http://kako.sannan.nl/test/read.cgi/livegalileo/1685156435/
たてました🙋♂ <>
名無しさん＠転載禁止<><>2023/05/27(土) 13:40:12.38 ID:0+sPDYXJ0主<> このくらいなら管理モメンにも怒られなさそうなので、解析に使ったデータとRスクリプトをあげてみた
前Rに興味ありそうな部員がいたので
anonfilesに上げたので広告ブロック推奨
下処理済のスレタイ一覧csvファイル
https://anonfiles.com/t7l9J4t5za/unchi_threads_csv
解析用Rファイル
https://anonfiles.com/Tdh5K3t1za/boudan2_R
csvの説明
"dat_file"datファイル名、"title"スレタイ、"num_replies"レス数、"date"スレ立て日時 "day" 年月日、"hour"時間、"wday"曜日、"土日"土日が1、他は0、"month"月、"week"第何週かiso week、"呼称"スレタイにうんち/うんこ/うんちANDうんこが含まれているか、"unchi"うんちを含めばTRUE、"unko" うんこを含めばTRUE
グループ別のスレッド数集計済のcsvファイル
https://anonfiles.com/ral7Jft9zb/daily_unchi_csv
https://anonfiles.com/sel1J3taz8/weekly_unchi_csv
Rスクリプトはスレタイ一覧ファイルで処理済の部分はコメントアウトあり
実行するときはカレントディレクトリを揃えるかファイル名のパス指定を変更で
R studioでブロックごとに逐次実行すればグラフと集計済のcsvファイルが作れるはず <>
名無しさん＠転載禁止<><>2023/05/28(日) 17:10:11.06 ID:5Dlzegxa0副<> ほーい
https://i.imgur.com/opI0GT2.png <>
名無しさん＠転載禁止<><>2023/05/28(日) 17:10:29.37 ID:5Dlzegxa0副<> tian = ["ちくちく", "治安", "荒れ", "自治"]
tikutiku = ["くっさ","ガイジ","ハッタショ","発達","発達障害","対立","対立煽り","FAX","通報","安倍晋三になれ","過疎","キッモ","キショ","キモ","つまらん","死ね","氏ね","しね","あっそ","だから","きもちわり","逃亡","帰れ","かえれ","つまんね","つまんない"] <>
名無しさん＠転載禁止<><>2023/05/28(日) 17:23:25.51 ID:5DlzegxaM副<> ・副部長の提案はうまくいかなかった。提案どおりにすると、書き込み数と完璧に同じ傾向になる
・ワードリスト少し更新した
・全期間出してみた
・いくつかの指標と連動してるか確認したが、そうでもなさそうだった
以上から
・治安は拮抗状態の上に成り立っており、きっかけがあると急に悪化するのか？（ボラティリティが高そう）下げ圧力を測る必要がある？
・拮抗状態だと仮定すると、ちくちく対ふわふわで指標とするべきか？
・全体的にこの試みはうまくいってなさそう。ワードリストに問題がありそう <>
名無しさん＠転載禁止<><>2023/05/28(日) 17:24:38.41 ID:5DlzegxaM副<> 市場の恐怖指数が参考になるかも？ <>
名無しさん＠転載禁止<><>2023/05/28(日) 17:32:57.85 ID:5Dlzegxa0副<> ・自然言語解析で感情分析やるのが1番簡単そう
・板を感情市場だと捉えるのは興味深いが、結局車輪の再発明になりそうで、労多く益が少なそうに感じる <>
名無しさん＠転載禁止<><>2023/05/28(日) 23:22:48.33 ID:Gg/8RZGQ0主<> 乙
ボラリティ、変動の大きさが体感に影響してそうなのはあり得そう
思いつきなんだけどワードとしてあぼ〜ん、あぼーん？は例のあれや通報が通ったレスとしてシグナルにならないかな <>
名無しさん＠転載禁止<><>2023/05/28(日) 23:30:03.90 ID:Gg/8RZGQ0主<> 手元にdatファイルは溜まったけどプログラミングがクソ雑魚なのでChatGPT君にパースしてくれるようお願いしてる🥺 <>
名無しさん＠転載禁止<><>2023/05/29(月) 00:22:22.74 ID:yRbwBSUH0<> 社畜スレvsニーフリみたいな感じで常駐スレの相関と得意性みたいなのは見れたりするん？ <>
名無しさん＠転載禁止<><>2023/05/29(月) 02:38:09.31 ID:I1uTQfGZ0主<> とあるチクチクしたなあと感じたスレ2つからのテキストマイニング
あんまり広めるのもあれだからここに画像まとめといた
https://imgur.com/a/636TwFR
個別性の高そうなワードはマスキング済
ワードクラウドは出現頻度順
“自治”は6回使われていたので自治スレ寄りかも
荒らす、煽る、荒れる、叩くなどの動詞に加えて言う、言われる、言いたい、思うといった心情の表明する言葉が多く使われている傾向
「おる、おった」は治安への言及として使われやすいワード
「立つ、立てる、立ってる」は「スレ」と組み合わせて使われ、同様に治安への言及や評価や議論が多かった
管理モメン、安倍晋三あたりは規制系への言及。通報、規制も同様
シンプルに「悪い、悪く」のような表現もポジ/ネガに関わらず使われていた
センチメント分析としては
[ポジティブ3.2%、ネガティブ43.6%、中立53.2%]
[怒り83.6%、悲しみ62.5%]と概ね主観的な印象通り <>
名無しさん＠転載禁止<><>2023/05/29(月) 02:45:59.40 ID:I1uTQfGZ0主<> 画像はURLからブラウザで開いてね
そろそろローカルでテキストマイニング環境整えたい🥺 <>
!mirror<><>2023/05/29(月) 05:57:13.25 ID:I1uTQfGZ0主<> ゆめちゃん🤥vs社畜vsニーフリスレの投稿数推移の比較だよぉ🥺
https://i.imgur.com/tssIlRN.png
時間帯別分析
https://i.imgur.com/mpi7Qbd.png
スレタイに社畜ANDニートを含むスレを除外して、
”ゆめちゃん”、”社畜”、”フリーター”の順に抽出&グループ分けしたよぉ🥺 <>
名無しさん＠転載禁止<><>2023/05/29(月) 10:35:58.40 ID:8ZsizGPVM副<> >>313
ありがとなンダ
これをワードリストに入れたら、前よりよくなったンダ <>
!mirror<><>2023/05/29(月) 10:46:01.00 ID:8ZsizGPV0副<> tian = ["通報", "規制", "言う", "思う", "自治"]
tikutiku = ["荒らす", "煽る", "叩く"]
https://i.imgur.com/RYXRXHN.png
なんとなく体感的なものに近くなったような気がするンダ <>
!mirror<><>2023/05/29(月) 10:48:41.34 ID:8ZsizGPV0副<> 単独IDと相関係数 0.02817664
体感治安とちくちく言葉相関係数 0.999665082
ID数と治安係数相関 -0.43741459
書き込み数30日移動平均と治安係数移動平均相関 -0.657622345 <>
名無しさん＠転載禁止<><>2023/05/29(月) 11:08:00.95 ID:MyomGI5ka<> ID=ユーザが多くなると体感の治安が悪くなるのは体感として間違ってはいないのか <>
名無しさん＠転載禁止<><>2023/05/29(月) 11:30:21.73 ID:yRbwBSUH0<> おぉありがとう土日に落ちるあたり社畜の健全性わかって草
追加で悪いんだけどその3つでテキストマイニングも頼んでいい？ <>
名無しさん＠転載禁止<><>2023/05/29(月) 11:32:12.44 ID:yRbwBSUH0<> 社畜スレに自由業民も入ってて社畜ってなんやろってのがよく分からんくなったんよ
ニーフリとの違いが解ったら言語化出来るかなって <>
名無しさん＠転載禁止<><>2023/05/29(月) 12:45:30.34 ID:2WT+RwMSM<> >>318
相関係数とかはちゃんと信頼区間かp値出さないとあかん気がしなくもない <>
名無しさん＠転載禁止<><>2023/05/29(月) 12:45:45.51 ID:2WT+RwMSM<> 自動で出るはずや <>
名無しさん＠転載禁止<><>2023/05/29(月) 13:00:47.12 ID:8ZsizGPV0副<> >>322
そろそろRでやらんとね・・ <>
名無しさん＠転載禁止<><>2023/05/29(月) 13:05:31.60 ID:2WT+RwMSM<> >>324
pwrとか普通にpythonでもできるはずやで
完全な自動ではないけど <>
名無しさん＠転載禁止<><>2023/05/29(月) 13:05:32.20 ID:8ZsizGPV0副<> 治安とは逆向きに、ポジティブな感情を測るために草を指数にしてみたんだけど、
>>317と同じような傾向なンダ
単発ID率と負の相関がありそうで、色々考えられて面白いンダ <>
名無しさん＠転載禁止<><>2023/05/29(月) 13:06:32.54 ID:8ZsizGPV0副<> >>325
あれこれ試行錯誤してるから、収集だけPythonで、集計はEXCELでやってるンダ <>
名無しさん＠転載禁止<><>2023/05/29(月) 13:09:04.13 ID:2WT+RwMSM<> statsmodelsでp値出せるで
>>327
エクセルでもできなくはないやろうけどだるいやろな <>
名無しさん＠転載禁止<><>2023/05/29(月) 13:27:28.94 ID:I1uTQfGZ0主<> 普段どのスレも見ないから分からないけどニーフリ梨スレが消えて以降いくらかゆめちゃん🤥に吸収されてる？
>>320
多分量多く読み込まなないといけなくて外部サービスに頼るのは難しいからテキストマイニングは少し待ってねえ <>
名無しさん＠転載禁止<><>2023/05/29(月) 13:49:10.71 ID:v4fBwV79H<> >>316
はえー両パラメータで散布図にしてほしい <>
名無しさん＠転載禁止<><>2023/05/29(月) 14:42:26.30 ID:E4KWgmzcd<> 統計部のスレ面白いわ
お気に入り登録させてもらうやで <>
名無しさん＠転載禁止<><>2023/05/29(月) 15:35:40.02 ID:I1uTQfGZ0主<> >>303の画像だけここにも貼っておくンダ
スレタイにおけるうんちうんこ論争
https://i.imgur.com/av0NWVa.png
💩関連スレッド数の推移
https://i.imgur.com/u88ETqh.png
週ごとに集計
https://i.imgur.com/msXeQgV.png
スレタイサンプル
管理モメン
https://i.imgur.com/CCcm5zg.png
派閥抗争
https://i.imgur.com/oXp5jyD.png
安倍晋三
https://i.imgur.com/2kf5STi.png <>
名無しさん＠転載禁止<><>2023/05/29(月) 22:40:07.44 ID:I1uTQfGZ0主<> >>317
単純に一致したワードで検索かけるなら動詞や形容詞は活用形も入れた方がいいかも
形態素解析で出てきた上位の単語はいろんな活用形のがひとまとめにされてるから <>
名無しさん＠転載禁止<><>2023/05/29(月) 22:46:27.91 ID:8ZsizGPV0副<> とりあえずほーい
https://i.imgur.com/4OsWejj.png <>
名無しさん＠転載禁止<><>2023/05/29(月) 22:47:10.56 ID:8ZsizGPV0副<> https://i.imgur.com/ZPruEPa.png <>
名無しさん＠転載禁止<><>2023/05/29(月) 22:59:56.73 ID:I1uTQfGZ0主<> 草率で草
単発ID率との関係も興味深い <>
名無しさん＠転載禁止<><>2023/06/01(木) 11:09:41.47 ID:e1Cxt7Sxa<> そういえば↓のスレに無断転載されてる
お前らが防弾なんGに来ない理由、ガチで謎wlwlwllwlwlwl
https://nova.5ch.net/test/read.cgi/livegalileo/1685570695/
86 それでも動く名無し 2023/06/01(木) 07:36:38.76 ID:qYT2dW2Ka
でも治安は下がってるらしいで
317 !mirror 2023/05/29(月) 10:46:01.00 ID:8ZsizGPV0副
tian = ["通報", "規制", "言う", "思う", "自治"]
tikutiku = ["荒らす", "煽る", "叩く"]
https://i.imgur.com/RYXRXHN.png
なんとなく体感的なものに近くなったような気がするンダ <>
名無しさん＠転載禁止<><>2023/06/01(木) 11:12:05.44 ID:e1Cxt7Sxa<> こういうのって統計部としてどう対応する
末尾同じだけど誓って転載はしていません <>
名無しさん＠転載禁止<><>2023/06/01(木) 12:58:31.34 ID:k7/DUcYa0<> 画像ごと転載されてるなら著作権者名乗れるから通報しやすいと思うよ <>
名無しさん＠転載禁止<><>2023/06/01(木) 18:57:41.52 ID:rt7RMA0l0主<> とりあえずなんかウォーターマーク的なの入れとくか <>
名無しさん＠転載禁止<><>2023/06/01(木) 22:34:03.97 ID:c+mFMVCT0副<> >>337
あーそれオラも見た。
やめてほしいンダ
ウォーターマーク入れるのは簡単だけど、
見づらくなるンダ <>
名無しさん＠転載禁止<><>2023/06/01(木) 23:52:28.18 ID:rt7RMA0l0主<> ggplot2でのメモ
labs(caption="ここに入れる")か
annotate(geom="text", label=“ここに入れる”, でいろいろ調整
前者くらいでも十分かな <>
名無しさん＠転載禁止<><>2023/06/02(金) 09:15:08.81 ID:1tWfTo7ma<> >>341
こういうことやられると今後無断転載禁止等ウォーターマーク入れるしかないのかもしれない
視認性低下は避けられないのだけど… <>
名無しさん＠転載禁止<><>2023/06/02(金) 09:18:30.63 ID:yAhrr7Pp0<> 今のところ唯一と言っていい具体的なデータだから悪意なくとも引用されてしまうだろうね <>
名無しさん＠転載禁止<><>2023/06/02(金) 12:55:52.20 ID:g3xWFlZZa<> 無断転載禁止だけじゃなくてなんGに転載禁止って具体的に併記しても良いんじゃない？ <>
名無しさん＠転載禁止<><>2023/06/04(日) 19:42:33.82 ID:K0aUe1+30副<> https://i.imgur.com/1XD3iWC.png
https://i.imgur.com/AAZ4cgt.png
https://i.imgur.com/nTlRzYT.png <>
名無しさん＠転載禁止<><>2023/06/06(火) 02:02:53.78 ID:Q/AFZUuV0副<> >>322
出してみた
data: kusa and tandoku_id
t = -4.5715, df = 65, p-value = 2.226e-05
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
-0.6557619 -0.2870519
sample estimates:
cor
-0.4932498 <>
名無しさん＠転載禁止<><>2023/06/06(火) 02:04:22.59 ID:Q/AFZUuV0副<> >>326は>>347について <>
名無しさん＠転載禁止<><>2023/06/06(火) 02:10:14.84 ID:Q/AFZUuV0副<> https://i.imgur.com/vHKn2G7.jpg <>
名無しさん＠転載禁止<><>2023/06/06(火) 02:31:56.41 ID:Q/AFZUuV0副<> ID数と治安
data: ids and tian
t = 6.6207, df = 65, p-value = 8.074e-09
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
0.4653638 0.7591167
sample estimates:
cor
0.6346306 https://i.imgur.com/z0avkwo.jpg <>
名無しさん＠転載禁止<><>2023/06/06(火) 02:33:13.65 ID:qdwD+1c9H<> やっぱり散布図はええなあ
単位と意味を添えてくれると絶頂しそう <>
名無しさん＠転載禁止<><>2023/06/06(火) 02:38:50.17 ID:Q/AFZUuV0副<> ID数とちくちく言葉
data: ids and tikutiku
t = 6.6587, df = 65, p-value = 6.924e-09
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
0.4682121 0.7606556
sample estimates:
cor
0.6368006
https://i.imgur.com/vAeKr8e.jpg <>
名無しさん＠転載禁止<><>2023/06/06(火) 02:51:51.03 ID:V7elKlqbM<> >>352
これ√xみたいな感じのほぼ収束する関数取っとるように見えるわ <>
名無しさん＠転載禁止<><>2023/06/06(火) 02:54:23.25 ID:Q/AFZUuV0副<> 言ってる意味がよくわからないけど、ちくちく言葉は書き込み数で割って1書き込み数あたりにしてるのが何か問題かな <>
名無しさん＠転載禁止<><>2023/06/06(火) 02:58:43.56 ID:Q/AFZUuV0副<> 書き込み数：ID数：書き込み数/ちくちく言葉
こういう関係にはなっている <>
名無しさん＠転載禁止<><>2023/06/06(火) 02:59:28.11 ID:Q/AFZUuV0副<> 数学的になんていうかわからないけど、自己言及的でトートロジーに陥ってるから、何も説明してない、みたいな感じ？ <>
名無しさん＠転載禁止<><>2023/06/06(火) 03:00:41.61 ID:Q/AFZUuV0副<> それは実はずっと感じてる
だからたぶんこのあたりは無視して
>>347だけが意味ありそう <>
名無しさん＠転載禁止<><>2023/06/06(火) 03:06:04.72 ID:Q/AFZUuV0副<> なんとなく最近、統計学という分野の魅力がわかってきた。手法そのものというよりは、結果に解釈が必要な部分ではあるけど
英語翻訳みたいに文脈と行間を読むところに感性が必要なのがいい <>
名無しさん＠転載禁止<><>2023/06/07(水) 11:38:44.41 ID:GL1kNNvpa<> この調子でがんばってください
!pay:30:ID:Q/AFZUuV0副
★ID:Q/AFZUuV0に30🌷を送りました。 <>
名無しさん＠転載禁止<><>2023/06/07(水) 19:21:33.27 ID:Cd9/O5GI0副<> >>359
いっぱいくれた。
ありがと🤗 <>
名無しさん＠転載禁止<><>2023/06/07(水) 19:34:25.31 ID:zoPpuO3y0主<> >>354
あるところまではID数が増加するとちくちく言葉率？も増加するけど、ID数が一定の数以上の場合、ちくちく率は特定の範囲内に収束しそうということじゃなかろうか <>
名無しさん＠転載禁止<><>2023/06/07(水) 20:09:55.70 ID:Cd9/O5GI0副<> >>361
解説サンガツ <>
名無しさん＠転載禁止<><>2023/06/07(水) 20:12:51.07 ID:Cd9/O5GI0副<> 数字と、体感的を総合すると
・人は増えてるが、そこまで増えてない
・体感的にちくちく言葉が増えているように感じる
・やっぱりちくちく言葉の増加率が体感と関係あるのか <>
名無しさん＠転載禁止<><>2023/06/08(木) 22:31:35.98 ID:xU6uzFSY0主<> はえ〜学生意外と多いんや
だんGアンケート部 (随時更新受付中)
http://sannan.nl/test/read.cgi/livegalileo/1686228790/
http://kako.sannan.nl/test/read.cgi/livegalileo/1686228790/
防人の年齢層調査結果
http://kako.sannan.nl/test/read.cgi/livegalileo/1685641490/ <>
名無しさん＠転載禁止<><>2023/06/08(木) 23:09:11.57 ID:y8S6g4jG0<> 学生確かにちょくちょく見かけると思ったけどかなりいるもんだな <>
名無しさん＠転載禁止<><>2023/06/10(土) 21:12:07.12 ID:bw5EjtDm0<> 治安と通報の件数ってグラフにしたら相関出るのかな？ <>
名無しさん＠転載禁止<><>2023/06/10(土) 22:21:01.17 ID:UErKAecS0副<> >>366
なるほど。そういう答え合わせができるね <>
名無しさん＠転載禁止<><>2023/06/11(日) 15:45:30.77 ID:kj9a8RVu0副<> とりあえず通報をパースできるようになった。https://i.imgur.com/x5NYJWC.png <>
名無しさん＠転載禁止<><>2023/06/11(日) 15:49:19.13 ID:kj9a8RVu0副<> 忍法帖IDがも取得してるので、ランキングも出せる
■通報回数ランキング
Rank 1: Count=22
Rank 2: Count=16
Rank 3: Count=16
Rank 4: Count=15
Rank 5: Count=12
Rank 6: Count=10
Rank 7: Count=9
Rank 8: Count=9
Rank 9: Count=7
Rank 10: Count=7 <>
名無しさん＠転載禁止<><>2023/06/11(日) 15:51:59.00 ID:kj9a8RVu0副<> ちなみに1位は4日間で22回通報してる
内容は殆どがFAX関連 <>
名無しさん＠転載禁止<>sage<>2023/06/11(日) 15:55:59.34 ID:AfDeifria<> >>368
おお <>
名無しさん＠転載禁止<><>2023/06/11(日) 15:56:31.32 ID:kj9a8RVu0副<> 通報ユーザ数は466（ユーザフォームのみ）
Min. 1st Qu. Median Mean 3rd Qu. Max.
1.000 1.000 1.000 2.036 2.000 22.000 <>
名無しさん＠転載禁止<><>2023/06/11(日) 16:08:24.78 ID:kj9a8RVu0副<> 一応ヒストグラム
https://i.imgur.com/VKOBPiw.jpg <>
名無しさん＠転載禁止<>sage<>2023/06/11(日) 16:09:50.76 ID:GGbxfvggH<> はえー
住民数と比例しとるんやろか
してなければどこかのタイミングで急に荒れて通報増えてきたとか <>
名無しさん＠転載禁止<><>2023/06/11(日) 16:11:19.00 ID:kj9a8RVu0副<> https://i.imgur.com/8UbQjIu.jpg
ちょっとだけみやすくした
まあ見るまでもないけど <>
名無しさん＠転載禁止<><>2023/06/11(日) 16:13:40.35 ID:kj9a8RVu0副<> >>374
そのあたりの相関とかはあとで出すね
Rが上手く使えない <>
名無しさん＠転載禁止<><>2023/06/11(日) 16:14:06.70 ID:k1dDi1gF0<> やっぱりここのところ通報異様に多かったよね <>
名無しさん＠転載禁止<><>2023/06/11(日) 16:15:04.96 ID:kj9a8RVu0副<> >>377
6/2から急に増えた感じあるね <>
名無しさん＠転載禁止<><>2023/06/11(日) 16:25:39.65 ID:kj9a8RVu0副<> 3/18〜今日までで通報フォームから通報されたのは1207件。うちだんGが949件 <>
名無しさん＠転載禁止<><>2023/06/11(日) 16:27:40.38 ID:kj9a8RVu0副<> 単純に考えると三男の管理労力の78％はだんG関連というわけか <>
名無しさん＠転載禁止<><>2023/06/11(日) 16:35:15.11 ID:kj9a8RVu0副<> 先週から急に通報増えたのは、LRの追加のせいもありそうだなあ <>
名無しさん＠転載禁止<><>2023/06/11(日) 20:08:03.64 ID:kj9a8RVu0副<> https://i.imgur.com/qiCBWOX.png <>
名無しさん＠転載禁止<><>2023/06/11(日) 20:22:56.75 ID:YMtjIDUa0<> 2日ってなんかあったっけ？ <>
名無しさん＠転載禁止<><>2023/06/11(日) 20:36:07.02 ID:kj9a8RVu0副<> 【統計部】通報スレの通報理由ランキングトップ10 [独]
https://kako.sannan.nl/test/read.cgi/livegalileo/1686480784/ <>
名無しさん＠転載禁止<><>2023/06/11(日) 20:49:57.48 ID:kj9a8RVu0副<> https://i.imgur.com/O3HSEf3.png
https://i.imgur.com/bW5nM6A.png
https://i.imgur.com/f9nz3b1.png <>
名無しさん＠転載禁止<><>2023/06/11(日) 21:43:55.34 ID:sKeeWZg7d<> ID数が減って若干書き込みが増えつつある？
誤差の範囲だろうか <>
名無しさん＠転載禁止<><>2023/06/11(日) 22:49:42.11 ID:3y3kI6I90<> ここしばらく部スレが毎日のように立ってたからそれが影響してるのかな？
アモアス、フォールガイズとか数百レス行くのを一週間に数回あると2万のうち占める割合は結構でかい <>
名無しさん＠転載禁止<><>2023/06/11(日) 22:53:46.15 ID:k1dDi1gF0<> 単に安定しつつあるのだろうと思う <>
名無しさん＠転載禁止<><>2023/06/13(火) 00:19:30.41 ID:2AVInQ660副<> 賛否のあるテーマのスレで、賛成と反対を可視化するには自然言語処理するしかないのかなあ <>
名無しさん＠転載禁止<><>2023/06/14(水) 00:17:20.87 ID:EideWsGn0副<> https://i.imgur.com/kfwOlkP.png <>
!mirror<><>2023/06/14(水) 01:27:55.04 ID:eQcNMt7q0主<> https://i.imgur.com/O3HSEf3.png
https://i.imgur.com/bW5nM6A.png
https://i.imgur.com/f9nz3b1.png
https://i.imgur.com/kfwOlkP.png
当スレ385, 390より転載 <>
名無しさん＠転載禁止<><>2023/06/14(水) 01:48:03.35 ID:OcOtW08KH<> おつ
レス数の微増に対して通報数の急増が気になるわね
日によって跳ねてるから荒れやすい話題がポツポツ増えてきたのかな <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:00:32.45 ID:EideWsGn0副<> https://i.imgur.com/AaE3WWG.jpg
data: tikutiku and report_count
t = 4.2642, df = 64, p-value = 6.74e-05
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
0.2576769 0.6395920
sample estimates:
cor
0.4703742 <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:00:58.10 ID:EideWsGn0副<> ↑通報数とちくちく言葉 <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:02:03.40 ID:EideWsGn0副<> 書き込み数と通報件数
https://i.imgur.com/viwVhZq.jpg
Pearson's product-moment correlation
data: kakikomi and report_count
t = 4.2644, df = 64, p-value = 6.735e-05
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
0.2576998 0.6396065
sample estimates:
cor
0.4703933 <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:04:37.22 ID:EideWsGn0副<> 使用したデータはこちら
4/18は外れ値として外してある <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:04:44.85 ID:EideWsGn0副<> https://anonfiles.com/w2J08bwfze/_csv <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:08:14.10 ID:EideWsGn0副<> https://i.imgur.com/sI7bRwt.png
通報件数みやすくしてある <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:14:31.06 ID:EideWsGn0副<> 通報スレは、フォームから通報機能のおかげでほぼ完全にパースできるし、忍法帖必須だから分析のやり甲斐があるね
水曜日を起点にして、直近一週間の多重通報ユーザ率とか出しても面白いかもね <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:21:25.93 ID:XgUByDESM<> >>395
対数グラフでプロットしてそれで相関係数取ってみ <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:21:31.73 ID:EideWsGn0副<> 通報スレの通算の期間からは、特にユーザ別書き込み分布と大差ないように思える
つまり、通報するユーザはごく一部で、その分布は書き込みのヘビーユーザーと同じで、同じ層が通報してると考えると自然
結論としては、いわゆる通報厨=ヘビーユーザーの関係が推定できる <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:22:14.53 ID:EideWsGn0副<> >>400
難しいこと言うなあ <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:23:15.14 ID:XgUByDESM<> >>402
単純
y=a+b log x
でやるだけや <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:24:35.02 ID:XgUByDESM<> とりあえずx軸logった状態でプロットしてみ
そこそこ面白いもん出てくるかも知れんで <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:30:32.84 ID:EideWsGn0副<> https://i.imgur.com/myYgzj2.jpg
こうかな <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:32:05.38 ID:EideWsGn0副<> Pearson's product-moment correlation
data: log_kakikomi and report_count
t = 3.3123, df = 64, p-value = 0.001525
alternative hypothesis: true correlation is not equal to 0
95 percent confidence interval:
0.1548489 0.5716492
sample estimates:
cor
0.3825444 <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:33:11.17 ID:EideWsGn0副<> もう寝るよ😡
寝ないけど <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:34:52.74 ID:EideWsGn0副<> >>391
ありがとう
なんだか最近限界が見えてきて、勝手に部長の自然言語処理のローカル環境に期待を寄せているよ🤗 <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:35:50.79 ID:EideWsGn0副<> あと70万のPC買った人の参加も期待してるよ🤗 <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:39:43.72 ID:XgUByDESM<> >>405
あってるけどだめか
最初のプロットをなんとか斜めの直線状にしたかったんや
そうすることでその式が適切ならば予想がつくからや <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:41:24.52 ID:XgUByDESM<> https://i.imgur.com/f9nz3b1.png
とか社畜スレとかを時系列分析するのは多分楽しいと思うけど自力でスクレイピングするのがだるくてやれてないわ <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:41:57.29 ID:EideWsGn0副<> >>410
なるほどね、書き込み数は安定してるからねー4/18を確認したけど、追加したとしてもあんまり影響なさそう <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:42:14.05 ID:XgUByDESM<> 因果推論の本ちゃんと読みたいけどまっっっったく読む時間なくて辛い
そこにより詳しくいい感じのことが書いてあると思うわ <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:43:44.09 ID:XgUByDESM<> ベイズでランダムウォーク入れてstanでほわーーーって予測させて書いてもええんやけど面白みないしこっちのやりたかできれいに行ったら気持ちいいからそれが出来たらなぁ <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:47:19.20 ID:EideWsGn0副<> 社畜スレは同じ形式でスレが続いてるから、やりやすいかな。書き込み内容は無視して、メタ分析のみに絞ればそんな難しくはないかな <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:52:55.78 ID:eQcNMt7q0主<> >>408
いつの間にか部長に昇格されてて草
ワードクラウド作るところまでやって止まってた🥺
頑張れば機械学習で判別とかできそうなんやけど
あとdatの処理であぼーんとかイレギュラーなレスがうまくパース出来てなかったり
時間あればRの統計処理とggplot講座のスレでもやりたいなあ <>
名無しさん＠転載禁止<><>2023/06/14(水) 02:56:35.63 ID:EideWsGn0副<> >>416
副部長だっけw
ネガポジ判定って深層学習なのかな？
>>389やりたいんだよね
パースは対象を教えてくれれば、テキストは渡せるようにやってみる <>
名無しさん＠転載禁止<><>2023/06/14(水) 03:04:20.72 ID:EideWsGn0副<> 自分でやればいいのか！
オラも自分で環境作る、そのうち <>
名無しさん＠転載禁止<><>2023/06/14(水) 03:08:26.00 ID:OcOtW08KH<> 対数でもなけりゃ二次関数とかどうやろか <>
名無しさん＠転載禁止<><>2023/06/14(水) 03:09:07.29 ID:eQcNMt7q0主<> ./dat/以下のdatファイルを逐一読み込んで、ファイル名、スレタイ、レスの番号、名前、時刻、本文もろもろを1レス1行のCSVにまとめるような感じにしてるんやけど
たぶんイレギュラーなレスがレス番ごとすっ飛ばされちゃってる
テキスト抽出くらいなら無視しても大丈夫かなとは思うんだけど <>
名無しさん＠転載禁止<><>2023/06/14(水) 03:09:14.53 ID:OcOtW08KH<> 書き込み数少ない時のデータが不十分か <>
名無しさん＠転載禁止<><>2023/06/14(水) 04:04:58.11 ID:eQcNMt7q0主<> データは5/25まで？合ってるかなこれ
https://i.imgur.com/vPNYmio.png
https://i.imgur.com/eVqivTp.png
https://i.imgur.com/mgICWeK.png <>
名無しさん＠転載禁止<><>2023/06/14(水) 04:08:56.04 ID:eQcNMt7q0主<> ちなみに6月2日はFAXのマルチポストによる通報が多かった
うんさくにも多数あぼーんの痕跡が <>
名無しさん＠転載禁止<><>2023/06/14(水) 12:28:35.05 ID:EideWsGnM副<> >>420
オラもそんな感じでやってる
>>422
いいね <>
名無しさん＠転載禁止<><>2023/06/14(水) 12:40:41.46 ID:hYjXtzFLa<> 3枚目のグラフ、一度極大迎えるのも興味深いわね <>
名無しさん＠転載禁止<><>2023/06/15(木) 00:13:40.49 ID:DSEo7eLY0副<> https://i.imgur.com/i02WoIB.png <>
名無しさん＠転載禁止<><>2023/06/15(木) 00:14:16.99 ID:DSEo7eLY0副<> >>426は、複数回通報している忍法帖IDの割合 <>
名無しさん＠転載禁止<><>2023/06/15(木) 00:20:04.12 ID:+Ui8zh7HH<> 通報って癖になるんかな <>
名無しさん＠転載禁止<><>2023/06/15(木) 05:23:25.15 ID:/sHZZ8bg0<> 今のGは重大な変革期(というか侵攻)なのかもしらんね
これまで使えてた治安係数も使えなくなるかもしれない。(治安が悪くなったとかは聞かなくなるだろうけど悪化はするだろう) <>
名無しさん＠転載禁止<><>2023/06/16(金) 00:03:02.32 ID:0tQYlnYV0主<> 【だんG統計部】防弾なんG板のID数の推移を調べました
http://sannan.nl/test/read.cgi/livegalileo/1686841188/
🙋♂️ <>
名無しさん＠転載禁止<><>2023/06/16(金) 00:36:48.34 ID:0tQYlnYV0主<> 複数回線のIDを統合した防弾なんGのID数推移
じわじわ増えてる
独/梨スレあり
https://i.imgur.com/z5Qp6Yx.png
独スレあり、梨スレなし
https://i.imgur.com/WnnMUCa.png
IDに含まれる主、副を削除→回線を示す末尾を削除→集計
2023年6月14日までのデータ
参考までに末尾未処理の梨スレ無しで集計した結果
https://i.imgur.com/YsgY8g7.png <>
名無しさん＠転載禁止<><>2023/06/16(金) 06:44:33.31 ID:CeyIZ+Qc0副<> 学びがある
https://kako.sannan.nl/test/read.cgi/livegalileo/1686841188/ <>
名無しさん＠転載禁止<><>2023/06/16(金) 11:48:41.38 ID:d1mcG8eNr<> 本屋でブルーバックスのRの入門本見つけたわ
最近出たやつやし良さそうやった <>
名無しさん＠転載禁止<><>2023/06/16(金) 19:52:05.50 ID:0tQYlnYV0主<> IDがみんな変わって今の時間帯は末尾無効っぽい
【イベント】 <>
名無しさん＠転載禁止<><>2023/06/16(金) 19:53:44.77 ID:0tQYlnYV0主<> と思ったら一瞬で直った <>
!mirror<><>2023/06/17(土) 05:27:03.49 ID:0+F7usyr0主<> スレ立て数推移
https://i.imgur.com/7Tyr7d0.png
ユニークID数推移
https://i.imgur.com/SbFhXgR.png
新規さんをカウントする試み
https://i.imgur.com/WP2cD02.png <>
名無しさん＠転載禁止<><>2023/06/17(土) 05:32:01.10 ID:0+F7usyr0主<> >>433
GUIフロントエンドのＲコマンダー使ってるらしい
GUIだとEZR、jamovi（独自色が強い）なんかも統計処理のメニュー画面が分かりやすくて良いよ
細かいことやりたくなったらR studio入れるのがおすすめ <>
名無しさん＠転載禁止<><>2023/06/17(土) 06:41:13.74 ID:GOQOhId00<> >>436
これID追跡まですればL6まで追えそうだな <>
名無しさん＠転載禁止<><>2023/06/17(土) 09:10:40.02 ID:dMmrNq680副<> >>436
グラフきれい
書き込み数は出した？
ワイのより正確なの出そう <>
名無しさん＠転載禁止<><>2023/06/17(土) 09:49:46.54 ID:JMOvKxkJM<> Rも実はvscodeのJupiterで動く <>
名無しさん＠転載禁止<><>2023/06/17(土) 09:52:40.59 ID:AHvIWPUX0<> やっぱりじわりじわりと人の数増えてるんね
あとみんな馴れてきたのかスレ立ても徐々に活発かして <>
名無しさん＠転載禁止<><>2023/06/17(土) 11:53:44.88 ID:dMmrNq68M副<> >>440
エッッッ <>
名無しさん＠転載禁止<><>2023/06/17(土) 12:28:08.08 ID:0+F7usyra主<> >>439
パースにちょっと自信ないから家帰ったら集計したデータ上げてみる <>
名無しさん＠転載禁止<><>2023/06/17(土) 12:47:30.84 ID:JMOvKxkJM<> Rは一応Android上でも4.3とか動かす方法あるんやけどクソほど時間かかるからおすすめせん
あとGUI周りに問題あるのかちまちま
configureのログ見ながらビルドしないとあかんからかなり面倒くさい
ネットにはそんなに方法載ってないわ <>
名無しさん＠転載禁止<><>2023/06/17(土) 13:04:21.20 ID:7IWcklhx0<> >>437
あ、ワイはR使いや
初心者にオススメしたくて書いた😎👍 <>
名無しさん＠転載禁止<><>2023/06/17(土) 17:57:25.20 ID:0+F7usyra主<> >>445
ナイス👍
tidyverse系の処理と可視化、統計手法まとまってるのあると嬉しいんやけど、これ！って本がなかなか無くておすすめ難しい <>
名無しさん＠転載禁止<><>2023/06/17(土) 22:06:01.39 ID:0+F7usyr0主<> >>439
https://anonfiles.com/Pdlcmex2zf/count_replies_csv
だんGの書き込み数のデータです
n_datがdatファイルから集計したやつで（あぼーん等の抜けあり）
n_subjecttxtが過去ログのsubject.txtからレス数の数字をスレ立て日ごとに足して推計したやつ <>
名無しさん＠転載禁止<><>2023/06/17(土) 23:31:38.47 ID:dMmrNq680副<> https://i.imgur.com/ea8lYrk.png
はえー <>
名無しさん＠転載禁止<><>2023/06/17(土) 23:32:36.22 ID:dMmrNq680副<> ワイのほうはなんか仕様変更に対応できない感じがする <>
名無しさん＠転載禁止<><>2023/06/17(土) 23:34:35.16 ID:dMmrNq680副<> まあでもトレンドには対応してるから、ええか <>
名無しさん＠転載禁止<><>2023/06/17(土) 23:47:22.09 ID:0+F7usyr0主<> 思ったより差が出てる😳
なんだろう仕様変更スレ見るとrandmojiあたりの仕様変更？ <>
名無しさん＠転載禁止<><>2023/06/18(日) 00:15:52.38 ID:lFC4Go4C0副<> そのあたりは、全部例外でカウントしてないからねえ <>
!mirror<><>2023/06/18(日) 00:16:48.56 ID:lFC4Go4C0副<> 3/20からの通報スレの対応数
https://i.imgur.com/6ggAN2o.png <>
名無しさん＠転載禁止<><>2023/06/18(日) 00:55:08.75 ID:1rYSdvt2H<> ころころ★結構上位で対応してるのに… <>
名無しさん＠転載禁止<><>2023/06/18(日) 00:59:02.81 ID:QX74u8m4M<> >>454
F関連は痕跡ごと消してるっぽいから見つからんで <>
名無しさん＠転載禁止<><>2023/06/18(日) 21:31:11.26 ID:lFC4Go4C0副<> だんU盛り上がってきたな <>
名無しさん＠転載禁止<><>2023/06/19(月) 17:44:54.42 ID:LqaiZkBua主<> >>447
datファイルからとスレタイ一覧からの書き込み数比較
https://i.imgur.com/UCOcbSt.jpg <>
名無しさん＠転載禁止<><>2023/06/19(月) 21:53:55.41 ID:3ta5g0a3H<> やっぱ少しづつやが着実に人口増えてるんやな <>
名無しさん＠転載禁止<><>2023/06/19(月) 22:23:57.50 ID:LqaiZkBu0主<> Uの大型移住はいいね👍
謎のunchi_listが失われてる🥺
https://i.imgur.com/FyVHlNx.png <>
!mirror<><>2023/06/19(月) 22:24:47.17 ID:LqaiZkBu0主<> 防弾なんGのレス数推移
https://i.imgur.com/3Gy8loV.png <>
名無しさん＠転載禁止<><>2023/06/20(火) 07:28:25.87 ID:6gZ2i5PN0<> >>460
はぇ〜漸増してる <>
名無しさん＠転載禁止<><>2023/06/20(火) 14:51:22.31 ID:0batLnw50<> 20000も書き込み数あるんか
すごE <>
名無しさん＠転載禁止<><>2023/06/20(火) 22:02:18.42 ID:fCTIopBh0<> >>460
マジで綺麗に増加してるな
人数の予測できそう <>
名無しさん＠転載禁止<><>2023/06/21(水) 01:00:55.84 ID:YKoS24UH0<> 荒れてた月曜がどうなってたか気になる <>
!mirror<><>2023/06/22(木) 19:25:19.50 ID:mEVzC/NC0主<> 防弾なんGの時間帯別の1日のスレ立て数
https://i.imgur.com/GqA2Ant.png <>
名無しさん＠転載禁止<><>2023/06/22(木) 20:08:33.31 ID:8FrVCedc0<> 21時頃に凹みがあるの面白いな
みんな風呂入ってるかな <>
名無しさん＠転載禁止<><>2023/06/22(木) 20:12:54.89 ID:Rth5lEbC0<> ウォッチパとか色んなスレが盛り上がってて新しくスレを立てないだけかも🤔
これどういう集計なんや🙄 <>
名無しさん＠転載禁止<><>2023/06/22(木) 20:41:40.28 ID:mEVzC/NC0主<> 6/1から1時間ごとにスレ立て時刻をもとにスレ数を集計したものを、時間帯別に箱ひげ図（IQRの1.5倍超えてるのは外れ値）にしたんや <>
!mirror<><>2023/06/22(木) 21:51:40.22 ID:mEVzC/NC0主<> 防弾なんGレス数推移
https://i.imgur.com/4E5UziZ.png
ID数推移
https://i.imgur.com/8BvCxEJ.png
ユニークID数推移
https://i.imgur.com/fMaClTE.png
新規ID数推移（安倍晋三を除くL1〜L5のID）
https://i.imgur.com/3BXtLbi.png
少し落ち着いた？ <>
名無しさん＠転載禁止<>sage<>2023/06/23(金) 14:40:59.45 ID:+RTo2nq90<> 書き込み数は右肩上がり
IDは微増
新規は6月から増えたって感じ？ <>
名無しさん＠転載禁止<><>2023/06/23(金) 14:42:05.73 ID:KAdSE3oza<> スクリプト爆撃食らい続けてるからねあっち <>
名無しさん＠転載禁止<><>2023/06/26(月) 23:56:13.86 ID:RdxPKnzS0<> なんかまた人増えているような気がする
スクリプトの影響って結構あんのかな <>
名無しさん＠転載禁止<><>2023/06/26(月) 23:59:41.26 ID:Xepkauf4d<> 忍法帖のLv分布棒グラフって作れるのかな
人口増加と相関が見えるか？ <>
名無しさん＠転載禁止<>sage<>2023/06/27(火) 10:47:34.20 ID:9LciNN+Oa<> あるやろなあ <>
名無しさん＠転載禁止<><>2023/06/27(火) 22:09:32.10 ID:hNxRNbj20主<> Lv分布の棒グラフってこんな感じ？
https://i.imgur.com/i33iiAC.png
何と何の相関になるんや
レベルごとにIDの数をカウント
group_by(level) %>% summarise(user_id = n_distinct(id)) <>
名無しさん＠転載禁止<><>2023/06/27(火) 22:42:42.20 ID:RCojCCNc0<> x軸に日付、y軸に総書き込み数、z軸にlvで新規と総書き込み数の変化とか？ <>
名無しさん＠転載禁止<><>2023/06/28(水) 14:57:35.71 ID:T3pINQVQd<> レベルの割合によって新規さん書き込み率がわかるかも？
常連はレベル高そうだし <>
!mirror<><>2023/06/29(木) 20:49:28.02 ID:eBMGGRQU0主<> 防弾なんGの時間帯別スレ立て数推移（6時始まり）
https://i.imgur.com/Rs3EcSp.png
最近スレが落ちやすくなったなあと思って出してみた <>
名無しさん＠転載禁止<><>2023/07/01(土) 13:59:39.76 ID:s3jN+GLX0<> スレを立てたID数の統計ってとれますか？ <>
名無しさん＠転載禁止<><>2023/07/01(土) 14:06:15.69 ID:sDcMRrqea<> >>478
規則正しいわね土日でも真夜中~早朝のスレ立て数が少ない <>
名無しさん＠転載禁止<><>2023/07/02(日) 01:35:28.57 ID:xqxoDyIW0<> >>478
全時間帯のスレ立て数が増加してるってことは
やっぱ全体としてスレ立て数は増加傾向か
土曜日の22時の6月〜7月の特異なピークはなんだろう？ <>
名無しさん＠転載禁止<><>2023/07/02(日) 02:30:02.00 ID:gM8+QgqzH<> >>481
帰宅後に飯や風呂を終えて一息ついた社畜がスレ建てしとるんやろ🙄 <>
名無しさん＠転載禁止<><>2023/07/02(日) 11:45:58.63 ID:xqxoDyIW0<> >>482
うーん
土曜日やからなぁ…
あと明らかに特異的なピークとしてでとるから
違う気がする <>
名無しさん＠転載禁止<><>2023/07/02(日) 22:10:32.72 ID:H3ssxO3P0主<> >>479
できるはず
>>481-482
22時のは6月11日に[👁★]の人による乱立があった模様 <>
名無しさん＠転載禁止<><>2023/07/02(日) 22:48:53.65 ID:9SbfrkQ50<> 特定一人しかおらんわね
なんか管理モメンがマークしてる人 <>
名無しさん＠転載禁止<><>2023/07/03(月) 02:41:35.08 ID:kjdM4zYy0<> そういえばここ最近の治安指数ってどうなってますか？
結構移住民が増えて雰囲気も変わりつつあるように感じます <>
名無しさん＠転載禁止<><>2023/07/03(月) 02:49:29.02 ID:BLL6vH7dH<> 治安悪化を示すワードの選び方も難しいよなあ <>
名無しさん＠転載禁止<><>2023/07/03(月) 03:16:44.24 ID:ufQ7rqyO0主<> 前のはあからさまに荒れたスレをデータに使ったんだったけど色々人増えと細かい差も変わってそうなんだよね
勉強が進むないから形態素解析最小限のでやれるのあるかなー <>
名無しさん＠転載禁止<><>2023/07/03(月) 03:17:29.46 ID:ufQ7rqyO0主<> 明日は久しぶりにスレでも立ててみようかな <>
名無しさん＠転載禁止<><>2023/07/03(月) 22:57:50.71 ID:ufQ7rqyO0主<> 【だんG統計部】最近の書き込み数やスレ立て数の動向 [独]
http://sannan.nl/test/read.cgi/livegalileo/1688388911/
http://kako.sannan.nl/test/read.cgi/livegalileo/1688388911/
色々まとめた <>
名無しさん＠転載禁止<><>2023/07/04(火) 00:30:10.22 ID:bM0t4JJk0<> ありがたい
仕事が早いね <>
名無しさん＠転載禁止<><>2023/07/08(土) 02:02:55.99 ID:KP6h5C/f0<> 安倍晋三スレがどれくらい立てられてるか気になるな
今日一日がどれくらい跳ね上がるか見えたら面白そう <>
名無しさん＠転載禁止<><>2023/07/08(土) 10:57:28.12 ID:xbGT+VzX0<> 今日は5g落ちもあったしちょっとグラフに変化出るのかな <>
名無しさん＠転載禁止<><>2023/07/10(月) 18:27:24.54 ID:zczlLwIIa<> 5chでjaneがapi切ったとかで急速に避難民が移動してるから統計的にはすごいことになりそう <>
名無しさん＠転載禁止<><>2023/07/10(月) 19:42:38.02 ID:S0eSx+0p0<> 急激に人口と書き込み数増えるはずだな <>
名無しさん＠転載禁止<><>2023/07/10(月) 20:38:36.09 ID:PzwMq1f60主<> 今日は何者かの攻撃が5chにも三男にもあって、JaneStyleやTwinkleがtalkに移行で他の専ブラがAPI鯖から締め出されたり忙しい日やね
【告知】何者かによるread.cgiへの大量アクセスがあったので一時的にwebブラウザでスレは開けません [管理モメン★]
http://sannan.nl/test/read.cgi/livegalileo/1688970176/
http://kako.sannan.nl/test/read.cgi/livegalileo/1688970176/
【MACKEREL HAS BEEN DOWN】サーバダウン情報 03
https://agree.5ch.net/test/read.cgi/operate/1664418619/
647 Ace ★[] 2023/07/10(月) 13:11:51.07 ID:CAP_USER
ただいま全鯖へアタックがあるようで、鋭意対応中とのことです。 <>
名無し＠アフィ転載禁止<><>2023/07/11(火) 01:23:38.03 ID:rq6jqSmU0<> mateとtwinkle民が移住してきたから凄いことになってそう <>
名無し＠アフィ転載禁止<>sage<>2023/07/12(水) 14:23:29.33 ID:V/ZlWvPrr<> 今回の騒動で最終的に人は増えたのだろうか減ったのだろうか <>
名無し＠アフィ転載禁止<><>2023/07/12(水) 14:30:29.10 ID:5TmxaoC80<> ワクワクするけど時間掛かりそうだし途中落ちたから今回は難しそう <>
名無し＠アフィ転載禁止<><>2023/07/12(水) 18:17:54.43 ID:qx9s0T6ha主<> 今クローラー切ってるし🇸🇪は過去ログも無いからからなかなか厳しい🥺 <>
名無し＠アフィ転載禁止<><>2023/07/12(水) 20:38:29.27 ID:V/ZlWvPrr<> そもそもまだ騒動が終わってなくてキレそう <>
名無し＠アフィ転載禁止<><>2023/07/12(水) 22:34:42.20 ID:qx9s0T6h0主<> 過去ログのsubject.txtからの簡易集計で、7月11日までのデータ
レス数推移
https://i.imgur.com/Gm9X9Xb.png
スレ立て数推移
https://i.imgur.com/Me4rAFi.png
datからとsubject.txtからの書き込み数比較は>>457に <>
名無し＠アフィ転載禁止<><>2023/07/13(木) 01:25:54.32 ID:Ov8XzqMA0<> やっぱ急激に増えたか <>
名無し＠アフィ転載禁止<><>2023/07/13(木) 01:28:16.50 ID:Ov8XzqMA0<> てかこの時間にしては書き込み多い気がする
今後の平均移動線の動向に注目だな <>
名無し＠アフィ転載禁止<><>2023/07/13(木) 01:29:44.43 ID:Ov8XzqMA0<> >>504
いや違うか
まだ反映されてないか <>
名無し＠アフィ転載禁止<><>2023/07/13(木) 03:50:35.48 ID:x4+ieUoy0主<> 基本1日分は切ってます。メンテで落ちるらしい
❗【告知】4時30分からメンテするので、開けない場合はスウェーデン鯖に避難してください [管理モメン★]
http://sannan.nl/test/read.cgi/livegalileo/1689187451/ <>
名無し＠アフィ転載禁止<>sage<>2023/07/13(木) 08:21:05.91 ID:sYqUG5m5M<> これきっと非連続見たな感じで増えてるよな
まだわからないけど <>
名無し＠アフィ転載禁止<><>2023/07/13(木) 19:30:14.83 ID:x4+ieUoy0主<> 次から7日間の指数平滑移動平均EMAも追加してみるンダ
これまではggplotのgeom_smooth()でLOESS（Locally Weighted Scatterplot Smoother）かGAM（一般化加法モデル）で青い線描いてたンダけど <>
!mirror<><>2023/07/13(木) 22:29:39.38 ID:x4+ieUoy0主<> クローラー停止中のためsubject.txtによる簡易集計です
〜7月12日まで
レス数推移
https://i.imgur.com/YAOVsFr.png
スレ立て数推移
https://i.imgur.com/tOJREu4.png
変化を捉えやすいよう7日間の指数平滑移動平均EMAを点線で追加。（従来の青い線はLOESS (locally estimated scatterplot smoothing)による平滑化
昨日の7月12日は、攻撃や🇸🇪に避難を繰り返したこともあり6月21日以来、2万2500レスを割っていたようです
0レススレを回収してもらうチャンスかも😎
https://i.imgur.com/Oo7ngD4.png
https://i.imgur.com/HWAURxt.png <>
名無し＠アフィ転載禁止<><>2023/07/13(木) 22:45:39.98 ID:M8yclLpvr<> 攻撃されまくってるけど思ったより減ってないね
知名度は上がっただろうしまた増えていくのかな <>
名無し＠アフィ転載禁止<>sage<>2023/07/13(木) 23:03:16.40 ID:sYqUG5m5M<> なんGよりも他の板が今回は変化激しいやろな
そもそも0やったんやもん <>
名無し＠アフィ転載禁止<><>2023/07/13(木) 23:08:58.22 ID:bCtrS1wJ0<> どうなるのか気になる傾向ね <>
名無し＠アフィ転載禁止<><>2023/07/21(金) 18:41:45.10 ID:bxMvcKas0<> 3chanの件でメールくれた部員さんへ
メール見てるので明日やりますね
今はもう飲んでるので <>
名無し＠アフィ転載禁止<><>2023/07/22(土) 00:31:14.38 ID:wOtMcKMD0主<> サンガツ
3chanドメイン落札ニキにサブドメインを申請してみたので統計部のサーバーができます
部長はSimpleXやSession使ってる？ <>
名無し＠アフィ転載禁止<><>2023/07/22(土) 00:33:33.62 ID:wsGTs03n0<> すごい <>
名無し＠アフィ転載禁止<><>2023/07/22(土) 21:53:31.87 ID:V2Zz4YP/H<> 今人口どれくらいなんや <>
名無し＠アフィ転載禁止<><>2023/07/23(日) 02:06:19.61 ID:t6yLZLUB0<> >>514
設定しときました <>
名無し＠アフィ転載禁止<><>2023/07/23(日) 07:02:29.43 ID:nIdKPl1R0主<> >>517
ありがとうございます
調べたらCloudflareフリープランだとサブドメインの権限委任とかはできないんやね…
あともう一つだけ、出来たらDNSの設定でproxyをオンに（Cloudflareを経由するように）してもらえないでしょうか🙇♂️
https://i.imgur.com/AAOtlrP.jpg <>
!mirror<><>2023/07/23(日) 07:25:53.94 ID:nIdKPl1R0主<> うおおおおさんG！！🙋♂️
https://i.imgur.com/tlYZWB7.jpg
https://i.imgur.com/e2Ezk1I.png
https://i.imgur.com/beY29mV.png <>
名無し＠アフィ転載禁止<><>2023/07/23(日) 08:23:21.27 ID:6wr+vdZT0<> とうとうホームページが <>
名無し＠アフィ転載禁止<><>2023/07/23(日) 10:39:47.71 ID:t6yLZLUB0<> >>518
フリープランだと出来ないみたいですね
ワイも調べてた
プロキシオンにしときました <>
名無し＠アフィ転載禁止<><>2023/07/23(日) 17:27:46.76 ID:nIdKPl1Ra主<> 助かる
サーバーサイドで完結させたい思ったけど、よく考えたらそのままだとメモリドカ食い気絶部だからダメじゃん😱
512MBでもpythonならいけるんかな <>
名無し＠アフィ転載禁止<><>2023/07/23(日) 20:37:22.25 ID:nIdKPl1R0主<> おまけにRのパッケージ入れようとしたら依存関係でコケまくる🥺
もしかしてdebianはaptで入れた方が良いの🥺 <>
名無し＠アフィ転載禁止<><>2023/07/24(月) 07:02:37.77 ID:slQ9aOpW0主<> まだデータ更新してないけどええか
統計部のサイトが出来ました
https://stat.3chan.jp/
https://stat.3chan.jp/gallery.html
もう少しであぼーん含むレスも削除日時込みで処理出来そう <>
名無し＠アフィ転載禁止<><>2023/07/24(月) 17:22:40.07 ID:jfef/vtta<> ようやっとる
そういえば諸データの更新やアーカイブって検討してる？ <>
名無し＠アフィ転載禁止<><>2023/07/24(月) 17:43:58.56 ID:slQ9aOpWa主<> ドメイン所有者しかCloudflareの設定を変えられないのと、SSL証明書更新の際にlets encryptedでhttp通さないといけないらしくてhttpからhttpsにリダイレクトしてません
なんかいい解決法あったら教えて🥺
統計部の鯖は一応防弾のVPSにあります
>>526
今後集計済みのcsvなんかは置きたい
あとさんGのアーカイブデータも手元にある <>
名無し＠アフィ転載禁止<><>2023/07/24(月) 17:45:08.38 ID:slQ9aOpWa主<> 安価ずれた。>>525 <>
名無し＠アフィ転載禁止<><>2023/07/24(月) 17:53:10.63 ID:jfef/vtta<> >>526
了解 いいね
統計データの更新毎に以前の統計データを保存する場所あればいいなと思ったけどこれまでのデータは蓄積されるし半期で区切って新たに表を作るとかでもないならまだ重要性は低いか
宣伝スレ建ってたから気になって
だんG統計部公式サイトが爆誕！
http://sannan.nl/test/read.cgi/livegalileo/1690183762/ <>
名無し＠アフィ転載禁止<><>2023/07/24(月) 21:01:33.47 ID:slQ9aOpW0主<> でもパースの方法変わったり、部長と副部長ワイでも差があったりするからスナップショット的なのがあってもいいかも <>
名無し＠アフィ転載禁止<><>2023/07/25(火) 12:36:10.72 ID:IhMBVIiQa主<> ドメイン落札ニキに度々申し訳ないんですが、CloudflareのSSLの設定を変えてもらう必要がありそう
SSLの設定がフル以上でないとhttpsにリダイレクトさせると無限ループになってしまうらしい
>>528のレスを参考にディレクトリで分けようと思ったけどそれ以前の問題だった <>
名無し＠アフィ転載禁止<><>2023/07/25(火) 13:23:50.60 ID:lW09kUW70副<> >>530
これわいもなったことあるわ <>
名無し＠アフィ転載禁止<><>2023/07/25(火) 20:46:10.23 ID:oC8YFt540<> >>530
さっきメールも見たので後で確認して設定してみますね
Cloudflairは初めて触るんでよくわからんのです
適宜指示していただければ幸いです <>
名無し＠アフィ転載禁止<><>2023/07/25(火) 21:30:08.14 ID:IhMBVIiQ0主<> >>532
メニューのSSL/TLSを開くと出てくるこれやね！🙏
https://i.imgur.com/1gAKOII.jpg
DanGに統計部が載ってて急いで作った甲斐があったンダ🤗
https://i.imgur.com/2dANo9h.png
だんG民向けライフスタイル誌、月刊『DanG』2023年8月号発売のお知らせ
http://kako.sannan.nl/test/read.cgi/livegalileo/1690282487/ <>
名無し＠アフィ転載禁止<><>2023/07/25(火) 22:50:17.80 ID:oC8YFt540<> >>533
フルにしときました <>
名無し＠アフィ転載禁止<><>2023/07/25(火) 23:10:54.92 ID:oC8YFt540<> >>514
もしかしてSimplexとかSessionってワイに言ってた？ <>
名無し＠アフィ転載禁止<><>2023/07/25(火) 23:21:06.55 ID:+SZomlBA0<> "部長"はここではsubで副の統計ニキ
副部長がスレ主だから多分統計ニキに呼びかけたのかも <>
名無し＠アフィ転載禁止<><>2023/07/25(火) 23:38:53.09 ID:+j+2ixIkM<> もう誰が誰だかわからん <>
名無し＠アフィ転載禁止<><>2023/07/25(火) 23:42:13.04 ID:oC8YFt540<> >>536
サンガツ
とりあえずメールもらったらこっちかちゃんと返信できてたらメールで返すようにします <>
名無し＠アフィ転載禁止<><>2023/07/26(水) 01:49:33.84 ID:puzeK+oC0主<> >>535
紛らわしくてすまん
536の通りでサイトもできるし統計ニキにちょっと相談しようとかと思って書いてたんや
リダイレクトの設定も完了しました
連絡先ページも作ってみた
https://stat.3chan.jp/contact.html <>
名無し＠アフィ転載禁止<><>2023/07/26(水) 02:40:20.23 ID:iOpqYfrAH<> >>526
CF単体でHTTPS対応できた希ガス <>
名無し＠アフィ転載禁止<><>2023/07/26(水) 20:41:26.16 ID:puzeK+oC0主<> そうなんやけど細かい設定のとこは分からんし何回も変更必要になったら申し訳ないと思って… <>
!mirror<><>2023/07/27(木) 19:15:12.56 ID:eSSlKh3y0主<> さんGアーカイブのスレタイ一覧を見やすく検索できるサイトが出来ました🥳
https://stat.3chan.jp/sang/
https://i.imgur.com/hy4G91l.png
使用例
https://i.imgur.com/rv65P75.mp4
https://i.imgur.com/X8GQZ3h.jpg
絵文字も🙆♂️
https://i.imgur.com/B16gMnq.png <>
名無し＠アフィ転載禁止<><>2023/07/27(木) 19:32:26.01 ID:f6YEvz3B0<> 過去ログも読めるようになってるのか <>
名無し＠アフィ転載禁止<><>2023/07/28(金) 14:00:27.78 ID:433yHmeh0<> はえーすっごい <>
!mirror<><>2023/07/29(土) 03:35:14.43 ID:PXbxCK360主<> 統計部も週末出張進出してこようかしら <>
名無し＠アフィ転載禁止<><>2023/07/30(日) 02:33:08.38 ID:728khqK60主<> 7月28日まで
ここ数日はスレタイ一覧のsubject.txtが吹っ飛ぶトラブルの影響でスレ立て数が多い模様
防弾なんGのレス数推移
https://i.imgur.com/EHUxJMO.png
防弾なんGのスレ立て数推移
https://i.imgur.com/Igpo28s.png
ユニークID数推移（ただし独スレを含む）
https://i.imgur.com/GVWtfNo.png
ID数推移
https://i.imgur.com/9PcuBon.png
新規ID数推移
https://i.imgur.com/D7H2Hip.png
だんG統計部の公式サイトが完成 [独]
http://kako.sannan.nl/test/read.cgi/livegalileo/1690644065/ <>
名無し＠アフィ転載禁止<><>2023/07/31(月) 13:25:57.06 ID:CT1letFV0<> stat鯖結構多角的な運営してるわね <>
名無し＠アフィ転載禁止<><>2023/08/04(金) 17:09:49.19 ID:SlrCIjlaM<> 昨日今日で少し大きめの移住が起きたかも <>
名無し＠アフィ転載禁止<><>2023/08/05(土) 14:50:05.71 ID:KURhtimK0<> 昨日今日の書き込み数すごそう <>
名無し＠アフィ転載禁止<><>2023/08/05(土) 15:07:43.68 ID:8tBWBkTHa<> 最近安倍晋三の数が増えてきた印象だし流入はあると思う <>
名無し＠アフィ転載禁止<><>2023/08/05(土) 15:33:57.92 ID:GKg6vnNEH<> 昨日馬鹿早かったな <>
名無し＠アフィ転載禁止<>sage<>2023/08/06(日) 01:52:15.23 ID:moh9psB40<> ここで聞くことじゃないかもしれんが
なんで移住騒ぎ起きたんや？ <>
名無し＠アフィ転載禁止<><>2023/08/06(日) 01:57:49.14 ID:V3eW5MmE0<> 多分スクリプト
一時的な避難所としか見てないはずだから定住はしない…はず <>
名無し＠アフィ転載禁止<><>2023/08/06(日) 02:24:45.44 ID:94ei+qrY0<> どうせ爆撃喰らうから初めからこっちでやろうって言ってた実況スレもあったし一定数は残るかもね <>
名無し＠アフィ転載禁止<><>2023/08/06(日) 02:42:33.27 ID:NpWi2eoo0主<> 5Gで聞いた方が詳しそうな気がするけど、スクリプトがgjm複数板に爆撃を始めて板間避難が困難になったのと、鯖にアクセスすら出来なくなったりした時間があったから避難所需要が増えたんだと思うンダ <>
名無し＠アフィ転載禁止<><>2023/08/07(月) 01:40:03.50 ID:qqmnQ1BI0主<> 【3G統計部】レス数とスレ立て数、ID数の動向📊 [独]
http://sannan.nl/test/read.cgi/livegalileo/1691334947/
http://kako.sannan.nl/test/read.cgi/livegalileo/1691334947/
安倍さんのおかげで防弾なんGから3Gに変わったよ
https://i.imgur.com/YetJ9Lk.jpg <>
名無し＠アフィ転載禁止<><>2023/08/07(月) 02:01:07.35 ID:rFEvDxfba<> 防弾3Gになったことで統計的な影響がでるのか楽しみですね <>
!mirror<><>2023/08/07(月) 02:35:55.15 ID:qqmnQ1BI0主<> 最新版です
レス数推移
https://i.imgur.com/ZBWDzRp.png
スレ立て数推移
https://i.imgur.com/8wHVIMk.png
1時間ごとに集計した時間帯別のレス数
https://i.imgur.com/V429MKb.png
連続版
https://i.imgur.com/vdELkds.png
ユニークID数の推移
https://i.imgur.com/aQ9o8ih.png
ID末尾未処理版
https://i.imgur.com/o39WcWC.png
新規ID数の推移
https://i.imgur.com/OADLNEq.png
実況スレを分離 縦に積み上げ
https://i.imgur.com/ttrJzVJ.png
横に棒グラフを並べる
https://i.imgur.com/5kFKI3f.png <>
名無し＠アフィ転載禁止<><>2023/08/07(月) 06:05:04.47 ID:HZ30fssvH<> >>558
やっぱり実況の民が大量に流入しとるのな <>
名無し＠アフィ転載禁止<><>2023/08/07(月) 09:34:29.60 ID:MlwCjNlp0副<> 試してないけど
https://i.imgur.com/cdV9xv7.png <>
名無し＠アフィ転載禁止<><>2023/08/07(月) 16:27:55.25 ID:Q7ApTY3J0<> これまでない大規模移住でまた傾向変わりそうね <>
名無し＠アフィ転載禁止<><>2023/08/07(月) 17:13:20.25 ID:S3c0DNJw0<> やっぱ増えとるんやね <>
名無し＠アフィ転載禁止<><>2023/08/08(火) 21:17:58.96 ID:5FFEmluo0<> 昨日今日あたり
猛烈に人口増加した感ある
それに伴う治安指数の変化が気になるね
悲しきかな体感ではちくちく増えてる気がするが… <>
名無し＠アフィ転載禁止<><>2023/08/08(火) 21:20:04.29 ID:gh4Oj8gu0<> 関連してなんTの統計調査はする？
過去ログ実装されたらしいから恒久的に設置されるだろうし <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 01:29:13.89 ID:m68Kgp1b0主<> もう一いっそ全部取るか、
容量やばいを追体験出来そう <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 09:32:53.72 ID:343oxgES0<> これ今までの防弾Gの統計意味なくなりそうだな…
チューリップとGで住人分断されちゃったし
住人の質も違うから単純な比較できなさそう <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 09:35:15.01 ID:qIibZh8c0<> 治安指数も急激に悪化するだろうね
色々起こりすぎてモメン壊れちゃったし… <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 10:06:48.18 ID:8hJ4btNzH<> 後々もっとひどいことになりそう <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 10:10:32.73 ID:qIibZh8c0<> 今頃5Gの人等が移住計画とかで舌なめずりしてるだろうし 管理放棄して安倍晋三解き放ったからさてどうなるか <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 10:21:18.08 ID:343oxgES0<> あくまでも数字として見れるか気になるわね
色々意見はあるけど
数字としてどのように現れるか
これが結構興味深い <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 11:37:29.32 ID:343oxgES0<> 人口増加に伴って
治安指数が加速度的に悪くなってたら
少しのやばいユーザーが周りに非常に大きい影響を及ぼすって見れるのかな？
まあ元々の移住民の治安がアレやったり
データ取れる日数が少ないから変化としては急激に大きくなるやろし
正確なデータ検証できんけど
これから2週間くらいでデータ徐々に集まっていくかしら <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 11:40:34.22 ID:NDZegutD0<> 三男掲示板各板書き込み数ランキング作ってみてほしい
5chみたいに <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 12:07:05.55 ID:m68Kgp1ba主<> うおお展開が早すぎて付いていけない。現行スレも把握するようにコード書き換えないといけないか
今こそ統計ニキのうんさく分析時系列版を見てみたい <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 13:38:01.29 ID:SGFA8jVF0<> 無いとは思うけど言いがかりつけてきた人がいたらと思って確認して言質はいただけました
【告知】GR6で三男掲示板内のスレや板のヲチ（晒し上げ）行為を禁止します [管理モメン★]
55 野に咲く名無し＠アフィ転載禁止[] 2023/08/09(水) 13:19:15.49 ID:8CVRRcfP0
これ統計部とか良スレ部はヲチとか晒し上げじゃないしセーフだよね？
57 管理晋三 ★[] 2023/08/09(水) 13:20:09.01 ID:ADMIN
>>55
悪意のある晒し上げ行為を想定しているので
そういうのはセーフ <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 14:23:20.41 ID:44TOCNoB0<> よかった <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 15:31:33.67 ID:qIibZh8c0<> >>574
一応URLも
http://sannan.nl/test/read.cgi/livetulip/1691526247/
http://kako.sannan.nl/test/read.cgi/livetulip/1691526247/ <>
名無し＠アフィ転載禁止(M)<><>2023/08/09(水) 15:42:18.06 ID:1A1linUf<> 末尾が名前欄に移動 <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 15:46:12.24 ID:qIibZh8c<> これもまた影響のある変更ね <>
名無し＠アフィ転載禁止 (r)<><>2023/08/09(水) 18:01:00.51 ID:I0LiRmum<> 波乱が過ぎて統計大変そう <>
名無し＠アフィ転載禁止<><>2023/08/09(水) 18:04:49.34 ID:B+t5FRQj<> 次からはどこで発表するんやろ🤔
ここが基幹だからここ見てればええんかな🙄 <>
名無し＠アフィ転載禁止<>sage<>2023/08/09(水) 18:07:05.00 ID:l0gw1e/z<> 全部でやろう😎
これマルチポストになる？ <>
名無し＠アフィ転載禁止 (主)<><>2023/08/09(水) 19:14:34.59 ID:m68Kgp1b<> >>576
>>577
ID末尾はここで名前欄に切り替わったのか
助かる
主マークや新規の場合はこんな風になるんだね
例:
撃たれても動く名無し＠アフィ転載禁止 (a) (主)
116 '新規spmode'@転載禁止 ◆MivqMJ8/oTPh (d) (L0)[] 2023/08/09(水) 18:03:55.53 ID:cndunJaa <>
名無し＠アフィ転載禁止 (主)<><>2023/08/09(水) 21:25:31.08 ID:m68Kgp1b<> そっかスレ紹介botも新設の防Tへ行ったか
とりあえずワイはクローラーの他板対応からやね <>
名無し＠アフィ転載禁止 (M)<><>2023/08/10(木) 02:06:11.12 ID:tEndgyYa<> >>581
ならんと思うけどGはもうやめたほうがええんちゃう? <>
名無し＠アフィ転載禁止<><>2023/08/10(木) 02:38:01.31 ID:oiQ40390<> >>581
今Gに立てても新規の人多すぎて前みたいな反応はもらえないんちゃう？ <>
名無し＠アフィ転載禁止 (H)<><>2023/08/10(木) 02:51:16.90 ID:tJRu1ars<> それはそれでええんちゃうか？
説明丁寧に入れるくらいで
板別に統計部大使館作るくらいのノリでｗｗ <>
名無し＠アフィ転載禁止 (主)<><>2023/08/12(土) 04:53:52.56 ID:mY5x4BUE<> github風のサイトにRのコードを置いてみた
https://stat.3chan.jp/git/stat-tools/statsannan/src/branch/main/sannan_subjecttxt.R <>
名無し＠アフィ転載禁止 (M)<><>2023/08/12(土) 08:27:09.91 ID:imMWNoNO<> 実況スレ（実際になんか実況してるスレ）は他のスレに比べて有意に認証してない（Lv4以下）の可能性あるな <>
名無し＠アフィ転載禁止 (M)<><>2023/08/12(土) 08:27:48.20 ID:imMWNoNO<> より正確に言うとアニメ実況スレ <>
名無し＠アフィ転載禁止 (M)<><>2023/08/12(土) 09:12:56.97 ID:imMWNoNO<> 統計部開くとgstatic.comも使っとるやんけ…… <>
名無し＠アフィ転載禁止 (H)<><>2023/08/12(土) 11:54:09.76 ID:ALqkro1Z<> 防弾コードホスティングやん <>
名無し＠アフィ転載禁止 (M)<><>2023/08/12(土) 12:04:47.58 ID:imMWNoNO<> もう3chanのドメインに何があるのか何もわからんわ
とりあえず防弾アップローダーはええとしてこのgitlab的なのは防弾なんやろか？ <>
名無し＠アフィ転載禁止 (a) (主)<><>2023/08/12(土) 12:15:07.15 ID:mY5x4BUE<> >>590
トップページにある？フォント関係のなんかやろか
今CDNへのリンク貼ってるのはあるけど、なるべく外部リソースは減らしていきたいので後で見てみる
gitlab的なのはForgejoで今のところワイが気楽にコード上げたいがために使ってる。登録も無効で。鯖の余裕もあんま無いし <>
名無し＠アフィ転載禁止<><>2023/08/12(土) 13:09:57.47 ID:MpRlnQh6<> <link rel="stylesheet" type="text/css" href="//fonts.googleapis.com/css?family=Lato:300,400,700,400italic%7CJosefin+Sans:400,700,300italic"> <>
名無し＠アフィ転載禁止 (M)<><>2023/08/12(土) 15:19:15.07 ID:imMWNoNO<> >>593
サービスとしては動いとらんのね
さんがつ
原因何なんやろな
こいつのせいでここえの通信止めてると動かないサイトたくさんあるから嫌やわ <>
名無し＠アフィ転載禁止 (主)<><>2023/08/12(土) 20:12:10.61 ID:mY5x4BUE<> >>594-595
サンガツ
やっぱりこの部分やったから消しとく <>
名無し＠アフィ転載禁止 (M)<><>2023/08/12(土) 23:01:43.11 ID:imMWNoNO<> >>596
さんがつ
Googleとかトラッキング嫌いマンやからすごく嬉しいわ <>
名無し＠アフィ転載禁止<><>2023/08/20(日) 00:26:30.20 ID:gdo7hMJK<> 今どんな具合ですか
TG共に統計データ取る感じ？ <>
名無し＠アフィ転載禁止 (a) (主)<><>2023/08/20(日) 12:20:44.74 ID:l8eVCr1q<> 言わばまさに。他の板も含めてやりたい <>
名無し＠アフィ転載禁止<><>2023/08/20(日) 12:36:44.47 ID:l4zs3j68<> (a)や (M)って何？ <>
名無し＠アフィ転載禁止 (H)<><>2023/08/20(日) 12:42:16.06 ID:coQnSpI/<> >>600
末尾
0は非表示 <>
名無し＠アフィ転載禁止<><>2023/08/20(日) 12:42:48.61 ID:BWHv3wMb<> 5chで言うとこの末尾だよ <>
名無し＠アフィ転載禁止<><>2023/08/20(日) 12:43:28.64 ID:UarbQqRE<> 回線の末尾
仕様変更で固定回線以外は名前欄に(a)とか(M)が付くようになった <>
名無し＠アフィ転載禁止<><>2023/08/20(日) 21:13:18.84 ID:gdo7hMJK<> >>599
がんばってください💪 <>
名無し＠アフィ転載禁止 (d)<><>2023/08/21(月) 10:17:18.00 ID:t5Hc15VS<> >>599
応援してるで
一番大事なデータの部分を抽出してくれる
有能 <>
名無し＠アフィ転載禁止<><>2023/08/21(月) 11:49:18.40 ID:o4bcLh3/<> >>605
(d)ocomoかな <>
名無し＠アフィ転載禁止<><>2023/08/21(月) 23:46:45.72 ID:Ka0XYoTr<> こういうの見るの好きだからいつも楽しみにしてる <>
名無し＠アフィ転載禁止<><>2023/08/22(火) 09:42:23.88 ID:0jyfOF+o<> ゲーム板も統計しますか？最近人増えてます <>
名無し＠アフィ転載禁止 (d)<><>2023/08/22(火) 10:49:47.14 ID:j2tY7YEc<> 書き込みの勢いはゲーム板の方がありそうな気がする <>
名無し＠アフィ転載禁止 (H)<><>2023/08/22(火) 18:17:42.12 ID:fp03mUK+<> そろそろ見たい <>
名無し＠アフィ転載禁止<><>2023/08/22(火) 20:41:40.84 ID:zobVSfqQ<> 最新版まだかな <>
名無し＠アフィ転載禁止<><>2023/08/23(水) 02:38:54.50 ID:kPRrhsHs<> 統計民いつもご苦労様やで
これって書き込み数やんな？
ROM含めた人口の概数って管理モメンとかに聞かんと分からんのやろうか
ざっとスレリストが更新された時間当たり数と
時間当たりのユニークIDの書き込み数から推定できそうな気がするんやが
まずは係数を決めるベースのデータが必要よな… <>
名無し＠アフィ転載禁止 (主)<><>2023/08/23(水) 04:09:30.37 ID:igxFeuEO<> ROMは管理モメンに聞いた方が早いかもね
アクセス解析系だとgoaccessが比較的軽くてwebサーバーのアクセスログを良い感じにhtmlに加工してくれて見やすかったから紹介してみるか <>
名無し＠アフィ転載禁止 (主)<><>2023/08/23(水) 05:31:38.12 ID:igxFeuEO<> ちな7/31のお昼時（12時過ぎくらい〜13:20）にstat.3chan.jpへのユニークアクセスが1584だった <>
名無し＠アフィ転載禁止<><>2023/08/23(水) 08:18:31.82 ID:7y/GXITJ<> >>614
結構多いんやな <>
名無し＠アフィ転載禁止<><>2023/08/23(水) 10:44:30.46 ID:imP78OPG<> >>615
その割にはなんか過疎ってるよな <>
名無し＠アフィ転載禁止<><>2023/08/23(水) 10:45:44.57 ID:imP78OPG<> >>616
すまん、統計部サイトの話やったわ <>
名無し＠アフィ転載禁止 (主)<><>2023/08/23(水) 21:10:27.60 ID:igxFeuEO<> 開発もたもたしてる間にDDoSの余波でクローラーも締め出しくらって草 <>
名無し＠アフィ転載禁止<><>2023/08/23(水) 21:29:39.14 ID:senKL7vB<> >>618
モメンに相談しにいかないとね <>
名無し＠アフィ転載禁止 (主)<><>2023/08/24(木) 19:18:25.46 ID:IAI7QWtc<> APIでファイヤーウォールの設定を切り替えられるようだから、スクリプトで攻撃を検知した時に規制を強化するように出来ないか管理モメンに聞いてみる <>
名無し＠アフィ転載禁止 (主)<><>2023/08/24(木) 19:56:37.15 ID:IAI7QWtc<> こういうのってhttpがタイムアウトするかを監視するシェルスクリプト無限ループで良いのかな？ <>
名無し＠アフィ転載禁止 (H)<><>2023/08/25(金) 20:46:55.52 ID:c5J+5Q2F<> >>618
ほんーま山下遼太殺す <>
名無し＠アフィ転載禁止 (主)<><>2023/08/27(日) 02:13:47.90 ID:vUiDQXNw<> 三男サーバー監視所設置予定地です
https://stat.3chan.jp/kanshi/
ここにファイル置いてるんだけどCloudflareにキャッシュされてるせいか更新クッソ遅い。どうしよう
https://stat.3chan.jp/kanshi/health_checker_sannan.csv <>
名無し＠アフィ転載禁止 (主)<><>2023/08/27(日) 06:00:50.15 ID:vUiDQXNw<> なんとか形にはなった
https://i.imgur.com/gJRxtrK.png
csvなんだけど拡張子をhtmlにしてキャッシュ回避するようにした <>
名無し＠アフィ転載禁止<><>2023/08/27(日) 09:23:38.37 ID:v5WjSwKx<> >>623
視覚的にわかりやすくなったわね <>
名無し＠アフィ転載禁止 (H)<><>2023/08/27(日) 17:22:31.92 ID:aNpONe7g<> >>624
ようやっとる <>
名無し＠アフィ転載禁止<><>2023/08/27(日) 19:36:40.51 ID:Fwg23cY/<> 三男掲示板サーバー監視所がおかしい
スウェーデン鯖がONLINEなのにONLINEになってない
サイト接続の安全性を確認しています
人間であることを確認します
se.sannan.nl では、続行する前に接続の安全性を確認する必要があります。 <>
名無し＠アフィ転載禁止<><>2023/08/27(日) 19:38:30.17 ID:Fwg23cY/<> stat.3chan.jpに、さんG統計部（ブックマーク）と3G統計部（画像）の２つ名前がある
統一すべき <>
名無し＠アフィ転載禁止 (主)<><>2023/08/28(月) 20:03:38.66 ID:rP5eivFA<> 報告サンキュー
認証ONはそのま403でイエローにした
ロゴだけ意図的に3Gにしてます <>
名無し＠アフィ転載禁止<><>2023/08/29(火) 11:49:42.09 ID:Lh9/M2ew<> stat.3chan.jpの２つの名前の関係は？
同格か違いがあるのか？ <>
名無し＠アフィ転載禁止<>sage<>2023/08/29(火) 18:33:24.48 ID:TPrJ7k4s<> 嫌儲から来ました。死活ログありがたいです
スクリプトの動作状況など取得できればと考えている統計やさんですが、避難所かdiscordのようなものはありますか？
ここもたびたびDDoSの餌食になってるようで、スレ民の居場所が気になった次第 <>
名無し＠アフィ転載禁止<>sage<>2023/08/31(木) 16:31:10.67 ID:kIRZ/SiE<> 確か統計部の鯖にぜろちゃんねるプラスなかったっけ？ <>
名無し＠アフィ転載禁止<>sage<>2023/08/31(木) 16:37:04.19 ID:WOjrvO9B<> １スレの避難所というものを見たことがない
https://misskey.kindworld.one/@sannanbot <>
名無し＠アフィ転載禁止<>sage<>2023/08/31(木) 17:21:32.08 ID:3Nq8a+Ua<> 統計部員さま、こちらで取り組んでいること:
・他避難所およびtalk.jpの死活監視（既に稼働されていたら余計ですけども）
・荒らしスクリプトの動作状況集約（同上）
です。
discord部スレッドから避難所の存在を知り、この手のお話をしたところ
「統計部・wiki編集部」チャンネルに興味ありそうな人が（まだ人数少ないですが）集まっている模様です
もし興味ございましたら覗いてみてください
URLの誘導はこのあたりのスレッドで発行されるようです
https://sannan.nl/test/read.cgi/liveuranus/1687691127/
https://se.sannan.nl/test/read.cgi/lgse/1693393972/ <>
名無し＠アフィ転載禁止<>sage<>2023/08/31(木) 17:24:27.68 ID:3Nq8a+Ua<> https://i.imgur.com/KsJlhau.png
サーバーのダウンタイムはこんな具合に描くと、日付をまたいだ状況がわかりやすいと思われます
（余計なお世話でしたら蹴り飛ばしておいてください）
そんなところで <>
名無し＠アフィ転載禁止 (a) (主)<><>2023/08/31(木) 18:43:43.16 ID:S3Zqaor8<> じっけんもー＠0ch掲示板
https://stat.3chan.jp/exp0/
再開発プロジェクトの動作確認用だけど家着く前に落ちたら困るのでとりあえず取り急ぎ
>>635
ナイス👍 <>
名無し＠アフィ転載禁止<><>2023/08/31(木) 23:13:25.78 ID:3/FJ2oxD<> サーバー状況のサイト助かってるわ
サンクス <>
名無し＠アフィ転載禁止 (主)<><>2023/08/31(木) 23:27:36.81 ID:S3Zqaor8<> 防U統計部避難所
https://stat.3chan.jp/test/read.cgi/exp0/1693481757/l50
立ててみた。クローラー停滞してたけど死活監視の方で統計部スレに需要があるんやね
>>634
ディスコはやってないけど避難所としてURL貼られてたSimpleXは見てるよー https://33-4.me/M8n06c
避難先にもDDoSが来てるので検討はしてたけど動かしてはないのでありがたい！
なんか良い情報あればここか避難所に貼ってみてね
スレが立ってたのでメモ
三男の文化保存部 [bGxcjo0hM★]
http://sannan.nl/test/read.cgi/livegalileo/1693466221/
三男掲示板サーバー監視所 [KTvN★]
http://sannan.nl/test/read.cgi/news1/1693469189/ <>
名無し＠アフィ転載禁止 (H)<><>2023/08/31(木) 23:30:48.41 ID:B4BsBszW<> 今日はなんか攻撃来なかったな
しばらくして一週間ぐらい攻撃され続けるかこのまま一生来ないか
後者であってくれ <>
名無し＠アフィ転載禁止 (主)<><>2023/08/31(木) 23:32:05.27 ID:S3Zqaor8<> なんか監視者最新版csvの切り出し壊れてるかな？ <>
名無し＠アフィ転載禁止 (主)<><>2023/08/31(木) 23:32:59.17 ID:S3Zqaor8<> ん、直ったよく分からん
ログ取るようにするか <>
名無し＠アフィ転載禁止 (主)<><>2023/09/01(金) 00:00:33.06 ID:9xAGxmB7<> >>630
防GだんGみたいな表記揺れで、元のスレタイがさんGだったけどロゴのデザイン的に3Gが良いかなくらいの理由やね
同格と言えば同格
>>637
サンガツ。役に立たなくなる日が来るといいな <>
名無し＠アフィ転載禁止<><>2023/09/01(金) 11:37:30.62 ID:C89D6zjs<> >>642
名前が２つあるのって初めて見た
興味深い
名前は１つって思うのだが
ここ以外で例があったら知りたい
画像やロゴでは3GだがテキストではさんGというほうがまだ理解できる
ロゴの画像のaltに代替テキストがないがどっちで書く？
鯖の生存確認のために三男鯖に行くユーザーの負荷を避けるのに役立ってる <>
名無し＠アフィ転載禁止<>sage<>2023/09/01(金) 11:38:33.21 ID:C89D6zjs<> ここ以外で例があったら知りたい>all <>
名無し＠アフィ転載禁止<>sage<>2023/09/01(金) 11:53:28.25 ID:C89D6zjs<> 防GとだんGで２つあると思われるかもしれないが管理木綿に聞いたとしても２つあって同格だは言わないだろう（答える名前は１つ）ってことね <>
名無し＠アフィ転載禁止 (a) (主)<><>2023/09/04(月) 18:50:59.51 ID:kaw8x8gp<> DDoS👈🥺ﾂﾝﾂﾝ
同格と言ったけどドメイン落札の流れから今は亡きサイトの名前を冠したネタ要素強めのサイトなので特に深い意味は無いんやで
3ちゃんねるもトップや看板画像で表記色々混在してたし <>
名無し＠アフィ転載禁止 (a) (主)<><>2023/09/04(月) 18:51:41.23 ID:kaw8x8gp<> 防儲の嫌儲統計局とかいう謎の有能組織のおかけで三男サーバー監視所で分かりやすい可視化画像が自動更新されるようになったよ
https://stat.3chan.jp/kanshi/ <>
名無し＠アフィ転載禁止<><>2023/09/05(火) 04:42:01.79 ID:wmB+nFso<> とりあえず
http://stat.3chan.jp/test/read.cgi/exp0/1693481757/5
5 【忍法帖Lv.2】【総カキコ数:3】 (ﾜｯﾁｮｲ u9J6-QALp) 2023/09/03(日) 23:53:00.06 ID:GAVhPIgK
Cloudflareを挟んで更新ごとにキャッシュを差し替える形にしてしまったので
監視所さんの転送量がお困りであれば直リンでも大丈夫です
URLは下記のとおりです。IP直打ちはドメイン名にリダイレクトかかるため参照はどちらでも可です
防弾三男（sannan.nl）
https://ch-stat.kenmo-db.net/pub/isalive_sannan.nl.png
各避難所
https://ch-stat.kenmo-db.net/pub/isalive_servers.png
6 【忍法帖Lv.2】【総カキコ数:4】 (ﾜｯﾁｮｲ u9J6-QALp) 2023/09/04(月) 00:09:08.13 ID:0/8Uk/s6
追伸。直リンの際はドメイン名にてお願い申し上げます <>
!mirror<><>2023/09/12(火) 09:16:21.36 ID:v+K70MYn<> 5分おきに更新されるCSV（をhtmlに変換したもの）にレコード追加するためのリクエスト投げて返答を見るコードってどこかに公開されてますか？ <>
名無し＠アフィ転載禁止<><>2023/09/18(月) 14:04:27.94 ID:/R0OtxKY<> もう統計結果もボロボロになりそう
鯖落ちの影響がデカすぎる
統計部の本スレってここで合ってる？
OffShoreでやってるとかってことはないよな？ <>
名無し＠アフィ転載禁止 (a)<><>2023/09/18(月) 14:09:51.63 ID:6OMwqp93<> 一応ここのはずだけど統計ニキと副部長は軸足をオフショアに移しているかもしれない <>
名無し＠アフィ転載禁止<><>2023/09/18(月) 14:39:17.04 ID:/R0OtxKY<> >>651
2人の意見次第で場所移るかもしれんのね
現状鯖落ちまくりだし
書き込みクロールして2鯖体制で
スレ運用できれば良さそうだけど技術的に厳しいしなぁ <>
名無し＠アフィ転載禁止<><>2023/09/19(火) 05:26:41.56 ID:bVgAsmCw<> >>652
主にその二人が積極的に活動しているからってかんじ
まあ統計データなんて取りようもないかもねここまで苛烈な攻撃が続いてると <>
名無し＠アフィ転載禁止<><>2023/09/23(土) 14:39:10.98 ID:DfxuTmWF<> https://ch-stat.kenmo-db.net/pub/isalive_sannan.nl.png
https://i.imgur.com/mAe05M9.png
この画像はミチミチになってきたね <>
名無し＠アフィ転載禁止 (M)<><>2023/09/26(火) 06:01:32.16 ID:LE9JObV3<> https://ch-stat.kenmo-db.net/pub/isalive_sannan.nl.png
https://i.imgur.com/9Iuk3y5.png
もう限界だから拡げてほしい <>