野に咲く名無し@転載禁止<>16350f50<>2024/03/01 (金) 20:49:57.493 ID:b1Er5XFxg<>農園ちょっと素人な統計部????　〜3月編〜<br><br>今回も農園に立てられたスレッド数について調査していきます??<br><br>前スレ<br>農園ちょっと素人な統計部????<br><iframe scrolling="no" style="display:block;width:100%;height:155px;max-width:500px;margin:10px 0px;" loading="lazy" src="https://hatenablog-parts.com/embed?url=https://tulip-kako.fox-tools.workers.dev/test/read.cgi/tulipplantation/1706960570/" frameborder="0"></iframe>https://tulip-kako.fox-tools.workers.dev/test/read.cgi/tulipplantation/1706960570/<>農園ちょっと素人な統計部????　〜3月編〜
野に咲く名無し@転載禁止<> (主)<>2024/03/01 (金) 20:50:14.584 ID:b1Er5XFxg<>まずは月ごとのスレッド数はこちら<br><a href="https://i.imgur.com/VHVg1JD.png" data-lightbox="image"><img class="image img-2" src="https://i.imgur.com/VHVg1JD.png" loading="lazy"></a><br>https://i.imgur.com/VHVg1JD.png<br><br>右肩上がりの数字となっております<br>2024年2月に立てられたスレッド数は過去最高の12613件<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 20:50:20.696 ID:eeWTzpstv<>お？&#129402;<>
野に咲く名無し@転載禁止<> (主)<>2024/03/01 (金) 20:50:50.274 ID:b1Er5XFxg<>次に日ごとのデータを見てみましょう??<br><br>2024年1月のデータはこちら<br><a href="https://i.imgur.com/sp20xbs.png" data-lightbox="image"><img class="image img-4" src="https://i.imgur.com/sp20xbs.png" loading="lazy"></a><br>https://i.imgur.com/sp20xbs.png<br><br>2024年2月のデータはこちら<br><a href="https://i.imgur.com/TsTFbE4.png" data-lightbox="image"><img class="image img-4" src="https://i.imgur.com/TsTFbE4.png" loading="lazy"></a><br>https://i.imgur.com/TsTFbE4.png<br><br>1日の平均スレッド数は388→435と増加<br>先月はより多くのスレが立てられたことが分かります<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 20:51:06.223 ID:eeWTzpstv<>はぇ〜&#129402;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 20:51:11.429 ID:70nkQtnn5<>スレ立て数増えてる感覚あったからその通りのデータだ&#129402;<>
野に咲く名無し@転載禁止<> (主)<>2024/03/01 (金) 20:51:20.270 ID:b1Er5XFxg<>最後に時間帯ごとのスレッド数を見ていきましょう??<br><br>2024年1月のデータはこちら<br><a href="https://i.imgur.com/qmX4tQV.png" data-lightbox="image"><img class="image img-7" src="https://i.imgur.com/qmX4tQV.png" loading="lazy"></a><br>https://i.imgur.com/qmX4tQV.png<br><br>2024年2月のデータはこちら<br><a href="https://i.imgur.com/G2SPPOw.png" data-lightbox="image"><img class="image img-7" src="https://i.imgur.com/G2SPPOw.png" loading="lazy"></a><br>https://i.imgur.com/G2SPPOw.png<br><br>1月2月共に一番スレ立ての少ない時間帯は4時台、一番多い時間帯は20時台となっています<br>2月のデータでは4時台が92件、20時台が1030件となっており、時間帯により10倍以上スレ立て数が違うことが分かります<br><br>以上です<br>また来月お会いしましょう??<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 20:51:33.396 ID:39lC63Qq2<>最近スレッドが多いと感じてたけど実際に増えてるのね&#129402;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 20:52:05.692 ID:eeWTzpstv<>4時台いるからもっと賑わってほちい&#128557;<>
野に咲く名無し@転載禁止<> (主)<>2024/03/01 (金) 20:54:37.356 ID:b1Er5XFxg<> <a class="ank rep-10" href="/?st=7#tulipplantation/1709293797/">&gt;&gt;7</a><br>書き忘れましたが12時台がポコっと高いのも面白いですね&#129299;<br>お昼休みにスレ立てしているのでしょうか&#129400;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 20:56:16.867 ID:749kRnM0s<>統計部員ら&#129402;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 20:57:27.810 ID:867Jc8hLC<> <a class="ank rep-12" href="/?st=7#tulipplantation/1709293797/">&gt;&gt;7</a><br>賑わってる時間が知れるの助かる<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 20:57:53.333 ID:a9pVGLOeS<> <a class="ank rep-13" href="/?st=10#tulipplantation/1709293797/">&gt;&gt;10</a><br>もしかして昼休憩もしかして働いているとかまさか&#129402;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 20:58:17.689 ID:70nkQtnn5<> <a class="ank rep-14" href="/?st=7#tulipplantation/1709293797/">&gt;&gt;7</a><br>一番賑わってる時間にスレを立ててるわけですね&#129402;<>
野に咲く名無し@転載禁止<> (主)<>2024/03/01 (金) 21:00:22.401 ID:b1Er5XFxg<> <a class="ank rep-15" href="/?st=14#tulipplantation/1709293797/">&gt;&gt;14</a><br>結果的にはそうなりますが実際は農園便りのスレを見て「やべっ忘れてた」となり急いで画像を出力したわけですね&#129400;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:06:23.403 ID:67r4OKEOr<>データくれんか？<br>サーバーに負担かかるからスクレイピングするか悩んでたんやけどあるなら欲しいわ<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:08:00.783 ID:67r4OKEOr<>ビニールハウスに部スレ立ててほしいわ<br>多分活用そんなにされんやろうけど<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:12:42.264 ID:b8z99zCiE<>上がってるんだね&#129402;<>
野に咲く名無し@転載禁止<> (主)<>2024/03/01 (金) 21:15:13.585 ID:b1Er5XFxg<> <a class="ank rep-19" href="/?st=16#tulipplantation/1709293797/">&gt;&gt;16</a><br><iframe scrolling="no" style="display:block;width:100%;height:155px;max-width:500px;margin:10px 0px;" loading="lazy" src="https://hatenablog-parts.com/embed?url=https://tulip-kako.fox-tools.workers.dev/tulipplantation/subject.txt" frameborder="0"></iframe>https://tulip-kako.fox-tools.workers.dev/tulipplantation/subject.txt<br>で全過去スレのスレタイ一覧が取れるのでスレ番号から日時に変換しています&#129299;<br>大元からのデータ取得は1日1回、上記URLへのアクセスごとにさらに1回なので農園鯖への影響は極小と思われます&#129402;<br>書き込み数を分析したい場合は全てのdatを開く必要がありこれは流石に鯖への影響が大きいのでやってません&#128533;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:16:31.080 ID:67r4OKEOr<> <a class="ank rep-20" href="/?st=19#tulipplantation/1709293797/">&gt;&gt;19</a><br>サンガツ<br>レス数ってどばっと取れる？<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:20:20.562 ID:67r4OKEOr<>取れるみたいやね<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:21:28.410 ID:12dC2lmYC<>はえー休みも日数も少ない2月の方がスレ建て多かったんやね<br>賑わってて嬉しい&#129303;<>
野に咲く名無し@転載禁止<> (主)<>2024/03/01 (金) 21:21:51.364 ID:b1Er5XFxg<> <a class="ank rep-23" href="/?st=20#tulipplantation/1709293797/">&gt;&gt;20</a><br>レス数の情報は現行スレなら<br><iframe scrolling="no" style="display:block;width:100%;height:155px;max-width:500px;margin:10px 0px;" loading="lazy" src="https://hatenablog-parts.com/embed?url=https://tulipplantation.com/tulipplantation/subject.json" frameborder="0"></iframe>https://tulipplantation.com/tulipplantation/subject.json<br>から取れるんだけど<br>過去スレは<br><iframe scrolling="no" style="display:block;width:100%;height:155px;max-width:500px;margin:10px 0px;" loading="lazy" src="https://hatenablog-parts.com/embed?url=https://tulipplantation.com/tulipplantation/thread/1709/subject.json" frameborder="0"></iframe>https://tulipplantation.com/tulipplantation/thread/1709/subject.json<br>みたいにレス数の情報が消えちゃう仕様なんだよね??<br>だからレス数を集計したいなら各スレのdatファイルを開いて行数から数えないといけない<br>各datにアクセスするにはしっかり間隔を開けないと鯖の負担が大きくなっちゃう&膨大な数になるからワイはやってない??<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:24:01.424 ID:67r4OKEOr<> <a class="ank rep-24" href="/?st=23#tulipplantation/1709293797/">&gt;&gt;23</a><br>そうなると書き込み数が増えたかを簡単には調べられそうやないや<br>スクレイピングは簡単やが負荷が気になる<>
野に咲く名無し@転載禁止<> (主)<>2024/03/01 (金) 21:26:52.712 ID:b1Er5XFxg<> <a class="ank rep-25" href="/?st=24#tulipplantation/1709293797/">&gt;&gt;24</a><br>そうなんだよねえ&#129402;<br>当然レス数も数えたい気持ちはあるけど農園本体の負荷になることはしたくないし<br>まあ遊び目的の統計だからワイはスレッド数だけでいいかなって感じ<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:31:36.056 ID:67r4OKEOr<>今ちょいまち<br>すぐにコード書くわ<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:33:32.749 ID:67r4OKEOr<>ワードクラウドまで行けるやろか<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:36:38.445 ID:c16MbIXDP<>はえ〜<br>なに喋ってるかわかんないけどがんばえ〜&#129402;&#9994;&#9994;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:49:38.344 ID:739GGp0am<>昼12はやっぱふえるわね<>
野に咲く名無し@転載禁止<> (主)<>2024/03/01 (金) 21:52:46.071 ID:b1Er5XFxg<> <a class="ank rep-30" href="/?st=27#tulipplantation/1709293797/">&gt;&gt;27</a><br>スレタイのならワードクラウド作れると思う&#9994;&#128563;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 21:55:24.503 ID:67r4OKEOr<> <a class="ank rep-31" href="/?st=30#tulipplantation/1709293797/">&gt;&gt;30</a><br>今pandasで分割中<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 22:01:53.451 ID:749kRnM0s<>&#128060;?<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 22:05:53.197 ID:67r4OKEOr<># txtは別途utf-8に変換してね<br><br>import pandas as pd<br>import re<br>import datetime<br><br>with open(&quot;./subject.txt&quot;) as f:<br>    l = f.readlines()<br><br>df = pd.DataFrame(l, columns=［&quot;data&quot;］)<br>df = df［&quot;data&quot;］.str.extract(r&quot;^(\d+)\.dat&lt;&gt;(.+)\(1\)$&quot;)<br>df.rename(columns={0: &quot;date&quot;, 1: &quot;title&quot;}, inplace=True)<br>df［&quot;date&quot;］ = df［&quot;date&quot;］.astype(int).apply(lambda x: datetime.datetime.fromtimestamp(x))<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 22:06:45.545 ID:67r4OKEOr<> <a class="ank rep-34" href="/?st=33#tulipplantation/1709293797/">&gt;&gt;33</a><br>とりあえず前処理用のコード<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 22:43:48.508 ID:210o0Hobd<>学びガール&#128103;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 22:54:36.647 ID:67r4OKEOr<> <a class="ank rep-36" href="/?st=33#tulipplantation/1709293797/">&gt;&gt;33</a>続き<br>hourly_counts = df.resample(&quot;h&quot;, on=&quot;date&quot;).size()<br>import statsmodels<br>from statsmodels.tsa.seasonal import STL<br>import matplotlib.pyplot as plt<br><br>hourly_counts.plot()<br><br># 1時間ごとなので24分割<br>stl = STL(hourly_counts, period=24, robust=True)<br>stl_series = stl.fit()<br><br>stl_series.plot()<br>plt.show()<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 22:57:24.608 ID:67r4OKEOr<>SLT分解してみたで<br>ただ単にプロット<br><a href="https://i.imgur.com/Y2neoee.png" data-lightbox="image"><img class="image img-37" src="https://i.imgur.com/Y2neoee.png" loading="lazy"></a><br>https://i.imgur.com/Y2neoee.png<br><br>ピリオドが24でSLT分解<br><a href="https://i.imgur.com/TWIEpyN.png" data-lightbox="image"><img class="image img-37" src="https://i.imgur.com/TWIEpyN.png" loading="lazy"></a><br>https://i.imgur.com/TWIEpyN.png<br>24 * 7 で分解<br><a href="https://i.imgur.com/hfevflJ.png" data-lightbox="image"><img class="image img-37" src="https://i.imgur.com/hfevflJ.png" loading="lazy"></a><br>https://i.imgur.com/hfevflJ.png<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 22:57:47.796 ID:67r4OKEOr<>このことからトレンド的には緩やかに人口は増加しとるみたいや<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 22:58:34.370 ID:67r4OKEOr<>残差もいい感じにバラけてる臭いしまあおかしくはないんちゃう？<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 22:58:54.379 ID:67r4OKEOr<>以上統計部（幽霊部員）の感想でした<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 23:02:11.419 ID:ad1mGtzGr<>全然わかんないけどとりあえず統計部員さんめっちゃ頭良さそうなのは分かった&#129402;すごいぷゆ<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 23:13:27.694 ID:4cdfTfGeS<>1月はあけおめスレの乱立とかだろうけど2月の3本くらいは何があったんやこれ<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 23:17:58.211 ID:67r4OKEOr<> <a class="ank rep-43" href="/?st=41#tulipplantation/1709293797/">&gt;&gt;41</a><br>何が調べたくて言いたかったかというとここの人口は<br>スレ数が増える=人口は増加している<br>と仮定したとき<br>スレ数のトレンドは緩やかな上昇トレンドなので多分人口も緩やかに増えてるっぽいってことやで<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 23:19:07.676 ID:c16MbIXDP<>バレンタインとか？<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 23:19:44.196 ID:749kRnM0s<>&#128060;すごい&#129402;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 23:23:42.098 ID:16OYUoU3x<> <a class="ank rep-46" href="/?st=42#tulipplantation/1709293797/">&gt;&gt;42</a><br>クソスレ便乗大喜利乱立かもしれんね??<>
野に咲く名無し@転載禁止<> (主)<>2024/03/01 (金) 23:24:52.927 ID:b1Er5XFxg<> <a class="ank rep-47" href="/?st=37#tulipplantation/1709293797/">&gt;&gt;37</a>　&#10067;<br>はえ〜 &#129402;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 23:26:31.319 ID:57AIYM7sn<>NISA部かなんかで便乗スレ立ちまくってそれ見た農園主が荒らしと思ってビックリしたのがきっかけでちょっとしたブームになったんやっけ？&#129300;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 23:28:17.972 ID:c1YIi0lHT<>たしかスレタイ改変ブームは2回くらいあったのは覚えてる&#129402;<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 23:30:43.145 ID:67r4OKEOr<> <a class="ank rep-50" href="/?st=37#tulipplantation/1709293797/">&gt;&gt;37</a><br>これSTL分解や……<br>恥ずかしすぎる<>
野に咲く名無し@転載禁止<><>2024/03/01 (金) 23:55:29.216 ID:67r4OKEOr<> <a class="ank rep-51" href="/?st=47#tulipplantation/1709293797/">&gt;&gt;47</a><br>STL分解によってグラフの変化の仕方を以下の2つに分けたんや<br><br>    トレンド：時系列データの長期的な傾向を表す成分。例）経済成長率や人口増加率など<br>    季節性　：時系列データの周期的な変動を表す成分。例）気温や売上高など（朝はスレか立たないとか土日はスレが立たないとかそういうの）<br><br>    残差　　：トレンドと季節性の影響を取り除いた成分。　例）天候や突発イベントなど（要は誤差やら外れ値やらなんやら）<br><br>トレンドを見ることによってもとの上下激しいグラフから画像のように滑らかに変化するグラフを抽出することでスレは立つことが増えてるのか？を調べたかったんやで<br><br>ここから先に進むとどのくらいスレが今後立つようになるのかの予測がしやすくなったりする感じやね<>
野に咲く名無し@転載禁止<><>2024/03/02 (土) 00:02:52.864 ID:21IXo9S8p<>2やなくて3つやね<>