ああああう
2：なんJゴッドがお送りします2022/06/02(木) ID:AxIa7RjJM
あ?
3：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
まじでうぜえ
4：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
画像はれねえ
6：なんJゴッドがお送りします2022/06/02(木) ID:AxIa7RjJM
やりゃええやん
7：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
mysqlでできる?
8：なんJゴッドがお送りします2022/06/02(木) ID:AxIa7RjJM
うん
9：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
連想配列うまく使ったらできる?
10：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
mysqlむずそうで嫌なんだが
11：なんJゴッドがお送りします2022/06/02(木) ID:Tp8tuWqg0
できるで
12：なんJゴッドがお送りします2022/06/02(木) ID:AxIa7RjJM
連想配列はMySQL関係ない
MySQL使わずに連想配列だけで作ることもできる
13：なんJゴッドがお送りします2022/06/02(木) ID:I33sm+Kb0
できますよ!ニコニコ
14：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
連想配列がsql関係ないのは知っとる
15：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
連想配列だけで作るか
16：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
みたいな感じで行くか
1{
id:
kakiko:
name:
}
17：なんJゴッドがお送りします2022/06/02(木) ID:AxIa7RjJM
解決したんか?
オンメモリで処理するならええけど永続化を考えると書き込み時のパフォーマンスが低下したりACIDのDが担保できなくなる可能性があることは覚えといてな
22：なんJゴッドがお送りします2022/06/02(木) ID:PljQ2UIE0
MySQLってどうなん?
25：なんJゴッドがお送りします2022/06/02(木) ID:AxIa7RjJM
>>22
パフォーマンスはPostgreSQLやMySQL互換のMariaDBのほうがええらしいからわざわざ選ぶ理由はあんまないと思う
26：なんJゴッドがお送りします2022/06/02(木) ID:AxIa7RjJM
スクレイピングして何をするんや?
32：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
>>26
5chの書き込みの分析したい
35：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
cheerio-httpcliってやつ使ってるんだが
36：なんJゴッドがお送りします2022/06/02(木) ID:hAj5HTrlM
スクレイピングならPythonでやってるなぁ
41：なんJゴッドがお送りします2022/06/02(木) ID:hAj5HTrlM
puppeteerよなJSなら
42：なんJゴッドがお送りします2022/06/02(木) ID:CjuC9Jts0
全体として何をやりたいのか説明してくれると
方針含めて相談しやすいぞ
IT系G民多いし
44：なんJゴッドがお送りします2022/06/02(木) ID:AxIa7RjJM
5chのスクレイピングとかグロガイジくらいしかやりたがりそうなやつおらん気がするわ
まああいつはすでにやってるんやろうけど
45：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
純粋にどんな単語がどれくらい使われてるか知りたいだけや
46：なんJゴッドがお送りします2022/06/02(木) ID:hAj5HTrlM
5chスクレイピングちゃんとやるならIPころころ機能つけないと面倒やから結局JSだけじゃ厳しいと思うわ
48：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
>>46
なんでipころころしないといけないんや?
60分おきにデータ取得とかでもだめなんか?
47：なんJゴッドがお送りします2022/06/02(木) ID:e8psufLB0
ようわからんけどfirebaseとかじゃあかんの?
49：なんJゴッドがお送りします2022/06/02(木) ID:hAj5HTrlM
形態素解析ってnodejsで便利にできたっけ
55：なんJゴッドがお送りします2022/06/02(木) ID:AxIa7RjJM
>>49
便利にやる方法はあんまないかもしれんけどJUMAN++とかを実行すればまあできるんちゃう
50：なんJゴッドがお送りします2022/06/02(木) ID:CKRDSgrH0
pythonでも出来る?
52：なんJゴッドがお送りします2022/06/02(木) ID:CjuC9Jts0
>>50
Pythonでもできるというか
スクレイピングはよく教材にされるから資料も多い
57：なんJゴッドがお送りします2022/06/02(木) ID:hAj5HTrlM
5chのAPI叩くなら問題ないとは思うけどそうやないなら800リクエストを60ごとは多分規制かかるで
60：なんJゴッドがお送りします2022/06/02(木) ID:seVx1N/X0
これしなきゃならないのか
・スクレイピングする際のipころころできるやつを見つける
・複数のURLをスクレイピングする方法を見つける
元スレ：https://nova.5ch.net/test/read.cgi/livegalileo/1654144895
