Twitter、1台のつよつよPC(1TBメモリ、8TB SSD)で運用できると判明。どうやったらこれで赤字になるんだよ…

1 : 2023/01/11(水) 10:20:07.25 ID:yPVxgRSgM: 2023年01月11日
Twitterをたった1台のPCで運用するためにはどれぐらいのスペックが必要なのか？

また、Twitterはツイートに関するさまざまなデータを公開しており、ヒューム氏によると、公開されたデータの多くは現代のコンピューターの規模では比較的小規模な数値とのこと。

そこで、ヒューム氏はツイートの保存にRAMやNVMe、HDDを混合したものを考案しています。必要なスペックとして、512GB～1TBのRAMや、8TB以上の容量で高速なNVMeドライブを搭載することを推奨しています。また、HDDには20TBの基本的にアクセスされることがない古いツイートを保存するそう。

ヒューム氏はプログラミング言語のRustを用いてプロトタイプを作成し、タイムラインのマージに関するベンチマークを行いました。その結果、すべての負荷の処理に十分な速度が得られ、実際のTwitterの負荷に対応できることを確認しています。
https://gigazine.net/news/20230111-twitter-one-machine/
2 : 2023/01/11(水) 10:21:23.75 ID:aVZiwI4g0: 1台にアクセスが集中してパンクしないの？
3 : 2023/01/11(水) 10:21:35.85 ID:hajmd6GP0: なお回線
4 : 2023/01/11(水) 10:22:26.50 ID:hLQwQ9kk0: CPUは、どれくらいの並列処理性能が要るのかね？

「藤井聡太級」マシンを十台並べるとか。
5 : 2023/01/11(水) 10:22:44.43 ID:TeYcCQwb0: PCつよつよ剣
6 : 2023/01/11(水) 10:23:04.89 ID:ljOBwiqC0: 外部のツールとか使えなくすればいけるかも
割と５ｃｈはモデルだよね
8 : 2023/01/11(水) 10:24:07.76 ID:PKzyfRsQ0: 画像と動画はimgrを使います
9 : 2023/01/11(水) 10:24:31.51 ID:it9H74Dn0: 1TBのメモリってどうやって用意するの？🤔
業務用でそういうのあるの？
59 : 2023/01/11(水) 11:22:33.48 ID:GS9lVq8m0: >>9
サーバーなら2564枚刺しもいけるだろうし、512二枚でもいい
一枚1TBでは見かけないというだけじゃ？
10 : 2023/01/11(水) 10:24:50.76 ID:p3ZgYCTmM: 接続数捌く方が大変なのでは？
実際どうやってるのかな？
12 : 2023/01/11(水) 10:26:09.67 ID:YZhwPOql0: 閲覧は分散キャッシュだろ
13 : 2023/01/11(水) 10:26:16.85 ID:padaAHDu0: 無理だろ
14 : 2023/01/11(水) 10:26:38.57 ID:fjYwplAp0: 2ちゃんねるよりずっと処理重いし世界規模なのに
大丈夫なのか
15 : 2023/01/11(水) 10:26:52.30 ID:KILgbYCQa: 回線代が一番コストかかるんだな
ランニングコスト高すぎる
17 : 2023/01/11(水) 10:26:55.66 ID:vhL3pPey0: どうせ回線がネックになる
20 : 2023/01/11(水) 10:28:56.88 ID:ZGpmhnPIp: 火吹きそう
21 : 2023/01/11(水) 10:29:23.00 ID:4D3E2dRJ0: キラキラ社員たちのお賃金:0ドル
22 : 2023/01/11(水) 10:29:26.86 ID:hWqC63Wz0: いくらテキストデータでも8Tで済むのかよ！
23 : 2023/01/11(水) 10:29:45.13 ID:AmW8UPU00: DBの概念すら知らないケンモメンwwww
24 : 2023/01/11(水) 10:30:07.95 ID:eFzMR2opM: 1人1人に全く別のタイムラインを無料で提供するのって、凄いよなぁ。
26 : 2023/01/11(水) 10:30:25.91 ID:L5+klZbZ0: cpuとgpuは？🤔電源とケースは？🤔水冷式？🤔
30 : 2023/01/11(水) 10:32:42.76 ID:GSCGNVZD0: 酒が飲めないじゃん酒が
31 : 2023/01/11(水) 10:32:46.50 ID:7efcgUU00: ケンモよわよわ剣
32 : 2023/01/11(水) 10:34:26.67 ID:fjYwplAp0: 2ちょんが1千万回アクセスということは
平均1秒に1万回ぐらいだろう
転送は0.3kbpsぐらいか
うまくすればノートパソコンで捌けるかなあ
33 : 2023/01/11(水) 10:35:01.28 ID:rppUUreQ0: 画像や動画もアップされまくるのに8TBで足りる？
34 : 2023/01/11(水) 10:35:34.53 ID:swP+m1qta: オレのノーパソくらいか🤔
36 : 2023/01/11(水) 10:36:46.55 ID:Xv4W4AOLM: 基本テキストベースだからこんなもんだよ
君らが想像している以上に軽い処理
37 : 2023/01/11(水) 10:36:47.41 ID:6ZHrpKg50: いや無理だろ
アクセス集中考えたら
38 : 2023/01/11(水) 10:37:06.12 ID:OXv2oYrF0: 実質Rustの宣伝だろこれ
39 : 2023/01/11(水) 10:38:13.26 ID:C48l7vbq0: 5chのサーバってどれくらいのスペックなん？
メモリ32GBCPU8コアくらい？
40 : 2023/01/11(水) 10:40:07.02 ID:x3OeOe/Z0: そう考えると5chなんかノートPC一台で実は余裕なのでは
今時テキストオンリーの掲示板が重いとか荒らしの負荷がなんたらで浪人買えとか嘘臭いよな
42 : 2023/01/11(水) 10:42:58.48 ID:46AXBYAw0: >>40
古いソースが残りすぎててまともに改善出来ないのと単純に技術力が低いんだと思う
本来は楽勝だろうね
41 : 2023/01/11(水) 10:41:23.69 ID:g5hnrTxX0: 試算の進め方参考になるわ
44 : 2023/01/11(水) 10:46:13.50 ID:43ZYwRapM: 全サービスを1ユーザーとか限定でよければこれでも提供できるとかの話だな
45 : 2023/01/11(水) 10:47:08.48 ID:lVYGZiDZ0: たいした事書いてないしP2Pでいいじゃん
46 : 2023/01/11(水) 10:47:22.42 ID:zNaKCoYZM: やっす
今は画像や動画ツイもあるし過っ疎過疎でなければ一台回線は無理だろ
47 : 2023/01/11(水) 10:48:18.30 ID:1ERW6s7D0: こういう計算できるの頭良さそうだよな大学行ってそう
48 : 2023/01/11(水) 10:50:28.38 ID:iFFS788A0: こいつが取締役ならツイッター社が無駄に金浪費するのは防げたかもな
49 : 2023/01/11(水) 10:55:55.32 ID:AoH3KSC20: 省いてる検索と動画もコストかかるよな
51 : 2023/01/11(水) 10:59:56.83 ID:kVQwk+dK0: RAMとSSDの容量がきっついな、むちゃくちゃ金かかるじゃん。HDDも実際その容量揃えたらすげえ台数になるな
54 : 2023/01/11(水) 11:05:08.02 ID:AoH3KSC20: 今まではユーザー数が増加し続けてきたからスケールしやすいような構成になってきたけど
ユーザー数が変わらないか下がる状況ならこういうので運用するのもありなのかもな
今はサーバー１０万台もあるってよ
55 : 2023/01/11(水) 11:07:58.25 ID:8JBiahBqp: 5chの何倍？
56 : 2023/01/11(水) 11:16:00.30 ID:SPgKbqGW0: 設備費も人件費も交際費も無駄遣いしまくってるなぁ…
57 : 2023/01/11(水) 11:16:13.50 ID:ksb0PC/c0: TwitterってまだRails使ってるの？
62 : 2023/01/11(水) 11:32:51.26 ID:46AXBYAw0: >>57　かなり昔にやめたよ重いから
63 : 2023/01/11(水) 11:36:54.08 ID:AoH3KSC20: >>57
もう１０年前にScalaに書き換えたって話だけど今ならもっと別のになってるかもな
72 : 2023/01/11(水) 11:59:18.25 ID:l64Uzy4PM: >>63
今もscalaじゃないの？
61 : 2023/01/11(水) 11:32:46.09 ID:cASZza480: ネットワーク負荷だけで無理だとわかる
64 : 2023/01/11(水) 11:37:42.72 ID:92GZnv0Xa: 40GのSFPが何10本も刺さってる箱が高いんやろ…
65 : 2023/01/11(水) 11:44:41.07 ID:6ea4N3z60: 9割以上は人件費とネットワークコストだろ
66 : 2023/01/11(水) 11:49:18.32 ID:XEgAjdrL0: 一定以上時間たったら破棄でいいだろ
そしたらもっと自由にモノ言える
68 : 2023/01/11(水) 11:53:05.46 ID:fHnAPaula: 買うより作ったほうが安かった😹
69 : 2023/01/11(水) 11:53:41.99 ID:u9rKA3hs0: P2P式ネットワークにしたら
70 : 2023/01/11(水) 11:55:04.96 ID:KVZDpjdi0: 言うてもテキスト保存だからな
画像や動画は引用だし
71 : 2023/01/11(水) 11:58:35.87 ID:Uyjderita: 昔は有名なアップローダーも、自作のPCで運用されてたもんね
回線が弱かったから負荷は小さかったのかもしれないけど
73 : 2023/01/11(水) 12:03:57.71 ID:l64Uzy4PM: これRAMが足りなかったらどうやって高速化するんだろう
74 : 2023/01/11(水) 12:11:10.86 ID:jdvUsEsuM: 何千万ものトランザクションが走る基幹業務と違ってユーザ数が多いだけだしな
75 : 2023/01/11(水) 12:12:57.04 ID:M36ZVY1+M: まるでオリンピックみたいな話だな
76 : 2023/01/11(水) 12:13:04.03 ID:Ukdc43HM0: いやさすがに１台じゃ無理だろｗ
77 : 2023/01/11(水) 12:16:04.81 ID:LB3YMyrg0: この手のはNICの要件がきつい
帯域云々じゃなくてリクエストが捌けない
78 : 2023/01/11(水) 12:18:15.26 ID:PFjrBWId0: 社員のつまみ食いするためのお菓子よりサーバー強化した方がよほど収益上がりそう
80 : 2023/01/11(水) 12:20:24.00 ID:us+pcNvS0: いやいやネットワークが耐えられんだろ
どれだけの動画や画像が見られてると思ってんだ
81 : 2023/01/11(水) 12:22:27.56 ID:kEbbfAw/0: ナード50人で運用できるな
モデレートや監視作業は外注で
83 : 2023/01/11(水) 12:48:18.02 ID:PTWAoQnkM: Twitterに保存されてるデータ容量ってどのくらいなのかね
85 : 2023/01/11(水) 18:50:11.67 ID:e6cli84sM: バックアップなしのストロングスタイル