Twitter、1台のつよつよPC(1TBメモリ、8TB SSD)で運用できると判明。どうやったらこれで赤字になるんだよ… [858219337]
■ このスレッドは過去ログ倉庫に格納されています
2023年01月11日
Twitterをたった1台のPCで運用するためにはどれぐらいのスペックが必要なのか？
また、Twitterはツイートに関するさまざまなデータを公開しており、ヒューム氏によると、公開されたデータの多くは現代のコンピューターの規模では比較的小規模な数値とのこと。
そこで、ヒューム氏はツイートの保存にRAMやNVMe、HDDを混合したものを考案しています。必要なスペックとして、512GB～1TBのRAMや、8TB以上の容量で高速なNVMeドライブを搭載することを推奨しています。また、HDDには20TBの基本的にアクセスされることがない古いツイートを保存するそう。
ヒューム氏はプログラミング言語のRustを用いてプロトタイプを作成し、タイムラインのマージに関するベンチマークを行いました。その結果、すべての負荷の処理に十分な速度が得られ、実際のTwitterの負荷に対応できることを確認しています。
https://gigazine.net/news/20230111-twitter-one-machine/ CPUは、どれくらいの並列処理性能が要るのかね？
「藤井聡太級」マシンを十台並べるとか。
外部のツールとか使えなくすればいけるかも
割と５ｃｈはモデルだよね 1TBのメモリってどうやって用意するの？🤔
業務用でそういうのあるの？ 接続数捌く方が大変なのでは？
実際どうやってるのかな？ 色々オチがあるけど
>ヒューム氏はTwitterを1台のPCに構築するコストを概算しています。
>ヒューム氏はTwitterのすべてを1台のマシンで実行するために、16コアのXeonCPUを2つ、
>768GB RAM、46TB NVMe、360TB HDD、NVIDIA A100 Tensor コア GPU、Dell PowerEdge R740xdを使うことを想定しています。
サーバーのコスト：1万5425ドル(約203万円)
32GBのRAM 24個：3168ドル(約41万8千円)
samsung PM1733 8tb NVMe 6個：7200ドル(約95万円)
NVIDIA A100 Tensor コア GPU：1万ドル(約132万円)
帯域幅を使用するためのコスト：1年で約13万ドル(約1714万円) 2ちゃんねるよりずっと処理重いし世界規模なのに
大丈夫なのか 回線代が一番コストかかるんだな
ランニングコスト高すぎる 世界中のrequestが細いLANケーブル通って1台のPCにぶち込まれるなヤバない？ 1人1人に全く別のタイムラインを無料で提供するのって、凄いよなぁ。 >>18
ソースはTwitterの機能のうち最低限の部分からフルサービス
さらにメンテや無停止までシステムをスケールアップしながら試算してて
オチはさほど変でも無い 2ちょんが1千万回アクセスということは
平均1秒に1万回ぐらいだろう
転送は0.3kbpsぐらいか
うまくすればノートパソコンで捌けるかなあ 基本テキストベースだからこんなもんだよ
君らが想像している以上に軽い処理 5chのサーバってどれくらいのスペックなん？
メモリ32GBCPU8コアくらい？ そう考えると5chなんかノートPC一台で実は余裕なのでは
今時テキストオンリーの掲示板が重いとか荒らしの負荷がなんたらで浪人買えとか嘘臭いよな >>40
古いソースが残りすぎててまともに改善出来ないのと単純に技術力が低いんだと思う
本来は楽勝だろうね 全サービスを1ユーザーとか限定でよければこれでも提供できるとかの話だな やっす
今は画像や動画ツイもあるし過っ疎過疎でなければ一台回線は無理だろ こういう計算できるの頭良さそうだよな大学行ってそう こいつが取締役ならツイッター社が無駄に金浪費するのは防げたかもな RAMとSSDの容量がきっついな、むちゃくちゃ金かかるじゃん。HDDも実際その容量揃えたらすげえ台数になるな 今まではユーザー数が増加し続けてきたからスケールしやすいような構成になってきたけど
ユーザー数が変わらないか下がる状況ならこういうので運用するのもありなのかもな
今はサーバー１０万台もあるってよ 設備費も人件費も交際費も無駄遣いしまくってるなぁ… >>9
サーバーなら2564枚刺しもいけるだろうし、512二枚でもいい
一枚1TBでは見かけないというだけじゃ？ >>57
もう１０年前にScalaに書き換えたって話だけど今ならもっと別のになってるかもな 40GのSFPが何10本も刺さってる箱が高いんやろ… 一定以上時間たったら破棄でいいだろ
そしたらもっと自由にモノ言える >>11
これ買ったらマイクラサーバー立てられるんか？
ええやんけ 言うてもテキスト保存だからな
画像や動画は引用だし 昔は有名なアップローダーも、自作のPCで運用されてたもんね
回線が弱かったから負荷は小さかったのかもしれないけど これRAMが足りなかったらどうやって高速化するんだろう 何千万ものトランザクションが走る基幹業務と違ってユーザ数が多いだけだしな この手のはNICの要件がきつい
帯域云々じゃなくてリクエストが捌けない 社員のつまみ食いするためのお菓子よりサーバー強化した方がよほど収益上がりそう >>11
もうすでにパーソナルなコンピューじゃないじゃん
情報系の研究室で端末を「パソコン」とよんだらヘイト食らうのは今も伝統なのかな
「計算機と呼べ」と返ってくる いやいやネットワークが耐えられんだろ
どれだけの動画や画像が見られてると思ってんだ ナード50人で運用できるな
モデレートや監視作業は外注で >>11
回線費用そんなに安いわけ無いわ
DDoSに狙われる価値があるサイトなんだから Twitterに保存されてるデータ容量ってどのくらいなのかね ■ このスレッドは過去ログ倉庫に格納されています
