【海外の反応】AI圧縮、1週間かけても実用性に疑問の声
姉妹サイトの新着
海外掲示板4chanの/g/(Technology)で、ニューラルネットワークだけでデータを圧縮する新しい手法が話題になっていた。GPU2枚を使って1方向(圧縮または展開)に1週間かかるという内容に、スレ主以外の多くの住民が「時間がかかりすぎる」「そんなに電力を使って実用性はあるのか」と疑問の声を上げた。一方で、これは実用品ではなく縛りプレイ的にスコアを追求する研究目的の試みだという擁護も出て、議論は実用性と研究的価値の捉え方の違いで割れた。
なんで1週間もかかるんだ?100MBを1兆回も読んでるのか?
小さいLLMを、学習データをそのまま1対1で再現する以外何もできないレベルまで徹底的に過学習させてるだけだろうな
>100MBを1兆回読んでるのか
冗談のつもりだろうけど、Transformerって実際そういう仕組みだぞ。トークンを1つ生成するたびに全パラメータを読みに行く(MoEなら話は変わるけど、100MBクラスのモデルなら普通は密なモデルだろう)
>1週間
www
つまりこれ、実用性のほとんど無い純粋なAIの自己満足じゃん
お前の年金(401k)はそのAIの自己満足にかかってるんだぞ
でも任意のページだけ取り出して読むことってできるのか?
できるよ、だいたい1週間後にね
画像をプロンプトに変換して「圧縮した」って言ってた奴を思い出すな
5MBの『オデュッセイア』1080p版、再生前に解凍で3週間待たされるやつが待ち遠しいよ
>圧縮処理: データを削除する
>解凍処理: 宇宙が入力データと全く同じものを生み出す条件を自然に作り出すまで待つ
RAR社の株が急落してるぞ
ありがとうnvidia
本当に魔法みたいに効率的だな
Wikipediaなんてほとんどテキストだろ、zipなら数秒で同じことができるぞ
他サイトの新着
圧縮や通信なんてもう時代遅れの技術だよ。代わりにコンピュータに最初から全部知ってる状態まで学習させればいい
なんか過剰な気がする。圧縮率が2〜3倍落ちてもいいから、20倍速くて実用的に使えるモデルを作れないのか?
これは人が実際に使う製品として作られたものじゃない。
>「十数個のハイブリッド圧縮ツールがこのスコアを上回れるが、ニューラルネットワーク単体だけに頼るものは無い」
ゲームで特定の道具だけに縛ってハイスコアを狙う縛りプレイみたいなもんだよ。それがどこまでいけるか見てみたいだけ
B200はシェーダー用じゃなくて行列演算用だぞ、ディスプレイ出力ポートすら付いてない
>圧縮
>Wikipedia
5ポンドの袋にどれだけゴミを詰め込めるかって話だな
この話題の背景と論点
ニューラルネットワークによるデータ圧縮は、圧縮率の高さを突出して追求する研究分野として知られ、「知能の高さは圧縮の上手さで測れる」という考え方と結び付けて語られることがある。スレでも触れられている通り、Transformer系のモデルは出力1トークンごとに全パラメータを読みに行く仕組みのため、モデルが大きいほど圧縮・展開に時間がかかりやすい。スレで意見が割れたのは、この圧縮率の追求と、実際に使える圧縮ソフトとの違いをどう捉えるかという点だった。「GPU2枚で1週間かける圧縮に実用性があるのか」という懐疑派に対し、「そもそも実用品ではなく、縛りプレイ的にスコアを追求する試みだ」という擁護もあり、議論はかみ合わないまま進んだ。読者が誤解しやすいのは、この手法が既存の圧縮ソフトより優れているという意味ではない点で、スレの引用にもある通り、ニューラルネットワークを使わないハイブリッド圧縮ツールの方がスコア自体は上回っている。
※本記事は海外掲示板 4chan /g/ (Technology) のスレッド「AI compression is the future」から抜粋し、編集部で日本語に意訳したものです。訳文の責任は当サイトにあります。






まだコメントはありません。