話題
2026年9月16日
Wayback Machineのボット対策強化「ペイウォール回避は公然の秘密」海外で議論
Internet Archiveが2026年9月15日、公式ブログでWayback Machineへのアクセス方針の更新を発表した。悪質なボットと、日々ページ保存や記事閲覧のために使う一般利用者を見分ける精度を上げているという内容で、これを受けてHacker Newsでは「会社のPCだと毎回429エラーになるのに自宅やスマホだと通る」といった実体験や、AI企業にアクセス料を課すべきかどうか、そしてWayback Machineが有料記事のペイウォールを回避する手段として広く使われている実態を巡って議論が交わされた。
Wayback Machineへのアクセスについての最新情報
出典: blog.archive.org / 元記事はこちら
4
海外の名無しさん
2026-09-15 18:54
AI企業はWayback Machineへのアクセスに何十億ドルも払うべきだ
17
海外の名無しさん
2026-09-15 19:04
それだと深刻な著作権の問題になると思う。Wayback Machineが他人の知的財産を売ることになるわけだから
5
海外の名無しさん
2026-09-15 18:31
「悪質なボットと、日々Wayback Machineに頼っている利用者を見分ける精度を上げています。誤ってブロックされたと思ったら、OS・ブラウザ・IPアドレスを添えて
[email protected] までメールしてください。調査します」
6
海外の名無しさん
2026-09-15 18:42
へえ、でも裏に何かあるんじゃないかと思う。職場のPCからはweb.archive.orgにアクセスできなくて、いつも429エラーになる。でもスマホを取り出すと普通にアクセスできる。ずっと会社がブロックしてるんだと思ってた。でも職場のPCだと毎回、自宅のPCだと一度もならないのは相変わらず不思議だ
18
海外の名無しさん
2026-09-15 18:46
たぶん会社のネットワークのIP範囲が、一部のスクレイパーが使っているIP範囲と重なってるんだと思う。社内ネットワークでもスマホでは起きないなら、IAはIP以外にもユーザーエージェントみたいな追加のシグナルをチェックしてるんじゃないかな
19
海外の名無しさん
2026-09-15 18:44
職場のISPのIPブロック、あるいは複数の職場にIPを貸し出しているもっと大きなブロックにいるスクレイパーが原因かもしれない
9
海外の名無しさん
2026-09-15 18:42
そのうちAnubis(ボット対策システム)の後ろに置かれることになるんじゃないかな。まだそうなってないのが意外だ
20
海外の名無しさん
2026-09-15 19:02
これについてはHNに山ほどスレが立ってるけど、Anubisは機能しない
10
海外の名無しさん
2026-09-15 19:00
「悪質なボット」って、その悪質なボットは今この場にいるのか?
11
海外の名無しさん
2026-09-15 18:50
ダウンロードする側が費用を払う形でS3に置けばいいんじゃないか?
21
海外の名無しさん
2026-09-15 18:59
公共のリソースとして、Waybackは無料でアクセスできることが望ましい。有料化は最後の手段だろうと思う
12
海外の名無しさん
2026-09-15 18:27
クローラー向けに有料のエンドポイントを用意すればいいんじゃないか。需要がすぐになくなるわけでもないし。片方がブロッカーを作り、もう片方が家庭用テレビにVPN SDKを仕込むのに金を使う状況は、CloudFlareとハードウェア企業以外の誰の得にもならない。それと、(ロシア系?)のペイウォール回避ミラーarchive.isも似たようなトラフィックを受けてるはずだけど、どうやってるのか気になる
23
海外の名無しさん
2026-09-15 18:34
それだとサイト側がInternet Archiveのクローラーもブロックするだけだろう
24
海外の名無しさん
2026-09-15 19:06
「クローラー向けに有料エンドポイントを用意すればいい」→それをやったら確実に米国の著作権法違反になる。フェアユースの判断基準は4要素あって、その一つが『利用の性質』。有料化した時点で商業利用になってしまう
13
海外の名無しさん
2026-09-15 19:08
ちょうど昨日、Sol(AIツール)とのセッションでこう出た。「Hacker NewsとRailsフォーラムがテキスト取得ツールをブロックしているので、ブラウザ経由のワークフローで直接ページを確認しています」
14
海外の名無しさん
2026-09-15 18:29
これは実際に起きていることだ。『Wayback Machineへのフォールバック』を機能として売りにしている有料スクレイパーAPIまである
27
海外の名無しさん
2026-09-15 18:50
Waybackを検索すればペイウォールを回避できることが多いというのは、ある意味公然の秘密だ
26
海外の名無しさん
2026-09-15 18:29
他社のコンテンツをアーカイブするのと、そのアクセス権を売るのとでは話が別だ
31
海外の名無しさん
2026-09-15 18:30
そこは弁護士が整理すべき話で、米国の非営利団体としてかなり融通が利く。判例もそこまで明確に決まっているわけではない
35
海外の名無しさん
2026-09-15 18:32
Internet Archiveはここ数年、出版社からの著作権訴訟でほぼ潰されかけた。今、同じような訴訟リスクを追加で背負いたいとは思っていないはずだ
36
海外の名無しさん
2026-09-15 18:54
アーカイブするにはサイトへのアクセスが必要で、今でさえそれは大変なのに、コンテンツへのアクセスを売り始めたらどうなるか。法律がどうであれ、自分の足を撃つようなものだ
29
海外の名無しさん
2026-09-15 18:54
Redditが匿名のold.reddit.comを廃止したことには言い訳の余地がない。単に欲深いだけだ。一方でInternet Archiveは無料の公共リソースを提供する非営利団体だ
33
海外の名無しさん
2026-09-15 18:57
技術的な例として挙げられているだけで、感情的な話はこのスレの対象外だ
30
海外の名無しさん
2026-09-15 18:43
そうだそうだ、Internet Archiveは自分を何様だと思ってるんだ、(好きなAI企業の名前をここに入れてくれ)みたいな
32
海外の名無しさん
2026-09-15 18:52
HNにリンクされる有料記事には、ほぼ必ず一番最初のコメントにWayback Machineのリンクが付いている
38
海外の名無しさん
2026-09-15 18:54
そのリンクは大抵Archive.today(archive.phなど複数のドメインを持つサービス)であって、Internet Archiveが運営するWayback Machineではない
37
海外の名無しさん
2026-09-15 18:47
それはかなり[要出典]だ。著作権の強大な権利に対する例外はごく限られていて、主に図書館向けに狭い範囲で認められているだけ。強力な著作権者を相手に争うコストだけでも、比較的資金の乏しい非営利団体なら破産しかねない
この話題の背景と論点
Internet Archiveは2020年代前半、出版大手からの著作権訴訟(Hachette対Internet Archive)で電子貸出サービスの一部差し止めを命じられており、スレ中で触れられている「追加の訴訟リスクを取りたくないはず」という見方はこの経緯を踏まえたものだ。米国著作権法のフェアユース判断は目的・性質、著作物の性質、利用量、市場への影響の4要素で判断され、対価を取る配布は「利用の性質」の面で不利に働くとされる。意見が割れたのは、AI企業や有料クローラーからアクセス料を取ることの是非で、収益化はIAの非営利性や無料公開の理念と衝突するとの指摘があった一方、需要に応じた課金は現実的だという声もあった。また、Wayback Machineが有料記事のペイウォール回避手段として日常的に使われている点は、日本ではあまり知られていない海外エンジニア界隈の慣習といえる。
※本記事は5ch(Hacker News)スレッド「An Update on Wayback Machine Access 」より抜粋・要約して構成しています。
この記事のリアクション
😆 おもしろい 0 😮 びっくり 0 😢 かなしい 0 👍 わかる 0 😠 ひどい 0
まだコメントはありません。