平素よりウェブ魚拓をご利用いただきありがとうございます。
ウェブ魚拓はrobots.txtによるロボット禁止、あるいはメタタグによるnoindexとnoarchiveどちらかが指定されていた場合取得を禁止としておりましたが、
この度、robots.txtの内容とメタタグのnoindexによる判定を廃止し、メタタグのnoarchiveのみを取得の禁止とすることとしました。
robots.txtの方針につきましてはもともと「私はロボットではありません」いう判定をウェブ魚拓に追加したことで修正する予定でした。
また、メタタグのno～のindexとarchiveは単語の通り意味合いが異なり、
noindexを廃止する計画はありましたが、認知がある程度進んでから行うこととしておりました。
特に昨今のSNSは政治含む公的な意見発信の場としての性質が強くなっている背景があり、この度修正が急務と感じました。なお、noarchiveも今後どうしていくか検討をし、現時点の判断からまた変更となるかもしれません。
以上どうぞよろしくお願いいたします。