Googleは機関リポジトリのコンテンツを半分しかクロールしていない?

Googleの検索エンジンがOAIsterに収録されている機関リポジトリの論文レコードをどの程度インデックスしているかを調査・分析した論文がD-Lib Magazine Volume 14 Number 7/8 (July/August 2008)に発表されています。

その結果によると、サンプル全体で44%のレコードしかインデックスされていないことが判明したとのことです。

Google Still Not Indexing Hidden Web URLs
http://www.dlib.org/dlib/july08/hagedorn/07hagedorn.html

Google and the academic Deep Web
http://wowter.net/2008/07/28/google-and-the-academic-deep-web/