Проблема с Гугелем не в его размере, а в том, что это не айтишная компания, а лавка с весьма подозрительными интересами и деятельностью, явственно откочевавшими от вполне травоядной торговли рекламными площадями в прошлом к использованию собираемых личных и прочих данных для активного влияния на политику. Тут бы годилось Гугель государственным банхаммером если не запретить насовсем, то поделить на мелкие лавки по интересам — и пусть занимаются своим делом, а не чем-то посторонним.

А индексирование — не так уж велик сей труд. Все индексируют, кто поиском занимаются.