из Роботы.txt на острове Херд и островах Макдональд. Последнее обновление 07th мар 2025.
Googlebot Disallow в настоящее время является самой популярной технологией в этой категории.