Bislang hat der offizielle Googlebot ausschließlich IP-Adressen verwendet, die den USA zugeordnet waren. Jetzt scheint Bewegung in die Sache zu kommen und Google arbeitet daran, ebenfalls mit lokalen IP-Adressen zu crawlen, die nicht aus den USA kommen.
Gary Illyes, Webmaster-Kontaktperson von Google, hat auf dem Google Search Central Live-Event in Singapur gesagt, dass bereits lokale IP-Adressbereiche zugeteilt sein. Das System dafür ist aktuell aber noch nicht live und soll nur genutzt werden, wenn der Zugriff aus den USA gesperrt sei.
Seit letztem Jahr veröffentlicht Google eine offizielle Liste von IP-Adressen, mit denen der Googlebot crawlt. Diese habe ich nach Länderzuordnung aufgelöst. Hier die IP-Bereiche, die nicht den USA zugeordnet sind:
| IP-Netzwek | Land |
|---|---|
| 34.100.182.96/28 | Indien |
| 34.101.50.144/28 | Indonesien |
| 34.118.254.0/28 | Belgien |
| 34.118.66.0/28 | Polen |
| 34.126.178.96/28 | Singapur |
| 34.146.150.144/28 | Japan |
| 34.147.110.144/28 | Niederlande |
| 34.151.74.144/28 | Australien |
| 34.152.50.64/28 | Kanada |
| 34.154.114.144/28 | Italien |
| 34.155.98.32/28 | Frankreich |
| 34.165.18.176/28 | Israel |
| 34.175.160.64/28 | Spanien |
| 34.176.130.16/28 | Chile |
| 34.64.82.64/28 | Südkorea |
| 34.65.242.112/28 | Schweiz |
| 34.80.50.80/28 | Taiwan |
| 34.88.194.0/28 | Finnland |
| 34.89.10.80/28 | Großbritannien |
| 34.89.198.80/28 | Deutschland |
| 34.96.162.48/28 | Hongkong |
| 35.247.243.240/28 | Brasilien |
| 66.249.76.0/27 | Belgien |
| 66.249.76.128/27 | Belgien |
| 66.249.76.160/27 | Belgien |
| 66.249.76.192/27 | Belgien |
| 66.249.76.224/27 | Belgien |
| 66.249.76.32/27 | Belgien |
| 66.249.76.64/27 | Belgien |
| 66.249.76.96/27 | Belgien |
Gut zu sehen, dass Google bereits zahlreiche weitere Länder in diese offizielle Liste aufgenommen hat: neben wirtschaftlich relevanten Ländern, scheint Google mit der Kombination von Hongkong und Taiwan auch politische Spannungen und Sperrungen umschiffen zu wollen.
