Gibt es irgendwo eine Liste mit aktuellen IP-Adressen von Suchmaschinen-Robots, mit deren Hilfe ich bei Zugriffen auf meine Downloads Robots von echten Downloads unterscheiden kann? Diese würde ich gerne in JDownloads eintragen, um so nicht immer auch eine Download-Meldung von den Robot-Zugriffen zu bekommen. Oder gibt es dafür eine andere Lösung (Einträge in die robot.txt möchte ich nicht machen, weil die Seiten ja von den Suchmaschinen durchaus gefunden und indexiert werden sollen)?
↧