Aktuelle Botliste
-
- Beiträge: 95
- Registriert: Fr 22.Jun, 2007 06:22
Aktuelle Botliste
hi!
gibts eigentlich irgentwo eine immer aktuelle botliste um immer auf dem neusten stand zubleiben?
hab mir mal die ctracker_botlist runtergeladen. is aber schon ne weile her...
Gruß SG
gibts eigentlich irgentwo eine immer aktuelle botliste um immer auf dem neusten stand zubleiben?
hab mir mal die ctracker_botlist runtergeladen. is aber schon ne weile her...
Gruß SG
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de
- oxpus
- Administrator
- Beiträge: 28737
- Registriert: Mo 27.Jan, 2003 22:13
- Wohnort: Bad Wildungen
- Kontaktdaten:
Nein. Man kann nur seine Log-Files anschauen und prüfen, ob es neue Client Referer gibt, die man dann eintragen kann.
Eine Botliste ist aber nie so schnell veraltet, wie z. B. eine Virendefinition, da ja nicht jeden Tag X neue Suchmaschinen aufgemacht werden...
BTW:
Mit "Sicherheit" hat diese Frage nun weniger zu tun. Ich habe das daher mal hier ins "Netzwerk" verschoben.
Eine Botliste ist aber nie so schnell veraltet, wie z. B. eine Virendefinition, da ja nicht jeden Tag X neue Suchmaschinen aufgemacht werden...
BTW:
Mit "Sicherheit" hat diese Frage nun weniger zu tun. Ich habe das daher mal hier ins "Netzwerk" verschoben.
Karsten Ude
-={ Das Mädchen für alles }=-
Kein Support per Messenger, Email oder PN! Unaufgeforderte Nachrichten werden ignoriert!
No support per Messenger, Email or PM. Each unasked message will be ignored!
-={ Das Mädchen für alles }=-
Kein Support per Messenger, Email oder PN! Unaufgeforderte Nachrichten werden ignoriert!
No support per Messenger, Email or PM. Each unasked message will be ignored!
-
- Beiträge: 95
- Registriert: Fr 22.Jun, 2007 06:22
ja ok... also werd ich erstmal die botliste eintragen und dann mal sehn.
hab sowieso per robots.txt alle bots untersagt zuschnüffeln. aber die bösen halten sich ja eh nich dran...
hab sowieso per robots.txt alle bots untersagt zuschnüffeln. aber die bösen halten sich ja eh nich dran...
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de
-
- Beiträge: 95
- Registriert: Fr 22.Jun, 2007 06:22
komisch nur das in der liste Mozilla/4.0 (compatible; MSIE 4.0; Windows 95) zufinden ist.
was soll das denn? da kommen doch mache user garnich mehr rein oder?
bin bisl unwissend was bots betrifft
was soll das denn? da kommen doch mache user garnich mehr rein oder?
bin bisl unwissend was bots betrifft
- Dateianhänge
-
- botlist.rar
- (1.94 KiB) 398-mal heruntergeladen
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de
- KeineAhnung
- Beiträge: 349
- Registriert: Di 29.Mai, 2007 17:35
- Wohnort: NRW
- Kontaktdaten:
schreibe dies in diene .htaccess , das sollte viele blocken, weitere kann man ja leicht hinzufügen
Code: Alles auswählen
RewriteCond %{HTTP_USER_AGENT} ^BlackWidow [OR]
RewriteCond %{HTTP_USER_AGENT} ^Bot\ mailto:craftbot@yahoo.com [OR]
RewriteCond %{HTTP_USER_AGENT} ^CherryPicker [OR]
RewriteCond %{HTTP_USER_AGENT} ^ChinaClaw [OR]
RewriteCond %{HTTP_USER_AGENT} ^Crescent [OR]
RewriteCond %{HTTP_USER_AGENT} ^Custo [OR]
RewriteCond %{HTTP_USER_AGENT} ^DISCo [OR]
RewriteCond %{HTTP_USER_AGENT} ^Download\ Demon [OR]
RewriteCond %{HTTP_USER_AGENT} ^eCatch [OR]
RewriteCond %{HTTP_USER_AGENT} ^EirGrabber [OR]
RewriteCond %{HTTP_USER_AGENT} ^EmailCollector [OR]
RewriteCond %{HTTP_USER_AGENT} ^EmailSiphon [OR]
RewriteCond %{HTTP_USER_AGENT} ^EmailWolf [OR]
RewriteCond %{HTTP_USER_AGENT} ^Express\ WebPictures [OR]
RewriteCond %{HTTP_USER_AGENT} ^ExtractorPro [OR]
RewriteCond %{HTTP_USER_AGENT} ^EyeNetIE [OR]
RewriteCond %{HTTP_USER_AGENT} ^FlashGet [OR]
RewriteCond %{HTTP_USER_AGENT} ^GetRight [OR]
RewriteCond %{HTTP_USER_AGENT} ^GetWeb! [OR]
RewriteCond %{HTTP_USER_AGENT} ^Go!Zilla [OR]
RewriteCond %{HTTP_USER_AGENT} ^Go-Ahead-Got-It [OR]
RewriteCond %{HTTP_USER_AGENT} ^GornKer [OR]
RewriteCond %{HTTP_USER_AGENT} ^GrabNet [OR]
RewriteCond %{HTTP_USER_AGENT} ^Grafula [OR]
RewriteCond %{HTTP_USER_AGENT} ^HMView [OR]
RewriteCond %{HTTP_USER_AGENT} HTTrack [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^Image\ Stripper [OR]
RewriteCond %{HTTP_USER_AGENT} ^Image\ Sucker [OR]
RewriteCond %{HTTP_USER_AGENT} Indy\ Library [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^InterGET [OR]
RewriteCond %{HTTP_USER_AGENT} ^Internet\ Ninja [OR]
RewriteCond %{HTTP_USER_AGENT} ^Irvine [OR]
RewriteCond %{HTTP_USER_AGENT} ^JetCar [OR]
RewriteCond %{HTTP_USER_AGENT} ^JOC\ Web\ Spider [OR]
RewriteCond %{HTTP_USER_AGENT} ^larbin [OR]
RewriteCond %{HTTP_USER_AGENT} ^LeechFTP [OR]
RewriteCond %{HTTP_USER_AGENT} ^Mass\ Downloader [OR]
RewriteCond %{HTTP_USER_AGENT} ^Microsoft.URL [OR]
RewriteCond %{HTTP_USER_AGENT} ^MIDown\ tool [OR]
RewriteCond %{HTTP_USER_AGENT} ^Mister\ PiX [OR]
RewriteCond %{HTTP_USER_AGENT} ^Mozilla.*NEWT [OR]
RewriteCond %{HTTP_USER_AGENT} ^Navroad [OR]
RewriteCond %{HTTP_USER_AGENT} ^NearSite [OR]
RewriteCond %{HTTP_USER_AGENT} ^NetAnts [OR]
RewriteCond %{HTTP_USER_AGENT} ^NetSpider [OR]
RewriteCond %{HTTP_USER_AGENT} ^Net\ Vampire [OR]
RewriteCond %{HTTP_USER_AGENT} ^NetZIP [OR]
RewriteCond %{HTTP_USER_AGENT} ^NICErsPRO [OR]
RewriteCond %{HTTP_USER_AGENT} ^Octopus [OR]
RewriteCond %{HTTP_USER_AGENT} ^oegp [OR]
RewriteCond %{HTTP_USER_AGENT} ^Offline\ Explorer [OR]
RewriteCond %{HTTP_USER_AGENT} ^Offline\ Navigator [OR]
RewriteCond %{HTTP_USER_AGENT} ^PageGrabber [OR]
RewriteCond %{HTTP_USER_AGENT} ^Papa\ Foto [OR]
RewriteCond %{HTTP_USER_AGENT} ^pavuk [OR]
RewriteCond %{HTTP_USER_AGENT} ^pcBrowser [OR]
RewriteCond %{HTTP_USER_AGENT} dloader(NaverRobot) [OR]
RewriteCond %{HTTP_USER_AGENT} ^RealDownload [OR]
RewriteCond %{HTTP_USER_AGENT} ^ReGet [OR]
RewriteCond %{HTTP_USER_AGENT} ^SearchExpress [OR]
RewriteCond %{HTTP_USER_AGENT} ^SiteSnagger [OR]
RewriteCond %{HTTP_USER_AGENT} ^SmartDownload [OR]
RewriteCond %{HTTP_USER_AGENT} ^SuperBot [OR]
RewriteCond %{HTTP_USER_AGENT} ^SuperHTTP [OR]
RewriteCond %{HTTP_USER_AGENT} ^Surfbot [OR]
RewriteCond %{HTTP_USER_AGENT} ^Siphon [OR]
RewriteCond %{HTTP_USER_AGENT} ^tAkeOut [OR]
RewriteCond %{HTTP_USER_AGENT} ^Teleport\ Pro [OR]
RewriteCond %{HTTP_USER_AGENT} ^VoidEYE [OR]
RewriteCond %{HTTP_USER_AGENT} ^Web\ Image\ Collector [OR]
RewriteCond %{HTTP_USER_AGENT} ^Web\ Sucker [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebAuto [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebBandit [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebCopier [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebFetch [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebGo\ IS [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebLeacher [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebReaper [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebSauger [OR]
RewriteCond %{HTTP_USER_AGENT} ^Website\ eXtractor [OR]
RewriteCond %{HTTP_USER_AGENT} ^Website\ Quester [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebStripper [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebWhacker [OR]
RewriteCond %{HTTP_USER_AGENT} ^WebZIP [OR]
RewriteCond %{HTTP_USER_AGENT} ^Wget [OR]
RewriteCond %{HTTP_USER_AGENT} ^Widow [OR]
RewriteCond %{HTTP_USER_AGENT} ^WWWOFFLE [OR]
RewriteCond %{HTTP_USER_AGENT} ^Xaldon\ WebSpider [OR]
RewriteCond %{HTTP_USER_AGENT} ^Zeus [OR]
RewriteCond %{HTTP_USER_AGENT} ^ZyBorg
RewriteRule ^.* - [F,L]
-
- Beiträge: 95
- Registriert: Fr 22.Jun, 2007 06:22
hey cool danke!
kommt die ins web-root oder ins foren-root?
kommt die ins web-root oder ins foren-root?
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de
- KeineAhnung
- Beiträge: 349
- Registriert: Di 29.Mai, 2007 17:35
- Wohnort: NRW
- Kontaktdaten:
öhm, keine ahnung, stell sie einfach in beide, sicher ist sicher
und in die robots.txt am besten noch das um einen archive bot der die seite archiviert zu blockeen (der liest die robots.txt)
und in die robots.txt am besten noch das um einen archive bot der die seite archiviert zu blockeen (der liest die robots.txt)
Code: Alles auswählen
#archive.org
User-agent: ia_archiver
Disallow: /
Zuletzt geändert von KeineAhnung am So 15.Jul, 2007 23:36, insgesamt 1-mal geändert.
-
- Beiträge: 95
- Registriert: Fr 22.Jun, 2007 06:22
ja schön alles dicht machen!
also bei mir steht schon:
reicht doch auch oder? (meine index.html ist nen frameset-seite)
also bei mir steht schon:
Code: Alles auswählen
User-agent: *
Disallow: /
Allow: /index.html
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de
- KeineAhnung
- Beiträge: 349
- Registriert: Di 29.Mai, 2007 17:35
- Wohnort: NRW
- Kontaktdaten:
Mit der robots.txt erlaubts du nur die index.html, aber ob die Bots dadurvh zugriff auf die Daten im Frame haben ist mir unklar.
Zuletzt geändert von KeineAhnung am So 15.Jul, 2007 23:50, insgesamt 1-mal geändert.
-
- Beiträge: 95
- Registriert: Fr 22.Jun, 2007 06:22
ja das wollt ich auch. in der index ist alles drin was sie haben sollen. beschreibung und titel des forums.
das forenroot ist für bots gesperrt, da es ja ein unterverzeichnis is...
das forenroot ist für bots gesperrt, da es ja ein unterverzeichnis is...
Meine Board-Info: phpBB2 Plus 1.53a - www.quad-elite.de