Agent utilizator

De la Wikipedia, enciclopedia liberă.
Salt la navigare Salt la căutare

În informatică, un agent utilizator este o aplicație instalată pe computerul utilizatorului care se conectează la un proces server . Exemple de agenți de utilizatori sunt browserele web , playerele media și programele client ( agenții de utilizator de poștă ), cum ar fi Outlook , Eudora , Thunderbird , Pine și Elm .

Astăzi, termenul este utilizat mai ales în referință la clienții care accesează World Wide Web . În plus față de browsere, agenții utilizatorilor web pot fi crawlerele motoarelor de căutare , telefoanele mobile , cititoarele de ecran și browserele braille utilizate de persoanele nevăzătoare .

Când utilizatorii de internet vizitează un site web, un șir de text este de obicei trimis pentru a face serverul să identifice agentul utilizatorului. Aceasta face parte din cererea HTTP , prefixată cu „ User-agent: ” sau „ User-Agent: ” și include de obicei informații precum numele aplicației client, versiunea, sistemul de operare și limba. Roboții includ adesea și adresa web a proprietarului și adresa de e-mail, astfel încât administratorul site-ului să îl poată contacta.

Șirul de agent utilizator este unul dintre criteriile pentru care unii roboți pot fi excluși din unele pagini utilizând fișierul robots.txt . Acest lucru permite administratorilor de internet, care consideră că unele părți ale site-ului lor (sau întregul site) nu ar trebui incluse în datele colectate de un anumit bot sau că acel anumit bot folosește o lățime de bandă prea mare, pentru a bloca accesul la pagini.

fundal

În diferite momente din istoria sa, Web-ul a fost dominat de utilizarea unui singur browser: de exemplu, ne reamintim „epocile” Netscape și Internet Explorer . Acest lucru a însemnat că multe site-uri au fost dezvoltate pentru a funcționa cu cel mai popular browser, mai degrabă decât pentru a fi compatibile cu standardele unor grupuri precum W3C și IETF . Unele site-uri, prin urmare, utilizează o tehnică numită "sniffing agent utilizator", care constă în returnarea unui conținut specific pentru agentul utilizator care face cererea (sau în returnarea conținutului numai dacă un anumit agent utilizator solicită acest lucru). Prin urmare, multe browsere sunt capabile să creeze, cu o tehnică numită „user agent spoofing”, agentul lor de utilizator pentru a avea conținut. Multe dintre aceste browsere încă își adaugă identitatea reală la sfârșitul șirului.

Un exemplu recent ar putea fi Internet Explorer, care folosește un șir care începe cu „ Mozilla / <version> (compatibil; MSIE <version> ... ”, pentru a primi conținut scris pentru Netscape Navigator , principalul său rival în momentul Trebuie remarcat faptul că acest lucru nu se referea la browserul Mozilla Open Source , care a fost creat mai târziu, ci la numele de cod al Netscape (precum și numele mascotei sale. Acest format de șiruri a fost apoi copiat de alte browserele, în parte datorită faptului că Internet Explorer, la rândul său, a devenit browserul dominant.

Când Internet Explorer a devenit cel mai popular browser, rivali precum Mozilla Firefox , Safari și Opera au implementat sisteme prin care utilizatorul putea selecta (sau, în unele cazuri, introduce) un șir fals pe care să-l trimită, de exemplu cel al celei mai recente versiuni de Internet Explorator. Unele (cum ar fi Firefox și Safari) copiază exact șirul browserului, în timp ce altele (cum ar fi Opera) adaugă numele real al browserului la sfârșitul șirului. Sistemul din urmă, desigur, produce un șir cu trei nume și versiuni diferite de clienți: mai întâi, șirul pretinde a fi „Mozilla”, apoi pretinde a fi „MSIE” (Microsoft Internet Explorer) și în cele din urmă adaugă numele real, de exemplu "Operă".

În plus față de browsere, alte programe care utilizează protocolul HTTP, cum ar fi majoritatea managerilor de descărcare și browserelor offline , au și capacitatea de a schimba modul în care utilizatorul dorește ca șirul să fie trimis la server. Acest lucru, probabil, se face pentru a menține compatibilitatea cu acele site-uri care blochează anumite programe de acest tip, datorită faptului că sunt adesea utilizate cu criterii reduse, până la supraîncărcarea serverului.

Acest cerc vicios pare să vrea să continue în domeniul browserelor web. Mulți dezvoltatori de site-uri care respectă standardele au început demult campania „vizibilă în orice browser” pentru a încuraja alți dezvoltatori să creeze site-uri care sunt compatibile cu standardele oficiale, nu cu cele ale diferitelor browsere.

Din 2005 , au existat site-uri web mult mai standard decât în ​​orice alt moment din istoria internetului. Cu toate acestea, există încă multe site-uri cu cod JavaScript vechi care tinde să blocheze alte browsere decât Internet Explorer sau Netscape Navigator. Acest lucru se datorează practic faptului că mulți dezvoltatori web fără experiență copiază și lipesc cod de pe alte site-uri fără să știe ce fac.

Cel mai grav efect al falsificării este faptul că estimarea de utilizare a Internet Explorer, browserul cu șirul cel mai des copiat, este cel mai probabil exagerat în comparație cu utilizarea reală a programului, în timp ce alte browsere au o estimare mai mică decât cea reală.

Exemple de șiruri de agenți de utilizator

Versiuni Internet Explorer :

  • 1.0 pe Windows 95 - Microsoft Internet Explorer/4.0b1 (Windows 95)
  • 1.5 pe Windows NT - Mozilla/1.22 (compatible; MSIE 1.5; Windows NT)
  • 2.0 pe Windows 95 - Mozilla/1.22 (compatible; MSIE 2.0; Windows 95)
  • 3.01 pe Windows 98 - Mozilla/2.0 (compatible; MSIE 3.01; Windows 98)
  • 5.0 pe SunOS - Mozilla/4.0 (compatible; MSIE 5.0; SunOS 5.9 sun4u; X11)
  • 5.1.7 pe Mac OS 9 - Mozilla/4.0 (compatible; MSIE 5.17; Mac_PowerPC)
  • 5.2.3 pe macOS - Mozilla/4.0 (compatible; MSIE 5.23; Mac_PowerPC)
  • 5.5 pe Windows 2000 - Mozilla/4.0 (compatible; MSIE 5.5; Windows NT 5.0)
  • 6.0 pe MSN 2.5 pe Windows 98 - Mozilla/4.0 (compatible; MSIE 6.0; MSN 2.5; Windows 98)
  • 6.0 pe Windows XP SP2 - Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1)
  • 6.0 pe Windows XP SP2 cu .NET Framework 1.1 instalat - Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322)
  • 6.0 pe Windows XP Media Center Edition 2005 cu .NET Framework 1.0, 1.1 și 2.0 instalate - Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.0.3705; .NET CLR 1.1.4322; Media Center PC 4.0; .NET CLR 2.0.50727)
  • 6.0 pe Windows Server 2003 SP1 cu .NET Framework 1.1 instalat - Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.2; SV1; .NET CLR 1.1.4322)
  • 7.0 beta pe Windows XP - Mozilla/4.0 (compatible; MSIE 7.0b; Windows NT 5.1)
  • 7.0 beta 1 pe Windows XP - Mozilla/4.0 (compatible; MSIE 7.0b; Win32)
  • 7.0 beta pe Windows Vista - Mozilla/4.0 (compatible; MSIE 7.0b; Windows NT 6.0)
  • 7.0 pe Windows XP SP2 - Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; .NET CLR 1.1.4322; .NET CLR 2.0.50727)
  • 8.0 pe Windows XP SP3 - Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; .NET CLR 1.1.4322; .NET CLR 2.0.50727; .NET CLR 3.0.4506.2152; .NET CLR 3.5.30729)
  • 9.0 pe Windows XP SP3 - Mozilla/4.0 (compatible; MSIE 9.0; Windows NT 5.1; .NET CLR 1.1.4322; .NET CLR 2.0.50727; .NET CLR 3.0.4506.2152; .NET CLR 3.5.30729)
  • 10.0 pe Windows 7 64 SP1 - Mozilla / 5.0 (compatibil; MSIE 10.0; Windows NT 6.2; Trident / 6.0)
  • 11.0 pe Windows 7 64 SP1 - Mozilla / 5.0 (Windows NT 6.1; WOW64; Trident / 7.0; rv: 11.0) ca Gecko

Versiuni Mozilla Firefox :

  • 1.0 (olandeză) pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; nl-NL; rv:1.7.5) Gecko/20041202 Firefox/1.0
  • 1.0.4 pe Ubuntu , pe AMD64 - Mozilla/5.0 (X11; U; Linux x86_64; en-US; rv:1.7.6) Gecko/20050512 Firefox
  • 1.0.4 pe FreeBSD 5.4 pe i386 - Mozilla/5.0 (X11; U; FreeBSD i386; en-US; rv:1.7.8) Gecko/20050609 Firefox/1.0.4
  • 1.0.5 pe Slackware - Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.7.9) Gecko/20050711 Firefox/1.0.5
  • 1.0.6 pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.7.10) Gecko/20050716 Firefox/1.0.6
  • 1.0.6 pe macOS Mac OS X Tiger PPC - Mozilla/5.0 (Macintosh; U; PPC Mac OS X Mach-O; en-GB; rv:1.7.10) Gecko/20050717 Firefox/1.0.6
  • 1.0.7 pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.7.12) Gecko/20050915 Firefox/1.0.7
  • 1.0.7 pe macOS Mac OS X Panther PPC - Mozilla/5.0 (Macintosh; U; PPC Mac OS X Mach-O; en-US; rv:1.7.12) Gecko/20050915 Firefox/1.0.7
  • 1.5b1 pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8b4) Gecko/20050908 Firefox/1.4
  • 1.5b1 pe macOS Mac OS X Panther PPC - Mozilla/5.0 (Macintosh; U; PPC Mac OS X Mach-O; en-US; rv:1.8b4) Gecko/20050908 Firefox/1.4
  • 1.5 pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; nl; rv:1.8) Gecko/20051107 Firefox/1.5
  • 1.5.0.1 pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; en-GB; rv:1.8.0.1) Gecko/20060111 Firefox/1.5.0.1
  • 1.5.0.1 pe Windows Vista - Mozilla/5.0 (Windows; U; Windows NT 6.0; en-US; rv:1.8.0.1) Gecko/20060111 Firefox/1.5.0.1
  • 1.6a1 pe BeOS R5 - Mozilla/5.0 (BeOS; U; BeOS BePC; en-US; rv:1.9a1) Gecko/20051002 Firefox/1.6a1
  • 2.0a1 pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8) Gecko/20060321 Firefox/2.0a1
  • 2.0b1 pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; it; rv:1.8.1b1) Gecko/20060710 Firefox/2.0b1
  • 2.0b2 pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; it; rv:1.8.1b2) Gecko/20060710 Firefox/2.0b2
  • 2.0RC1 pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; it; rv:1.8.1) Gecko/20060918 Firefox/2.0
  • 2.0.0.12 pe Ubuntu - Mozilla/5.0 (X11; U; Linux i686; it; rv:1.8.1.12) Gecko/20080207 Ubuntu/7.10 (gutsy) Firefox/2.0.0.12
  • 3.0.10 pe Ubuntu - Mozilla/5.0 (X11; U; Linux i686; it; rv:1.9.0.10) Gecko/2009042513 Ubuntu/8.04 (hardy) Firefox/3.0.10

Versiuni Safari :

  • v125 pe macOS - Mozilla/5.0 (Macintosh; U; PPC Mac OS X; en) AppleWebKit/124 (KHTML, like Gecko) Safari/125
  • v125 pe macOS , mascat ca MSIE - Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.2)
  • v312 pe macOS - Mozilla/5.0 (Macintosh; U; PPC Mac OS X; en-us) AppleWebKit/312.1 (KHTML, like Gecko) Safari/312
  • 2.0 (v412) pe macOS - Mozilla/5.0 (Macintosh; U; PPC Mac OS X; en-us) AppleWebKit/412 (KHTML, like Gecko) Safari/412

Versiuni ale AOL Explorer (nu clasic AOL 8.0, 9.0) (adaugă „America Online Browser XX;”):

  • 1.1 - Mozilla/4.0 (compatible; MSIE 6.0; America Online Browser 1.1; rev1.1; Windows NT 5.1;)
  • 1.2 - Mozilla/4.0 (compatible; MSIE 6.0; America Online Browser 1.1; rev1.2; Windows NT 5.1;)
  • 1.5 - Mozilla/4.0 (compatible; MSIE 6.0; America Online Browser 1.1; rev1.5; Windows NT 5.1;)

Versiuni de buzunar Internet Explorer :

  • Microsoft Pocket Internet Explorer/0.6 - PIE 1.0 (se pare că a uitat să îl schimbe la 1.0) 1.0.
  • Mozilla/1.1 (compatible; MSPIE 2.0; Windows CE) - PIE 2.0
  • Pe Windows Mobile 2003 - Mozilla/4.0 (compatible; MSIE 4.01; Windows CE; PPC; 240x320)
  • Pe Windows Mobile 2003 Ediția a doua, pe un smartphone Motorola MPx220 - MOT-MPx220/1.400 Mozilla/4.0 (compatible; MSIE 4.01; Windows CE; Smartphone; 176x220)

Versiuni Avant Browser :

  • Versiune primitivă - Advanced Browser (http://www.avantbrowser.com)
  • Versiune veche - Avant Browser (http://www.avantbrowser.com)
  • Ultima versiune - Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; Avant Browser [avantbrowser.com]; iOpus-IM; QXW03416; .NET CLR 1.1.4322)

Versiuni Konqueror :

  • 3.1-RC1 - Mozilla/5.0 (compatible; Konqueror/3.1-rc3; i686 Linux; 20020515)
  • 3.1 (franceză) - Mozilla/5.0 (compatible; Konqueror/3.1; Linux 2.4.22-10mdk; X11; i686; fr, fr_FR)

Versiuni de Minimo :

  • 0,007 pe Windows Mobile 2003 - Mozilla/5.0 (Windows; U; Windows CE 4.21; rv:1.8b4) Gecko/20050720 Minimo/0.007

Versiuni Mozilla :

  • pe Linux - Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.7.8) Gecko/20050511
  • 1.7.12 pe Gentoo Linux - Mozilla/5.0 (X11; U; Linux i686; cs-CZ; rv:1.7.12) Gecko/20050929

Versiuni Mozilla SeaMonkey :

  • 1.0b pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8) Gecko/20051219 SeaMonkey/1.0b
  • 1.0 pe Windows 98 - Mozilla/5.0 (Windows; U; Win98; en-US; rv:1.8.0.1) Gecko/20060130 SeaMonkey/1.0

Versiuni Netscape Navigator (proprietar):

  • 2.02 pe OS / 2 cu opțiunea „-3” - Mozilla/3.0 (OS/2; U)
  • 3.0 pe SunOS cu securitate slabă - Mozilla/3.0 (X11; I; SunOS 5.4 sun4m)
  • 4.61 pe Macintosh cu securitate slabă - Mozilla/4.61 (Macintosh; I; PPC)
  • 4.61 pe OS / 2 cu securitate puternică - Mozilla/4.61 [en] (OS/2; U)
  • 4.7 pe Macintosh - Mozilla/4.7C-CCK-MCD {C-UDP; EBM-APPLE} (Macintosh; I; PPC)
  • 4.8 pe Windows 2000 - Mozilla/4.8 [en] (Windows NT 5.0; U)

Versiuni ale Netscape (bazate pe codul partajat non-proprietar Mozilla):

  • 6.1 pe Windows 2000 - Mozilla/5.0 (Windows; U; Windows NT 5.0; en-US; rv:0.9.2) Gecko/20020508 Netscape6/6.1
  • 7 pe Sun Solaris 8 - Mozilla/5.0 (X11; U; SunOS sun4u; en-US; rv:1.0.1) Gecko/20020920 Netscape/7.0
  • 7.1 pe Windows XP - Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.4) Gecko/20030624 Netscape/7.1 (ax)
  • 8.0.1 pe Windows XP (folosind Gecko ) - Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.7.5) Gecko/20050519 Netscape/8.0.1
  • 8.0.1 pe Windows XP (folosind MSHTML cu .NET instalat) - Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 1.1.4322; .NET CLR 2.0.50215) Netscape/8.0.1
  • 8.1 pe Windows XP (folosind Gecko cu .NET instalat) - Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.7.5) Gecko/20060127 Netscape/8.1

Versiuni NetPositive :

  • 2.2 pe BeOS R5 - Mozilla/3.0 (compatible; NetPositive/2.2)

Versiuni Novarra :

  • Palm Web Pro 3.0.1a pe Palm OS - Mozilla/4.76 [en] (PalmOS; U; WebPro/3.0.1a; Palm-Arz1)

Versiuni OmniWeb :

  • 5.1.1 (v563.51) pe macOS - Mozilla/5.0 (Macintosh; U; PPC Mac OS X; en-US) AppleWebKit/125.4 (KHTML, like Gecko, Safari) OmniWeb/v563.51
  • 5.1.2 beta 1 (v563.57) pe macOS - Mozilla/5.0 (Macintosh; U; PPC Mac OS X; en-US) AppleWebKit/125.4 (KHTML, like Gecko, Safari) OmniWeb/v563.57

Versiuni de Opera :

  • 6.03 pe Windows 2000 , deghizat în MSIE - Mozilla/4.0 (compatible; MSIE 5.0; Windows 2000) Opera 6.03 [en]
  • 6.03 pe Mac OS 9 , mascat ca MSIE - Mozilla/4.0 (compatible; MSIE 5.0; Mac_PowerPC) Opera 6.0 [en]
  • 7.23 pe Windows 98 - Opera/7.23 (Windows 98; U) [en]
  • 8.00 pe Windows XP - Opera/8.00 (Windows NT 5.1; U; en)
  • 8.00 pe Gentoo Linux - Opera/8.0 (X11; Linux i686; U; cs)
  • 8.02 pe Windows XP - Opera/8.02 (Windows NT 5.1; U; en)
  • 8.50 pe Windows XP - Opera/8.50 (Windows NT 5.1; U; en)
  • 8.50 pe Windows XP , mascat ca MSIE - Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; en) Opera 8.50
  • 8.50 pe Windows XP , deghizat în Mozilla - Mozilla/5.0 (Windows NT 5.1; U; en) Opera 8.50
  • 8.50 pe Gentoo Linux - Opera/8.5 (X11; Linux i686; U; cs)
  • 8.50 pe Nokia 6630 (în spaniolă) - Mozilla/4.0 (compatible; MSIE 6.0; Symbian OS; Nokia 6630/4.03.38; 6937) Opera 8.50 [es]
  • 8.51 pe Windows XP - Opera/8.51 (Windows NT 5.1; U; en)
  • 9.00 Previzualizare 1 pe Windows 2000 , acoperit ca Opera - Opera/9.0 (Windows NT 5.0; U; en)
  • 9.00 Preview 2 pe macOS - Opera/9.00 (Macintosh; PPC Mac OS X; U; en)

Versiuni PlayStation Portable :

  • 2.00 - Mozilla/4.0 (PSP (PlayStation Portable); 2.00)

Versiuni WebExplorer (bazate pe mozaic ):

  • 1.1h pe OS / 2 , HTTP / 1.0 UA - IBM-WebExplorer-DLL/v1.1h

Versiuni de Camino :

  • 1.0b1 pe macOS - Mozilla/5.0 (Macintosh; U; PPC Mac OS X; en-US; rv:1.8) Gecko/20051107 Camino/1.0b1

Versiuni ELinks :

  • 0.4pre5 pe Linux - ELinks (0.4pre5; Linux 2.4.27 i686; 80x25)

Versiuni de linkuri :

  • 0.99pre14 sub Cygwin pe Windows 2000 - Links (0.99pre14; CYGWIN_NT-5.0 1.5.16(0.128/4/2) i686; 80x25)
  • 2.1pre17 pe Gentoo Linux - Links (2.1pre17; Linux 2.6.11-gentoo-r8 i686; 80x24) - Links (2.1pre17; Linux 2.6.11-gentoo-r8 i686; 80x24)
  • 2.1pre19 pe Gentoo Linux folosind sistemul X Window - Links (2.1pre19; Linux 2.6.14-gentoo-r5 i686; x)

Versiuni Lynx :

  • 2.8.4rel.1 pe Linux - Lynx/2.8.4rel.1 libwww-FM/2.14

Versiuni Off By One :

  • 3.5a pe Windows XP - Mozilla/4.7 (compatible; OffByOne; Windows 2000)

Versiuni de w3m :

Versiuni Google Chrome :

  • 3.0.183.1 pe Arch Linux - Mozilla/5.0 (X11; U; Linux i686 (x86_64); en-US) AppleWebKit/531.0 (KHTML, like Gecko) Chrome/3.0.183.1 Safari/531.0
  • 17.0.963.56 pe Windows 7 64bit - Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/535.11 (KHTML, like Gecko) Chrome/17.0.963.56 Safari/535.11
  • 39.0.0.0 pe Android 5.1 de pe smartphone- ul Bluboo Xtouch - Mozilla/5.0 (Linux; Android 5.1; Xtouch Build/LMY47D) AppleWebKit/537.36 ((KHTML, like Gecko) Version/4.0 Chrome/39.0.0.0 Mobile Safari/537.36

Versiuni Midori :

  • 0.5.9 pe Ubuntu - Mozilla/5.0 (X11; Linux) AppleWebKit/538.15 (KHTML, like Gecko) Chrome/18.0.1025.133 Safari/538.15 Midori/0.5

Bot

Agent (proprietar / utilizator) Şir
Alexa ia_archiver
Ask.com / Teoma Mozilla / 2.0 (compatibil; Ask Jeeves / Teoma)
Baidu Spider Baiduspider ( http://www.baidu.com/search/spider.htm )
cURL pe macOS / Darwin PPC (public) curl / 7.13.1 (powerpc-apple-darwin8.0) libcurl / 7.13.1 OpenSSL / 0.9.7b zlib / 1.2.2
HTTP GameSpy ( GameSpy ) GameSpyHTTP / 1.0
Gigabot ( Gigablast ) Gigabot / 2.0
Googlebot / ( Google ) Googlebot / 2.1 (+ http://www.google.com/bot.html )
Googlebot alternativ Mozilla / 5.0 (compatibil; googlebot / 2.1; + http://www.google.com/bot.html )
Googlebot -Image ( Google ) Googlebot-Image / 1.0
Grub (uz public, proprietar LookSmart ) Mozilla / 4.0 (compatibil; grub-client-1.4.3; Accesați propriile lucruri cu http://grub.org ) Mozilla / 4.0 (compatibil; grub-client-2.3)
Inktomi Slurp (depășit de Yahoo! Slurp ) Mozilla / 3.0 (Slurp / si; [email protected]; https://web.archive.org/web/20040213105442/http://www.inktomi.com/slurp.html )
Msnbot ( căutare Microsoft MSN ) msnbot / 1.0 (+ http://search.msn.com/msnbot.htm )
Scooter ( AltaVista ) Scooter-3.2.EX
Wget (public) Wget / 1.9
Yahoo! Slurp ( Căutare Yahoo! ) Mozilla / 5.0 (compatibil; Yahoo! Slurp; https://help.yahoo.com/help/us/ysearch/slurp )

Mozilla / 5.0 (compatibil; Yahoo! Slurp China; https://web.archive.org/web/20060409064958/http://misc.yahoo.com.cn/help.html )

Yahoo-MMCrawler ( Căutare Yahoo! ) Yahoo-MMCrawler / 3.x (mms dash mmcrawler dash support at yahoo dash inc dot com)

Elemente conexe