Geoffrey Hinton

De la Wikipedia, enciclopedia liberă.
Salt la navigare Salt la căutare
Geoffrey Hinton în 2016

Geoffrey Everest Hinton ( Wimbledon (Londra) , 6 decembrie 1947 ) este un informatician britanic naturalizat canadian .

Cunoscut pentru contribuțiile sale la dezvoltarea învățării automate , este considerat unul dintre cei mai influenți cercetători în dezvoltarea învățării profunde . [1] [2] [3] [4] [5] Profesor la Universitatea din Toronto și cercetător la Google Brain , în 2017 a fondat Vector Institute for Artificial Intelligence din Toronto , al cărui consilier științific principal este pro bono . [6] [7]

În 1986 a publicat împreună cu David Rumelhart și Ronald J. Williams un articol de influență deosebită, care a popularizat utilizarea deja cunoscută [8] a algoritmului de propagare a erorilor înapoi pentru instruirea rețelelor neuronale pe mai multe niveluri. [9] În 2012, AlexNet , o rețea neuronală profundă proiectată în colaborare cu studenții săi Alex Krizhevsky [10] și Ilya Sutskever , a obținut rezultate revoluționare în problema clasificării imaginilor, îmbunătățind rezultatele provocării ImageNet în 2012 cu o marjă mare [11]. ] și deschiderea drumului pentru aplicarea rețelelor neuronale profunde în problemele de vedere computerizată. [12]

În 2018 a primit, împreună cu Yoshua Bengio și Yann LeCun , Premiul Turing pentru contribuțiile sale la dezvoltarea învățării profunde. [13] Cei trei cercetători sunt cunoscuți ca „nași ai învățării profunde” datorită influenței contribuțiilor lor la dezvoltarea sectorului. [14] [15]

Biografie

Hinton este strănepotul lui George Boole și chirurgul și scriitorul James Hinton , [16] nepotul scriitorului Charles Howard Hinton și al economistului Colin Clark , [17] și fiul entomologului Howard Everest Hinton . [18] [19] Numele său de mijloc este un omagiu adus celeilalte rude ale sale, cartograful George Everest . [20]

A studiat la King's College din Cambridge , unde a obținut o licență în psihologie experimentală în 1970, [18] și mai târziu la Universitatea din Edinburgh , unde a obținut un doctorat în inteligență artificială în 1978, sub supravegherea lui Christopher Longuet-. Higgins . [21] [22] [23]

După doctorat, a lucrat la Universitatea din Sussex și, din cauza dificultății de a obține finanțare pentru cercetare în Marea Britanie, s-a mutat la Universitatea din California din San Diego , unde a fost profesor invitat un semestru în 1982 și la Universitatea Carnegie. Mellon , unde a lucrat din 1982 până în 1987. [18] În urma politicilor Reagan și a finanțării militare pentru cercetarea inteligenței artificiale, [20] Hinton a părăsit Statele Unite ale Americii și s-a mutat în Canada în 1987, unde a devenit profesor [24] în departamentul de informatică al Universității din Toronto , titular al Catedrei de cercetare Canada în învățarea automată și consultant la programul Învățare în mașini și creiere de la Institutul canadian de cercetare avansată (CIFAR). În 1998 a înființat Gatsby Charitable Foundation Computational Neuroscience Unit la University College London , al cărei director a fost până în 2001. [18]

În 2012, Hinton a predat un curs gratuit popular despre rețelele neuronale artificiale pe platforma de învățare online Coursera . [25] În martie 2013, a fost angajat de Google în urma achiziției companiei DNNresearch Inc., pe care a fondat-o, și de atunci și-a împărțit timpul între universitate și munca la Google. [26]

Interese de cercetare

În timpul petrecut la Universitatea Carnegie Mellon (1982-1987), Hinton, împreună cu David E. Rumelhart și Ronald J. Williams , au aplicat propagarea înapoi a erorilor la rețelele neuronale artificiale cu mai multe straturi, arătând capacitatea lor de a învăța reprezentări utile. [9] Într-un interviu susținut în 2018, [27] Hinton i-a atribuit lui David E. Rumelhart ideea inițială a utilizării propagării înapoi a erorilor. Metoda a fost folosită anterior în tehnicile de învățare automată, grație introducerii diferențierii automate (care este frecvent utilizată în implementarea algoritmului de propagare a spate) de către Seppo Linnainmaa în 1970 și aplicării sale la rețelele neuronale de către Paul Werbos în 1974. [8]

În aceeași perioadă, Hinton a introdus, împreună cu David Ackley și Terry Sejnowski , mașinile Boltzmann . [28] De asemenea, a produs rezultate semnificative în dezvoltarea reprezentării distribuite, a rețelelor neuronale întârziate , a mașinilor Helmholts, a amestecurilor și a produsului expert. În 2007 a contribuit la un articol despre învățarea nesupravegheată a transformărilor de imagine. [29] În 2008, împreună cu van der Maaten, a introdus algoritmul t-SNE , [30] bazat pe algoritmul de încorporare a vecinilor stochastici introdus de Hinton însuși în 2002. [31] Contribuțiile sale de cercetare au făcut obiectul unor articole populare. pe Scientific American în septembrie 1992 și octombrie 1993. [32]

În 2012, Hinton a produs una dintre cele mai cunoscute realizări ale carierei sale, introducând AlexNet , o rețea neuronală profundă proiectată în colaborare cu elevii săi Alex Krizhevsky [10] și Ilya Sutskever . Acest model a obținut rezultate fără precedent în problema clasificării imaginii, îmbunătățindu-se semnificativ față de tehnicile tradiționale dominante de atunci și ocupând primul loc cu o marjă mare în provocarea ImageNet în 2012. [11] Acest rezultat a reprezentat o etapă importantă în dezvoltarea viziunii. calea pentru aplicarea rețelelor neuronale profunde într-o varietate de probleme. [12]

În octombrie și noiembrie 2017, Hinton a publicat două articole [33] [34] care au introdus rețelele neuronale capsulare . [35]

Mulțumiri

De la stânga la dreapta, Russ Salakhutdinov , Richard S. Sutton , Geoffrey Hinton, Yoshua Bengio și Steve Jurvetson în 2016

Hinton a fostFellow of the Royal Society în 1998. [36] [37] [38] [39] În 2001 a obținut un doctorat onorific de la Universitatea din Edinburgh . [40] În același an a fost primul câștigător al premiului Rumelhart . În 2005 a primit medalia de aur Gerhard Herzberg Canada pentru știință și inginerie . [41] În 2011 a obținut un doctorat onorific la Universitatea din Sussex , iar în 2013 un doctorat onorific la Universitatea din Sherbrooke . [42] În 2016 a fost ales membru internațional al Academiei Naționale de Inginerie „pentru contribuțiile sale la teoria și practica rețelelor neuronale artificiale și aplicarea acestora la recunoașterea textului și viziunea computerizată”. [43] În același an, a primit IEEE / RSE Wolfson James Clerk Maxwell Award [44] și BBVA Foundation Frontiers of Knowledge Award în categoria Tehnologiilor informației și comunicațiilor "pentru contribuția sa pionieră și extrem de influentă" în dotarea mașinilor cu a invata. [45]

În 2018, împreună cu Yann LeCun și Yoshua Bengio , a primit premiul Turing „pentru contribuții conceptuale și inginerești revoluționare care au făcut din rețelele neuronale profunde o componentă esențială de calcul”. [46] [47] [48] În același an a fost numit însoțitor al Ordinului Canadei . [49]

Opinii cu privire la inteligența artificială

Hinton și-a exprimat opoziția față de utilizarea armelor letale autocontrolate. În general, refuză să facă previziuni pe termen lung despre riscurile singularității tehnologice , menționând că progresul exponențial în industrie provoacă prea multe incertitudini cu privire la viitor. [50] Cu toate acestea, New Yorkerul îl acordă o conversație cu cercetătorul Nick Bostrom în care se presupune că nu a așteptat dezvoltarea unei inteligențe artificiale puternice timp de câteva decenii („nu înainte de 2070”) și că nu există nicio speranță. controlează utilizarea inteligenței artificiale în viitor, susținând că sistemele politice o vor folosi pentru a teroriza populația și că entități precum Agenția Națională de Securitate încearcă deja să exploateze astfel de tehnologii. În ceea ce privește riscurile singularității tehnologice , el nu exclude posibilitatea supraviețuirii umanității, dar observă că nu există un precedent pentru un fel de inteligență inferioară capabilă să controleze o specie superioară. [51]

Onoruri

Însoțitor al Ordinului Canadei - panglică uniformă obișnuită Însoțitor al Ordinului Canadei
Geoffrey Hinton a fost forța motrice din spatele dezvoltării unei noi forme de inteligență artificială. Profesor emerit la Universitatea din Toronto și inginer asociat al echipei Google Brain Team, a fost pionierul algoritmilor de învățare care permit computerelor să recunoască vorbirea, să interpreteze imagini și să găsească structura în seturi de date complexe. Cunoscut ca „nașul rețelelor neuronale”, el a fost mentorul multor oameni de știință din domeniu și a revoluționat modul în care oamenii interacționează cu tehnologia în viața lor de zi cu zi ”.
- numit la 19 noiembrie 2018, investit la 15 decembrie 2020 [52]

Notă

  1. ^ (EN) Geoffrey Hinton a fost pe scurt stagiar Google în 2012 Din cauza birocrației - TechCrunch pe techcrunch.com. Adus pe 28 martie 2018 .
  2. ^ (EN) James Somers, Progresul în AI pare că se accelerează, dar iată de ce s-ar putea apleca în MIT Technology Review. Adus pe 28 martie 2018 .
  3. ^ (EN) Cum „reședința” de învățare profundă a lui U of T reimaginează AI , pe University of Toronto News. Adus pe 28 martie 2018 .
  4. ^ „Nașul” de învățare profundă reinventează AI . Adus pe 28 martie 2018 .
  5. ^ (EN) Geoffrey Hinton, „nașul” învățării profunde, pe AlphaGo în Macleans.ca , 18 martie 2016. Adus pe 28 martie 2018.
  6. ^ Daniela Hernandez, The Man Behind the Google Brain: Andrew Ng and the Quest for the New AI , în Wired , 7 mai 2013. Accesat la 10 mai 2013 .
  7. ^ (EN) Geoffrey E. Hinton - Google AI , AI pe Google.
  8. ^ a b Jürgen Schmidhuber, Învățarea profundă în rețelele neuronale: o privire de ansamblu , în Rețele neuronale , vol. 61, 1 ianuarie 2015, pp. 85–117, DOI : 10.1016 / j.neunet.2014.09.003 , PMID 25462637 , arXiv : 1404.7828 .
  9. ^ A b (EN) David E. Rumelhart, Geoffrey E. Hinton și Ronald J. Williams, Learning representations by back-propagating errors , în Nature, vol. 323, nr. 6088, 9 octombrie 1986, pp. 533-536, Bibcode : 1986 Nat . 323..533R , DOI : 10.1038 / 323533a0 , ISSN 1476-4687 ( WC ACNP ) .
  10. ^ a b Dave Gershgorn, Povestea din interior a modului în care AI a ajuns să fie suficient de bună pentru a domina Silicon Valley , pe Quartz , 18 iunie 2018. Adus pe 5 octombrie 2018 .
  11. ^ a b Alex Krizhevsky, Ilya Sutskever și Geoffrey E. Hinton, clasificare ImageNet cu rețele neuronale convoluționale profunde , Nips'12, Curran Associates Inc., 3 decembrie 2012, pp. 1097-1105.
  12. ^ A b (EN) How to Toronto's research research Revoluționat inteligența artificială | Toronto Star , la thestar.com . Adus la 13 martie 2018 .
  13. ^ (RO) Emily Chung · Știri CBC · Publicat la 27 martie 2019 și la 6:00 AM ET | Actualizat ultima dată pe 27 martie, cercetătorii canadieni care au învățat AI să învețe ca oamenii au câștigat un premiu de 1 milion de dolari | CBC News , pe CBC . Adus pe 27 martie 2019 .
  14. ^ (RO) Ted Ranosa, Godfathers Of AI, câștigă premiul Turing din acest an și 1 milion de dolari în Tech Times, 29 martie 2019. Adus pe 5 noiembrie 2020.
  15. ^ (RO) Sam Shead, cei 3 „ Nașii ” AI au câștigat prestigiosul premiu Turing de 1 milion de dolari , de la Forbes. Adus pe 5 noiembrie 2020 .
  16. ^ Isaac Newton al logicii
  17. ^ Joe Shute, „Nașul AI” pentru a face mașinile inteligente și dacă roboții vor învăța cu adevărat să ne omoare pe toți? , în The Telegraph , 26 august 2017. Adus pe 20 decembrie 2017 .
  18. ^ a b c d Hinton, prof. Geoffrey Everest , în Who's Who , Oxford University Press, 2015, DOI : 10.1093 / ww / 9780199540884.013.20261 .
  19. ^ George Salt, Howard Everest Hinton. 24 august 1912 - 2 august 1977 , în Memoriile biografice ale bursierilor Societății Regale , vol. 24, 1978, pp. 150–182, DOI : 10.1098 / rsbm.1978.0006 , ISSN 0080-4606 ( WC ACNP ) .
  20. ^ a b Craig S. Smith, Omul care a ajutat să transforme Toronto într-un focar de înaltă tehnologie , în The New York Times , 23 iunie 2017. Accesat la 27 iunie 2017 .
  21. ^ (EN) Geoffrey Hinton , de la Mathematics Genealogia Project , North Dakota State University.
  22. ^ Genealogia academică a lui Geoffrey E. Hinton
  23. ^ Geoffrey Everest Hinton, Relaxarea și rolul său în viziune , Universitatea din Edinburgh, 1977,OCLC 18656113 .
  24. ^ https://www.cs.toronto.edu/~hinton/fullcv.pdf
  25. ^ Copie arhivată , la coursera.org . Adus la 30 decembrie 2016 (arhivat din original la 31 decembrie 2016) .
  26. ^ U of T rețele neuronale start-up achiziționate de Google , pe media.utoronto.ca , Toronto, ON, 12 martie 2013. Accesat pe 13 martie 2013 .
  27. ^ Martin Ford, Architects of Intelligence: The adevăr about AI from the people building it , Packt Publishing, 2018, ISBN 978-1-78913-151-2 .
  28. ^ Ackley, David H; Hinton Geoffrey E; Sejnowski, Terrence J (1985), „Un algoritm de învățare pentru mașinile Boltzmann”, Științe cognitive, Elsevier, 9 (1): 147–169
  29. ^ Geoffrey E. Hinton, Publicațiile lui Geoffrey E. Hinton în ordine cronologică inversă , cs.toronto.edu .
  30. ^ LJP van der Maaten și Hinton, GE, Vizualizarea datelor folosind t-SNE ( PDF ), în Journal of Machine Learning Research , vol. 9, noiembrie 2008, pp. 2579-2605.
  31. ^ Sam Roweis și Geoffrey Hinton, încorporare vecină stochastică ( PDF ), Sisteme de procesare a informațiilor neuronale , ianuarie 2002.
  32. ^ Povestiri de Geoffrey E. Hinton în Scientific American , la scientificamerican.com .
  33. ^ Sabour, Sara; Frosst, Nicholas; Hinton, Geoffrey. Octombrie 2017. „Rutare dinamică între capsule”
  34. ^ "Capsule Matrix cu rutare EM" 3 noiembrie 2017. OpenReview.net
  35. ^ Geib, Claudia. 2 noiembrie 2017. „Am creat în sfârșit o rețea AI care a fost deceniată în curs” Futurism.com
  36. ^ Anon, profesorul Geoffrey Hinton FRS , la royalsociety.org , Londra, Royal Society , 1998 (arhivat din original la 3 noiembrie 2015) .
    Una sau mai multe dintre propozițiile de mai sus includ text de pe site-ul web royalsociety.org, disponibil sub licența CC-BY 4.0:

    «„ Tot textul publicat sub titlul „Biografie” pe paginile de profil Fellow este disponibil sub licența Creative Commons Attribution 4.0 International License. ” - Termenii, condițiile și politicile Royal Society , la royalsociety.org . Adus pe 9 martie 2016 (Arhivat din original la 11 noiembrie 2016) . "

  37. ^ Destinatari actuali și anteriori , pe rumelhartprize.org , Premiul David E. Rumelhart (arhivat din original la 2 martie 2017) .
  38. ^ Anon, Certificate of election EC / 1998/21: Geoffrey Everest Hinton , on collections.royalsociety.org , London, Royal Society , 1998 (arhivat din original la 5 noiembrie 2015) .
  39. ^ Certificatul său spune:
    ( EN )

    „Geoffrey E. Hinton se distinge la nivel internațional pentru munca sa asupra plaselor neuronale artificiale, mai ales pentru modul în care pot fi concepute pentru a învăța fără ajutorul unui profesor uman. Acesta poate fi începutul mașinilor inteligente autonome asemănătoare creierului. El a comparat efectele leziunilor cerebrale cu efectele pierderilor într-o astfel de rețea și a găsit asemănări izbitoare cu afectarea umană, cum ar fi recunoașterea numelor și pierderile de clasificare. Opera sa include studii de imagini mentale și inventarea de puzzle-uri pentru testarea originalității și inteligenței creative. Este conceptual, sofisticat matematic și experimental. El aduce aceste abilități împreună cu un efect izbitor pentru a produce lucrări importante de mare interes. "

    ( IT )

    Geoffrey E. Hinton s-a remarcat pe plan internațional pentru contribuțiile sale la domeniul rețelelor neuronale artificiale, în special în modul în care acestea pot fi proiectate pentru a învăța fără supravegherea umană. Acest lucru ar putea marca nașterea mașinilor inteligente asemănătoare creierului. El a comparat efectul leziunilor cerebrale cu efectul modificărilor acestor rețele neuronale, observând asemănări deosebite cu handicapul uman, de exemplu în recunoașterea numelor și în pierderea capacității de clasificare. Contribuțiile sale includ studiul limbajului mental figurativ și inventarea problemelor pentru a testa originalitatea și creativitatea inteligenței. Conceptual, sofisticat matematic și experimental. Reunește aceste calități cu un efect remarcabil și produce rezultate importante și foarte interesante. "

  40. ^ Distinsul absolvent din Edinburgh primește premiul ACM AM Turing , pe ed.ac.uk. Adus pe 9 aprilie 2019 .
  41. ^ Omul de știință în inteligența artificială primește premiul M , în CBC News , 14 februarie 2011.
  42. ^ Geoffrey Hinton, cercetător de bază în inteligență artificială, vizitează Universitatea de Sherbrooke , pe usherbrooke.ca , Universitatea de Sherbrooke, 19 februarie 2014.
  43. ^ Academia Națională de Inginerie alege 80 de membri și 22 de membri străini , nae.edu , NAE, 8 februarie 2016.
  44. ^ 2016 IEEE Medals and Recognitions Recipients and Citations ( PDF ), pe ieee.org , IEEE . Adus pe 7 iulie 2016 .
  45. ^ Fundația BBVA acordă premiul arhitectului primelor mașini capabile să învețe așa cum fac oamenii , pe bbva.com , Fundația BBVA, 17 ianuarie 2017.
  46. ^ Consilier științific șef al Institutelor Vector, Dr. Geoffrey Hinton primește premiul ACM AM Turing alături de Dr. Yoshua Bengio și Dr. Yann Lecun , la vectorinstitute.ai , NAE, 27 martie 2019.
  47. ^ Three Pioneers in Artificial Intelligence Win Turing Award , New York Times , 27 martie 2019. Accesat 27 martie 2019 .
  48. ^ Părinții revoluției Deep Learning primesc premiul ACM AM Turing - Bengio, Hinton și LeCun au introdus progrese majore în inteligența artificială , în Association for Computing Machinery , 27 martie 2019. Accesat 27 martie 2019 .
  49. ^ Guvernatorul general anunță 103 noi numiri în Ordinul Canadei, decembrie 2018. , pe gg.ca.
  50. ^ Geoffrey Hinton, Lecture 16d The fog of progress ( PDF ), su cs.toronto.edu .
  51. ^ Raffi Khatchadourian, The Doomsday Invention , în The New Yorker , 16 noiembrie 2015. Accesat la 30 ianuarie 2018 .
  52. ^(EN) Site-ul web al guvernatorului general al Canadei: detalii ornate.

Alte proiecte

Controlul autorității VIAF (EN) 94.385.551 · ISNI (EN) 0000 0001 1776 1189 · LCCN (EN) n80165215 · GND (DE) 1068117893 · BNF (FR) cb13493774b (dată) · NLA (EN) 36.147.886 · WorldCat Identities (EN) lccn-n80165215