Published on

Alec Radford: Mbunifu Asiyejulikana wa GPT Anayebadilisha Enzi ya AI

Waandishi
  • avatar
    Jina
    Ajax
    Twitter

Alec Radford: Mbunifu Asiyejulikana wa GPT

Jarida la Wired limemlinganisha Alec Radford wa OpenAI na Larry Page kwa uvumbuzi wa PageRank katika utafutaji wa mtandao. Kazi ya Radford, hasa katika Transformer na GPT, imebadilisha kwa kiasi kikubwa jinsi lugha za akili bandia zinavyofanya kazi.

Hivi karibuni, OpenAI ilitangaza mabadiliko ya muundo wa shirika, ikigawanya kuwa kampuni yenye faida na shirika lisilo la faida. Wakati huo huo, Mkurugenzi Mtendaji wa OpenAI, Sam Altman, alichapisha ujumbe kwenye jukwaa la X, akiwashukuru watu kadhaa waanzilishi wa OpenAI na kumsifu hasa Alec Radford, akimwita "akili ya kiwango cha Einstein" na akiongeza kuwa maendeleo mengi katika akili bandia leo yanaweza kufuatiliwa hadi kwenye matokeo yake ya utafiti.

Inaripotiwa kuwa Radford ameondoka OpenAI mwezi uliopita ili kufanya utafiti wa kujitegemea.

Mafanikio ya Kitaaluma

  • Kazi za Radford zimenukuliwa zaidi ya mara 190,000.
  • Ana makala kadhaa zilizonukuliwa zaidi ya mara 10,000.

Historia ya Kushangaza

  • Radford hana PhD, wala shahada ya uzamili.
  • Matokeo mengi ya utafiti wake wa msingi yalifanywa awali katika Jupyter Notebook.

Hadithi ya Alec Radford imevutia tena umakini mkubwa katika uwanja wa akili bandia, na watu wanampongeza sana.

Kazi ya Alec Radford

Alec Radford ni mtafiti mashuhuri katika usindikaji wa lugha asilia na maono ya kompyuta. Alikuwa mfanyakazi wa maendeleo ya mashine ya kujifunza na mtafiti katika OpenAI, na hapo awali alikuwa mkuu wa utafiti katika kampuni ya Indico.

Wakati wa kipindi chake katika OpenAI, Radford alishiriki katika kuandika makala kadhaa kuhusu lugha za kielelezo za mafunzo ya awali ya kuzalisha (GPT), na alichapisha makala kadhaa katika mikutano na majarida ya juu kama vile NeurIPS, ICLR, ICML, na Nature.

Pia alishiriki maoni yake kuhusu akili bandia kwenye X/Twitter, lakini amekuwa hahusiki tangu Mei 2021. Ujumbe wake wa mwisho ulikuwa kueleza sababu ya upana wa safu ya GPT-1 kuwekwa kuwa 768. Kulingana na taarifa za LinkedIn, Alec Radford alisoma katika Chuo cha Uhandisi cha Franklin W. Olin kutoka 2011 hadi 2016 na kupata shahada ya kwanza. Chuo hiki cha uhandisi cha kibinafsi kilichopo Needham, Massachusetts, kinajulikana kwa kiwango chake cha chini cha uandikishaji na elimu bora.

Mfumo wa kitaaluma wa Chuo cha Uhandisi cha Olin unajulikana kama "Pembetatu ya Olin," ambayo inajumuisha misingi ya sayansi na uhandisi, ujasiriamali, na sanaa huria. Shule hii inatoa tu shahada katika uhandisi wa mitambo, uhandisi wa umeme na kompyuta, sayansi ya kompyuta, na uhandisi wa biomedical.

Shule hii inasisitiza elimu ya vitendo, ikihimiza wanafunzi kuunganisha ujuzi na changamoto halisi na kufuata maslahi yao wenyewe.

Wakati wa masomo yake ya shahada ya kwanza, Radford alikuwa na shauku kubwa kuhusu mashine ya kujifunza. Alishiriki katika mashindano ya Kaggle na wanafunzi wenzake na kufanikiwa, hatimaye akapata uwekezaji wa hatari. Mnamo 2013, Radford na washirika walianzisha Indico katika mabweni yao, wakitoa suluhisho la kujifunza mashine kwa biashara.

Katika Indico, Radford alikuwa hasa anahusika na kutambua, kuendeleza, na kuboresha teknolojia za mashine ya kujifunza ya picha na maandishi yenye matumaini, na kuhamisha kutoka hatua ya utafiti hadi matumizi ya kiviwanda.

Alifanya utafiti unaohusiana na mitandao ya kuzalisha ya kupingana (GAN), akipendekeza DCGAN ili kuboresha uwezo wa mafunzo ya GAN, ambayo inachukuliwa kuwa mafanikio muhimu katika uwanja wa GAN.

Kwa sababu ushawishi wa eneo la Boston katika uwanja wa akili bandia haukuwa kama makubwa ya teknolojia ya Pwani ya Magharibi, pamoja na rasilimali chache, Radford alijiunga na OpenAI mwaka 2016.

Alielezea kazi hii mpya kama "kujiunga na programu ya shahada ya uzamili," akiwa na mazingira wazi na yasiyo na shinikizo ya utafiti wa AI.

Radford ni mtu mnyenyekevu na hataki kuwasiliana na vyombo vya habari. Alijibu maswali ya Wired kupitia barua pepe kuhusu kazi yake ya awali katika OpenAI, akisema kuwa alikuwa anavutiwa zaidi na kuwezesha mitandao ya neva kuwasiliana waziwazi na binadamu.

Aliona kuwa roboti za mazungumzo za wakati huo (kutoka ELIZA hadi Siri na Alexa) zilikuwa na mapungufu, hivyo akajitolea kuchunguza matumizi ya mifumo ya lugha katika kazi mbalimbali, mazingira, nyanja na matukio.

Jaribio lake la kwanza lilikuwa kutumia maoni bilioni 2 kutoka Reddit kufunza lugha ya kielelezo, na ingawa lilishindwa, OpenAI ilimpa nafasi ya kutosha ya kujaribu. Hii iliweka msingi wa mfululizo wa mafanikio ya kimapinduzi yaliyofuata, kama vile GPT ya kwanza inayojulikana, na maendeleo ya GPT-2 ambayo aliongoza.

Kazi hizi ziliweka msingi wa lugha kubwa za kisasa. Jarida la Wired lilimlinganisha Alec Radford wa OpenAI na Larry Page kwa uvumbuzi wa PageRank. Ni muhimu kutambua kwamba, ingawa PageRank ilikuwa matokeo ya kazi ya Larry Page wakati akisoma PhD huko Stanford, hakukamilisha PhD yake baadaye.

Alec Radford pia alishiriki katika kuandika makala ya GPT-3, na pia utafiti wa data ya mafunzo ya awali na usanifu wa GPT-4.

Mwishoni mwa 2024, kabla ya siku ya mwisho ya ujumbe 12 wa OpenAI mfululizo, habari ziliibuka kuwa Alec Radford alikuwa karibu kuondoka OpenAI, lakini bado haijulikani kama hii inahusiana na mabadiliko ya muundo wa shirika la OpenAI.

Hivi sasa, tunajua tu kwamba atakuwa mtafiti wa kujitegemea. Anaweza kuchagua kuingia chuo kikuu ili kupata PhD, au anaweza kuibuka tena na matokeo mapya ya utafiti baada ya kipindi cha ukimya. Hata hivyo, mustakabali ambao Alec Radford ameshiriki kuunda unakuja. Haijalishi kama akili bandia ya jumla (AGI) itapatikana mwaka huu kama ilivyotabiriwa na Altman, 2025 itakuwa mwaka muhimu sana katika uwanja wa akili bandia.