一区二区三区日韩精品-日韩经典一区二区三区-五月激情综合丁香婷婷-欧美精品中文字幕专区

分享

OpenAI:顛覆一切,也被一切顛覆

 a_123 2023-09-14

作者:常嘉亦

編輯:硬AI

未來50年的世界將是什么樣子?

《失控》作者、《連線》雜志創(chuàng)刊主編凱文·凱利相信,從未來5000天到未來50年,AI將成為世界最重要的關(guān)鍵詞,成為如同互聯(lián)網(wǎng)一樣無處不在的基礎(chǔ)設(shè)施。

而OpenAI,是他心目中最成功的AI公司,“一個(gè)絕佳的顛覆者案例”

從去年底ChatGPT倉促上線、意外爆紅以來,這家公司和他的創(chuàng)始團(tuán)隊(duì),被這場(chǎng)席卷全球的技術(shù)狂熱推上了舞臺(tái)中央。

OpenAI從何而來,又將去往何處?近期,知名科技記者Steven Levy在《連線》雜志發(fā)表了一篇長(zhǎng)文,對(duì)OpenAI公司的成長(zhǎng)史和公司愿景展開了深度討論。

Altman的選擇

在領(lǐng)導(dǎo)OpenAI之前,Sam Altman已經(jīng)當(dāng)上了世界上最著名的科技孵化器Y Combinator的CEO,從所有這些獨(dú)角獸企業(yè)中套現(xiàn)的意義不在于裝滿合伙人的錢包,而在于為物種層面的變革提供資金。

他成立了一個(gè)研究部門,希望為雄心勃勃的項(xiàng)目提供資金,以解決世界上最大的問題。但在他看來,AI才是顛覆一切的創(chuàng)新領(lǐng)域:一個(gè)能比人類更好地解決人類問題的超級(jí)智能。

他甚至還有過競(jìng)選加州州長(zhǎng)的想法。但他意識(shí)到,他完全有能力做更大的事情——領(lǐng)導(dǎo)一家將改變?nèi)祟惐旧淼墓尽?/p>

在加州的一場(chǎng)晚宴上,他與馬斯克一拍即合。

馬斯克當(dāng)時(shí)正與谷歌聯(lián)合創(chuàng)始人Larry Page吵得不可開交。因?yàn)轳R斯克相信,人類意識(shí)有珍貴的獨(dú)特性,但Page認(rèn)為機(jī)器和人是平等的,如果機(jī)器真的有了意識(shí)、消滅了人類,那就是自然進(jìn)化的法則,Page還指責(zé)馬斯克是一個(gè)“物種主義者”。

于是,馬斯克決心花一些錢,為“人類團(tuán)隊(duì)”做出更多努力。

既關(guān)心技術(shù)變革,也關(guān)心AI安全性的Altman,自然成了他心目中理想的合作伙伴。

一個(gè)嶄新的AI研究機(jī)構(gòu),靠什么吸引頂尖人才?Altman的答案是:AGI的瘋狂愿景。

AGI就是所謂的通用人工智能,即能夠像人類一樣完成復(fù)雜任務(wù)的AI。在Altman仍在擔(dān)任YC CEO的那些日子,計(jì)算機(jī)已經(jīng)能通過深度學(xué)習(xí)和神經(jīng)網(wǎng)絡(luò)完成令人驚嘆的壯舉,比如給照片貼標(biāo)簽、翻譯文本和優(yōu)化復(fù)雜的廣告網(wǎng)絡(luò)。

這些進(jìn)步讓他相信,AGI第一次真正觸手可及。然而,把它交到大公司手中卻讓他感到擔(dān)憂。他認(rèn)為這些公司會(huì)過于專注于自己的產(chǎn)品,而無法抓住機(jī)會(huì)盡快開發(fā)出AGI。而且,如果他們真的創(chuàng)造出了AGI,他們可能會(huì)不計(jì)后果地在沒有采取必要預(yù)防措施的情況下將其公之于眾。所以需要有其他人來制衡他們。

Altman篩選招聘對(duì)象最重要的原則就是,必須是AGI的信徒。憑借他本人和馬斯克的號(hào)召力,以及探索AGI這套誘人的話術(shù),Altman挖來了Stripe CTO Greg Brockman和谷歌大腦核心科學(xué)家Ilya Sutskever等人。

OpenAI:顛覆一切,也被一切顛覆

2015年12月,OpenAI正式成立。

2021 年,他對(duì)記者表示:

“AGI只能打造一次。而且,能夠很好地運(yùn)營(yíng)OpenAI的人并不多。我很幸運(yùn),我生命中的一系列經(jīng)歷讓我真正積極地為此做好了準(zhǔn)備。”

迷茫期

盡管有一個(gè)瘋狂而偉大的愿景,但OpenAI對(duì)如何實(shí)現(xiàn)目標(biāo)毫無頭緒。

Altman回憶道,當(dāng)最初這個(gè)小團(tuán)隊(duì)還沒有辦公室、聚集在Brockman公寓時(shí),他腦子一直在想:

“我們?cè)撛趺崔k?”

直到公司成立一年多以后,事情也沒有太大進(jìn)展。當(dāng)時(shí)公司并沒有一個(gè)明確的方向,只是隨便胡亂嘗試一通,鉆研解決視頻游戲的系統(tǒng),在機(jī)器人技術(shù)上花費(fèi)了大量精力,然后發(fā)幾篇論文。

Altman想起當(dāng)時(shí)公司的景象時(shí)說:

“我們知道我們想做什么。我們知道為什么要這么做。但我們不知道怎么做?!?/strong>

但他們相信。使用深度學(xué)習(xí)技術(shù)的人工神經(jīng)網(wǎng)絡(luò)不斷改進(jìn),為他們的樂觀情緒提供了支持。Sutskever說,追逐人工智能“并非完全瘋狂。它只是適度瘋狂而已”。

直到2016年,OpenAI等來了傳奇AI研究員Alec Radford。在接受OpenAI的邀請(qǐng)后,他告訴他的高中雜志,擔(dān)任這個(gè)新職位“有點(diǎn)類似于加入一個(gè)研究生項(xiàng)目”——一個(gè)研究AI的開放式、低壓力的棲息地。

Radford是一位內(nèi)斂、低調(diào)的研究者,他并未接受作者面對(duì)面采訪邀約,只是寫了一封長(zhǎng)郵件描述了他在OpenAI的工作。

他最大的興趣是讓神經(jīng)網(wǎng)絡(luò)與人類進(jìn)行清晰的對(duì)話。這與制作聊天機(jī)器人的傳統(tǒng)腳本模式不同,從原始的ELIZA到流行的Siri和Alexa,都采用了這種方法,但都很糟糕。他寫道:“我們的目標(biāo)是看看是否有任何任務(wù)、任何環(huán)境、任何領(lǐng)域、任何事情,語言模型都能派上用場(chǎng)?!?/p>

他解釋說,當(dāng)時(shí),語言模型被視為新奇的玩具,只能偶爾生成一個(gè)有意義的句子,而且只有在你真的瞇起眼睛的情況下才能生成。他的第一個(gè)實(shí)驗(yàn)是掃描 20 億條 Reddit 評(píng)論來訓(xùn)練語言模型。

和 OpenAI 的許多早期實(shí)驗(yàn)一樣,這個(gè)實(shí)驗(yàn)失敗了。沒關(guān)系。這位 23 歲的年輕人獲得了繼續(xù)前進(jìn)、再次失敗的許可。Brockman說:“我們當(dāng)時(shí)就想,Alec 很棒,就讓他做自己的事情吧?!?/p>

轉(zhuǎn)折點(diǎn)

2017 年初,一篇由 8 位谷歌研究人員合著的研究論文的預(yù)印本出現(xiàn)了,但并未引起人們的注意。這篇論文的正式標(biāo)題是“Attention Is All You Need”,但它后來被稱為“Transformer論文”,這樣命名既是為了反映這個(gè)想法改變游戲規(guī)則的性質(zhì),也是為了紀(jì)念從卡車變形為巨型機(jī)器人的玩具。

Transformer使神經(jīng)網(wǎng)絡(luò)能夠更高效地理解和生成語言。他們通過并行分析語料,找出哪些元素值得關(guān)注。這極大地優(yōu)化了生成連貫文本以響應(yīng)提示的過程。

最終,人們意識(shí)到,同樣的技術(shù)也可以生成圖像甚至視頻。雖然該論文后來被稱為當(dāng)前AI狂潮的催化劑,但在當(dāng)時(shí),Ilya Sutskever只是少數(shù)幾個(gè)了解這一突破有多么強(qiáng)大的人之一。

Brockman回憶道,Ilya看到Transformer出現(xiàn)時(shí),驚喜地喊到'這就是我們一直在等待的?!?/p>

這就是OpenAI的策略——努力解決問題,然后堅(jiān)信團(tuán)隊(duì)或這個(gè)領(lǐng)域中的某個(gè)人會(huì)設(shè)法找出缺失的部分。

此后,Alec Radford開始試驗(yàn)Transformer結(jié)構(gòu)。他表示,當(dāng)時(shí)在兩周內(nèi)取得的進(jìn)展超過了過去兩年的進(jìn)展。他逐漸明白,要想最大限度地利用新模型,關(guān)鍵在于擴(kuò)大規(guī)模——在超大規(guī)模的數(shù)據(jù)集上進(jìn)行訓(xùn)練。這個(gè)想法被他的同事Rewon Child稱為“Big Transformer”。

這種方法需要改變OpenAI之前那種零散、各自為陣的企業(yè)文化,必須聚集團(tuán)隊(duì)資源,專注一個(gè)點(diǎn)的突破。Quora 首席執(zhí)行官Adam D'Angelo 是 OpenAI 的董事會(huì)成員,他對(duì)作者解釋道:

“為了利用 Transformer 的優(yōu)勢(shì),你需要擴(kuò)大它的規(guī)模。你需要把它辦得更像一個(gè)工程組織。你不能讓每個(gè)研究人員都做自己的事,訓(xùn)練自己的模型,做出可以發(fā)表論文的優(yōu)雅的東西。你必須做這些更乏味、不那么優(yōu)雅的工作?!?/p>

Radford 和他的合作者給他們創(chuàng)建的模型起的名字是“generatively pretrained transformer”——GPT的縮寫。最終,這個(gè)模型被通稱為“生成式AI”。為了建立這個(gè)模型,他們收集了7000本未出版的書籍,其中很多都是浪漫、奇幻和冒險(xiǎn)類型的書籍,并在Quora問答以及初中和高中考試的數(shù)千段文章中對(duì)其進(jìn)行了完善。該模型包含 1.17 億個(gè)參數(shù)或變量,在理解語言和生成答案方面的表現(xiàn)優(yōu)于之前的所有模型。

但最引人注目的結(jié)果是,在處理如此大量的數(shù)據(jù)后,模型能夠提供超出其訓(xùn)練的結(jié)果,在全新的領(lǐng)域提供專業(yè)知識(shí)。這些計(jì)劃外的機(jī)器人能力被稱為“零樣本”。它們?nèi)匀涣钛芯咳藛T感到困惑——這也是該領(lǐng)域許多人對(duì)這些所謂的大型語言模型感到不安的原因。

商業(yè)化

OpenAI前期的資金支持基本都來源于馬斯克。但在2018年,特斯拉開始研究將AI技術(shù)用于自動(dòng)駕駛,而剛好OpenAI已經(jīng)有了顯著的技術(shù)突破。

馬斯克一直把OpenAI這家公司視為自己的所有物,于是他在當(dāng)時(shí)提議,不如把整個(gè)公司都交給他來打理——直接把OpenAI并入特斯拉。但這個(gè)提議遭到Altman和其他高管的斷然拒絕,于是雙方切斷了聯(lián)系,馬斯克撤走了他全部的投資,在一次全體會(huì)議上宣布自己將要離開。

會(huì)上,他預(yù)言O(shè)penAI將以失敗告終,他還稱至少有一名研究人員是“蠢貨”。

由于公司沒有收入,馬斯克撤資無疑是一場(chǎng)生存危機(jī)。雖然OpenAI正在做的研究是硅谷最時(shí)髦的AI,但它是一家非盈利機(jī)構(gòu),這無疑限制了它融資的吸引力。

2019年3月,OpenAI的高管們想出了一個(gè)怪異的辦法。在保持非盈利的同時(shí),再創(chuàng)建一個(gè)盈利實(shí)體。但這個(gè)盈利部門的營(yíng)收有一個(gè)上限——這個(gè)數(shù)字并沒有公開,從公司章程推測(cè),可能高達(dá)數(shù)萬億美元(OpenAI也相信,如果他們的營(yíng)收真的能達(dá)到這個(gè)數(shù)字,到時(shí)候肯定已經(jīng)做出來可以實(shí)際使用的AGI了)。在達(dá)到這個(gè)上限之后,盈利實(shí)體所得的一切都要?dú)w還給非盈利的實(shí)驗(yàn)室。

于是,憑借新的公司架構(gòu),OpenAI成功引入了紅杉等多家風(fēng)險(xiǎn)投資機(jī)構(gòu)。但尷尬的是,對(duì)OpenAI來說,數(shù)十億美元的風(fēng)險(xiǎn)投資只是微不足道的小數(shù)目,AI研發(fā)是一個(gè)夸張的無底洞。創(chuàng)造大型語言模型的Big Transformer方法需要大型硬件,GPT系列的每一次迭代都需要呈指數(shù)級(jí)增長(zhǎng)的算力,只有少數(shù)幾家公司有負(fù)擔(dān)的能力。

于是,OpenAI很快鎖定了微軟。Altman對(duì)記者表示,這是因?yàn)槲④汣EO Satya Nadella和CTO Kevin Scott足夠有魄力:在花費(fèi)了20多年時(shí)間和數(shù)十億美元建立了一個(gè)所謂的尖端AI研究部門之后,承認(rèn)自己的工作一團(tuán)糟,然后押注一家成立僅幾年的小公司。

微軟最初出資10億美元,以其服務(wù)器上的計(jì)算時(shí)間作為回報(bào)。但隨著雙方信心的增強(qiáng),交易規(guī)模不斷擴(kuò)大?,F(xiàn)在,微軟已經(jīng)向OpenAI投入了130億美元。

微軟也為自己爭(zhēng)取到了一大筆好處,它不僅擁有OpenAI盈利部門的“非控股股權(quán)”——據(jù)稱是49%,還獲得了OpenAI技術(shù)獨(dú)家商業(yè)化授權(quán)。而且,并且成功讓旗下云計(jì)算平臺(tái)Azure成為OpenAI的獨(dú)家云服務(wù)商。換句話說,微軟的巨額投資不但爭(zhēng)取到了一個(gè)強(qiáng)大的合作伙伴,還可以為Azure云服務(wù)鎖定全球最受歡迎的新客戶之一。

此外,根據(jù)交易條款,OpenAI最初的一些理想——為所有人提供平等訪問權(quán)——似乎被丟進(jìn)了垃圾桶。

在交易的過程里,OpenAI逐漸有了營(yíng)利性機(jī)構(gòu)的性質(zhì),這讓一些員工感到反感,幾位高管隨之離職,他們認(rèn)為,OpenAI 已經(jīng)變得過于商業(yè)化,偏離了最初的使命。

OpenAI的未來

當(dāng)瘋狂的AGI愿景離現(xiàn)實(shí)越來越近,Sam Altman和他的團(tuán)隊(duì)面臨的壓力也越來越大,他們既要在每個(gè)產(chǎn)品周期內(nèi)實(shí)現(xiàn)革命,又要滿足投資者的商業(yè)需求,同時(shí)還要在激烈的競(jìng)爭(zhēng)中保持領(lǐng)先。更加關(guān)鍵的是,他們還肩負(fù)著防止讓AI消滅人類的“準(zhǔn)救世主”的使命。

在時(shí)代的沖刷下,OpenAI變了很多,唯有建立安全的AGI這一愿景沒有改變,仍然在驅(qū)動(dòng)著他們向前。OpenAI的領(lǐng)導(dǎo)者們深信,他們將制造出足夠智能、足夠安全的AI系統(tǒng),將人類帶入一個(gè)難以想象的富饒時(shí)代。

本文部分編譯自WIRED長(zhǎng)文'What OpenAI Really Wants',有刪節(jié)

    本站是提供個(gè)人知識(shí)管理的網(wǎng)絡(luò)存儲(chǔ)空間,所有內(nèi)容均由用戶發(fā)布,不代表本站觀點(diǎn)。請(qǐng)注意甄別內(nèi)容中的聯(lián)系方式、誘導(dǎo)購(gòu)買等信息,謹(jǐn)防詐騙。如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容,請(qǐng)點(diǎn)擊一鍵舉報(bào)。
    轉(zhuǎn)藏 分享 獻(xiàn)花(0

    0條評(píng)論

    發(fā)表

    請(qǐng)遵守用戶 評(píng)論公約

    類似文章 更多

    国产av乱了乱了一区二区三区| 亚洲精品小视频在线观看| 国产精品日韩欧美第一页| 欧美胖熟妇一区二区三区| 国产一区二区不卡在线播放| 爱在午夜降临前在线观看| 午夜亚洲少妇福利诱惑| 精品欧美日韩一区二区三区| 成人免费观看视频免费| 亚洲专区中文字幕视频| 高清一区二区三区大伊香蕉| 国产精品日韩精品最新| 夫妻性生活动态图视频| 日本特黄特色大片免费观看| 国产精品九九九一区二区| 制服丝袜美腿美女一区二区| 欧美日韩精品一区二区三区不卡| 国产中文字幕一区二区| 国产精品熟女在线视频| 在线免费国产一区二区| 成人午夜激情在线免费观看| 欧美国产日本高清在线| 国产美女精品午夜福利视频 | 91亚洲熟女少妇在线观看| 亚洲中文字幕在线综合视频| 国产又粗又猛又大爽又黄| 真实国产乱子伦对白视频不卡 | 九九热精品视频在线观看| 激情爱爱一区二区三区| 亚洲专区中文字幕在线| 日本精品视频一二三区| 丁香七月啪啪激情综合| 欧美国产在线观看精品| 在线观看视频日韩成人| 好吊日视频这里都是精品| 麻豆果冻传媒一二三区| 欧美一区二区三区在线播放| 日本高清加勒比免费在线| 亚洲中文字幕免费人妻| 日本妇女高清一区二区三区| 91偷拍视频久久精品|