月之暗面楊植麟:創(chuàng)新、長期、第一性

1 評(píng)論 4224 瀏覽 8 收藏 32 分鐘

今年早些時(shí)候,我們?cè)蜅钪谗胱聛硪黄鹆牧?個(gè)小時(shí),談到了AGI、創(chuàng)業(yè)、意識(shí)、哲學(xué)、生命和愿景。

Monolith礪思資本連續(xù)三輪投資月之暗面,以我們對(duì)這個(gè)團(tuán)隊(duì)的了解,他們是一群足夠產(chǎn)品和結(jié)果導(dǎo)向、務(wù)實(shí)求真的AGI evangelists。

通往AGI的道路注定漫長,認(rèn)清真正重要的事并且堅(jiān)持下去,多年后到達(dá)目的地再回望時(shí),可能會(huì)發(fā)覺當(dāng)下很多輿論只是微不足道的噪音。

我們使用Kimi整理了這次對(duì)話的內(nèi)容,希望對(duì)于外界了解月之暗面這家公司有更多的幫助。

在《2001:太空漫游》的開場,人猿將一塊骨頭高高拋起,隨著飛舞的骨頭升上太空,場景瞬間切換到幾百萬年后的太空,這塊骨頭也變幻成了太空中漫游的宇宙飛船。斯坦利·庫布里克用這樣一個(gè)極富沖擊力和想象力的轉(zhuǎn)場,用一瞬間完成了人類三百多萬年的進(jìn)化之旅,這也成就了世界影史上最偉大的蒙太奇之一。

在這個(gè)史詩般的場景里,從茹毛飲血的石器時(shí)代到駕駛飛船登上月球,幾百萬年只在彈指一揮間,這都是因?yàn)槿嗽硨?duì)工具(科技)的掌握。同時(shí),這艘星艦上還搭載了銀幕史上最早的人工智能反派——一臺(tái)冰冷狡黠的超級(jí)計(jì)算機(jī)HAL9000,它也成為后來科幻電影中人工智能的鼻祖。

在1969年的夏天,阿姆斯特朗的聲音通過電視傳到了世界的各個(gè)角落,在離開地球后110個(gè)小時(shí)后,他成為航天史上登上月球的第一個(gè)人。那一天,全世界約有六億人通過電視直播觀看了這個(gè)人類歷史上最偉大的壯舉。

為了慶祝這一時(shí)刻,平克·弗洛伊德當(dāng)時(shí)作為受邀樂隊(duì)正在BBC的直播間里即興演奏。

人類登上月球四年之后,平克·弗洛伊德推出了自己的第八張錄音室專輯《The Dark Side of the Moon》,在步履的喘息聲、催促登機(jī)的機(jī)場廣播、開合的收銀機(jī)抽屜、跳躍的貝斯中向世界表達(dá)著自己對(duì)沖突、貪婪、時(shí)間和死亡的理解,并在此后長達(dá)半個(gè)世紀(jì)里不斷地被提起。

從骨棒到星艦,從人猿到AI,從Monolith到Moonshot,在這個(gè)探索過程中,始終伴隨著我們的是未知的恐懼,是太空的無垠,但更重要的對(duì)宇宙的探索熱情夢(mèng)想、對(duì)人類本質(zhì)以及未來的終極思考。

在今天,實(shí)現(xiàn)通用人工智能被稱為是這個(gè)時(shí)代的“阿波羅計(jì)劃”,月之暗面(Moonshot AI)就是一家致力于實(shí)現(xiàn)AGI的大模型公司,他們以平克·弗洛伊德的專輯名字命名,創(chuàng)始人楊植麟在github的介紹是:

The ultimate goal of all my work, including both research and business, is to maximize the value of artificial intelligence.

和楊植麟的對(duì)話,我們并沒有談?wù)撎喈a(chǎn)品和公司的細(xì)節(jié),更多地聊了聊在AI領(lǐng)域的長期愿景,對(duì)組織、意識(shí)和生命的思考,創(chuàng)業(yè)的初心和反思,以及最近閱讀的書籍和電影。

以下是全文,經(jīng)礪思資本整理,有調(diào)整和刪減:

一、“創(chuàng)新、長期、第一性原理”

MONOLITH:

植麟你也可以講講公司取名Moonshot的背景。

植麟:

當(dāng)時(shí)我們用Kimi內(nèi)測的時(shí)候,想取一個(gè)中文名。想了半天就說那要不叫月之暗面,然后我就輸進(jìn)去問Kimi,「月之暗面如果是一個(gè)公司名字,它應(yīng)該是什么意思?」然后Kimi就引用了兩個(gè)典故,一個(gè)是平克弗洛伊德的專輯,另一個(gè)就引用了庫布里克的這個(gè)電影,所以第一次和曹曦見面就覺得很有淵源。

月之暗面就和AGI 一樣,你平時(shí)只能看到發(fā)光的那面,但你不知道那個(gè)暗面是什么樣。它很神秘,要看到它又很難,英文正好也翻譯成Moonshot,寓意要做成一個(gè)價(jià)值很大但是又很難的事情,這個(gè)跟我們的初衷是蠻匹配的。

MONOLITH:

曹曦你第一次見植麟是什么時(shí)候,有什么印象?

曹曦:

第一次見面是線上,當(dāng)時(shí)其實(shí)主要是我在pitch(笑)。第二次就來公司樓下了,那次其實(shí)印象很深刻,當(dāng)時(shí)覺得好的公司就應(yīng)該是一兩句話就可以說完的,我記得植麟就說我們要做AGI,然后要做toC的產(chǎn)品,我覺得也很純粹,事情就說完了。

更早之前在2019年,清華的一個(gè)活動(dòng)上,我們也見過面,但當(dāng)時(shí)沒有很熟。當(dāng)時(shí)一桌吃飯的人里面,我覺得植麟是一個(gè)有 potential 的創(chuàng)業(yè)者,有靈氣,有意思,后面很多事情也就match了。

MONOLITH:

植麟也可以談?wù)劜荜氐?pitch 是怎么樣打動(dòng)你的。

植麟:

(笑)其實(shí)不光是第一次交流,從認(rèn)識(shí)到現(xiàn)在,包括這幾輪的融資,以及業(yè)務(wù)上和招聘上,曹曦總對(duì)我們幫助都非常大,所以也是 so far 我們最喜歡的投資人之一。

MONOLITH:

我們有一個(gè)快問快答環(huán)節(jié),我昨天告訴Kimi,今天和楊植麟有一場對(duì)話,讓它生成了 100 個(gè)問題,最后精挑細(xì)選了10個(gè)來問你。

第一個(gè)問題,用三個(gè)詞形容月之暗面這家公司。

植麟:

創(chuàng)新、長期、第一性原理。

MONOLITH:

用三個(gè)詞形容你自己。

植麟:

跟剛才一樣。

MONOLITH:

分享一本最近你在讀的書。

植麟:

我最近在讀一本書叫《Everybody: a book about freedom》

MONOLITH:

分享一首歌或者一張專輯。

植麟:

Brain damage,

the dark side of the moon。

MONOLITH:

分享一個(gè)對(duì)你生命中影響最大的人。

植麟:

最大的一個(gè)人,沒有。這個(gè)要精確,或者要想更久。

MONOLITH:

如果有機(jī)會(huì)與歷史上的任何一個(gè)人共進(jìn)晚餐,你會(huì)選擇誰?為什么?

植麟:

Steve Jobs,他是一個(gè)能把有 taste 的東西泛化的成功案例。這種案例不多,可能Steve Jobs 是一個(gè),Pink Floyd也算。

MONOLITH:

你認(rèn)為哪位科學(xué)家的工作對(duì)現(xiàn)代人工智能的發(fā)展影響最為深遠(yuǎn)?

植麟:

Geoffrey Hinton(深度學(xué)習(xí)之父)。

MONOLITH:

在整個(gè)歷史上,你認(rèn)為最成功的互聯(lián)網(wǎng)產(chǎn)品是什么?

植麟:

YouTube,因?yàn)樗a(chǎn)生了很大的impact。

MONOLITH:

如果把這個(gè)語境縮小到中國呢?

植麟:

中國的話,我覺得是微信,因?yàn)樗侵袊ヂ?lián)網(wǎng)的 super APP。

MONOLITH:

最后一個(gè)問題,你現(xiàn)在深信不疑的一件事情是什么?

植麟:

AGI公司需要一個(gè)從 01 的新組織。

MONOLITH:

你對(duì)kimi生成的問題還滿意嗎?

植麟:

我覺得還不錯(cuò)。

二、“show me the code 比其他所有事情都重要”

MONOLITH:

月之暗面不是你第一個(gè)創(chuàng)業(yè)公司了,你當(dāng)時(shí)在美國呆了一段時(shí)間,在那里看到了什么點(diǎn)燃了你再次創(chuàng)業(yè)的熱情?

植麟:

當(dāng)然還是覺得看到了很大的變化,AI 這個(gè)技術(shù)發(fā)展了七八十年,從來沒有出現(xiàn)這種toC的機(jī)會(huì)。以前也有一些優(yōu)秀的 AI 公司,更多是專注在 ToB 業(yè)務(wù)上。

但從2022年下半年開始,有越來越多像 Midjourney 和 ChatGPT 這樣的應(yīng)用出來,甚至有一些普通的、非技術(shù)狂熱者的用戶也開始使用,然后周活超過1億,這些都是非常明顯的信號(hào),這里面肯定是有巨大機(jī)會(huì)的。

另外它跟互聯(lián)網(wǎng)相比,最大的特點(diǎn)是能創(chuàng)造新的生產(chǎn)力,而不光只是去做連接。所以我相信這是接下來 10 年里價(jià)值最大的事情之一。

MONOLITH:

如果回過頭來看,你當(dāng)時(shí)是否會(huì)選擇更激進(jìn)的方式,比如在幾年前第一次創(chuàng)業(yè)時(shí),就直接去做大模型和AGI??

植麟:

當(dāng)時(shí)其實(shí)還是做了很多和AGI相關(guān)的事情。比如像國內(nèi)的最早的一些大模型項(xiàng)目,我們?cè)诒澈笞隽撕芏嗖嫉赖氖聝骸5陀^上要承認(rèn),很多事情在合適的時(shí)機(jī)上去做才能事半功倍。我認(rèn)為要做一家獨(dú)立的 AGI 公司還是需要對(duì)的時(shí)間點(diǎn)。

實(shí)際上之前我們踩過了很多坑,對(duì)于這次創(chuàng)業(yè)有很大的幫助,因?yàn)槟憔椭朗裁词遣?work的。對(duì)我來說最大一個(gè)的lesson就是——你要做 AGI 的話,你一定是需要從 0 到 1 去搭建一個(gè)組織,這是我現(xiàn)在深信不疑的一件事情,也是我們?yōu)槭裁匆霈F(xiàn)在這個(gè)公司最核心的原因。但如果沒有之前的這些過程,那很難真正理解它到底為什么是這樣。

MONOLITH:

很多人不知道你是個(gè)鼓手,之前組建的樂隊(duì)叫splay tree(取自一個(gè)數(shù)據(jù)結(jié)構(gòu))。你說過搖滾和創(chuàng)業(yè)很像,都代表了一種反叛和打破常規(guī)的精神。玩樂隊(duì)的經(jīng)歷對(duì)你有什么影響?

植麟:

我相信一個(gè)真正偉大的公司是需要有人文底蘊(yùn)的,而不光是說有一個(gè)技術(shù)和產(chǎn)品就夠了,還要去看它底層的文化和價(jià)值觀是什么。對(duì)于審美的追求能讓我們做出來更好更有靈魂的產(chǎn)品,這點(diǎn)我是相信的。我們公司的人現(xiàn)在應(yīng)該能組好幾個(gè)樂隊(duì)了。

MONOLITH:

我看你在 GitHub 上的自我介紹是——

My goal of all my work, including both research and business, is to maximum the value of artificial intelligence. 這和馬斯克說他創(chuàng)立Tesla的全部意義都是為了加速電動(dòng)汽車時(shí)代的到來,而不是成為通用汽車有點(diǎn)像。你是從什么時(shí)候開始確立了自己對(duì)AI事業(yè)的使命和愿景?

植麟:

這是個(gè)逐漸形成的過程,因?yàn)榻佑|和做AI 這個(gè)事情有十多年了,一開始可能只是好奇這個(gè)事本身,就是除了人腦之外,還有另外一個(gè)東西它也能產(chǎn)生智能。一開始大家可能連這個(gè) Back Propagation(反向傳播算法)都要手寫,沒有很成熟的框架,效果也沒有這么好。

在這個(gè)過程中慢慢地發(fā)現(xiàn),AI最終確實(shí)是可能double GDP,或者10xGDP,100x GDP 的機(jī)會(huì),因?yàn)槿祟惿鐣?huì)本質(zhì)上它的生產(chǎn)力bond,就是你的人口對(duì)應(yīng)能產(chǎn)生的腦力的總和,現(xiàn)在突然出現(xiàn)一個(gè)東西可以去替代它,這就使得它能達(dá)到的上限非常高。

我第一次見到曹曦的時(shí)候,當(dāng)時(shí)和他講了一個(gè)事情,就是我之前有一次做夢(mèng),夢(mèng)見自己訓(xùn)練了一個(gè)神經(jīng)網(wǎng)絡(luò),它所有任務(wù)的準(zhǔn)確率都是100%,我就驚醒了。因?yàn)槲乙庾R(shí)到自己突然能改變世界,然后發(fā)現(xiàn)并沒有(笑)。在那個(gè)時(shí)候很多任務(wù)還只能做到百分之六七十。今天這個(gè)夢(mèng)已經(jīng)部分實(shí)現(xiàn)了。AI在很多任務(wù)上超越了大部分人類。

在這個(gè)過程中,其實(shí)我還蠻感慨的,很多事情發(fā)生了變化。包括我們很早就認(rèn)為語言模型是個(gè)很重要的問題,但并不是所有人都是這樣認(rèn)為的。因?yàn)楫?dāng)時(shí)語言模型最大的用途是拿來給語音識(shí)別去重新排序,很多人認(rèn)為它唯一的作用就是這個(gè)。后來大家才逐漸真正看到了更多地用人工智能釋放生產(chǎn)力瓶頸的可能性。

MONOLITH:

這個(gè)過程中有一個(gè)廣為人知的事情,就是2019年的時(shí)候你那篇TransformerXL的論文一度被 ICLR 給拒絕,理由就是他們不認(rèn)為大語言模型的提升在實(shí)際應(yīng)用場景中會(huì)有更多的價(jià)值。當(dāng)時(shí)收到類似這樣的負(fù)反饋有動(dòng)搖你嗎?

植麟:

那時(shí)候看的已經(jīng)挺開了。大家并不是說那么 care 你一定要在會(huì)議和期刊上發(fā)表個(gè)什么東西,你最重要的就是arXiv加GitHub。所以那會(huì)兒其實(shí)已經(jīng)不太 care 那些所謂的同行評(píng)審。

這中間也經(jīng)歷了一些變化,十年前peer review和評(píng)審很重要,再后來就是 GitHub加arXiv,到現(xiàn)在就是products,要show me the code。用產(chǎn)品說話。

MONOLITH:

就更多從第一性原理去思考問題。

植麟:

做出來一個(gè)真正能用的、好用的東西。這四個(gè)字——能用,好用,比其他所有東西都重要。

三、“expect the worst, 但盡全力去把事情做好”

MONOLITH:

創(chuàng)業(yè)到現(xiàn)在快一年了,公司發(fā)展的狀態(tài)你還滿意嗎?

植麟:

我覺得so far進(jìn)展還是很不錯(cuò)的,甚至是超預(yù)期的,當(dāng)然對(duì)一個(gè)大模型或者對(duì)一個(gè) AGI 公司來講,最核心的還是組織本身,因?yàn)槟闼械募夹g(shù)其實(shí)都是通過組織生產(chǎn)出來的,組織的核心又是人,如果你沒有合適的人,光在那談管理的辦法,或者說怎么合作,其實(shí)都是空的。所以我覺得組織建設(shè)這一點(diǎn)是我們可能前期做得比較好的一個(gè)地方。

曹曦:

為什么會(huì)超預(yù)期?是本來預(yù)期就比較低,還是確實(shí)做得好?

植麟:

我一直都是保持謹(jǐn)慎的樂觀,expect the worst,但盡全力去把事情做好,這個(gè)是一部分超預(yù)期的原因,另外市場的變量也很重要,人才和資本的流動(dòng)使得公司構(gòu)建的速度更快了。

MONOLITH:

在組織建設(shè)上,你反提到做AGI需要一個(gè)全新的組織形式,這個(gè)怎么理解?

植麟:

傳統(tǒng)互聯(lián)網(wǎng)和 AI產(chǎn)品最大的區(qū)別,一個(gè)是先設(shè)計(jì)后制造,一個(gè)是通過制造完成設(shè)計(jì)。我沒有辦法提前規(guī)劃說有用戶會(huì)拿 50 個(gè)簡歷放到kimi里去篩選,然后專門去設(shè)計(jì)和優(yōu)化這個(gè)場景。我們只能說是先把基礎(chǔ)能力給設(shè)計(jì)好,比如讓它有很強(qiáng)的 in-context learning 的能力,instruction following的能力,這就是一個(gè)在制造中完成設(shè)計(jì)的過程。

所以,你的生產(chǎn)方式不一樣,你的組織肯定就不一樣,這點(diǎn)是非常重要的?,F(xiàn)在是 model as an application,本質(zhì)上消費(fèi)的是智能而不是連接。有的地方和互聯(lián)網(wǎng)時(shí)代比是沒有太大變化,但已經(jīng)發(fā)生的變化是很深刻的,以至于說你如果沒有一個(gè)全新的組織,你可能是很難做的。

曹曦:

所以其實(shí)互聯(lián)網(wǎng)思維和AGI思維倒未必是涇渭分明的,但在需要一個(gè)全新的組織這個(gè)點(diǎn)上,可能是一些之前的existing player 的創(chuàng)新者的窘境。

MONOLITH:

那在組織建設(shè)上,你覺得月之暗面現(xiàn)在想吸引什么樣的人?

植麟:

我們公司有很多AGI Evangelist(布道者),就是你認(rèn)為接下來 10 年只有這個(gè)事情是唯一值得做的,這個(gè) vision 是最關(guān)鍵的,所以我們最歡迎對(duì) AGI有強(qiáng)烈熱情的人,這是第一點(diǎn),第二點(diǎn)的話可能就是學(xué)習(xí)能力。

這里還有很重要的一點(diǎn),人才也有滾雪球效應(yīng),當(dāng)你認(rèn)識(shí)的一些很優(yōu)秀的人,比如a、c、d、 e 都在這家公司,然后本身這些人之間都是彼此欣賞或已經(jīng)認(rèn)識(shí)的,那組織里這樣相似的人就會(huì)越來越多。

MONOLITH:

你在面試中會(huì)問到的最重要的問題是什么?

植麟:

這個(gè)我確實(shí)有一個(gè),但說了以后就沒法用了,所以不能告訴你。(笑)

MONOLITH:

那分享一件你最近很重視和正在推進(jìn)的事情。

植麟:

最近在搞產(chǎn)品,搞產(chǎn)品,搞產(chǎn)品。

MONOLITH:

說到產(chǎn)品,你覺得現(xiàn)在什么樣的產(chǎn)品經(jīng)理才能做出killer app?

植麟:

我覺得沒有一個(gè)特定的范式,但最核心的應(yīng)該是學(xué)習(xí)能力。比如在保證基礎(chǔ)的、核心的判斷是正確的前提下,還得會(huì)有很多信息輸入的情況下快速升級(jí)自己。

曹曦:

在過去這些年里,我覺得產(chǎn)品經(jīng)理是一個(gè)被過分放大的刻板印象。這里面會(huì)有一個(gè)誤區(qū),就是有時(shí)候其實(shí)所謂的產(chǎn)品經(jīng)理,都沒有被精確定義成它是哪個(gè)行業(yè)的,有些行業(yè)里其實(shí)沒有這個(gè)概念,比如游戲行業(yè)就沒有,ta叫游戲策劃,再比如教育行業(yè),這里面最好的產(chǎn)品經(jīng)理是誰?可能應(yīng)該首先是對(duì)教育有最深認(rèn)知的從業(yè)者。

我覺得這次這一波機(jī)會(huì)里,對(duì)創(chuàng)始人在技術(shù)背景上的要求可能甚至要更高,所以我們?cè)谌ツ昴瓿醯谋姸喙局羞x擇bet的,是我們覺得在AI技術(shù)上最強(qiáng)的植麟。在這個(gè)時(shí)代,無論是對(duì)從業(yè)者還是創(chuàng)業(yè)者來說,其實(shí)要求都是既要又要的。過去無論是互聯(lián)網(wǎng)還是移動(dòng)互聯(lián)網(wǎng),這兩波大的機(jī)會(huì)里面,那些長到特別大的公司例如騰訊、百度、網(wǎng)易、字節(jié)、快手等公司的founder 都是技術(shù)背景。

四、“人類進(jìn)化的本質(zhì)是捕獲和固化宇宙里的熵”

MONOLITH :

你覺得什么是意識(shí),機(jī)器有沒有意識(shí)?

植麟:

大概幾十年前有人問過這樣的一個(gè)問題,就是說你怎么去知道一個(gè)機(jī)器有沒有理解一句話?今天是這個(gè)問題的升級(jí)版,但我覺得本質(zhì)沒有什么變化。

今天不會(huì)人再去問「這個(gè)機(jī)器能不能理解一句話」了,因?yàn)檫@個(gè)問題的答案變得很簡單。所以我覺得再過幾年,你的這個(gè)問題也會(huì)變得很trivial(微不足道的),你都不需要去衡量它,你就直接感受它就好了。

如果拆解的話也有一些科學(xué)的方法,比如把它變成一種形式語言,然后用一個(gè)邏輯表達(dá)式去表達(dá);或者在operational 層面,比如針對(duì)一篇文章或者論文,你去問AI 100 個(gè)問題它全都答對(duì)了,那它就是理解了,也就有了(意識(shí))。

AI現(xiàn)在還沒有辦法跟人建立很長期的。以年為單位的connection,它也沒有深層的identity,或者一種內(nèi)生的motivation,這些也可以作為一種衡量標(biāo)準(zhǔn)。

曹曦:

我覺得可能在一些語境的討論里,意識(shí)的定義很多時(shí)候是從人的自我角度出發(fā)的,就比如這一波智能肯定跟規(guī)模有很大的關(guān)系。那在自然界里,其實(shí)螞蟻群和蜂群規(guī)模到了一定程度之后,看似也有智能的行為,所以你說蜂群或者蟻群它們有沒有意識(shí)?可能也有,但不是我們定義的那種意識(shí)。

植麟:

也是一個(gè)量變產(chǎn)生質(zhì)變的結(jié)果,可能到了 10的27 次方以后,它們的意識(shí)會(huì)更強(qiáng)。所以你今天也不能說它們沒有,只是沒有那么明顯。

MONOLITH:

從第一性原理上講,我們?yōu)槭裁葱枰狝I?

植麟:

這個(gè)問題有兩種流派,一種是有效加速主義(effective acceleration)。這一派的人認(rèn)為宇宙里面漂浮著各種各樣的熵,而人類的目標(biāo)就是去捕獲他們,今天的神經(jīng)網(wǎng)絡(luò)就是一個(gè)捕獲熵的能力,你把 loss 從 10 降到1,本質(zhì)上就是把一堆熵給固化和捕獲凝結(jié)了。

當(dāng)然你永遠(yuǎn)不可能捕獲所有的熵,因?yàn)橛幸恍〇|西它是完全不確定的信號(hào),你無法預(yù)測。但是你要把能預(yù)測的都預(yù)測掉,人類進(jìn)化的本質(zhì)就是在做這樣的事情,它是有利于社會(huì)進(jìn)步的,因?yàn)榻Y(jié)果是生產(chǎn)力一直在發(fā)展,100 年前像Polio(小兒麻痹癥)這樣的病都沒法治?,F(xiàn)在除了醫(yī)學(xué)之外,還有各種各樣的科技,這是捕捉熵的結(jié)果。

另一種流派是有效利他主義(Effective Altruism),他們不認(rèn)為這種acceleration能帶來任何好處,相對(duì)更悲觀一些。

技術(shù)的發(fā)展并不以個(gè)人的意志為轉(zhuǎn)移,甚至并不以某個(gè)單一的社會(huì)為轉(zhuǎn)移,因?yàn)樗举|(zhì)是一個(gè) free market, free market 會(huì)選擇它效率最大的是方向去演進(jìn)。現(xiàn)在這個(gè)市場選擇了它要加速,本質(zhì)就是一個(gè)效率最大化去捕捉熵的過程,這個(gè)是所有人都沒有辦法去阻止的一件事情,所以就遵循這個(gè)宇宙中熵的意志,從中找到一個(gè)最好的解法。

MONOLITH:

你怎么看智能涌現(xiàn)這個(gè)現(xiàn)象?

植麟;

智能涌現(xiàn)就是通過制造去完成設(shè)計(jì)。你沒法提前設(shè)計(jì),因?yàn)槟悴恢浪鼤?huì)涌現(xiàn)出來什么東西,這也是我認(rèn)為我們需要AI native的原因,不是去單點(diǎn)解決問題,而是系統(tǒng)性地解決問題。

曹曦:

我記得你之前提到過,智能可以看作是一種壓縮。

植麟:

對(duì),Next token prediction 本質(zhì)上就是個(gè)無損壓縮的過程,因?yàn)橐米钌俚谋忍厝ケ硎具@個(gè)世界。比如說你今天要去預(yù)測一個(gè)等差數(shù)列,你如果知道這個(gè)世界的規(guī)律,只需要存前兩個(gè)數(shù),就能預(yù)測出來后面每一個(gè)數(shù),這就是一個(gè)巨大的壓縮的過程。

我覺得這個(gè)就是智能的意義,因?yàn)楝F(xiàn)實(shí)世界會(huì)更加混沌,有可預(yù)測的部分,也有不可預(yù)測的部分,但是當(dāng)你能把那些可預(yù)測的部分做到極致了,你就達(dá)到了智能的上限。

曹曦:

我好奇這個(gè)過程中,什么是更容易被壓縮的,什么是更不容易的?

植麟:

沒有本質(zhì)區(qū)別,只要你能放在同一個(gè)token space 表示。為什么文字會(huì)可能先被壓縮,因?yàn)樗旧硎且环N更加濃縮的信號(hào)。視覺信號(hào)的loss會(huì)高一點(diǎn),因?yàn)樗淮_定性更大。但最終都是一個(gè) scaling 的問題。只要你把它放在同一個(gè)空間里面scaling, 本質(zhì)上都可以解決。

曹曦:

在我們聊天的過程中,AGI 是一個(gè)反復(fù)被提到的詞,這個(gè)詞的定義應(yīng)該怎么理解?

植麟:

我覺得就是今天人類所有在數(shù)字世界里能產(chǎn)生的行為,每一個(gè)行為都能做到接近人類top 1% 或者專家級(jí)別的水平,最終未來在物理世界也達(dá)到(一樣的水平)。

曹曦:

你說的這個(gè)定義是前 1% ,有點(diǎn)像「通用精英智能」。

植麟:

有不同的標(biāo)準(zhǔn),我的point就是說你最終衡量它,就必須要是細(xì)分地去拆解才有辦法衡量。

曹曦:

說到模型的基礎(chǔ)能力,你覺得LLM(Large Language Model)的局限性會(huì)在什么地方?

植麟:

如果我們談的是廣義的基于一個(gè)序列模型去做 next token prediction,可能沒有太多的局限性,從第一性原理來講,它其實(shí)是通用的,最終所有在數(shù)字世界能完成的任務(wù),通過這套范式最終都可以學(xué)到。

當(dāng)然類比舊的計(jì)算范式,只要花足夠多的投入去做數(shù)字化,最終都能變成零一的序列,現(xiàn)在新的計(jì)算范式還做不到這一點(diǎn)。比如說只是純文本的語言模型,那很多東西沒有辦法表示,這點(diǎn)上還是有局限。

另外還有一個(gè)很重要的瓶頸,現(xiàn)在AI 的輸入有兩根線,一根是電線,一根是數(shù)據(jù)線。如果你想真正最后做出來一個(gè) super intelligence,那你應(yīng)該有辦法把這個(gè)數(shù)據(jù)線給拔掉,只要往里面輸電就可以了,它要自己可以去進(jìn)化。

曹曦:

把數(shù)據(jù)線拔掉,可不可以理解為當(dāng)下已存在的數(shù)據(jù),會(huì)在某一天不夠用?

植麟:

對(duì),這一代模型是10的25次方次浮點(diǎn)數(shù)運(yùn)算,接下來兩三年時(shí)間里,還會(huì)有一到兩個(gè)數(shù)量級(jí)的增長。根據(jù) scaling law這個(gè)數(shù)據(jù)還要再增長至少一個(gè)數(shù)量級(jí),但是這個(gè)世界上的高質(zhì)量數(shù)據(jù)一定程度上是有限的。你就需要用synthetic data(合成數(shù)據(jù)),通過模型自己去探索整個(gè)表示空間里面那些沒有被采樣到的點(diǎn),這個(gè)基本上是現(xiàn)在已知的必須要解決的問題。

MONOLITH:

你覺得AI會(huì)如何影響普通人的日常生活?

植麟:

我覺得大概率還是會(huì)讓你的生活變得更好,有更多的人不需要為了錢去工作。你可以去發(fā)揮你的創(chuàng)造力,去做更多有創(chuàng)造性的事情。

圖為Midjourney生成的海報(bào)

這個(gè)世界上有一些很重復(fù)的工作,其實(shí)可以被 AI 直接抽象掉;另外一方面就上AI一定程度上可以democratize(普惠化),或者說通過一種普惠的方式讓每個(gè)人都具備更強(qiáng)的創(chuàng)造力。

今天我可以用一個(gè)工具畫出來一幅非常精美的畫,明天可能拍出來一部電影,每個(gè)人都可能成為一個(gè)導(dǎo)演。未來AI會(huì)把這種創(chuàng)造的能力會(huì)變得非常普及,人類的精神世界變得越來越豐富。

曹曦:

未來物質(zhì)世界里的很多任務(wù)都會(huì)被壓縮或者被抽象。

植麟:

是的,當(dāng)然精神世界也可以,本來你不可能拍出一個(gè)昆汀·塔倫蒂諾一樣好的電影,但是未來有可能,AI 可以幫你創(chuàng)造。所以每個(gè)人都會(huì)有更多表達(dá)創(chuàng)造的能力與權(quán)力。

在《2001:太空漫游》的結(jié)尾,我們看到了宇宙之子的象征,一個(gè)全新的意識(shí)形態(tài)在太空中孕育而出。正如電影中那一瞬間對(duì)人類未來的憧憬,我們現(xiàn)在也站在了另一種意義上的十字路口。當(dāng)人工智能不再只是工具,而是成為拓展我們認(rèn)知和能力邊界的伙伴時(shí),它將如何影響我們的文明和身份認(rèn)同?

通過與kimi的對(duì)話,我們切實(shí)感受到,人工智能已經(jīng)不再是冰冷的代碼,而是人類智慧的延伸,是與人類共同呼吸和思考的伙伴。從數(shù)字化工具到精神伴侶,從簡單的任務(wù)自動(dòng)化到復(fù)雜的創(chuàng)意表達(dá),AI的藍(lán)圖正在被繪制,每個(gè)人都是這幅畫卷中的一筆。

在這場探索AGI的旅程中,我們不僅在追求技術(shù)的邊界,也在追問人類存在的本質(zhì)。就像斯坦利·庫布里克通過影像講述了人類進(jìn)化的故事一樣,這次我們通過把能源轉(zhuǎn)化為智能編織新的敘事,這一路注定將遭遇無數(shù)質(zhì)疑和挑戰(zhàn),但也將開啟無限可能。

*本文結(jié)尾由Kimi總結(jié)生成

本文由 @Monolith礪思 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)作者許可,禁止轉(zhuǎn)載

題圖來自Unsplash,基于CC0協(xié)議

該文觀點(diǎn)僅代表作者本人,人人都是產(chǎn)品經(jīng)理平臺(tái)僅提供信息存儲(chǔ)空間服務(wù)

更多精彩內(nèi)容,請(qǐng)關(guān)注人人都是產(chǎn)品經(jīng)理微信公眾號(hào)或下載App
評(píng)論
評(píng)論請(qǐng)登錄
  1. 懂了,不知道起什么名字,然后想起來自己喜歡玩dota的白虎,然后“戰(zhàn)友們,隱身!”23333

    來自上海 回復(fù)