機(jī)器之心編輯部
申請(qǐng)轉(zhuǎn)發(fā)項(xiàng)目推文近一年才批準(zhǔn)？
近日，MetaCEO馬克?扎克伯格的一篇《個(gè)人超級(jí)智能》公開信賺盡了眼球，其中不僅提到他們已經(jīng)看到了「AI系統(tǒng)自我改進(jìn)的跡象」，還表示他們將會(huì)「謹(jǐn)慎選擇開源內(nèi)容」。
上下滑動(dòng)查看
一時(shí)之間，相關(guān)的討論和爭議達(dá)到了又一輪小高潮。而與此同時(shí)，Meta內(nèi)部風(fēng)波暗涌。一方面為追趕AI頂級(jí)研究陣地，Meta砸下逾140億美元重注ScaleAI，并組成MetaSuperintelligenceLabs（MSL），廣攬來自O(shè)penAI、DeepMind等頂級(jí)團(tuán)隊(duì)的AI人才，提供百萬乃至上億美元簽約金；另一方面，Meta內(nèi)部卻又被屢屢爆出存在五花八門的關(guān)于資源、人力、內(nèi)部管控等的紛爭，甚至還有一位名為TijmenBlankevoort的研究科學(xué)家曾發(fā)長文控訴Meta內(nèi)部文化和組織失調(diào)的慘淡景象。
更多詳情可參閱我們之前的一篇報(bào)道《是的，LeCun要向28歲的AlexandrWang匯報(bào)！這是Meta新AI團(tuán)隊(duì)的一些獨(dú)家內(nèi)部消息》。
現(xiàn)在，又有更多有關(guān)Meta內(nèi)部混亂和低效的細(xì)節(jié)浮出水面。
就在扎克伯格《個(gè)人超級(jí)智能》公開信發(fā)布幾小時(shí)后，MetaFAIR研究科學(xué)家朱澤園在一篇回復(fù)推文中無奈地表示：讓AIatMeta（@AIatMeta）這個(gè)X賬號(hào)轉(zhuǎn)發(fā)一下他的研究非常困難——「我花了近一年時(shí)間才讓他們批準(zhǔn)轉(zhuǎn)推我的項(xiàng)目」；但「轉(zhuǎn)推帶來的觸達(dá)量還不到他自己推文的10%?！?/p>
朱澤園表示：「根本不值得這么費(fèi)力。」
他還表示：「話雖如此，我理解。我的工作在Meta內(nèi)部并不被看重，所以他們自然有更重要的事情需要社交媒體推廣?！共贿^有趣的是，他還提到Meta以外的公司對(duì)他的工作更感興趣，不知道這是否暗示著我們將會(huì)看到他有新的工作動(dòng)向？
關(guān)于這條推文，機(jī)器之心向他進(jìn)行了求證。
朱澤園回應(yīng)稱，他首先非常感謝社區(qū)和粉絲一直以來幫忙推廣自己的項(xiàng)目。他解釋道，Meta關(guān)注的是如何盈利，以及大模型之間的競賽。他的PhysicsofLanguageModels項(xiàng)目（更多介紹請(qǐng)參閱文末擴(kuò)展閱讀）從一開始就幾乎沒有獲得Meta層面的支持與關(guān)注。
他表示，近期收到了大量同行的來信，不少AI從業(yè)者都對(duì)行業(yè)動(dòng)蕩感到焦慮?！肝蚁胩嵝汛蠹?，面對(duì)行業(yè)變化，更應(yīng)該變被動(dòng)為主動(dòng)，把握機(jī)會(huì)，不要等著公司裁員。其實(shí)現(xiàn)在正是跳槽的好時(shí)機(jī)?！?/p>
至于個(gè)人是否跳槽，朱澤園表示，自己終歸會(huì)離開Meta，只是目前更看重手頭項(xiàng)目，需要節(jié)省時(shí)間，而跳槽時(shí)還要花時(shí)間考慮是否要帶一個(gè)團(tuán)隊(duì)、帶哪些人一起走，所以現(xiàn)在暫時(shí)不會(huì)做這件事，金錢反而不是最重要的。他強(qiáng)調(diào)，無論身處何處，都會(huì)繼續(xù)做PhysicsofLanguageModels，因?yàn)檫@是AI領(lǐng)域最基礎(chǔ)的工作。
針對(duì)Meta內(nèi)部的管理問題，朱澤園坦言，前員工TijmenBlankevoort此前公開的內(nèi)部文化批評(píng)「基本屬實(shí)」，而他其實(shí)還有很多補(bǔ)充，比如甚至遇到過現(xiàn)實(shí)版「農(nóng)夫與蛇」的經(jīng)歷，不過這些故事只能等離職后才能說出來。
至于這條推文提到的「對(duì)照實(shí)驗(yàn)」，則要從朱澤園上周末發(fā)布的開源項(xiàng)目說起。
朱澤園在7月27日發(fā)布了PhysicsofLanguageModels項(xiàng)目的第一階段代碼，其中包含了「在42kGPU小時(shí)內(nèi)預(yù)訓(xùn)練強(qiáng)大8B基礎(chǔ)模型所需的全部內(nèi)容」，包括數(shù)據(jù)、訓(xùn)練代碼和模型權(quán)重，可以說是真正的開源。并且「可以用不超過10%的訓(xùn)練資源打敗Llama3-8B」
項(xiàng)目地址：https://github.com/facebookresearch/PhysicsLM4
然而，該項(xiàng)目開源發(fā)布一段時(shí)間，朱澤園卻疑惑地發(fā)現(xiàn)項(xiàng)目關(guān)注度不高。這讓他不禁發(fā)出了痛心一問：「完全開源的研究真有必要嗎？」他還問道：「我是否應(yīng)該選擇閉源以節(jié)省時(shí)間并專注于純粹的研究？」
而這條推文的關(guān)注熱度就高多了，也有很多業(yè)內(nèi)人士參與討論互動(dòng)。
比如HuggingFaceCEOClementDelangue表示開源是推動(dòng)AI領(lǐng)域發(fā)展的正確做法，可以使其更加開放、協(xié)作和安全！
斯坦福大學(xué)應(yīng)用物理學(xué)副教授SuryaGanguli更是表示「不開源就不能稱之為研究」。
當(dāng)然，也有人表示某些開源確實(shí)浪費(fèi)時(shí)間，比如前段時(shí)間被Meta挖走的前OpenAI和DeepMind研究者LucasBeyer表示bigco項(xiàng)目的開源就浪費(fèi)了很多時(shí)間，不過他也指出了值得開源的三種情況。
當(dāng)然，除了開源以及對(duì)X推薦機(jī)制的討論，朱澤園的這條推文也引出了更多關(guān)于Meta的討論。
比如網(wǎng)友@papers_anon表示「FAIR在傳播其團(tuán)隊(duì)的有趣研究方面做得很差」——FAIR似乎完全仰賴研究者使用自己的個(gè)人X帳號(hào)來宣傳，而同時(shí)FAIR又不直接為每位研究者購買XPremium+來推廣研究成果，也沒有一個(gè)真正專注于研究成果展示的X賬戶來發(fā)布內(nèi)容。他總結(jié)說：「FAIR似乎受到了太多內(nèi)部政策的束縛，甚至無法以無痛的方式促進(jìn)開放研究?！?/p>
另外，朱澤園自己也指出了關(guān)注度可能與研究資源掛鉤的現(xiàn)實(shí)，而這就不得不迫使研究者在X上場搞宣傳，而他也正需要為這項(xiàng)研究的第二、三階段爭取到GPU。
他也吐嘈了Meta內(nèi)部的審核批準(zhǔn)流程：僅僅是獲得公共數(shù)據(jù)集的使用批準(zhǔn)并發(fā)布權(quán)重就需要浪費(fèi)兩個(gè)多月的時(shí)間（這還不包括科研本身），「而且情況只會(huì)越來越糟。如果一個(gè)數(shù)據(jù)條目未獲得批準(zhǔn)，你的整個(gè)模型都可能被推翻重新訓(xùn)練。而哪里有這么多資源呢？」
他還提到，光是為了讓PhysicsofLanguageModels這個(gè)項(xiàng)目以Apache2.0協(xié)議開源，他就與Meta的法務(wù)部門溝通了超過一周。如果發(fā)布的模型過于強(qiáng)大，還會(huì)出更多問題。
當(dāng)被問到為什么Meta說不開源了，同時(shí)還允許該項(xiàng)目發(fā)布時(shí)（另外這兩天還開源了MetaCLIP2和VGGT），朱澤園風(fēng)趣地說：「這兩者可能都是真的。如今，不確定性極大，一切都可能在一夜之間發(fā)生改變，也許我們?cè)谶M(jìn)行最后一輪開源。」
參考鏈接
《重生之都市仙尊洛塵漫畫》第05集免費(fèi)在線播放-全集泰劇-七社...
1、《重生之都市仙尊》作者：洛書劇情片段：一聲聲驚訝的聲音響起，門口走來了一個(gè)二十出頭的年輕人，同樣儀表不凡，盡顯貴族氣息，眉宇間透露著一股蓬勃的英氣。趙元魁，如果這個(gè)名字大家不是很熟的話，那么另外一個(gè)名字，幾乎是整個(gè)海東沒有不知道的。小賭神！這不是吹吹牛逼的，而是人家真有那個(gè)本事，逢賭必贏好了吧！
《都市仙尊》洛塵重生地球,仙尊歸來掀風(fēng)云!「續(xù)讀」
洛塵，這位前世身為北玄仙尊的角色，性格中透露出一種孤傲與霸氣_|。如今，他憑借其不屈的意志力和強(qiáng)大的實(shí)力，在重生后勇敢地面對(duì)各種挑戰(zhàn)。在都市的喧囂中，他展現(xiàn)出從容與堅(jiān)定，每一個(gè)對(duì)手在他面前都顯得不堪一擊。在這部小說中，我們不僅能感受到角色魅力，還能體會(huì)到復(fù)雜的情節(jié)設(shè)計(jì)與豐富的修真世界——。【經(jīng)典語錄說完了。
《重生之都市仙尊》“一代仙尊”洛塵遭人偷襲,重生回到地球
《都市仙尊》洛塵覺醒！都市仙尊重生復(fù)仇記！「續(xù)讀」今日推薦：《都市仙尊》作者：洛書|——。點(diǎn)擊文末超鏈接開始觀看吧～罷課韓修都這樣說了，大家也不好不給他這個(gè)班長面子。韓修說完這句話就開始脫褲子了，那強(qiáng)力膠水不脫褲子根本出不來--。這倒是他自作自受。劉子文眉頭一皺。這個(gè)新來的老師，看來有些本領(lǐng)，..
延伸閱讀：與 挖人上癮的Meta【又被員工】吐：嘈 不幫忙宣傳項(xiàng)，目 開源只會(huì)越來越糟 的相關(guān)文章
不廢話，學(xué)
退役軍人能否進(jìn)軍人候車區(qū)
漢江現(xiàn)巨型怪物？夜釣者拍下驚悚一幕
游泳世錦賽中國隊(duì)15金12銀10銅收官
奔馳“亮證姐”是否公職人員應(yīng)公布
“盤點(diǎn)去年夏天那些爆火の音樂”
17號(hào)選手 貪財(cái)和尚 由于他倆的《發(fā)財(cái)經(jīng)》，被如來憤怒除名
反省后重新做了一個(gè)射擊游戲
劉淵一個(gè)匈奴人為什么要將自己的國號(hào)定為漢？
警方通報(bào)男子遭奔馳司機(jī)亮證逼讓路
