這周，谷歌DeepMind扔出了重磅炸彈——AlphaEvolve。

但許多人，仿佛還未意識到這個AI的意義。

可以這么說，AlphaEvolve，就是數(shù)學界AlphaGo的「第37步」時刻，堪稱瘋狂。

谷歌的這個AI，取得了人類未曾發(fā)現(xiàn)的數(shù)學成果。

比如，它改進了改進了4x4矩陣乘法，將運算次數(shù)從49次減少到48次，這是自1969年Strassen算法提出以來，56年內(nèi)的突破！

另外，它還推進了六邊形填充問題的研究，找到了在更大六邊形內(nèi)排列11個和12個六邊形的更優(yōu)解法，超越了人類的解決方案（在停滯16年之后）！

甚至，它一舉改進了困擾數(shù)學家300多年的「接吻數(shù)問題」。

而這一切，都是靠AI自我進化、訓練自己所使用的LLM而得到的。

通過自我對弈，它擁有了超人的編碼能力，甚至讓人預言——

十年內(nèi)，編程將迎來自己的AlphaGo時刻。

而且，跟AlphaGo的「第37步」不同，AlphaEvolve展現(xiàn)出AI自主優(yōu)化算法的能力，或?qū)氐赘淖冃酒O計和數(shù)據(jù)中心效率。

谷歌CEO Pichai，對「AI訓練AI」進行了生動的解釋：由Gemini驅(qū)動的編碼agent，優(yōu)化了Gemini的訓練，形成了一個數(shù)據(jù)飛輪

跟以往成果不同的是，谷歌DeepMind這次直接弄出一個通用武器。

從此，AI不僅能解決問題，還能發(fā)現(xiàn)新的前沿領域。這就代表著，人類集體智慧發(fā)生了一次真正的飛躍！

接下來的劇本，或許就是AI橫掃各大科學難題，直接顛覆人類科研。

谷歌DeepMind

引領全人類未來

谷歌DeepMind，一直在AI改造世界這個方向引領著前沿?？梢哉f，在將近30年里，他們都在指引著人類文明的方向。

AlphaGo通過學習人類對弈，甚至自我對弈，擊敗了人類冠軍李世石。

AlphaZero通過自我對弈，學會圍棋、國際象棋和日本將棋，被稱為一種人類從未見過的智慧。

AlphaFold預測了數(shù)百萬種從未通過實驗測量過的蛋白質(zhì)三維結(jié)構(gòu)。

AlphaDev則發(fā)現(xiàn)了更快的排序算法。

AlphaTensor用于進行科學發(fā)現(xiàn)，將尋找更快矩陣乘法算法的問題構(gòu)造成一個游戲，實現(xiàn)了重大突破。

FunSearch則將我們帶到更遠，通過代碼演化，利用LLM尋找新的數(shù)學解決方案。

谷歌DeepMind的下一個Alpha，更是令人無比期待。

OpenAI研究員Jason Wei就表示，AlphaEvolve對于像我這樣的強化學習鐵桿粉絲來說，確實令人不安

所以，這次打造出AlphaEvolve的團隊，究竟有哪些人物，經(jīng)歷了哪些探索？

就在最近，Youtube上的人氣大V「Machine Learning Street Talk」，就提前獲取了谷歌DeepMind的這篇論文，并采訪了這項工作的研究者。

半個世紀矩陣乘法突破，研究者當場驚呆

在計算機科學領域，幾乎沒有問題能像矩陣乘法一樣基礎。

半個多世紀以來，此領域的一個特定基準，一直被認為難以突破。

因為最優(yōu)算法的搜索空間極為龐大，使得窮舉在實踐中幾乎不可能，即使對相對較小的矩陣也是如此。

1969年，Strassen通過發(fā)現(xiàn)一種算法，徹底改變了這一領域。該算法僅需七次標量乘法，即可乘以兩個二乘二矩陣。

而就在今天，這一紀錄被Alpha Evolve打破了！

而它能做到一點，連谷歌DeepMind的研究者都沒想到。

對于通常情況下的矩陣，仍然沒有比使用四十九次乘法進行兩次Strassen更好的辦法。

開始，研究者們也壓根沒有期待，它能找到比四十九次更好的結(jié)果，因為他們已經(jīng)用AlphaTensor嘗試了很長時間了。

所以，他們只是出于完整性試了一下，因為想在論文中展示這個表格而已。

結(jié)果，出乎所有人意料，一個更快的算法，居然被它發(fā)現(xiàn)了！

這次，算法使用了48次，而不是49次乘法，徹底打破紀錄。

當看到一位同事發(fā)消息通知這一結(jié)果時，研究者表示自己簡直不敢相信。

反復檢查三遍后，他們終于確認——

AI不斷增強的能力，可以生成全新的、可證明準確的算法，從而推動科學的邊界！

跟第一版本有何區(qū)別？

根據(jù)論文，AlphaEvolve是一種進化編程智能體，顯著提升了預訓練LLM在復雜任務上的能力。

要知道，此前團隊曾有過第一篇論文，講的是FunSearch，原理與之非常類似。

所以，二者的區(qū)別在哪里呢？

研究者介紹說，F(xiàn)unSearch只是在搜索一個單一的函數(shù)，但AlphaEvolve，本質(zhì)上可以作用于整個代碼庫。

它會在代碼庫中你標記的區(qū)域中進行搜索，甚至優(yōu)化這些函數(shù)之間的交互。

谷歌昂貴的服務器，不用閑置了

所以，AlphaEvolve有沒有可能進化出一個方法，來優(yōu)化谷歌的計算基礎設施呢？

出于嘗試，谷歌工程師將一個候選方案放進這個AI，令人驚喜的是，它果然進化出了一個更聰明的啟發(fā)式方法！

現(xiàn)在，這個方法已經(jīng)被運用于優(yōu)化谷歌內(nèi)部的計算基礎設施了。

要知道，在谷歌龐大的數(shù)據(jù)中心，高效安排計算任務是一項非常復雜的操作。如果操作不當，昂貴的服務器就會閑置。

而現(xiàn)在結(jié)果正式，這個全新方法利用了谷歌服務器群計算資源的0.7%，對于谷歌來說，這是一項巨大的節(jié)省。

盜夢空間成真？

甚至，在另一個自我改進的實例中，它甚至找到了加速Gemini模型訓練的方法，這，就為AlphaEvolve本身提供了動力。

這個實例之所以如此有趣，是因為它不僅生成了解決方案，還生成了產(chǎn)生這些方案的程序。

也就是說，Alpha Evolve像《盜夢空間》一樣。

甚至研究者表示，在檢查代碼時，他不僅想到，這看起來完全就是一種數(shù)學洞察，或者一種數(shù)學假設！

事實也證明了，它們的確對改進結(jié)果非常關鍵。

而Alpha Evolve另外一個有趣的點，就是它仍然非常依賴「人類參與其中」。

過程中，人類負責識別哪些內(nèi)容是有趣的，找到那些有明確評估標準的問題，將候選解決方案納入循環(huán)中。

然后，Alpha Evolve就會遍歷這個可能性的錐體，在過程中不斷跳躍，將這個循環(huán)繼續(xù)下去。

所以，Alpha Evolve也預示了一種AI的未來——人類和AI之間，有著強大的協(xié)作循環(huán)。

曾經(jīng)有一個「死掉的互聯(lián)網(wǎng)」的理論，指的是在未來，網(wǎng)上大部分內(nèi)容都將由AI生成，而且非常表面化、非常膚淺。

而此時，就需要人類來指導AI、改進結(jié)果，進行迭代。

而讓Alpha Evolve如此酷炫且強大的，也正是人與機器之間的這種互動。

AlphaEvolve，為何如此適合科學發(fā)現(xiàn)

在訪談中，主持人向研究者提問道：究竟是什么促使你們走上了進化算法的道路呢？

研究者回答說，這就跟科學發(fā)現(xiàn)的過程一樣，是一個非常自然的選擇。

進化算法能為探索過程帶來多樣性，確保你不會在早期就鎖定在某種特定方法上，因為這種方法有可能是次優(yōu)解。

最終，我們?nèi)匀恍枰粩嗵剿魉械目赡苄?，尤其是想要做出新的科學發(fā)現(xiàn)時。

言簡意賅地說，AlphaEvolve就是一個進化算法，對于系統(tǒng)給出代碼片段，我們都可以自動測試它好不好，有多好。

一方面，它可以把你限制在你可以解決的問題集上，而另一方面，它涵蓋的問題范圍又非常廣泛。

LLM會給你提出各種想法，通過這個評估器，我們就可以篩選出真正重要的、能做出改變的想法。

最有潛力的代碼，將被識別出來，然后專注于改進這些部分。

接下來，采訪者就提出了一個重要的問題：我們什么時候才知道，這個過程要結(jié)束？

比如，可能我們覺得該終止了，但如果再多等五分鐘，就會得到一個近乎完美的算法。

研究者解答了他的疑惑。

從理論上講，的確永遠無法確定如何讓算法運行更久，以及會得到什么結(jié)果。

但在實踐中，這并未造成任何問題。

比如可以這樣設置問題：我正在嘗試解決這個數(shù)學中的開放性問題，尋找能取得進展的搜索算法，但我希望10分鐘內(nèi)就能取得進展。

也就是說，其實我們只探索了能在10分鐘內(nèi)做出進展的算法空間。

當然的確存在這種可能性：如果運行更長時間，說不定還會有表現(xiàn)更好的算法。這個可能性永遠無法消除。

那一刻，AI發(fā)生了想象力驚人的跳躍

主持人問道：你可以舉出一些系統(tǒng)做出真正有想象力的跳躍的例子嗎？

研究者表示，一個具體的例子，AlphaEvolve如何發(fā)現(xiàn)矩陣乘法算法的。

實際上，他們只是讓它設計了一個基于梯度的搜索算法，也即一個能找出的算法的算法，或者說元算法。

第一個搜索算法，是從一個非常簡單的代碼框架開始的。

研究者并未給它任何東西，只告訴它「用梯度」，然后，它就寫出了這些復雜的損失函數(shù)和更新函數(shù)，而且以完全出人意料的方式引入了隨機性。

就在那一刻，研究者驚呼：太厲害了！

當然，這種代碼也有可能是人類寫出的，但他們真的會想到寫出這段特定代碼嗎？

那一刻，他仿佛頓悟了——AlphaEvolve做的，是一些類似人類的事情，但又顯然不是人類會嘗試的東西。

人類具體是怎樣指導AI的呢？

研究者提及了一個實驗，在這個實驗中，他們請幾個人花了30分鐘思考這個問題，記下筆記，然后指導系統(tǒng)完成整個過程。

可以理解為，AI榨出了這個想法的全部精華，理解了它的本質(zhì)，于是引導LLM得出了這樣的目標，同時做了很多優(yōu)化。

聽起來，這就是智能的本質(zhì)——嘗試很多事情，總有一件會成功。

最震撼之處：改變世界，就在當下

研究者表示，在以往，通常我們很難開發(fā)出某種科研工具，直接、立刻應用到現(xiàn)實世界的挑戰(zhàn)，并產(chǎn)生巨大影響。

而AlphaEvolve的意義就在于，在開箱時就能同時在數(shù)學和科學問題上做出新發(fā)現(xiàn)，甚至還能發(fā)現(xiàn)可以直接部署到谷歌核心計算架構(gòu)中的算法。

這，是他們此前從未經(jīng)歷過的事情。

AI奇點，或許已經(jīng)到來了。