ChatGPT「代碼解釋器」正式解禁!30秒圖片變視頻,動(dòng)嘴做表
家人們,終于來了!
剛剛,ChatGPT「代碼解釋器」測(cè)試版正式向所有Plus用戶開放。
圖片
OpenAI的科學(xué)家Karpathy對(duì)此還宣傳了一波,代碼解釋器測(cè)試版相當(dāng)強(qiáng)大。
它是你的個(gè)人數(shù)據(jù)分析師:可以讀取上傳的文件、執(zhí)行代碼、生成圖表、統(tǒng)計(jì)分析等等。我預(yù)計(jì)社區(qū)將需要一些時(shí)間來充分展示其潛力。
圖片
前段時(shí)間,GPT4能力下降在網(wǎng)上引起軒然大波,甚至有人只覺得它比GPT3.5強(qiáng)一點(diǎn)點(diǎn)。
而現(xiàn)在,代碼解釋器讓人們?cè)俅胃杏X到,那個(gè)熟悉而且強(qiáng)大的GPT-4又回來了!
插件一上線,許多網(wǎng)友紛紛上手實(shí)測(cè)了一番。
功能解禁
那么,「代碼解釋器」究竟能做什么?
30秒,圖片變視頻
這不,有網(wǎng)友竟用ChatGPT把圖片變成了視頻。這效果簡(jiǎn)直比Midjourney、Runway還炸裂。
圖片
這是如何做到的?網(wǎng)友給出了全套教程。
第一步:打開「代碼解釋器模型」。要啟用它,請(qǐng)進(jìn)入設(shè)置 -> 測(cè)試版功能 -> 代碼解釋器。
圖片
步驟二:
從下拉菜單中選擇「代碼解釋器」選項(xiàng)。然后,上傳你想做動(dòng)畫的圖片。
步驟三:
我想展示一家豪華餐廳的一些食物。因此,我要求ChatGPT將這個(gè)食物圖片從左到右制作成動(dòng)畫。通過修改我的GPT提示(見下文),你可以創(chuàng)建你自己的動(dòng)畫。
具體prompt如下:
圖片
步驟四:
按回車鍵。30秒后,ChatGPT會(huì)給你一個(gè)視頻的下載鏈接。
圖片
聯(lián)合創(chuàng)始人Greg Brockman轉(zhuǎn)發(fā)稱,在不可能記住ffmpeg調(diào)用的情況下,用于圖像轉(zhuǎn)換的代碼解釋器。
圖片
事實(shí)證明,「代碼解釋器」確實(shí)很牛,現(xiàn)在截個(gè)視頻,只需要一句話就能搞定了。
圖片
「有一定內(nèi)存容量限制,不過處理小文件是沒問題了。剛?cè)咏oTA 4秒鐘的gen-2視頻,截取前兩秒,沒問題,迅速搞定。
會(huì)自動(dòng)試驗(yàn)合適的代碼,如果要編程序也完全可以先扔給ta某一文件提出要求,然后看看ta提供出來的代碼」。
圖片
PDF轉(zhuǎn)圖片
國(guó)內(nèi)知名互聯(lián)網(wǎng)科技博主「寶玉」用「代碼解釋器」實(shí)現(xiàn)了把PDF轉(zhuǎn)成圖片。
圖片
圖片
以往需要將每頁內(nèi)容合并成一張圖,而現(xiàn)在,一個(gè)prompt就搞定了。
圖片
GIF變視頻
圖片變視頻之外,還可以實(shí)現(xiàn)GIF變視頻。
網(wǎng)友給ChatGPT的提示為:我上傳一個(gè)GIF,你給我一個(gè)5s的MP4,用一個(gè)故事性鏡頭緩慢放大。
圖片
上傳GIF
圖片
最后ChatGPT立即生成了視頻
圖片
此外,ChatGPT還能做個(gè)「矩陣」GIF出來。
圖片
圖片
生成QR碼
在前兩天,OpenAI宣布ChatGPT「代碼解釋器」即將全面開放。
就展示了一個(gè)能夠生成QR碼的例子,短短一句話,簡(jiǎn)直動(dòng)嘴就能完成任務(wù)。
「口袋」數(shù)據(jù)分析師
代碼解釋器最大的用例就是進(jìn)行數(shù)據(jù)分析。
比如,讓它分析各國(guó)預(yù)期壽命數(shù)據(jù),世界上最大的城市,(可上傳CSV、word、PDF或視頻文件)
圖片
然后,與數(shù)據(jù)交談,問任何你可能想問的問題。
或要求從數(shù)據(jù)中提取獨(dú)特的隨機(jī)趨勢(shì),以獲得驚喜。
比如,從兩個(gè)數(shù)據(jù)中找出獨(dú)特的趨勢(shì),并以表格的形式顯示出來。
圖片
最后一步,可視化。
把數(shù)據(jù)變成你想要的任何圖表或圖形。最重要的是,只需點(diǎn)擊一下完成。
比如,生成一個(gè)散點(diǎn)圖,說明一個(gè)國(guó)家的人均GDP和其平均預(yù)期壽命之間的關(guān)系。
圖片
看到這么強(qiáng)大「數(shù)據(jù)分析師」,網(wǎng)友又開始R.I.P了。
使用指南
「代碼解釋器」怎么用?來自沃頓商學(xué)院的一位教授Ethan Mollick專門為此寫了一篇指南。
圖片
首先,Mollick就指出,Code Interpreter這個(gè)名字的起法延續(xù)了OpenAI給他們自己的產(chǎn)品起爛名兒的悠久傳統(tǒng)。
因?yàn)椤m說它叫「代碼解釋器」,但實(shí)際上它對(duì)那些根本不懂編程的人最有用。
本質(zhì)上,「代碼解釋器」能讓GPT-4上傳和下載信息,并為用戶編寫和執(zhí)行程序,這使得AI能夠做到以前無法做的各種事情。
具體來說,它為AI提供了一個(gè)解決問題的通用工具箱(通過用Python編寫代碼)、超大內(nèi)存(最大100MB,可以是壓縮形式),且用戶可以把這個(gè)工具箱集成到AI里面,發(fā)揮LLM的優(yōu)勢(shì)。
這有助于解決以前版本的 ChatGPT 存在的許多問題。比方說,
它允許AI處理數(shù)學(xué)(哪怕很復(fù)雜),還能更準(zhǔn)確地處理單詞(例如實(shí)際計(jì)算段落中的單詞),底層原因就是,它可以編寫Python代碼來解決LLM在數(shù)學(xué)和語言方面的天然弱點(diǎn)。
比如像下圖這樣。
圖片
可以看到,「代碼解釋器」能準(zhǔn)確計(jì)算出段落中單詞的數(shù)量。
此外,「代碼解釋器」降低了幻覺和瞎編亂造的發(fā)生機(jī)率。
當(dāng)人工智能直接使用Python時(shí),代碼有助于讓它「誠(chéng)實(shí)」。道理也很簡(jiǎn)單,如果代碼不正確,Python就會(huì)報(bào)錯(cuò)。由于代碼操作的是數(shù)據(jù),因此AI不會(huì)在數(shù)據(jù)中插入錯(cuò)誤信息。
當(dāng)然,這并不完美。AI仍然有概率會(huì)產(chǎn)生幻覺,但其實(shí)這并不常見,并且不太可能影響到代碼或者數(shù)據(jù)本身。
這樣一來,AI就更加靠近通用人工智能了——大量問題可以通過代碼來解決。
而且,GPT-4非常擅長(zhǎng)以新穎有趣的方式來決定什么時(shí)候用「代碼解釋器」。
Mollick舉了個(gè)例子,假如他讓GPT-4向用戶證明地球是圓的,那么就會(huì)用上「代碼解釋器」,提供了多個(gè)論證,將文本與代碼和圖像結(jié)合在一起。
圖片
此前,各個(gè)專業(yè)需要編程的人都得會(huì)點(diǎn)兒寫代碼,但寫完了還得自己調(diào)試。就算之前的AI能提供點(diǎn)兒幫助,但是對(duì)于沒有Python學(xué)習(xí)基礎(chǔ)的人來說,還是挺難,得借助AI的力量反復(fù)修改代碼。
而現(xiàn)在,有了「代碼解釋器」,AI就能自己糾錯(cuò)并且Debug了!
接著,Mollick又講了如何用「代碼解釋器」來處理數(shù)據(jù),這算是真實(shí)戳中大量用戶痛點(diǎn)了。
Mollick表示,「代碼解釋器」的運(yùn)行水平非常先進(jìn),可以自動(dòng)處理許多復(fù)雜的定量分析,并且能夠采用非常復(fù)雜的數(shù)據(jù)方法。
用戶只需點(diǎn)擊加號(hào)即可輕松上傳數(shù)據(jù),甚至是ZIP文件等壓縮數(shù)據(jù)。
圖片
同時(shí),在提供數(shù)據(jù)時(shí),用戶能給個(gè)prompt就最好了。然后,AI就可以從上下文里找出數(shù)據(jù)含義和結(jié)構(gòu)了!
此外,Mollick指出,在使用「代碼解釋器」時(shí),用戶更多的是在和AI進(jìn)行「對(duì)話」,并不需要絞盡腦汁寫一個(gè)又嚴(yán)謹(jǐn)又凝練的prompt出來。
就像和一個(gè)數(shù)據(jù)分析師聊天一樣,和人怎么交談,就怎么跟「代碼解釋器」溝通。
但是這里有兩個(gè)特殊情況,還是需要寫個(gè)類似prompt的東西。
一個(gè)是AI有時(shí)候會(huì)不記得自己能干什么,此時(shí)就需要一個(gè)prompt來給AI點(diǎn)醒。
比如:「你可以制作GIF,請(qǐng)嘗試一下?!?/span>
另一種情況是在用戶對(duì)結(jié)果不滿意的時(shí)候,可以通過prompt來讓「代碼解釋器」對(duì)結(jié)果進(jìn)行優(yōu)化。
比如:「請(qǐng)對(duì)該結(jié)果進(jìn)行進(jìn)一步的測(cè)試」,或者,「能不能讓這個(gè)圖表更好一點(diǎn)」。
圖片
在加載完數(shù)據(jù)以后,GPT就可以執(zhí)行數(shù)據(jù)合并和清理的操作了。具體處理方式相當(dāng)復(fù)雜,但就像上面所提到的一樣,只要把「代碼解釋器」當(dāng)做一個(gè)和你面對(duì)面的數(shù)據(jù)分析師就好了。
同時(shí),Mollick提醒廣大用戶,AI在自我糾錯(cuò)并改正以后最好還是查一下結(jié)果,萬一出錯(cuò)呢。
圖片
緊接著Mollick實(shí)操了一下,他讓「代碼解釋器」搞個(gè)預(yù)測(cè)建模出來,預(yù)測(cè)超級(jí)英雄可能會(huì)有什么超能力。
可以看到,「代碼解釋器」構(gòu)建了一個(gè)隨機(jī)森林分布器。
圖片
當(dāng)然,在實(shí)操過程中,用戶還是得和GPT「多溝通」。Mollick就不想讓AI用數(shù)值數(shù)據(jù)的方法來估算缺失的數(shù)據(jù),Mollick想直接放棄掉沒有的部分。
但他指出,也可以和GPT說,讓它換個(gè)別的處理方法。
之后,Mollick給GPT輸入了一個(gè)「你可以進(jìn)行另一個(gè)復(fù)雜和有趣的分析嗎」的prompt。他表示,「代碼解釋器」選擇的一些分析方法讓他印象深刻。
就像下圖這樣。
「代碼解釋器」巧妙地分析了超級(jí)大國(guó)的網(wǎng)絡(luò)情況??梢钥吹剑椒ǘ鄻?,而且非常有意思。
圖片
「代碼解釋器」最令人印象深刻的應(yīng)該就是其推理能力了。Mollick概括為,非常「人性化」。
另外,可視化的交互性水平依然在線,且在不斷提升。用戶可以不斷讓AI來改進(jìn)或者更改輸出的內(nèi)容。
Mollick讓AI創(chuàng)建了一個(gè)交互式表格,包括6個(gè)圖表,其中還有一個(gè)是3D的。
為了讓圖表更加美觀,Mollick不斷輸入prompt,調(diào)整結(jié)果。
最終成果就像下圖右邊這樣。
圖片
十大驚人魔法
網(wǎng)友@GPTDAOCN近日總結(jié)了ChatGPT十大令人震驚的用例:
圖片
代碼解釋器的可視化
1. 將GIF轉(zhuǎn)換為MP4:可以將動(dòng)態(tài)圖片(GIF)轉(zhuǎn)換為視頻文件(MP4)的功能,使你更方便地分享和使用。
2. 創(chuàng)建各種圖形:你可以利用這個(gè)功能來生成各種如柱狀圖、折線圖、餅圖等圖形,直觀地呈現(xiàn)和分析你的數(shù)據(jù)。
3. 從圖像中提取顏色以創(chuàng)建PNG調(diào)色板:這個(gè)功能可以從任何一張圖像中提取主要顏色,然后生成一個(gè)PNG格式的調(diào)色板。
4. 清洗數(shù)據(jù)以生成深入的可視化:如果你有一些混亂的數(shù)據(jù),這個(gè)功能可以幫你進(jìn)行清洗和整理,再將其轉(zhuǎn)換為清晰的可視化圖形。
5. 將CSV文件轉(zhuǎn)換為GIF:這個(gè)功能可以將CSV(逗號(hào)分隔值)文件中的數(shù)據(jù)以動(dòng)態(tài)的方式展示,生成一張GIF圖。
6. 分析歌單以概括你的音樂品味:你可以利用這個(gè)功能來根據(jù)你的音樂歌單進(jìn)行分析,從而概括你的音樂品味。
7. 將你的數(shù)據(jù)集轉(zhuǎn)換為一個(gè)完全功能的HTML網(wǎng)站:這個(gè)功能能將你的數(shù)據(jù)快速轉(zhuǎn)換成一個(gè)功能齊全的網(wǎng)站,方便你進(jìn)行展示和分享。
8. 創(chuàng)建可下載的股票數(shù)據(jù)集:這個(gè)功能能幫你創(chuàng)建一份股票數(shù)據(jù)集,并且這個(gè)數(shù)據(jù)集是可以下載的,方便你進(jìn)行更深入的分析和研究。
9. 將圖像轉(zhuǎn)換為文本文件:如果你需要從圖像中提取文字,這個(gè)功能可以幫你將圖像中的文字轉(zhuǎn)換成文本文件。
10. 對(duì)未格式化的數(shù)據(jù)進(jìn)行詳細(xì)分析:對(duì)于那些沒有規(guī)定格式的原始數(shù)據(jù),這個(gè)功能能幫你進(jìn)行深入的分析,以獲取有價(jià)值的信息。
其實(shí),代碼解釋器的用例遠(yuǎn)不止這些。
網(wǎng)友點(diǎn)評(píng)
我正在嘗試ChatGPT代碼解釋器。到目前為止,我只能建議「每個(gè)開發(fā)者現(xiàn)在就開始研究它」。
Code Interpreter斷了多少人的生路?太多行政每天低效率的處理數(shù)據(jù),現(xiàn)在只需要自然語言就可以辦公自動(dòng)化。