OpenAI GPT-4 發佈會速記：代碼生成、圖像描述與複雜推理...

在過去的兩年裡我們一直專注於交付 GPT-4，首先是重建我們的整個訓練堆棧，實際訓練模型，然後看看它能做什麼，試圖找出它的能力和風險並與合作伙伴合作，以便在真實世界的場景中測試它，真正調整它的行為，優化模型使其可用。

一、文本的總結和加工

所以今天我們將向大家展示 GPT-4 的亮點，如何真正充分利用它，把它作為一個好工具和 好夥伴。我首先展示第一個任務。

GPT-4 可以做到但 3.5 沒有做到。複製我們 Blog 文章的部分內容，並粘貼到交互界面上（如下圖），GPT-3.5 和 GPT-4 具有相同的 API 接口和交互界面，你向模型解釋應該做什麼。我們把這些模型做得非常容易控制，所以你可以給它提供任何你想要的指令，無論你想要什麼。模型將很好地遵守它。在未來，它將在非常可靠地操縱模型方面變得越來越強大，模型將作為助手返回消息。

第一個任務是文章的總結，這是一篇文章變成一個句子，但每個單詞都以 G 開頭，GPT-3.5 甚 至沒有嘗試，就放棄了任務（對於 GPT-3.5 如果是非常生硬的文章，也許可以成功）。而 GPT-4 能夠很好的完成這個任務。

By GPT-3.5

By GPT-4

因此，我展示了對現有文章的總結，GPT-4 也可以在不同的文章之間靈活地總結歸納共同點，我把昨天新聞上的文章複製到同一個對話中。這是一篇關於 PyneCone 的文章，PyneCone 是一 個 Python Web 應用程序開發框架，GPT-4 會怎麼進行總結？“兩者都專注於使技術更易於訪 問，用戶更友好”。如果我們這不夠深刻，模型可以隨時給出一些反饋。

我現在要求把 GPT-4 博客文章內容變得押韻一些，結果是這樣：

二、代碼生成

我們有一個開源評估框架（Eval），它將幫助我們進行指導，所有用戶可以瞭解模型功能並將 其提升到一個新的水平。接下來向您展示如何使用 GPT 4 進行構建（代碼生成），我們要做的是構建一個 Discord 機器人，我將實時構建它，並展示流程和調試。它的工作是先用偽代碼把 東西寫出來，然後再實際寫代碼。這種方法非常有助於將問題分解成更小的部分。這樣就不會要求它一次就想出一個超級難的解決方案。這也使得它非常容易理解。(這裡有一個問題，這個模型的訓練截止到 2021 年，這會導致 GPT-4 智能生成代碼時不清楚有什麼新的接口和模塊，但我們可以通過指令進行調整)

需要注意的一點是，隨著時間的推移，Discord API 已經發生了很大的變化，特別是有一個功能在該模型經過訓練後發生了很大的變化，GPT-4 不知道使用的是哪個版本的 Discord API。

讓我們再試一次，確保我們理解代碼在做什麼。

現在出現第二個問題，是它不知道我在什麼環境中運行。你可以對模型說，我正在使用 Jupyter，我想讓它工作修好它，這也沒有問題。

三、圖像描述

GPT-4 不僅僅是一個語言模型，也是一個視覺模型。事實上，它可以靈活地接受任意圖像和文 本的輸入，就像文檔一樣。你可以問任何你喜歡的問題，能詳細地描述一下這個圖像嗎？模型能夠抓住這個系統的很多不同部分，進行詳細的描述（我們必須做的一件事是我們必須讓系統 更快，這是我們正在努力優化的事情之一）。接下來我們將接受觀眾的請求。這是一個 Discord 應用程序界面的屏幕截圖，可以看到 GPT-4 非常詳細地描述了界面，談到所有的對話 內容和時間，觀眾的發言順序，並描述了許多通知消息和渠道中的用戶。

GPT-4 的一個新特點是上下文長度，32,000 個 tokens 是我們目前支持的上限。該模型能夠靈 活地使用長文檔，這也是我們仍在優化的東西。如果你真的對長文感興趣，請告訴我們。我們想看看它能解鎖什麼樣的應用程序。

四、圖像-文本-網頁生成

我再給你們看一個例子，這裡有一個很好的手繪的笑話網站模型。我們嘗試讓 GPT-4 去自動生 成網站的原型圖。GPT-4 實現從圖片中提取文字信息並輸出到 HTML，我們自己仍在尋找新的方 法來使用它，並將與合作伙伴合作。我們將從那裡開始擴展，但請耐心等待，因為我們需要一 些時間才能真正讓每個人都能使用它。

五、複雜推理（稅務）

GPT 不是稅務專業人士，但理解一些密集的內容是很有幫助的，能夠輔助解決問題，並在你無 法解決的時候處理事情。現在我告訴它，它是稅收 GPT，我貼上了大約 16 頁的稅法。還有一個關於 Alice 和 Bob 的問題。他們曾經結過婚，這是他們的收入，他們在聯合申請。那麼第一 個問題，2018 年他們的標準扣除額是多少？

模型快速得到了標準答案，並且可以閱讀它的解釋。通過要求模型詳細說明其推理，我們沒有 讀過稅法，現在也明白這是怎麼回事。現在計算他們的總負債，這個模型在心算方面做得很 好，GPT-4 擁有許多非常靈活的原始功能，你們可以在此基礎上嘗試各種可以增強這些系統的方法。