從寫程式碼,到創作下一幕

探索 字節跳動 - 火山方舟 的 AI 程式設計與影片創作活動。

Agent Plan & Coding Plan

一站體驗多款熱門模型,為 AI 程式設計與智能體開發提供更多選擇。新使用者可聯絡(微信: goo_lvyouyou)免費體驗 9.9 agent plan。

Seedance 2.5

讓創意,躍然成片。探索 30 秒影片、多模態參考與局部編輯,把腦海中的畫面變成下一支作品。

繁體中文

Codex 中的 ChatGPT Work 使用洞察

管理控制台中的洞察可幫助你瞭解團隊使用 ChatGPT Work 和 Codex 開展哪些工作,以及額度用在了哪裡。在工作區概覽中開啟一個類別,即可檢視其任務和使用情況。比較結果前,請檢查各檢視顯示的統計範圍。

透過這些檢視,找出需要與相關負責人共同評估的工作流程。結合使用情況、額度消耗和團隊記錄,瞭解這些工作是否更省力、是否達到品質標準,以及是否取得了更好的結果。

觀看:評估 ChatGPT Work 的使用情況與價值

分析檢視

管理控制台提供 ChatGPT Work 和 Codex 的分析功能。使用情況顯示活動與消耗,洞察將使用情況按類別和任務歸組。對於工程工作,程式碼審查顯示審查活動與發現的問題。

洞察中的使用場景表,包含各類別的指標

如果你關注 token,請使用“使用情況”中提供的 token 指標。訊息佔比、額度佔比和 token 佔比描述的是不同的內容;比較或分享結果時,請保留這些標籤,不要混用。

開啟洞察

管理控制台中,選擇你的工作區,然後開啟分析 > 洞察。你需要擁有該工作區的分析存取權限;可見的檢視和資料取決於你的權限和已啟用的功能。

檢視結果前,請檢查工作區、日期範圍和可用篩選條件。比較活動時,請保持這些設定一致。洞察的歷史資料僅從開始分類時起提供。

使用場景與任務

在概覽中,使用“使用場景 / 任務”切換控制項,在大類和更具體的活動之間切換。在“使用場景”選項卡中,展開某個類別即可檢視其任務。

使用場景圖表,以範例資料展示各大類別

在圖表中選擇一個使用場景或任務,即可開啟其詳情。使用“使用場景”表可以比較前 10 項之外的類別和任務。

一個類別可能包含多個工作流程。在將其視為單一業務流程前,請先檢查其中的任務。如果部分活動尚未分類,請在描述結果時註明這一侷限。

訊息、額度和活躍使用者

結合表中的訊息數、額度和活躍使用者數,瞭解每個類別或任務。如果出現抽樣提示,顯示的數量反映的是抽樣活動。請勿按比例放大這些數字來估算整個工作區的活動總量。

使用場景表中的軟體工程類別已展開,顯示其任務

訊息數 顯示與某個類別或任務相關的訊息數量。訊息數並不能說明團隊完成了多少工作。

額度佔比 顯示與某個類別或任務相關的額度消耗所佔的比例。結合額度和訊息數,可以瞭解消耗集中在哪裡。

活躍使用者數 顯示在某個類別或任務中活躍的人數。結合訊息數,可以比較使用某個類別的人數與其產生的活動量。

如果某個類別的額度佔比較高,請檢查其任務、模型和設定。工作更復雜或模型選擇不同,都可能解釋該類別的額度使用情況。在判斷這些消耗是否值得之前,請先檢視團隊取得了哪些成果。

如果某個類別的活躍使用者較少,請詢問他們如何使用它,以及遇到了哪些困難。他們可能有值得分享的工作流程,也可能需要更多支援。

類別詳情

開啟某個類別的詳情,即可在右側抽屜面板中檢視其任務和使用情況明細。

軟體工程抽屜面板,顯示任務、模型、推理和速度

檢視該類別中的任務及各任務消耗的額度。模型、推理和速度明細顯示各選項在所選類別或任務中的額度佔比。如果消耗發生變化,請詢問團隊,工作內容或這些設定是否發生了變化。

如果提供了外掛和技能呼叫資料,請檢視該類別或任務的相關呼叫情況。這些計數包含所選日期和篩選條件範圍內 ChatGPT Work 和 Codex 的活動。呼叫次數不等同於訊息數或已完成的任務數。

分享發現時,請始終將估算值標註為估算。外掛和技能的額度分配可能重疊,因此請勿將這些檢視中的數值相加來計算總投入。有關如何解讀額度及其對帳單的影響,請參閱 ChatGPT Work 使用情況與費用

程式碼審查

如果你正在評估工程工作,請開啟程式碼審查,檢視工作區可用的審查指標。

  • 已審查的 PR 數 顯示拉取請求的審查活動。經過審查的拉取請求不一定已合並或部署。
  • 發現的問題數 顯示這些審查發現的問題。請與審查人員確認,哪些發現有幫助,以及哪些已得到處理。
  • 按優先順序劃分的問題、回應和回應情緒 提供有關發現的問題及人員回應情況的更多背景。

已審查的 PR 圖表,顯示拉取請求審查活動的範例資料

計數為零可能表示沒有活動,也可能是報告資料缺失。解讀該計數前,請檢查日期範圍,以及相關審查是否包含在內。

評估價值

選擇團隊在 ChatGPT Work 或 Codex 中使用的一個工作流程。與業務負責人商定需要改善的結果以及衡量方式。結合客戶簡報、庫存計劃或拉取請求等團隊記錄檢視洞察。讓實際開展工作的人員參與評估。

使用一致的報告週期,並檢查是否有抽樣提示。類別可能包含多個工作流程,活動計數並不衡量已完成的工作。以下範例展示如何結合使用資料和工作流程中的證據來探究價值。

修復缺陷

Codex 是否幫助工程師減少排查和返工,更省力地解決缺陷?

選擇某個服務中反覆出現的一類缺陷,例如輸入處理不正確。與熟悉相關程式碼的工程師一起檢視問題、修復和迴歸測試。

如何探究

  1. 比較類似的修復。 對於複雜度相近的缺陷,記錄排查、實現和審查所用的時間。將實際投入的時間與等待審查或發布的時間分開記錄。
  2. 檢視洞察。 開啟軟體工程,查詢與排查相關的任務。檢視對比周期內的額度和活躍使用者數。
  3. 確認結果。 檢查測試是否能復現缺陷,並在修復後通過。詢問工程師糾正了哪些內容,並記錄重新開啟的問題或迴歸問題。
  4. 如果經確認的修復所需的總投入減少,就分享該工作流程。 如果返工仍然很多,請完善復現步驟或儲存庫上下文,然後再次比較。

新增測試

Codex 是否幫助團隊以更少的手動投入覆蓋重要的失敗場景?

選擇一個已知存在覆蓋缺口的模組。比較結果前,商定哪些行為和失敗場景需要測試。

如何探究

  1. 明確缺口。 列出尚未覆蓋的行為,並記錄新增類似測試所需的投入。使用測試報告記錄初始覆蓋情況。
  2. 檢視洞察。 在軟體工程下查詢相關任務。檢視同一週期內的額度,以及可用的模型和推理明細。
  3. 檢查測試。 請工程師檢查斷言是否能捕獲預期的失敗。記錄不穩定的測試結果、增加的執行時間,以及重寫或維護測試所花的時間。
  4. 如果將有效測試納入程式碼庫所需的投入減少,就複用該方法。 如果測試雖然通過卻未能捕獲失敗,請明確預期行為,然後重試。

重構程式碼

Codex 是否幫助團隊在保留預期行為的同時完成重構?

選擇一項範圍明確的改動,例如在整個包中替換已棄用的 API。商定哪些呼叫點屬於範圍之內,以及團隊將如何驗證結果。

如何探究

  1. 確定範圍。 記錄需要更新的呼叫點,以及手動完成類似改動所需的投入。標明估算值,尤其是此前被擱置的工作。
  2. 檢視洞察。 檢視同一週期內相關的軟體工程任務及其額度。如果消耗較為突出,請檢查可用的模型和推理明細。
  3. 驗證改動。 審查差異,執行相關檢查,並查詢遺漏的呼叫點或行為變化。將審查、糾正和後續修復計入投入。
  4. 如果重構通過商定的檢查,就擴展到另一個套件。 如果仍有太多收尾工作,請先縮小改動範圍,或提供一個可用的範例。

客戶研究

ChatGPT Work 是否幫助銷售人員以更少的投入準備準確的客戶簡報?

選擇一個定期準備簡報的銷售團隊。商定每份簡報應包含的內容,例如客戶歷史、當前重點事項和要向客戶提出的問題。

如何探究

  1. 比較類似的簡報。 記錄試用前和試用期間的準備與審查時間。使用相同的品質標準,並選擇研究深度需求相近的客戶。
  2. 檢視洞察。 在銷售下查詢客戶研究與規劃。使用可用的群組篩選條件聚焦該團隊。檢視同一週期內的額度、模型選擇,以及任何可用的外掛或技能活動。
  3. 與銷售人員一起審閱簡報。 對照源記錄核查事實,並評估研究是否有助於為溝通做好準備。將糾正內容的時間計入投入,並跟蹤節省的時間是否用於客戶溝通或跟進。
  4. 如果準備準確簡報所需的投入減少,就分享該方法。 如果缺少重要背景資訊,請完善源材料或提供共享技能。使用 CRM 記錄評估後續合格商機或銷售業績的變化;僅憑洞察無法確立這種關聯。

庫存規劃

ChatGPT Work 是否幫助團隊減少手動工作,制定可靠的庫存計劃?

選擇一個定期開展的規劃週期,例如為活動備貨。商定涉及哪些產品和地點,以及團隊將使用哪些銷售和庫存記錄。

如何探究

  1. 記錄當前流程。 衡量收集記錄、準備計劃和糾正計劃所花的時間。記錄類似週期中的缺貨或庫存過剩情況。
  2. 檢視洞察。 查詢與團隊規劃工作匹配的類別和任務。檢視同一週期內的額度和活躍使用者數。在將該類別的使用情況歸因於這一工作流程之前,請與團隊確認兩者確實匹配。
  3. 對照實際結果檢查計劃。 請庫存負責人核實數量、假設和缺失的資料。將審查和糾正計入投入。週期結束後,將計劃庫存與銷售量和剩餘庫存進行比較。
  4. 如果計劃可靠且所需投入減少,就複用該工作流程。 如果缺貨或庫存過剩增加,請重新檢查輸入和假設。使用庫存和採購記錄評估成本是否降低。

記錄評估。 註明使用場景、負責人和報告週期。納入基準、結果、額度和侷限。記錄與團隊商定的任何調整,以及複查日期。根據團隊記錄統計已完成的工作,並標明估算值。

要評估投資回報率(ROI),請將改進帶來的價值與 AI、設定、培訓及持續支援的成本進行比較。將審查和糾正工作所花的時間計入成本。節省時間並不自動等於節省現金;請檢查團隊如何利用騰出的時間和人力。

提高使用限額前,請檢查當前限額、消耗情況,以及哪些工作需要更多容量。消耗的額度不一定會產生額外的帳單費用。請參閱 ChatGPT Work 使用情況與費用

使用洞察是瞭解 ChatGPT Work 和 Codex 投資回報的一部分。它們顯示所選範圍內的使用情況和額度消耗。實際開展工作的團隊可以解釋發生了哪些變化、結果是否改善,以及這些改進帶來了多少價值。結合兩者,決定擴充套件哪些工作流程,以及團隊在哪些方面需要更多支援。