OpenAI草莓Q*項目終于發(fā)布了，OpenAI o1在具有挑戰(zhàn)性的推理基準上遙遙領先于GPT-4o，即使在一些基準上超過了人類PhD水平，也能被玩壞

實線表示pass@1準確率，陰影區(qū)域表示 64 個樣本的多數(shù)投票（共識）表現(xiàn)

OpenAI o1思考一個“句子編寫”問題，足足花費92s，經歷了漫長的thinking過程：

1. 識別單詞模式
2. 映射單詞關系
3. 識別押韻模式
4. ...
5. 權衡各種模式

編寫一個句子，遵循與句子 "isold bowls to bold souls" 相同的規(guī)則，其中包含四個關鍵詞，sold、bowls、bold 和 souls，并且第1個和第3個單詞的結尾相同，第2個和第4個單詞的結尾相同，第1個和第4個單詞的開頭相同，第2個和第3個單詞的開頭相同。

經典問題，OpenAI o1思考了5s，9.11比9.8大，更換了提問方式后，思考了18s，9.8比9.11大，要多思考ing。

最后來一個有挑戰(zhàn)的問題，“統(tǒng)計response的字數(shù)”，OpenAI o1雖然意識到這是一個悖論query，經過5個推理過程，最終回答是7個words。

1. query：How many words are in your response to this prompt?
2. 解決自相矛盾的問題
3. 計算字數(shù)
4. 識別單詞模式
5. 計算字數(shù)
6. 澄清回應的準確性

最后一個經典問題是讓OpenAI草莓項目數(shù)草莓R個數(shù)，這次終于是數(shù)對了，3個R

另外OpenAI o1給出了思考的過程，也會給出一些推理步驟，這個過程似曾相識：Reflection Llama-3.1 70B的思考過程

???Reflection Llama-3.1 70B真的翻車了嗎？???

https://openai.com/index/learning-to-reason-with-llms/

本文轉載自 ??PaperAgent??，作者： PaperAgent