>> 國金證券-量化漫談系列之十六：Cursor的更強(qiáng)搭檔，Claude 3.7 sonnet代碼生成評測-250301
| 上傳日期： |
2025/3/3 |
大?。?/td>
| 2869KB |
| 格式： |
pdf 共18頁 |
來源： |
國金證券 |
| 評級： |
-- |
作者： |
高智威,許坤圣 |
| 下載權(quán)限： |
無限制-登錄即可下載 |
|
|
Claude 3.7 Sonnet更新介紹
2025年2月25日，Anthropic宣布推出Claude系列的新模型Claude 3.7 Sonnet，該模型憑借強(qiáng)大的編程能力引發(fā)了用戶的關(guān)注。Claude 3.7 Sonnet相比于之前版本的核心優(yōu)勢體現(xiàn)在多模態(tài)處理、混合推理模式、安全機(jī)制和計算機(jī)操作四個方面。在多模態(tài)處理方面，Claude 3.7 Sonnet能夠解析圖表、圖像和屏幕像素輸入等視覺數(shù)據(jù)，生成結(jié)構(gòu)化分析報告。在混合推理模式方面，模型加入了擁有思維鏈的擴(kuò)展思考模式（extended-thinking），并且可以根據(jù)用戶的問題自動切換標(biāo)準(zhǔn)模式和擴(kuò)展思考模式。在安全機(jī)制方面，Claude 3.7 Sonnet在處理模糊或潛在有害請求時，減少了不必要的拒絕。在計算機(jī)操作方面，模型可以執(zhí)行鼠標(biāo)點擊、文本輸入、按鈕導(dǎo)航等操作，并且支持跨平臺操作。
Claude 3.7 Sonnet編程能力介紹
Claude 3.7 Sonnet在編程能力方面具有顯著的優(yōu)勢，在編程基準(zhǔn)評估測試中該模型的準(zhǔn)確率達(dá)到了70.3%，遠(yuǎn)超同期模型約49%的水平；在智能體工具使用方面同樣相比3.5版本存在顯著提升，在TAU-bench的兩個任務(wù)準(zhǔn)確率分別達(dá)到81.2%和58.4%。Anthropic還基于Claude 3.7 Sonnet模型開發(fā)了終端集成式AI編程工具Claude Code，具備全流程代碼開發(fā)支持能力，為用戶提供了類似Cursor的AI編程輔助功能。
Claude 3.7 Sonnet項目編寫測試
我們用三個來自《量化漫談系列之十三：基于大模型實現(xiàn)對話式自動編程-Cursor使用指南與實戰(zhàn)》的項目，結(jié)合AI代碼編輯器Cursor，測試Claude 3.7 Sonnet從無到有編寫項目的能力，并且與Claude 3.5 Sonnet、OpenAI o3mini模型進(jìn)行對比。在網(wǎng)頁爬蟲任務(wù)中，Claude 3.7 Sonnet成功爬取了所有研報的信息，但是經(jīng)過多次嘗試未能獲取研報正文；在本地數(shù)據(jù)分析任務(wù)中，Claude 3.7 Sonnet生成了圖文并茂的.md格式報告，且分析角度比較全面；在回測系統(tǒng)構(gòu)建任務(wù)中，Claude 3.7 Sonnet實現(xiàn)了回測框架的數(shù)據(jù)獲取、信號生成、交易執(zhí)行、策略評估以及參數(shù)優(yōu)化模塊，并且完成了四種策略測試。對比Claude 3.5 Sonnet和OpenAI o3 mini，Claude 3.7 Sonnet生成的代碼在功能完整性、靈活性和可擴(kuò)展性都表現(xiàn)較好，體現(xiàn)了在任務(wù)完成度和代碼質(zhì)量方面的優(yōu)勢。不過在目前階段，Claude 3.7 Sonnet還存在api不穩(wěn)定和Cursor針對模型適配不到位的問題，可能會在未來版本得到改善。
風(fēng)險提示
以上結(jié)果通過歷史數(shù)據(jù)統(tǒng)計、建模和測算完成，歷史規(guī)律不代表未來；在市場環(huán)境發(fā)生變化時，模型存在失效的風(fēng)險；策略依據(jù)一定的假設(shè)通過歷史數(shù)據(jù)回測得到，當(dāng)交易成本或其它條件改變時，可能導(dǎo)致策略收益下降甚至出現(xiàn)虧損；大模型輸出的內(nèi)容存在一定的隨機(jī)性和準(zhǔn)確性風(fēng)險；本文所提煉的觀點，基于一定的提示詞產(chǎn)生，大語言模型輸出的結(jié)果可能隨著提示詞的變化而發(fā)生變化
|
|
