Meta近日正式宣布推出全新的開(kāi)源大模型CodeLlama 70B，標(biāo)志著AI在代碼生成領(lǐng)域的一次重大突破。CodeLlama 70B被描述為迄今為止最大且性能最佳的模型，能夠處理比以前版本更多的查詢(xún)，從而允許開(kāi)發(fā)人員在編程時(shí)提供更多提示并提高其準(zhǔn)確性。
CodeLlama 70B基于Llama 2構(gòu)建，旨在幫助開(kāi)發(fā)人員根據(jù)提示創(chuàng)建代碼片段并調(diào)試人工編寫(xiě)的工作。該模型接受了1TB的海量代碼和代碼相關(guān)數(shù)據(jù)的訓(xùn)練，托管在代碼存儲(chǔ)庫(kù)Hugging Face上。目前，該模型提供三個(gè)不同的版本，與原始Llama 2模型類(lèi)似，繼續(xù)免費(fèi)用于研究目的。CodeLlama模型的推理代碼可在GitHub上找到。另外兩個(gè)CodeLlama工具，CodeLlama-Python和CodeLlama-Instruct，專(zhuān)注于特定的編碼語(yǔ)言。
CodeLlama-70B-Python已經(jīng)接受了額外1000億個(gè)Python代碼標(biāo)記的訓(xùn)練，使其在生成Python代碼時(shí)更加流暢和準(zhǔn)確。CodeLlama-70B-Instruct可以處理各種任務(wù)，例如排序、搜索、過(guò)濾和操作數(shù)據(jù)，以及實(shí)現(xiàn)算法。值得一提的是，CodeLlama-70B-Instruct是一個(gè)經(jīng)過(guò)微調(diào)的變體，專(zhuān)門(mén)設(shè)計(jì)用于理解自然語(yǔ)言指令并相應(yīng)地生成代碼。其先進(jìn)的功能提高了代碼生成的質(zhì)量和效率。
在HumanEval基準(zhǔn)測(cè)試中，CodeLlama 70B表現(xiàn)出了卓越的性能，獲得了67.8的高分。這一分?jǐn)?shù)與GPT-4 (68.2)和Gemini Pro (69.4)等封閉模型相當(dāng)，并且超過(guò)了CodeGen-16B-Mono (29.3)和StarCoder (40.1)等開(kāi)放模型之前的最佳成績(jī)。這證明了CodeLlama 70B在邏輯和功能正確性方面的強(qiáng)大實(shí)力。
借助CodeLlama 70B，企業(yè)可以選擇在其私有環(huán)境中托管功能強(qiáng)大的代碼生成模型。這使他們能夠控制并有信心保護(hù)自己的知識(shí)產(chǎn)權(quán)。未來(lái)，隨著AI技術(shù)的不斷發(fā)展，我們期待看到更多創(chuàng)新的應(yīng)用場(chǎng)景和解決方案出現(xiàn)。
原創(chuàng)文章，作者：小丸子，如若轉(zhuǎn)載，請(qǐng)注明出處：http://2079x.cn/article/626017.html
