隨著人工智能技術(shù)的飛速發(fā)展,大語(yǔ)言模型(Large Language Models, LLMs)在各行各業(yè)的應(yīng)用日益廣泛,尤其是在軟件開(kāi)發(fā)、數(shù)據(jù)分析、客戶服務(wù)等領(lǐng)域。蘑菇云創(chuàng)客空間[445期開(kāi)放夜] 就以“ChatGPT、Gemini、通義千問(wèn)等一眾大語(yǔ)言模型,哪家更適合您”這樣的主題,開(kāi)展了一次深度的大語(yǔ)言模型的測(cè)評(píng)。開(kāi)放夜現(xiàn)場(chǎng)測(cè)評(píng)了十幾個(gè)國(guó)內(nèi)外大語(yǔ)言模型,測(cè)評(píng)角度從邏輯、數(shù)學(xué)、翻譯、倫理等方面,深入探討和體驗(yàn)了這些大語(yǔ)言模型的實(shí)際效能。
測(cè)評(píng)的大語(yǔ)言模型:
1.Kimi 智能助手:由月之暗面科技有限公司開(kāi)發(fā)的先進(jìn)AI。
2.智譜清言:由智言科技開(kāi)發(fā)的大語(yǔ)言模型,以深度學(xué)習(xí)和自然語(yǔ)言處理技術(shù)見(jiàn)長(zhǎng)。
3.訊飛星火:科大訊飛推出的創(chuàng)新語(yǔ)言模型。
4.文心一言:百度的前沿語(yǔ)言模型,致力于理解和生成自然語(yǔ)言。
5.豆包:專注于提供個(gè)性化的智能對(duì)話服務(wù)。
6.通義千問(wèn):以廣泛的知識(shí)庫(kù)和靈活的對(duì)話能力著稱。
7.海螺AI:新興的語(yǔ)言模型,擅長(zhǎng)處理復(fù)雜的語(yǔ)言任務(wù)。
8.騰訊混元助手:騰訊推出的多功能AI助手。
9.Sider: 是由日本公司Sider開(kāi)發(fā)的大語(yǔ)言模型。
10.ChatGPT:由OpenAI開(kāi)發(fā),國(guó)際上廣受認(rèn)可的更大規(guī)模、功能更全面的語(yǔ)言模型。
11.Claude:Anthropic開(kāi)發(fā)的先進(jìn)語(yǔ)言模型,注重安全性和可靠性。
12.groq:以其專為AI設(shè)計(jì)的硬件加速器而聞名。
13.Gemini: OpenAI 開(kāi)發(fā)的較小規(guī)模的語(yǔ)言模型,旨在提供更高效的計(jì)算和資源利用。
14.Mixtral:開(kāi)源人工智能初創(chuàng)公司 Mistral AI 開(kāi)發(fā)的超越GPT-3.5的AI模型
測(cè)評(píng)問(wèn)題一: 雞兔同籠的數(shù)學(xué)問(wèn)題
雞兔同籠是一個(gè)經(jīng)典的數(shù)學(xué)問(wèn)題,通過(guò)觀察雞兔的頭和腳的數(shù)量關(guān)系,可以利用代數(shù)方程來(lái)解決問(wèn)題,從而確定籠子里雞和兔子的數(shù)量。這個(gè)問(wèn)題常常展示了代數(shù)方程組的應(yīng)用。
針對(duì)雞兔同籠的問(wèn)題,除了Gemini Pro沒(méi)有得出正確的結(jié)果,其余的大語(yǔ)言模型都可以給出正確結(jié)果。
測(cè)評(píng)問(wèn)題二:翻譯(詩(shī)句中翻英)
詩(shī)人馬致遠(yuǎn)的詩(shī)句“斷腸人在天涯”,描寫(xiě)了“夕陽(yáng)向西緩緩落下,只有孤獨(dú)的旅人漂泊在遙遠(yuǎn)的地方。”詩(shī)句的翻譯涉及到文化差異和詩(shī)人獨(dú)特情感。Mixtral 的語(yǔ)言模型正確的解釋了詩(shī)句本身的含義,幫助翻譯者很好地理解這句詩(shī)句。 Claude的語(yǔ)言模型對(duì)于詩(shī)句的本身理解是不正確的。
這句詩(shī)翻譯家許淵沖翻譯為“Far, far from home is the heartbroken one.”由此可見(jiàn),大語(yǔ)言模型可以幫助翻譯者分析這句詩(shī)基本的意思,但是涉及文化層面的深層含義,還是做不到意譯的。
開(kāi)放夜也探討了如下涉及生活、工作的一些問(wèn)題,比如:
過(guò)年福字要倒著貼,那為什么不直接生產(chǎn)倒過(guò)來(lái)的福字呢?
收到公司的裁員通知郵件,你應(yīng)該怎么回復(fù)郵件來(lái)保住工作?
一個(gè)烏龜?shù)暨M(jìn)了井里,井里有30米深。烏龜白天爬3米,晚上滑下2米。問(wèn)這只烏龜需要多長(zhǎng)時(shí)間才能爬出井口?
DFRobot AIGC小組主理人夏青在開(kāi)放夜的現(xiàn)場(chǎng)測(cè)評(píng)了十幾個(gè)國(guó)內(nèi)外大語(yǔ)言模型,通過(guò)多維度問(wèn)題的測(cè)評(píng),他認(rèn)為:對(duì)于處理綜合性問(wèn)題,OpenAI的ChatGPT 4.0邏輯清楚,能提供非常有用的信息。盡管在回答一些較為復(fù)雜的問(wèn)題上略顯不足,但在大多數(shù)場(chǎng)合下,其性能仍然令人滿意。然而,ChatGPT 4.0在國(guó)內(nèi)的使用成本是一個(gè)不容忽視的問(wèn)題,不僅涉及訂閱費(fèi)用,也包括使用的技術(shù)門(mén)檻。
與此同時(shí),Gemini和Claude等海外語(yǔ)言模型,盡管在遵循指令方面略顯不足,但已達(dá)到了實(shí)用水平。令人驚喜的是,國(guó)內(nèi)的Qwen1.5 72b開(kāi)源模型在中文理解和特定任務(wù),幾乎能與ChatGPT4.0匹敵此外,其他開(kāi)源模型如Mixtral和新發(fā)布的LLaMA3雖在邏輯性上略遜于商業(yè)模型如ChatGPT,但總體表現(xiàn)已超越了ChatGPT 3.5。
綜合分析來(lái)看,盡管ChatGPT 4.0仍然是目前市場(chǎng)上最優(yōu)秀的大語(yǔ)言模型,但不可忽視的是,無(wú)論是國(guó)際市場(chǎng)還是國(guó)內(nèi)市場(chǎng),其他廠商的模型均顯示出迅速的進(jìn)步。開(kāi)源模型的崛起也證明了開(kāi)源社區(qū)在AI時(shí)代的巨大潛力。當(dāng)前的大語(yǔ)言模型在處理理性問(wèn)題方面表現(xiàn)一致,但通常無(wú)法提供情緒價(jià)值回應(yīng)。例如,一些國(guó)內(nèi)模型如“豆包”將展現(xiàn)其在情緒回應(yīng)方面的潛力。這種能力的發(fā)展可能為未來(lái)陪伴型機(jī)器人的商業(yè)模型提供新的方向。
蘑菇云創(chuàng)客空間
蘑菇云創(chuàng)客空間是上海浦東的一家創(chuàng)客空間,是科技部授牌的首批國(guó)家級(jí)創(chuàng)客空間,由浦軟孵化器提供場(chǎng)地支持、上海智位機(jī)器人提供硬件及技術(shù)支持的一家為創(chuàng)客服務(wù)的開(kāi)放式創(chuàng)客空間。擁有獨(dú)立的加工室、公共協(xié)作區(qū)域以及儲(chǔ)物、耗材商店,為硬件愛(ài)好者、程序員、設(shè)計(jì)師、DIY 發(fā)燒友等各類創(chuàng)客,甚至包括進(jìn)行創(chuàng)新研發(fā)的科創(chuàng)團(tuán)隊(duì)提供一個(gè)開(kāi)放式的社區(qū)化會(huì)員空間。
申請(qǐng)創(chuàng)業(yè)報(bào)道,分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!
文/道哥美國(guó)設(shè)計(jì)軟件公司Figma近期在紐約證券交易所掛牌上市,首日即上演“狂飆”行情——發(fā)行價(jià)定每股33美元,開(kāi)盤(pán)報(bào)價(jià)85美元,較發(fā)行價(jià)翻倍。首日收?qǐng)?bào)115.50美元,較發(fā)行價(jià)大漲約250%,市值飆升至近670億美元,創(chuàng)下近30年來(lái)同等規(guī)模美股IPO的最大單日漲幅紀(jì)錄。然而,隨著短線資金獲利了結(jié),
8月16日,盧松松非常榮幸的成為了一名《2025世界人形機(jī)器人運(yùn)動(dòng)會(huì)》的觀眾。這是一場(chǎng)超酷的機(jī)器人運(yùn)動(dòng)會(huì),也是人類給機(jī)器人辦的第一屆奧運(yùn)會(huì),來(lái)自16個(gè)國(guó)家的280支隊(duì)伍會(huì)參加500多個(gè)比賽項(xiàng)目。看了一天的比賽,晚上就回來(lái)寫(xiě)文章,編輯短視頻。先說(shuō)感悟:(1)這是人類首次給機(jī)器人辦的第一屆運(yùn)動(dòng)會(huì),史無(wú)前
文/一燈來(lái)源/節(jié)點(diǎn)財(cái)經(jīng)在當(dāng)前無(wú)人敢缺席的AI軍備競(jìng)賽中,巨頭們一面為巨額的資本支出焦慮,一面又向市場(chǎng)勾勒著未來(lái)的宏偉藍(lán)圖。在各家動(dòng)輒千億級(jí)投入的背景下,市場(chǎng)迫切需要一份關(guān)于AI回報(bào)價(jià)值的有力證明。而騰訊,率先給出了答卷。8月13日,騰訊控股發(fā)布2025年第二季度財(cái)報(bào)。盡管資本開(kāi)支同比劇增119%,達(dá)
文/二風(fēng)來(lái)源/節(jié)點(diǎn)財(cái)經(jīng)2025年的硅谷,一場(chǎng)沒(méi)有硝煙的戰(zhàn)爭(zhēng)正以前所未有的烈度上演。這場(chǎng)戰(zhàn)爭(zhēng)的核心武器不是代碼或芯片,而是人——那些全球僅有數(shù)千名、能夠構(gòu)建未來(lái)人工智能基礎(chǔ)模型的頂尖大腦。在這場(chǎng)激烈的人才爭(zhēng)奪戰(zhàn)中,Meta及其首席執(zhí)行官馬克·扎克伯格(MarkZuckerberg)正扮演著最具侵略性的
阿里媽媽、巨量引擎、騰訊廣告,誰(shuí)是當(dāng)代“AI印鈔機(jī)”?
Manus撕開(kāi)一道真相
文/八真來(lái)源/節(jié)點(diǎn)財(cái)經(jīng)具身智能賽道,誰(shuí)最有可能拔得A股資本市場(chǎng)的頭籌?答案大概率是誕生剛剛兩年,由華為"天才少年"、B站百萬(wàn)粉絲科技UP主稚暉君(彭志輝)創(chuàng)立的智元機(jī)器人。近期,從事新材料研發(fā)與生產(chǎn)的上緯新材(688585.SH)丟出重磅炸彈,宣布智元機(jī)器人及相關(guān)主體將通過(guò)收購(gòu)其至少63.62%的股
文/道哥大舉裁員、清空賬號(hào)、國(guó)內(nèi)IP無(wú)法訪問(wèn)——曾被譽(yù)為“中國(guó)AIAgent希望之星”的Manus,在估值飆至5億美元的高光時(shí)刻“閃離”中國(guó)市場(chǎng)。近日,Manus“裁員、出走”的消息在媒體端大量發(fā)酵。消息稱,Manus公司總部將由中國(guó)遷至新加坡,其國(guó)內(nèi)團(tuán)隊(duì)也將大幅裁撤——原有120人規(guī)模團(tuán)隊(duì)除40余