柚子快報(bào)邀請(qǐng)碼778899分享:試用文心一言
柚子快報(bào)邀請(qǐng)碼778899分享:試用文心一言
1 入口
https://yiyan.baidu.com/
2 界面
2.1 整體界面
目標(biāo):作為普通用戶使用。結(jié)果:整體設(shè)計(jì)很好,各種角色和提示詞,界面也好看,細(xì)節(jié)到位。
3 模型效果
3.1 寫(xiě)一段微信小程序
目標(biāo):對(duì)于本土化的工具,國(guó)外文本生成支持不是很好。結(jié)果:看著還不錯(cuò),還沒(méi)試運(yùn)行。
3.2 當(dāng)朋友聊天我會(huì)找誰(shuí)
目標(biāo):討論一些人文問(wèn)題,提出一些之前和 ChatGPT 聊到的問(wèn)題,對(duì)比答案。結(jié)果:答案也大差不差,呵呵…… 相對(duì) ChatGPT,我覺(jué)得 ERNIE 比較教條,調(diào)性不太一樣。
3.3 業(yè)務(wù)能力
目標(biāo):具體業(yè)務(wù)的能力。結(jié)果:測(cè)試了一下總結(jié)長(zhǎng)文的能力,理解能力可用。
4 易用性
4.1 申請(qǐng) API
目標(biāo):真正解決問(wèn)題,還是需要使用 API。結(jié)果:230831 早上 3:00 申請(qǐng),10:13 收到短信,通過(guò)審核。
4.2 費(fèi)用
目標(biāo):看看用哪個(gè)更劃算結(jié)果:差不多
文心一言:ERNIE-Bot-turbo 0.008元/千tokensChatGPT:0.002美元/千tokens 評(píng)論: 千帆支持多個(gè)模型,有ERNIE的,也有LAMMA,不同模型計(jì)費(fèi)方式不同,可對(duì)比不同模型效果;這里更像是個(gè)集成平臺(tái),而非完全是百度的大語(yǔ)言模型。
4.3 反饋時(shí)間
目標(biāo):評(píng)測(cè)反饋時(shí)間結(jié)果:
問(wèn)了第一個(gè)問(wèn)題(demo代碼中的默認(rèn)問(wèn)題)反饋時(shí)間 1s問(wèn)第二個(gè)問(wèn)題時(shí),提示:Open api daily request limit reached開(kāi)通了 ERNIE-Bot-turbo 后可正常使用客服說(shuō)送了 20 代金券,但我沒(méi)找到在哪兒重復(fù)兩次問(wèn)了一個(gè) 800 字的問(wèn)題,API 反饋時(shí)間 3-3.5s(同一問(wèn)題,ChatGPT網(wǎng)頁(yè)版回答4s左右)
4.4 長(zhǎng)度限制
目標(biāo):評(píng)測(cè)其長(zhǎng)度限制結(jié)果:
我向它提問(wèn):“ERNIE-Bot-turbo 每次提問(wèn) token 的長(zhǎng)度限制是多少”,回答:“ERNIE-Bot-turbo 每次提問(wèn)的 token 的長(zhǎng)度限制是64個(gè)字符”,這明顯是不對(duì)的。我在文檔里也沒(méi)找到,重要參數(shù)是不是應(yīng)該寫(xiě)在比較顯眼的地方。
4.5 學(xué)習(xí)成本
目標(biāo):評(píng)價(jià)學(xué)習(xí)成本結(jié)果:
調(diào)用 http 請(qǐng)求,不需要額外安裝 Python 包可能是出于安全考慮,需要先獲得 access_tokenPython代碼量不大,學(xué)習(xí)成本不高 相關(guān)文檔:https://cloud.baidu.com/doc/WENXINWORKSHOP/s/4lilb2lpf
5 整體感受
至少不用 xx 上網(wǎng)中文內(nèi)容支持更好一些客服打電話,加微信,問(wèn)公司信息,又無(wú)法回答技術(shù)問(wèn)題,推銷感讓人覺(jué)得有點(diǎn)……我自已用,還是優(yōu)先 ChatGPT;公司用的,需要正規(guī)的渠道,文心一言會(huì)比較合適。
6 關(guān)于評(píng)測(cè)
大家都不開(kāi)源,偏重又不一樣,普通用戶僅僅問(wèn)幾個(gè)問(wèn)題,也評(píng)測(cè)不出啥效果,只能收集一些大概的感覺(jué)。比如,單位用會(huì)考慮:是否可用,是否有明顯問(wèn)題;自己常用的領(lǐng)域,支持地好不好;提問(wèn)和回答的限制價(jià)格;自己用可能會(huì)考慮:思維的廣度,世界觀。
柚子快報(bào)邀請(qǐng)碼778899分享:試用文心一言
精彩鏈接
本文內(nèi)容根據(jù)網(wǎng)絡(luò)資料整理,出于傳遞更多信息之目的,不代表金鑰匙跨境贊同其觀點(diǎn)和立場(chǎng)。
轉(zhuǎn)載請(qǐng)注明,如有侵權(quán),聯(lián)系刪除。