大家好,我是在管理咨詢行業工作超10年的顧問輕舟,擁抱AI,效率賦能。5月30日,騰訊上線了基于混元大模型的“騰訊元寶”APP。起初并沒有太在意這款產品,之前也用過網頁端的騰訊混元大模型,其實日常使用來看,沒有發現和文心、kimi等有明顯能力區別。
近期下載騰訊元寶APP,使用了一周后,發現這次的騰訊元寶,特別是在AI搜索方面,和其他的對話大模型,包括專門的AI搜索大模型相比,還是有獨特優勢的。同時也測試了網頁端的騰訊元寶,基本上和APP的搜索和生成效果一致。
于是,有了這篇文章:親測騰訊元寶、Kimi、秘塔AI、天工AI的搜索能力,看看哪家更強大。輕舟的理念,知行合一,沒有親測體驗的產品,不會隨意網絡捏文來分享。
騰訊元寶亮點總結
一句話概括騰訊元寶的核心能力:騰訊元寶,強大的不是技術,而是內容生態。算力、數據/知識、落地場景是大模型時代的鐵三角。騰訊元寶正是在數據+知識方面,依托于騰訊內容生態,形成了專有的數據/知識來源。包括微信公眾號及視頻號、騰訊網、騰訊視頻、騰訊微博等。
資料來源:億歐智庫
特別是公眾號,有海量的高質量、原創性內容,公眾號的內容,并不是其他大模型搜索能夠直接、完整訪問的。微信看一看:
微信搜一搜:
另外,騰訊網也有非常豐富的內容。騰訊網:
AI搜索哪家強:元寶/Kimi/天工/秘塔橫評
橫評
接下來通過一個任務,測試騰訊元寶、Kimi、天工AI搜索、秘塔AI搜索幾個大模型的搜索與生成效果。來看看:AI搜索哪家強。任務:給所有AI執行以下任務,看他們搜索的資料質量、內容生成質量。
BCG波士頓咨詢在AI方面的組織架構,人員,投資或合作項目,相關AI產品和服務,詳細梳理
任務來源和背景是這樣的:前兩天寫了一篇文章,如下:
BCG波士頓咨詢AI戰略布局盤點,知識服務業如何應對AI革命(感興趣可打開鏈接)
在寫這篇文章的過程中,需要搜尋一些資料。鑒于傳統搜索引擎比較低效,我用了秘塔AI搜索、騰訊元寶、Kimi等多個工具。通過任務的分子主題拆解,用了多個工具配合,才基本找全相關資料,而在這個過程中,發現騰訊元寶是最好用的,其次秘塔AI也給到了一些補充。
為了進一步測試騰訊元寶的AI能力,以及其他大模型的表現,我在寫完這篇文章后。將上面的這個任務同時扔給了騰訊元寶、Kimi、秘塔AI搜索、天工AI搜索。下面就是各家的表現了 1 騰訊元寶
以下是騰訊元寶的回答,結果非常不錯。Part1:文前資料來源他搜索了四五十篇資料,最后引用了5篇他認為相關度高的資料。意外的是,第一篇資料,就是我剛剛在公眾號發布的文章:“
BCG波士頓咨詢AI戰略布局盤點,知識服務業如何應對AI革命”,我的提問任務和文章標題其實并非高度一致,但他通過文章內容快速掃描,發現了這篇文章內容和這個提問的關聯度很高,所以做為了第一資料。
Part2:內容生成在內容生成結果上,騰訊元寶從相關資料引用輸出,并在句末提供了引用角標。我個人很喜歡這種方式,確保內容更加真實可靠,省去鑒別一本正經胡說八道的真偽。Part3:文末圖文智能推薦在文末,騰訊元寶還給出了:“我還為你推薦以下內容”的圖文鏈接模塊,如下圖所示。
這些很多都是公眾號的相關文章,比如第一篇就是我們公眾號AI咨詢圈的這篇文章,后面還有BCG官方公眾號文章的推薦。
這個功能也非常好用。
文章鏈接,和推薦圖文鏈接,都可以直接點擊打開。
Part4:同類問題追問測試
為進一步驗證,我輸入了以下提示詞
麥肯錫的AI布局
我故意簡化了提示詞,是為了測試下AI的上下文理解能力。
同樣非常出色,騰訊元寶結合上下文準確的理解了我的問題,對于AI布局要從哪幾個方面總結很清楚。
他快速的檢索到了我6月2號發表的另一篇文章:
麥肯錫AI戰略布局盤點,知識服務業如何應對AI革命(感興趣可打開鏈接)從內容生成來看,比我發表這篇文章前的結果更豐富了,實際上我的這篇文章對相關的信息做了進一步的整理,所以AI借助網絡最新的知識文檔,很快的便更新了生成結果。(有一種我為社會做了一小點知識貢獻的感覺~)
文末的這個智能推薦功能也是非常智能,除了推薦了這篇麥肯錫相關的文章,同時騰訊元寶還推薦了我的另一篇BCG波士頓相關的文章,一方面推薦增加了文章的曝光,另一方面也增強了關聯資料的搜索效率。
2 KIMI
作為國民潮品的AI大模型——KIMI,爆火的原因一方面是長文檔,另一方面也是他的聯網搜索能力。面對這次的任務,kimi表現如何呢。四個字:差強人意。Part1:文前資料來源kimi找到了12個相關資料,從我寫這篇文章查看的有效資料的有效性角度看,kimi提供的這些參考資料不夠全面和對口。比如關于BCG設立BCG X部門,招聘新員工;BCG與英特爾合作新聞;BCG與Anthropic(Claude 那家公司)的合作新聞等貌似在他的資料清單里面都沒有檢索識別到。
Part1:文前資料來源由于檢索資料來源的不充分,也導致了kimi的生成結果并不理想。例如他提到的BCG的2個AI部門,BCG GAMMA,和BCG X。實際上成立BCG X后,就把BCG GAMMA整合進去了。準確的答案如下:
BCG X匯集了BCG GAMMA、BCG Digital Ventures,以及BCG Platinion三個部門的資源,旨在提供全面的數字化和AI咨詢服務。
輕舟,公眾號:AI咨詢圈
BCG波士頓咨詢AI戰略布局盤點,知識服務業如何應對AI革命Part3:文末圖文智能推薦kimi無相關模塊。Part4:同類問題追問測試同樣,我繼續問了麥肯錫的AI布局,給了一個非常短的提示詞,考驗上下文理解。KIMI的這個回答,直接就找不到結構了,開始按自己理解生成了一堆內容,其實并不是我想要的……
3 秘塔AI搜索
秘塔AI搜索一直是我強烈推薦大家的搜索工具,公眾號發過3篇相關的文章,如下:
精選5款AI效率工具4:秘塔AI搜索,搜資料效率翻100倍不夸張一次讀30個超長音頻內容,推薦秘塔AI播客搜索 | 工具評測【管理咨詢】Zui好用的資料搜集AI工具針對這次的任務,秘塔AI搜索表現也是不夠理想。
回答內容上存在一些網絡上的相關信息未識別,導致回答信息不全面的問題。
不過,讓我意外的是,他的資料來源,居然搜到了公眾號里面最新的我的文章,并顯示了所有資料的時間,我的這個文章先是6月4日。這說明秘塔AI搜索的時效性方面也是很強的。
我很好奇,其他AI搜索模型搜不到的公眾號內容,秘塔AI搜索可以實現嘛。也是打開了這個鏈接。結果發現并不是公眾號頁面,而是一家網站轉載了我的這篇文章,所以秘塔AI搜索還是通過公共網絡找到的這篇資料。不過,即使秘塔AI搜索找到了這篇文檔,但他在答案生成的時候,似乎并沒有很好的理解和利用這篇文檔的內容……
4 天工AI搜索
天工AI搜索的情況,和kimi、秘塔差不多,問題仍然是搜索到的信息不全面。
結語
不僅僅是公眾號,騰訊網也匯集了大量文本知識資源。在騰訊元寶使用過程中,很多資料也來自騰訊網的信息檢索。