NVIDIA 更新 ChatRTX 與 RTX Remix 功能 支援 Gemma、ChatGLM3 模型 與 CLIP 技術

2024.05.02 09:21AM

NVIDIA 更新 ChatRTX 聊天機器人,新增支援最新 AI 模型並融入 DLSS 3.5 技術,提升遊戲及視覺互動效果。

NVIDIA在今年2月時展示可在裝置端獨立運作的「Chat With RTX」聊天機器人,目前加入更多新功能,並且支援最新人工智慧模型,而此次更新也在DLSS 3.5加入包含光線重建技術,並且將強化NVIDIA RTX Remix中包含光線追蹤效果模組的表現。

「Chat With RTX」目前以ChatRTX為稱,可利用檢索增強生成、NVIDIA TensorRT-LLM,以及NVIDIA RTX加速等技術,讓聊天機器人能在Windows PC和工作站以大型自然語言模型運作,並且透過自然語言方式與人互動。

新版ChatRTX則加入支援Google近期開放的大型自然語言模型Gemma,另外也支援基於通用語言模型框架的開放式中英雙語ChatGLM3大型自然語言模型。

由於支援OpenAI的對比語言和影像預訓練 (Contrastive Language-Image Pre-training,CLIP)技術,使用者還能透過ChatRTX與影像資料進行互動,並且透過訓練和細化後的CLIP神經網路,進而在自然語言監督中學習視覺概念,意味此模型將可辨識在影像集裡「看到」的東西,讓使用者可透過單字、術語和短語,與裝置本機端的相片和影像進行互動,無需使用複雜的詮釋資料標記。

新版ChatRTX更可讓使用者以用自己的聲音與資料進行聊天,主要在於導入支援使用人工智慧處理口語資料的自動語音識別系統Whisper,讓使用者可以在應用程式上用語音進行查詢,並糗且由ChatRTX以文字回應。

而在新版RTX Remix中,使用者將能藉此將經典PC遊戲「重建」為支援NVIDIA RTX技術的遊戲作品,並且對應DLSS 3.5技術功能,藉此詮釋更真實的即時光影追跡效果,另外也能透過自動生成式人工智慧分析經典遊戲中的低解析度貼圖紋理,進而生成更符合真實物理場景材質、並且將解析度提升4倍,藉此減少模組改裝者原本必須花費長時間調整的情形。

相關消息

科技應用
EVOX《對話式 AI 白皮書》:掌握 AI 商務溝通新趨勢
癮特務
3 天前
即拍即印普普風概念印章,製造屬於自己的圖像
annti wang
15 年前
應用教學
國家鐵道博物館開館 6處古蹟、8大展覽必參觀 藍皮火車預約搭乘方法看這裡
Zero圈圈
1 天前
開箱評測
2吋大螢幕、7.9mm羽量級厚度 Garmin Venu X1智慧手錶評測心得
Tandee
1 天前
汽車未來
全新改款 BMW iX 豪華純電旗艦休旅強勢上市!「THE NEW BMW iX」現場直擊,亮點分享一次了解!
癮特務
9 天前
App
三星One UI 8以Android桌面模式取代DeX
Chevelle.fu
3 天前
《奇妙之旅》家族競技展開 熱鬪場內容介紹
皮耶哈
15 年前
快訊
伊良可樂台灣首店即將開幕!排不到可以試試這款糖漿,肥仔快樂水自己做。
Shopping guide
1 天前
文化創意
日本Sony宣布LinkBuds Fit與初音未來合作 限量500套加贈壓克力架與AR模型
Chevelle.fu
1 天前