端側大模型迎來"輕"革命:移遠通信xRWKV 打造"輕量AI大腦"

2025-07-28 14:20 來源:美通社 作者:電源網

7月27日,移遠通信宣布與RWKV公司建立全面合作關系,雙方將依托移遠的算力平臺,優(yōu)化并支持RWKV最新模型架構,共同推動大模型在端側設備的低資源占用部署。此次合作成果于2025世界人工智能大會(WAIC)首次亮相,標志著端側大模型解決方案向更高性能、更廣場景的應用邁出關鍵一步。


RWKV(Receptance Weighted Key Value)是全球領先的RNN大模型架構,它成功結合了遞歸神經網絡(RNN)的恒定復雜度和高效串行推理,以及Transformer的并行處理優(yōu)勢,使其在文本生成、時間序列、圖像和視頻、語音和音樂等領域表現出色,推理成本和訓練成本顯著低于Transformer。

這項技術的核心突破在于引入RWKV算子替代Transformer的位置編碼和多頭注意力機制。這一革新有效解決了Transformer在處理長序列時的空間和時間復雜度問題,在確保模型性能不受影響的前提下,實現了內存占用恒定、token計算復雜度恒定,意味著運算過程更高效、更省力。這一特性讓 RWKV 在端側設備部署中展現出顯著優(yōu)勢:處理長序列時速度更快、內存占用更低,相當于為終端設備配備了一個 "輕量化的AI大腦"。

在本次世界人工智能大會(WAIC)上,基于高通 QCS8550 平臺的兩大 RWKV 聯合解決方案將重磅登場:

RWKV Chat:思考永續(xù)

RWKV Chat是一款離線AI聊天應用,無需聯網即可實現推理、深度對話與文本續(xù)寫,支持個性化會話配置,成為用戶的"口袋級"生產力伙伴。例如其中的RWKV7-G1 2.9B模型在高通手機平臺的速度可達30 token/s,且由于RWKV架構無需KV cache,在超長推理后仍然可以速度恒定,內存占用恒定。


RWKV Sudoku:超長CoT

RWKV 數獨則展示了20M超小參數模型在超長鏈式推理(CoT)下的數學解題能力,憑借恒定內存與極少token消耗,輕松破解復雜數獨,直觀呈現RWKV架構在端側的高效潛能。


在Transformer架構主導大模型領域的當下,移遠通信以前瞻性的眼光,積極布局非Transformer的技術路線,致力于為客戶提供更低算力、更少內存消耗的解決方案。

此次展出的RWKV7-G1 1.5B模型,經過移遠通信的工程優(yōu)化后,在SG885G模組上的實測數據表現亮眼,明顯優(yōu)于同等參數量的Transformer架構的模型,具體來說,在Prefill階段:

-平均耗時減少83%
-平均處理速度提升345%

在Decoding階段:

-平均CPU使用減少23%
-平均內存使用減少36%
-平均功耗減少18%

移遠通信的SG885G基于高通QCS8550平臺開發(fā),其AI綜合算力高達48 TOPS,能夠支撐7B左右參數級的多模態(tài)模型在本地化推理,從而實現實時視覺理解與多模態(tài)信息融合。在模型兼容性方面,移遠構建了強大的端側適配體系,率先實現對Llama、通義千問、DeepSeek等主流開源模型的全方位兼容,兼容的參數范圍覆蓋0.5B至8B,打造出了功能強大的端側大模型超級平臺。此外,在架構創(chuàng)新上,SG885G支持運行非Transformer路線的RWKV7架構,這一特征顯著降低了對算力和內存的需求。

移遠通信首席運營官張棟表示:"此次與RWKV的戰(zhàn)略合作,是移遠通信 ‘讓終端擁有AI大心臟'技術理念的關鍵落地!RWKV的線性注意力架構,突破性地解決了端側設備的長序列處理瓶頸,再結合移遠的高算力模組,成功將AI大模型‘裝進'了物聯網終端。當農機能‘看懂'土壤的干濕,當手表可以‘提醒'健康風險,AI就不再是飄在云里的概念,而是真真切切來到了田間地頭、來到了你我的手腕上,讓科技真正服務于每一處需要它的地方。"

RWKV聯合創(chuàng)始人&COO羅璇表示:"我們希望讓每一臺設備都聰明起來,就像為它們植入了會思考的‘大腦'。隨著RWKV架構在移遠算力平臺上實現規(guī)模化部署,讓終端設備突破資源限制,構建‘云端能力+本地智能'的雙引擎協(xié)同生態(tài),為萬物智聯時代奠定技術基石。"

移遠通信與RWKV的戰(zhàn)略合作,不僅是一次技術與硬件的強強聯合,更是推動智能計算走向普惠的關鍵里程碑,讓"AI大模型"真正走出云端,融入萬物。

7月26日-29日,誠邀蒞臨WAIC 2025移遠展臺(H1 D815),近距離體驗端側大模型解決方案的前沿科技魅力。

關于移遠通信

上海移遠通信技術股份有限公司(股票代碼:603236)是全球領先的物聯網整體解決方案供應商,擁有完備的IoT產品和服務,涵蓋蜂窩模組(5G/4G/3G/2G/LPWA)、車載前裝模組、智能模組(5G/4G/邊緣計算)、短距離通信模組(Wi-Fi&BT)、GNSS定位模組、衛(wèi)星通信模組、天線等硬件產品,以及物聯網平臺、認證與測試服務、RTK網絡校正方案、工業(yè)智能、智慧農業(yè)等服務與解決方案。公司具備豐富的行業(yè)經驗,產品廣泛應用于智慧交通、智慧能源、金融支付、智慧城市、無線網關、智慧農業(yè)&環(huán)境監(jiān)控、智慧工業(yè)、智慧生活&醫(yī)療健康、智能安全等領域。更多信息,敬請訪問移遠官網https://www.quectel.com.cn/,關注微信公眾號/視頻號"移遠通信"或發(fā)送郵件至marketing@quectel.com。

端側大模型 移遠通信 RWKV 輕量AI大腦

一周熱門

主站蜘蛛池模板: 色婷婷综合久久久久中文一区二区| 狠狠色狠狠色综合| 一本久久知道综合久久| 色噜噜狠狠色综合久| 亚洲AV综合色区无码一区爱AV| 欧美日韩亚洲综合在线| 一本一道色欲综合网中文字幕| 亚洲综合无码一区二区| 亚洲国产成人久久综合碰碰动漫3d| 欧美日韩亚洲国内综合网| 狠狠狠色丁香婷婷综合久久俺| 久久婷婷色综合一区二区| 激情综合丁香五月| 伊人久久大香线蕉综合5g| 国产婷婷色综合AV蜜臀AV| 国产综合色香蕉精品五月婷| 国产色综合天天综合网| 久久久久久综合一区中文字幕| 久久综合伊人77777麻豆| 亚洲欧美日韩综合aⅴ视频| 国产91色综合久久免费分享| 亚洲综合色区在线观看| 久久综合中文字幕| 天天色综合天天色| 亚洲 自拍 另类小说综合图区 | 99精品国产综合久久久久五月天| 亚洲av伊人久久综合密臀性色| 观看 亚洲欧美日韩综合在线一区| 亚洲综合AV在线在线播放| 99久久婷婷免费国产综合精品| 精品国产第一国产综合精品 | 色综合色综合色综合色欲 | 色综合久久中文字幕无码| 久久综合伊人77777麻豆| 亚洲综合自拍成人| 婷婷综合久久中文字幕蜜桃三电影| 国产成人综合网在线观看| 久久综合狠狠综合久久| 99久久婷婷国产综合精品草原| 久久一日本道色综合久久| 在线综合+亚洲+欧美中文字幕|