手机端也能流畅运行,腾讯混元宣布开源四款小尺寸模型
8月4日,腾讯混元宣布开源四款小尺寸模型,参数分别为 0.5B、1.8B、4B、7B,消费级显卡即可运行,适用于笔记本电脑、手机、智能座舱、智能家居等低功耗场景,且支持垂直领域低成本微调。
相关模型参数 腾讯官方
目前,四个模型均在Github和Huggingface等开源社区上线,Arm、高通、Intel、联发科技等多个消费级终端芯片平台也都宣布支持部署。
模型相关得分 腾讯官方
据悉,相关模型也兼容SGLang、vLLM、TensorRT-LLM等主流推理框架。
模型的Agent能力也相当突出。它能深度搜索资料、整理去年消费账单并自动生成Excel分析,还能一手包办旅行规划从路线搜索到攻略制定的全流程,高效处理多种任务。
本文系观察者网独家稿件,未经授权,不得转载。
1、飞行神话!解放军老黑鹰40年照飞不误,直-20锋芒毕露续写传奇,解放军黑鹰直升机
2、现在人与人之间的相处怎么就不能像以前一样淳朴了?,现在的人难相处
3、车评人称百万豪车不如20万国产车,这说法老师傅们怎么看?,百万的国产车