腾讯混元开源四个小尺寸模型,支持端侧部署
8月4日,腾讯混元宣布开源四款小尺寸模型,参数分别为 0.5B、1.8B、4B、7B,消费级显卡即可运行,适用于笔记本电脑、手机、智能座舱、智能家居等低功耗场景,且支持垂直领域低成本微调。
目前,四个模型均在 Github 和Huggingface等开源社区上线,Arm、高通、Intel、联发科技等多个消费级终端芯片平台也都宣布支持部署。
据介绍,新开源的4个模型属于融合推理模型,具备推理速度快、性价比高的特点,用户可根据使用场景灵活选择模型思考模式——快思考模式提供简洁、高效的输出;而慢思考涉及解决复杂问题,具备更全面的推理步骤。
1、AI奇才拒绝15亿美元6年天价薪酬,扎克伯格挖角失败,扎克伯格是天才吗
2、我的一个朋友,海南日报的主编肝癌晚期,一个老中医一个月给它治好了,给了我震撼
3、赵睿:亚洲杯目标是拿牌和站上领奖台,这是目前男篮最需要的,赵亚男足球