您现在的位置是:热点 >>正文
开源多模态模型MiniCPM-V 4.5发布,8亿参数实现移动端AI部署
热点10254088人已围观
简介...
近日,开源AI社区迎来重要进展,面向端侧设备的多模态大语言模型MiniCPM-V4.5正式发布。这款模型以8亿参数规模实现了在智能手机和平板电脑上的高效运行,为移开源动端AI应用开拓了新的可能性。
技术特点与性能表现
MiniCPM-V4.5采用轻量化设计思路,专为端侧设备优化。根据开发团队公布的测试数据,该模型在OpenCompa多模ss综合评估中获得77.2分的成绩,在同类开源模型中表现突出。模型支持单图理解、多图推理和视频分析等多种任务。
在移动设备部署方面,MiniCPM-V4.5在iPho态模ne16Pro Max上的首token延迟约为2秒,解码速度超过每秒17个token。模型通过3D-Resampler技术将视频数据压缩率提升至96%,能够以64个to型Mken处理6帧视频内容,实现最高10FPS的实时视频理解。
光学字符识别是该模型的重点优化方向之一。基于LLaVA-UHD架构,模型支持高达180万像素的高分辨率图像in处理,在OCRBench测试中准确率达到85.7%。此外,模型支持包括英语、中文、德语、法语在内的30多种语言。
创新机制与技术架构
MiniCPM-V4.5引入了可控混iC合思维机制,用户可通过参数设置在快速响应模式和深度推理模式间切换。快速模式适用于常规问答任务,深度模式则通过逐步推理处理复杂问题。
模型基于RLAIF-V和VisCPMPM技术进行训练,在减少幻觉现象方面有所改进。开发团队表示,这种训练方法提升了模型响应的准确性和可靠性。
开源生态与部署支持
MiniCPM-V4.5采用Apache-2.-V0许可证发布,支持学术研究免费使用,商业应用需要简单注册程序。模型兼容多种推理框架,包括llama.cpp、Ollama、vLLM和SGLang,并提供16种量化 4格式以适应不同硬件配置。
开发团队还发布了适配iOS的应用程序,方便用户在苹果设备上体验。开发者可通过Hugging Face和GitHub获取模型代码和文档,支持通过Gra.5dio搭建本地Web界面,也可在NVIDIA GPU上进行推理加速。
应用前景与局限性
作为专为移动端优化的多模态模型,MiniCPM-V4.5在隐私敏感和离线使用场景中具发布有应用价值。模型的轻量化设计降低了AI能力的部署门槛,为个人用户和开发者提供了新的选择。
需要注意的是,受参数规模限制,该模型在处理极其复杂任务时可能存在性能边界。用户在,8实际应用中应根据具体需求选择合适的模型方案。开发团队提醒,模型生成内容基于训练数据,用户需确保使用合规并承担相应责任。
行业影响
MiniCPM-V4.5的发布体现了开源亿参AI社区在端侧部署方向的技术探索。随着移动设备计算能力的持续提升,这类轻量化多模态模型可能为AI应用的普及化提供新的技术路径。
该项目的开源特性也为研究人员和开发者提供了学习数实和改进的基础,有望推动端侧AI技术的进一步发展。
项目地址:https://github.com/OpenBMB/MiniCPM-V
Tags:
相关文章
寒武纪宣布全面适配DeepSeek-V3.2-Exp 模型,推理引擎开源来袭!
热点寒武纪宣布已成功适配最新发布的 DeepSeek-V3.2-Exp 模型,并同时开源了大模型推理引擎 vLLM-MLU 的源代码。此消息无疑为 AI 行业注入了一剂强心针,也让对 AI 技术充满期待的...
【热点】
阅读更多苹果 AI 项目高管跳槽 Meta,Siri 团队面临挑战
热点近日,苹果公司一名重要的 AI 高管 Ke Yang 决定离职,转投 Meta 公司。据彭博社报道,Yang 在几周前刚被任命为苹果的 Answers、Knowledge and Informatio...
【热点】
阅读更多让AI精准识别盗版,脸书开源数据增强库:提供100多种增强方式
热点本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。 只要稍微动点手脚,就会给AI模型的鲁棒性带来挑战。 在AI眼里,下面这两张图片可能毫无关联。 现在,Facebook AI...
【热点】
阅读更多