近日,中国AI企业云天励飞正式发布了平民化的大模型产品——“深目”AI模盒。它的售价只要千元级,但可以做到“三个90%”——覆盖场景超过90%、算法精度超过90%,使用成本降低90%,可以让更多中小企业用上大模型。
“深目”AI模盒的算力基础,是其去年推出的大模型训推芯片“DeepEdge10 Max”。
该芯片采用了自主可控的14nm国产工艺、D2D chiplet晶粒架构,基于同样国产的RISC-V内核,并采用异构多核设计。
它支持大模型训练推理部署,已适配并可承载10亿级参数的SAM、百亿级参数的Llama2等大模型运算,可广泛应用于AIoT边缘视频、移动机器人等场景。
云天励飞还自主研发了多模态大模型“云天天书”,包含语言大模型、多模态大模型等不同系列,在C-Eval、CMMLU等权威测试中多次获得第一,并于去年正式通过中央网信办备案。
云天天书1.0版本发布于2023年初,至今已迭代3个版本。
以云天天书为底座,云天励飞可与合作伙伴首先完成预训练场景算法,再提供给中小企业用户,由其根据自身场景需求,在边缘端完成算法微调,并且在线学习、优化算法,不断提升算法精度。
“深目”AI模盒首发标准版搭载云天天书3.5V版本,INT8整数算力48TOPS(48万亿次)。
今年下半年,“深目”AI模盒将推出轻量版,芯片为DeepEdge10Pro,搭配云天天书4.0V,算力减半至24TOPS。
明年上半年,“深目”AI模盒将升级为旗舰版,芯片也升级为DeepEdge10Ultra,继续搭配云天天书4.0V,算力翻番到96TOPS。
云天励飞成立于2014年,并在当年推出了基于CV小模型的AI产品“深目”1.0,陆续在警务、城市治理、智慧交通、人居生活等领域打造多个标杆项目。
顶: 9996踩: 8
评论专区