大模型让让,小模型登场丨科创要闻

4 月 23 日,大模登场微软推出小语言模型(SLM)Phi-3系列,型让有Phi-3-mini、模型Phi-3-small、丨科Phi-3-medium三个版本,创闻在评估语言、大模登场编程、型让数学能力等的模型基准测试中,Phi-3系列模型表现优于同等规模甚至更大规模模型(如GPT-3,丨科5)。微软称其是创闻目前同类中最强大且最具成本效益的小型语言模型。
Phi-3模型的大模登场“小体积”,让手机上运行高能力的型让语言模型成为可能。如Phi-3-mini只占用手机18GB内存,模型如在iPhone 14上部署,丨科苹果的创闻A16仿生芯片在设备上脱机运行,可以实现每秒超过12个token。
自2022年12月ChatGPT爆火之后,科技公司们一头扎进了大型模型的竞争,2023年接连刷新模型参数,2024年开始“内卷”长文本。大家似乎默认数据越多、参数越大、算力越强,模型的能力越强。
但是,高昂的运行成本、具体场景模型调试难度等问题,让大模型商业化的路径慢下来。此时小模型的优势就体现出来了。
小模型,目前某些领域也能接近大模型的性能。特别是在各手机和PC厂商正在力推的AIPC、AI手机上,对设备计算能力、运行能力、储存能力要求较低,能在地化运行的小模型,的确是不错的选择。
其实早在2023年6月份,微软就发布了第一代Phi模型,Phi-3系列已经是其第四代产品。近期,苹果公司也凑了小模型的热闹。
2024年4月24日,在大模型上没有什么动静的苹果公司,发布开源小语言模型OpenELM,包括
- ·玻璃漆的种类 怎样使用玻璃漆,行业资讯
- ·双节临近 河南全省将开展景区价格检查
- ·汉阴县信访局:书写春联送祝福 笔墨飘香进机关
- ·高中组织枕头大战怎么回事 千人枕头大战为高考生减压
- ·返保费的重疾险,返保费的重疾险有现金价值吗
- ·笨蛋,問題在幸福!|天下雜誌
- ·Y世代職場變貌 7成企業鼓勵在家辦公|天下雜誌
- ·库里半场走神11铁送9助攻 扣篮破僵局萌神归位
- ·速卖通618战报:品牌成交同比增长90%,多类目涌现百万美金冠军
- ·棉校服里塞碎布条?校服何时成了家长的负担?
- ·赞助商又送莱科宁特质风洞胎 他一对儿女都有玩具了
- ·台中日韓四強聯盟關鍵在台灣【2012天下經濟論壇】|天下雜誌
- ·颗粒归仓抢农时——全椒县夏收一线见闻_
- ·爆品来袭,爱航食品重磅推出的这两款八宝粥,经销商都!
- ·玻璃短期维持区间震荡,行业资讯
- ·家的味道养生粥传承经典美味,给你不一样的感受,经销商们还不来代理?
