Mistral发布了两个小模型,Ministral 3B 和 Ministral 8B
他们说这是世界上最好的边缘模型(edge models),数据确实非常亮眼,所有参数全面超越同规模模型。
两种模型均支持长达 128k 的上下文长度;
Ministral 8B 有特殊的交错滑动窗口注意力模式,以加快和提高内存利用率;
Ministral 8B Instruct 模型可以下载不可商用。
他们自己发的这个梗图非常好玩。
官方公告:mistral.ai/news/ministraux/
Martial God Asura Chapter 1966 - Unmasking
2024-06-074月值得关注的NFT项目:Jenni Pasanen(不作投资参考)
2022-04-08李开复宣布筹组中文版ChatGPT公司“Project Al 2.0”
2023-03-19