英伟达开源3400亿参数模型Nemotron-4 340B

英伟达使用了9万亿个token（文本单位）进行训练。

Stability AI开源AI图像生成模型Stable Diffusion 3 Medium

除了开放版本外，Stable Diffusion 3 Medium还可在由Fireworks AI提供支持的API上使用。

昆仑万维宣布开源2千亿稀疏大模型Skywork-MoE

接近70B的Dense模型，使得模型的推理成本有近3倍的下降。