2024 年 12 月,DeepSeek 开源 DeepSeek-V3 模型,这是一个 671B 参数的**混合专家(Mixture-of-Experts,简称 MoE)**模型,每次前向只激活 37