在将 MoEs 微调到一个领域的艺术完全普及之前,我很高兴看到 Qwen 仍然发布一些密集模型。现在拥有一些强大的密集模型对于继续发展更广泛的开放生态系统至关重要。