在將 MoEs 微調到一個領域的技術完全普及之前，我很高興看到 Qwen 仍然發布一些密集模型。現在擁有一些強大的密集模型對於持續發展更廣泛的開放生態系統至關重要。