KAT-Dev-72B-Exp

KAT-Dev-72B-Exp 是快手推出的开源编程专用大语言模型，参数规模达720亿。模型是 KAT-Coder 的强化学习版本，专为软件工程任务设计。在 SWE-Bench Verified 基准测试中，模型准确率高达74.6%，表现优异。通过优化注意力核和训练引擎，模型实现了高效的强化学习训练，通过调整优势分布防止探索坍塌。模型开源特性为开发者和研究人员提供深入了解和应用的机会，推动软件工程领域的技术创新。