南方科技大學聯合 IDEA 研究院 CCNL 中心發布了 SUS-Chat-34B，這是一個參數規模為340億的雙語模型。該模型在眾多中英文任務上表現出色，超越了其他同參數規模的模型。

　　SUS-Chat-34B基于01-ai/Yi-34B 預訓練模型通過數百萬高質量、多語言的指令數據進行了微調。

　　模型具有以下亮點:

　　大規模復雜指令跟隨數據:使用1.4B token的高質量復雜指令數據進行訓練，涵蓋中英文、多輪對話、數學、推理等多種指令數據;

　　強大的通用任務性能:SUS-Chat-34B模型在眾多主流的中英文任務上表現出色，其效果超越了相同參數規模的其他開源的指令微調模型。即使與更大參數規模的模型相比，SUS-Chat-34B模型也具有不錯的競爭力

　　更長的上下文窗口與出色的多輪對話能力:SUS-Chat-34B原生支持8K的上下文窗口，在大量多輪指令以及單多輪混合數據中進行訓練，具有出色的長文本對話信息關注與指令跟隨能力。