Meta представила обновленную ШИ-модель для генерации кода под названием Code Llama 70B, построенного на Llama 2. Об этом говорится в сообщении компании.
«Мы выпускаем Code Llama 70B, самую большую и производительную модель в семействе Code Llama», – говорится в сообщении Meta.
Обновленная ШИ-модель представлена в трех версиях:- Code Llama 70B – базовая модель;
- Code Llama 70B Python – модель для Python;
- Code Llama 70B Instruct – доработанная модель для понимания инструкций на естественном языке.
- Code Llama 70B обучена на 1 триллионе токенов кода и связанных данных. Предыдущие модели были обучены на 500 миллиардов токенов кода и данных.
Также Meta сравнила точность Code Llama 70B с другими моделями. К примеру, в тесте HumanEval ее точность достигла 53%. Для GPT 3.5 этот показатель составил 48,1%, а для GPT 4 – 67%.