El Laboratorio de Computación del Conocimiento de la Universidad de Pekín y el equipo de inteligencia artificial del Banco Tianfu de Sichuan abrieron oficialmente CodeShell, un modelo de código grande con 7 mil millones de parámetros, y proporcionaron soluciones de implementación y complementos IDE que coinciden con CodeShell. Consulte la base del código de CodeShell. para más detalles .
Según la introducción oficial, CodeShell tiene 7 mil millones de parámetros, fue entrenado con 500 mil millones de tokens y la longitud de la ventana de contexto es 8192. Los datos de entrenamiento originales de CodeShell se basan en los conjuntos de datos de GitHub, Stack y StarCoder rastreados por él mismo, así como en una pequeña cantidad de datos en chino e inglés de alta calidad.
En los puntos de referencia autorizados de evaluación de código (HumanEval y MBPP), CodeShell logra el mejor rendimiento en la misma escala.
El modelo de código abierto esta vez es el siguiente:
- CodeShell Base : modelo base de CodeShell, con potentes capacidades de base de código.
- CodeShell Chat : modelo de conversación CodeShell, con excelente rendimiento en tareas posteriores, como preguntas y respuestas sobre código y finalización de código.
- CodeShell Chat 4bit : una versión cuantificada de 4 bits del modelo de conversación CodeShell, que consume menos memoria y es más rápido al tiempo que garantiza el rendimiento del modelo.
- CodeShell CPP : versión CPP del modelo de conversación CodeShell, que permite a los desarrolladores utilizarlo en computadoras personales sin GPU. Tenga en cuenta que la versión CPP también admite operaciones de cuantificación y los usuarios pueden ejecutar CodeShell en una computadora personal con una memoria mínima de 8G.
La siguiente imagen es una captura de pantalla del complemento VS Code del asistente de código CodeShell:
Complemento IDEA:
