Lanzamiento del modelo de idioma grande chino nacional "Tianhe Tianyuan"

El Centro Nacional de Supercomputación de Tianjin lanzó la Plataforma de Innovación Abierta de Computación Inteligente Tianhe Exascale y el gran modelo chino nacional - Tianhe Tianyuan en la 7ma Conferencia Mundial de Inteligencia.

Los conjuntos de datos para grandes modelos de idioma chino son muy escasos. El Centro Nacional de Supercomputación de Tianjin ha recopilado y clasificado datos de páginas web, varios datos de capacitación de fuente abierta, datos de novelas chinas, datos de China antigua, datos de enciclopedias, datos de noticias y varios conjuntos de datos y datos de capacitación en campos profesionales como medicina tradicional china, medicina , consulta, ley, etc. El número total de tokens alcanzó los 350B, y la capacitación creó su propio modelo grande de idioma chino: el modelo grande Tianhe Tianyuan.

La supercomputadora de nueva generación de Tianhe ha logrado una innovación de aplicación de tecnología de la información integral e independiente desde el hardware hasta el entorno de software.El funcionario también mostró tecnologías centrales como chips informáticos y placas base utilizadas en la supercomputadora de nueva generación de Tianhe en el área de exhibición.

Se informa que la "Plataforma de innovación abierta de computación inteligente de clase E de Tianhe" brindará una potencia de computación de supercomputación intermodal superior a la exaescala, admitirá la computación de ingeniería científica tradicional y servirá la computación híbrida inteligente, creando una gama completa de potencia de computación dotada. Es un portador de la innovación energética y el desarrollo de alta calidad de la economía digital.

En el futuro, el Centro Nacional de Supercomputación de Tianjin también comenzará la capacitación en profundidad de modelos profesionales para los campos médico, industrial, legal y otros sobre la base del "Modelo grande de Tianhe Tianyuan". En el futuro, el modelo grande se convertirá en la base de la inteligencia industrial con el apoyo de la plataforma de aprendizaje profundo.

Supongo que te gusta

Origin www.oschina.net/news/241824
Recomendado
Clasificación