Organizado por Mingmin Xiaoxiao de AIGC Summit
Qubit | Cuenta pública QbitAI
AIGC está tan caliente que si no sigues el ritmo, serás eliminado.
Este es el sentimiento más intuitivo en el círculo de capital de riesgo actual.
Pero "mantenerse al día" no es una tarea fácil: ¿cómo mantenerse al día? ¿En qué dirección?
Si no tiene cuidado, puede perder la tobera.
Para las empresas emergentes, la tecnología AIGC se está desarrollando demasiado rápido hoy en día, incluso si se inicia un negocio desde la capa de aplicación, es posible que el PPT de la empresa no sobreviva a una iteración de tecnología OpenAI;
Para los inversores, hay demasiadas nuevas tecnologías de IA y nuevas direcciones empresariales que han surgido en un corto período de tiempo, y es probable que aprender de 0 pase por acciones potenciales.
Bajo el carnaval de la tecnología, las empresas y los inversores tienen pensamientos diferentes sobre las diferencias entre el espíritu empresarial a gran escala en el país y en el extranjero, la dirección de desarrollo futuro de los modelos a gran escala y la innovación de AIGC.
Con este fin, Qubit invitó a Zhu Lei, cofundador y director de operaciones de Yuanyu Intelligence, Chen Shi, socio inversor de Fengrui Capital, Ma Qianli, cofundador de Unbounded Ai, y Lin Laini, vicepresidente de comercialización de Huayuan Shuzhiren, para discutir juntos Bajo esta ola de AIGC, China se enfrenta a nuevas oportunidades y nuevos desafíos.
La sesión de mesa redonda fue organizada por Jin Lei, editor en jefe de Qubit. Sobre la base de no cambiar el significado original, Qubit ha editado el contenido. Espero traerte más inspiración y pensamiento.
La Cumbre de la Industria AIGC de China es una cumbre de la industria organizada por Qubit, y casi 20 representantes de la industria participaron en la discusión. Hay más de 600 audiencias fuera de línea y casi 3 millones de audiencias en línea. Ha sido ampliamente informado y preocupado por docenas de medios, incluidos CCTV2 y BTV.
puntos de tema
AIGC ha permitido que muchos talentos regresen a la pista de IA, lo que será muy beneficioso para el desarrollo tecnológico de mi país a largo plazo.
Esta ronda de aumento de AIGC hace que los empresarios se sientan ansiosos, pero más de ellos avanzan con ansiedad.
La mayoría de las oportunidades para las empresas emergentes de AIGC aún pueden estar en la capa sin modelo, o hacer algunos modelos verticales.
Mientras la IA no traicione a los humanos, definitivamente generará un aumento vertiginoso en la eficiencia social y la experiencia humana.
Convertirse en una empresa como OpenAI no significa crear una versión china de OpenAI.
Se dice que la gran ola de AIGC en China es el momento "iPhone", pero en realidad se parece más al primer momento de Internet para PC.
El siguiente es el texto completo de la conversación del foro:
Registro del foro
El auge de AIGC trae conmoción, emoción y ansiedad.
Qubit Jin Lei : Me gustaría agradecer a todos por participar en el foro de mesa redonda sobre "Nuevas oportunidades para AIGC en China". Hoy, ChatGPT ha desencadenado una gran ola de AIGC, especialmente en China, que ha formado un incendio en la pradera. Por lo tanto, creemos que en el momento actual, es necesario resumir y discutir el rápido desarrollo de AIGC para hacer frente a las nuevas oportunidades que se avecinan.
Con este fin, invitamos a varios invitados corporativos que están a la vanguardia de la industria para discutir juntos este tema.
El primero es Zhu Lei, cofundador y director de operaciones de Yuanyu Intelligence . Yuanyu Intelligence es el precursor de esta ola de aumento de AIGC.
El segundo lugar es Chen Shi, socio inversor de Fengrui Capital.La tecnología de punta siempre ha sido el foco de la inversión de Fengrui Capital.
El tercero es Ma Qianli, el cofundador de Wujie Ai . En términos de pintura generativa, Wujie Ai también es pionera entre las empresas nacionales. Actualmente, el número de usuarios en la aplicación ha superado los 2 millones.
El último es Lin Laini, el vicepresidente de comercialización de Huayuan AI Huayuan Computing está profundamente involucrado en el campo de la inteligencia artificial y la IA, y ha estado comprometido durante mucho tiempo con la industria del empoderamiento de la tecnología inteligente.
En esta discusión, establecemos una palabra clave en torno a cada tema. El primer tema es relativamente fácil, y la palabra clave es " sentimiento ".
Nos gustaría pedirles a todos que hablen sobre esta ola de aumento de AIGC, ¿cuál es el sentimiento más intuitivo traído a su industria y negocios relacionados?
Yuanyu Smart Zhu Lei : El sentimiento más directo es la conmoción y el impacto.
Aunque hemos estado haciendo exploración y desarrollo de modelos a gran escala en la industria, habrá ciertas expectativas, pero todavía hay muchos aspectos en esta ronda de aumento que superan nuestras predicciones.
Un aspecto obvio es la aceptación y profundidad de la aplicación de ChatGPT en varias industrias. Este es un cambio muy grande desde el desarrollo de la inteligencia artificial. Resulta que la IA se aplica en círculos pequeños o enlaces fijos. Esta vez, realmente ha roto el círculo. De ancho a profundidad, es un cambio tecnológico muy grande. Esto es lo que creemos que es impactante.
Para nuestra industria, probablemente haya dos impactos.
Uno, el modelo en el que estábamos trabajando se convirtió rápidamente en el centro de atención. Por ejemplo, en octubre de 2022, abrimos oficialmente el modelo grande de un solo modelo multitarea PromptCLUE. En ese momento, no había muchas descargas. Sin embargo, después del lanzamiento de ChatGPT, especialmente en enero de este año, como tema de ChatGPT continuó fermentando en todo el mundo. La cantidad de descargas de nuestros modelos de código abierto ha crecido rápidamente, lo que es un impulso relativamente grande para nosotros y también ha acelerado el desarrollo del modelo.
Segundo, talento. Anteriormente, bajo la influencia de la atmósfera nacional, muchos talentos nacionales y extranjeros se unieron a la ola de IA, pero es inevitable que algunas personas estén un poco decepcionadas con esta pista. Ahora que se acerca esta gran ola, muchos talentos han regresado a la dirección general de la IA, por lo que creo que, a la larga, esto será un gran beneficio para la industria tecnológica de mi país.
Chen Shi de Fengrui Capital : En realidad, solía escribir programas y tengo un buen conocimiento de la tecnología y las aplicaciones de IA. Yo mismo también he experimentado la ola de IA en la visión artificial de aprendizaje profundo antes, por lo que esta vez estoy haciendo IA generativa, principalmente modelos de lenguaje a gran escala de preentrenamiento, y GPT-4 ha agregado entrada y salida multimodal. Este cambio tecnológico nos sorprendió mucho, porque fue un salto repentino, no un cambio continuo y paulatino.
La razón principal detrás de esto es que AI ya posee cierta inteligencia general. Microsoft Research informó recientemente que hemos visto la chispa de la inteligencia artificial general en el desarrollo actual de los modelos de lenguaje, y esta chispa sigue ardiendo y creciendo. Esto es algo muy sorprendente.
Desde el punto de vista de la industria, creo que esta ola de tecnología es muy diferente de la ola anterior de aprendizaje profundo. La última ronda de reforma de la tecnología de IA no cumplió con las expectativas en general, principalmente debido a su poca versatilidad. Al final, solo hubo algunas implementaciones reales en algunos escenarios de aplicación, como la seguridad y el reconocimiento facial, y la entrada y salida fueron no es bueno Pero en esta ronda de cambio tecnológico de IA, la versatilidad de la tecnología es mejor, los escenarios aplicables son más amplios y el valor de salida será mayor.
Creo que si la IA puede mejorar la eficiencia y la experiencia de la sociedad humana. Y este tipo de cambio se puede ver, y también cambiará fundamentalmente todos los ámbitos de la vida, especialmente la producción de contenido, la educación, la investigación científica, etc., y muchas otras industrias se verán afectadas.
Así que estamos muy entusiasmados con esta ola de AIGC. Este es el bienestar de la humanidad, pero la premisa es que la IA no traiciona a la humanidad, esto también trae grandes oportunidades para los emprendedores.
Unbounded AI Ma Qianli : Desde la perspectiva de los empresarios, esta ronda de aumento de AIGC me ha puesto aún más ansioso.
Debido a que su velocidad de desarrollo es demasiado rápida, estimamos en agosto del año pasado que en febrero y marzo de este año, la influencia de la IA en el contenido de las imágenes será cada vez más fuerte y los cambios se reflejarán en cómics, GIF, videos cortos y otros. campos. Pero inesperadamente, después de que Controlnet se uniera en el primer trimestre, nacieron muchos logros nuevos y aplastantes.
Esto puede causar ansiedad a veces, porque mientras estás haciendo mucho trabajo, otros equipos pueden ponerse al día.
Por otro lado, este tipo de ansiedad en realidad afecta a toda la industria, e incluso las personas en las industrias tradicionales también están ansiosas.
En cambio, formó una especie de "acurrucarse juntos para calentarse". Algunos socios "inalcanzables" se acercaron a nosotros, como las marcas Chery Automobile, Ruotai Chaowan y FMCG. Nos dieron sus demandas y trabajamos juntos. muchos datos privatizados.
Debe saber que en circunstancias normales, las empresas no compartirán fácilmente estos datos, pero ahora están dispuestos a proporcionarlos, pero también les preocupa que si no participan en esta ola, serán eliminados.
Aunque hay ansiedad, es más un sentimiento de progreso en la ansiedad, que es un sentimiento de emprendedores.
Lin Laini de Huayuan : Permítanme hablar sobre mis sentimientos desde el campo de sapiens.
Digital Sapiens se ha actualizado desde el servicio de atención al cliente de texto anterior al servicio de atención al cliente de voz, y luego al ciclo de desarrollo del sistema de interacción hombre-computadora multimodal.El modo de interacción persona-computadora está en constante evolución.
La tecnología digital actual del Homo sapiens ha cubierto muchas áreas de habilidad, como responder preguntas, escribir artículos, resumir textos, traducir idiomas y generar códigos, e incluso tratar con más temas de nicho; estas capacidades de interacción multimodal En muchos escenarios comerciales, Sapient básicamente ha logrado "oír con claridad, comprensión y expresividad", y se está volviendo cada vez más popular en las finanzas, el turismo cultural, los medios de comunicación, los servicios públicos, la atención médica, el comercio minorista, el entretenimiento, los hogares inteligentes, etc. La comercialización de la industria ha aterrizado , proporcionando agentes de servicio al cliente, asesores financieros, anfitriones de transmisión, guías turísticos, ídolos virtuales, cantantes virtuales y otros servicios artificiales auxiliares, que pueden usarse como herramientas auxiliares para empresas o individuos al completar algunas tareas repetitivas.
Además, todos sabemos que el mundo todavía tiene una gran escasez de recursos en atención médica y educación. Hay una gran demanda en estas dos áreas, pero no hay suficiente mano de obra para satisfacer la demanda. Esta es precisamente una de las principales aplicaciones de Sapiens. e incluso inteligencia artificial en el futuro.
Por ejemplo, es muy difícil para la gente común en muchos países en desarrollo buscar tratamiento médico debido a su lejanía y falta de recursos médicos primarios.
Por ejemplo, establecer algunos asistentes médicos profesionales para ayudar a los médicos a completar el trabajo básico de pre-examen y clasificación, y proporcionar a los pacientes sugerencias sobre si necesitan más tratamiento y precauciones relacionadas, a fin de mejorar la eficiencia del trabajo médico y los niveles de servicio; en educación En el campo de la educación habilitada por IA, se pueden proporcionar programas de aprendizaje personalizados de acuerdo con las características de los diferentes estudiantes, cultivar el interés de los estudiantes por aprender, mejorar la calidad de la educación, etc.
Por lo tanto, el surgimiento de Sapiens es tanto un desafío como una oportunidad. Necesitamos mantener una visión aguda y un pensamiento prospectivo, y lidiar activamente con su impacto positivo o negativo.
¿Cómo reflejar la innovación de China AIGC?
Qubit Jin Lei : La segunda palabra clave a discutir es la homogeneidad y la innovación del modelo.
Desde el punto de vista actual, parece haber una tendencia a la homogeneidad tanto en la jugabilidad de la aplicación AIGC como en el modelo de algoritmo que la sustenta. Por tanto, ¿cómo debe reflejarse la originalidad del AIGC chino?
Yuanyu Intelligence Zhu Lei : Esta pregunta es muy buena y hemos estado pensando en ella.
Se puede observar que la mayor parte de la investigación básica, especialmente el modelo algorítmico, nació primero en el extranjero. Al observar los modelos actuales a gran escala en China, ya sea una gran fábrica, una institución de investigación o una empresa nueva, el vínculo de investigación básica es muy débil. Por lo tanto, en términos de investigación básica o exploración original, el país todavía tiene un largo camino por recorrer para ponerse al día.
Pero esto no quiere decir que el modelo a gran escala de desarrollo propio doméstico actual no tenga valor, por el contrario, es muy imperativo.
En primer lugar, esto puede promover la construcción ecológica de conjuntos de datos y modelos de código abierto.
Por ejemplo, en términos de combinar el corpus chino, la calidad del corpus general no es lo suficientemente buena, también hay una atmósfera relativamente pobre en términos de código abierto.Hasta donde sabemos, hay muchos conjuntos de datos de código abierto en la industria médica. en el extranjero, pero en el país solo conocemos 2. Datos de fuente abierta La calidad del conjunto tampoco es buena.
Por lo tanto, más personas deberían hacer esto. Esta es también la dirección y el concepto que nuestro equipo central de Yuanyu Intelligence defendía cuando lanzamos la comunidad de código abierto de referencia de evaluación del modelo de idioma chino en 2019.
En segundo lugar, el énfasis nacional en la infraestructura de IA a gran escala ha alcanzado un nivel muy alto. En este momento, la atracción de talentos, incluidos muchos forasteros, están dispuestos a unirse a esta ola.Desde una perspectiva a largo plazo, este asunto es muy valioso para la infraestructura de IA nacional.
El trabajo de innovación de los modelos domésticos a gran escala lo realizan tanto los principales fabricantes como las empresas emergentes, y cada empresa tiene diferentes puntos de entrada.
Por ejemplo, los hay especializados relacionados con el asesoramiento psicológico, como la inteligencia metalingüística, que se basa en el modelo general grande y hace un modelo profesional de nivel superior. Concéntrese en una o dos industrias y resuelva problemas específicos de los clientes.
Para las nuevas empresas nacionales, la innovación se refleja principalmente en si tienen una comprensión suficiente y profunda de la industria, y si pueden ejecutar rápidamente datos y escenarios en la industria. Esto requiere que las empresas emergentes realicen ciertas innovaciones a nivel de los datos subyacentes del modelo y el ajuste fino de las instrucciones.
Amor sin límites por miles de kilómetros : no hay conflicto entre la innovación de productos y la adopción de la ecología de difusión estable. SD solo está ayudando a construir un prototipo de 0 a 1, pero aún necesita innovar de 1 a 100 en términos de datos subyacentes, algoritmos de nivel medio y aplicaciones de nivel superior. Cómo hacer esta diferencia es algo en lo que todo emprendedor debe pensar.
Por ejemplo, ahora estamos desarrollando el modelo de estilo nacional. En primer lugar, la capa inferior del modelo debe tener una gran cantidad de datos de estilo nacional, como caras chinas, ojos, Hanfu y otros materiales. Tomando Hanfu como ejemplo, incluso podemos distinguir específica y finamente las diferencias entre diferentes períodos, diferentes estilos étnicos y las faldas izquierda y derecha de Hanfu.Los significados de los diferentes representantes son muy diferentes, y los detalles son fantasmas y dioses.Para aquellos que prestan atención a la estilo nacional, los detalles son muy importantes. Quien entrene este tipo de modelo de escena con detalles ricos podrá tener la diferenciación subyacente.
Los datos de entrenamiento no son de una sola vez, sino en tiempo real y autoiterables. Todos los días, 2 millones de usuarios en nuestra plataforma crean cerca de 2,2 millones de imágenes, y muchas imágenes se compartirán en nuestro "cuadrado". Obtenga mejoras en tiempo real, para que la diferenciación se refleje aún más. Es por eso que utilizamos el Stable Diffusion de código abierto, pero el funcionamiento de la plataforma es muy diferente al contenido en el mercado.La capacitación de datos autoiterativos en tiempo real se ha convertido en un punto innovador.
Por supuesto, además de los datos subyacentes, también hay muchos puntos innovadores en el método de entrenamiento, como la integración de funciones GPT. No entraré en detalles sobre estas funciones. Le invitamos a experimentarlo directamente con Unbounded AI.
Lin Laini de Huayuan : Sapiens, como una de las aplicaciones de la tecnología de IA generativa, incluye varios niveles de contenido. Al igual que cuando evaluamos a un actor, partiremos de la "mesa de sonido". Además de las partes externas como la apariencia y la voz, los comportamientos, las expresiones de texto, las expresiones de voz, los métodos de interacción e incluso la personalidad de Sapiens están todos dentro del alcance de la generación.
El Sr. Ma solo respondió la pregunta en términos de apariencia, tipo y estilo de Sapiens. Haré algunos complementos a partir de la generación de contenidos de Sapiens. Según el cálculo de Huayuan, hay tres niveles de sapiens: el primer nivel es la capacidad de hablar y moverse, el segundo nivel es el sentimiento real y el tercer nivel es la capacidad de pensar y pensar.
Entre ellos, el primer nivel está relacionado con la generación de audio y video en tecnología AIGC, el segundo nivel está relacionado con la generación de texto y la generación multimodal, y el último nivel es que el robot puede tener su propio pensamiento.Después de un aprendizaje independiente continuo , implica la generación de estrategias, etc. Para lograr el tercer nivel de Sapiens, agregamos el sentido común social en el "mapa de conocimiento de sentido común" al marco de interacción de diálogo para realizar el sistema emocional de Sapiens; al establecer un mapa de conocimiento probabilístico de comportamiento, el mapa cubre más de 5000 Diferentes comportamientos dan cuenta de la interacción personalizada de Sapiens.
Por lo tanto, los Sapiens resultantes pueden tener voces y apariencias similares, pero la combinación de sus movimientos corporales, contenido interactivo y personalidades diferenciadas es suficiente para permitir que los Sapiens tengan sus propias emociones y personalidades, con una originalidad única. Por supuesto, en la actualidad, Huayuan aún necesita una investigación continua y profunda en el campo de la inteligencia cognitiva para lograr este tipo de Sapiens con capacidades de interacción multimodal y personalidad y emociones propias.
Chen Shi de Fengrui Capital : En términos de tendencias, no solo a nivel nacional, sino también en el extranjero, tienen una gran cantidad de seguimientos homogéneos. Según las estadísticas, en 2022, se lanzará un modelo a gran escala en un promedio de cuatro días y habrá más de 90 modelos a gran escala, principalmente en los Estados Unidos.
El avance central de esta ronda de IA generativa todavía se encuentra en el nivel de algoritmo y el nivel de paradigma de entrenamiento de modelos.
En términos de algoritmos, todo el mundo acaba de mencionar Transformer y Diffusion Model, que son los modelos principales actuales, por lo que muchos modelos ahora los usan como arquitectura subyacente para iterar y cambiar.
Desde el punto de vista de la popularidad, no creo que esto sea un boom o una burbuja a corto plazo, creo que tendrá un largo período de progreso y generará un gran valor social y comercial. Algunas personas en la industria dicen que un modelo de lenguaje grande es una interfaz hombre-máquina o una nueva forma de sistema operativo.
En primer lugar, el modelo de lenguaje se ha convertido en la primera interfaz de la interfaz humano-computadora. En el pasado, las personas solo podían hacer elecciones limitadas a través de menús y gráficos, pero de hecho, el lenguaje es la opción más natural y flexible para la interfaz humano-computadora. interacción.
Además, desde la perspectiva del sistema operativo, debido a que los modelos de lenguaje como GPT ya tienen cierta inteligencia general, es un poco como un cerebro o un centro de distribución, que puede interactuar con humanos, recibir, desensamblar y distribuir tareas a varios aplicaciones externas de complemento para obtener resultados y luego retroalimentar a los humanos, por lo que se puede considerar que también tiene las características de un sistema operativo.
La industria del software también está cambiando en el futuro, y creo que la dirección es un ecosistema de aplicaciones centrado en el modelo de lenguaje. Además de que la IA empodera y mejora la eficiencia de la industria para generar valor comercial, los humanos también pueden aprender de la IA para mejorar continuamente sus propias capacidades de aprendizaje.
Por ejemplo, es muy doloroso para los seres humanos aprender idiomas. Por ejemplo, el efecto de aprender idiomas extranjeros durante más de diez años puede no ser muy bueno, pero la eficiencia del aprendizaje automático de idiomas es muy alta. Si podemos abrir parcialmente la estructura interna de la IA y encontrar algunas de las leyes. Quizás los humanos también puedan usar esto para mejorar y progresar junto con las máquinas, y estas cosas tienen un gran valor social.
Por lo tanto, no creo que el auge de AIGC sea a corto plazo, tiene un valor social y comercial a largo plazo.
¿Puede un modelo grande confiar solo en la "fuerza para hacer milagros"?
Qubit Jin Lei : En cuanto a la escala de parámetros del modelo grande, hay otro tema a discutir, que se llama "fortalecimiento de milagros". Dalí seguramente producirá un milagro? Primero me gustaría preguntarle al Sr. Ma, ¿cree que el método de producir milagros vigorosamente debe ser el único camino para AIGC?
Amor ilimitado por miles de millas : si AIGC puede realizar un milagro, no importa si es fuerte o qué tipo de fuerza, será algo bueno.
En algunos contextos, "fortalecer los milagros" parece algo malo, como una opción de último recurso, pero no es necesariamente algo malo.
Una vez leí un blog llamado "Lecciones amargas", que fue escrito por Richard Sutton, el padre del aprendizaje por refuerzo. Él creía que los seres humanos siempre intervienen en la máquina, le enseñan a jugar Go y le permiten aprender los registros de ajedrez humanos. pero, de hecho, el método más efectivo sigue siendo el autoaprendizaje, el aprendizaje no supervisado.
En cierta medida, demasiada intervención humana limitará su rendimiento. Entonces, en esencia, aunque necesitamos mucho poder de cómputo y seguimiento en el algoritmo, no necesitamos intervenir con tanta fuerza, de lo contrario, el efecto puede ser completamente diferente.
Chen Shi de Fengrui Capital : Es inevitable hacer grandes esfuerzos para producir milagros, porque el avance en esta etapa se logra mediante el aprendizaje sin supervisión.
El aprendizaje no supervisado, especialmente el aprendizaje no supervisado a gran escala, ha sido el santo grial del aprendizaje automático hasta ahora, y nadie ha logrado nunca este santo grial. Ahora que OpenAI lo ha eliminado, creo que esto es algo que se ha verificado en este momento, y también es una tendencia, por lo que se estima que todos seguirán haciendo esto, si no hay un gran avance en el algoritmo y la capacitación. La tecnología, creo que el gran modelo todavía no es suficiente. Esta es la única forma de entrenar.
Para las empresas emergentes, si están trabajando en la capa de aplicación, no necesitan entrenar el modelo por sí mismas, sino ajustar sobre la base del modelo grande. Entonces, creo que la mayoría de las oportunidades para las nuevas empresas de AIGC aún pueden estar en la capa de aplicación o en la dirección de algunos modelos verticales.
En cuanto al modelo grande en sí, creo que en el futuro puede que no haya demasiadas empresas en China, o incluso demasiadas empresas en el mundo. Pero los modelos verticales todavía tienen algunas oportunidades.
Cómo ver la versión china de OpenAI
Qubit Jin Lei : La siguiente palabra clave se llama "Versión china de OpenAI". En esta ola de auge, muchos peces gordos del país se han retirado para hacer planes y difundir ampliamente las publicaciones de héroes de IA, diciendo que quieren construir una versión china de OpenAI.
Entonces, a juzgar por el entorno actual de China, ¿es necesario construir una "versión china de OpenAI"? ¿Es factible?
Huayuan Lin Laini : Tengo plena confianza en el surgimiento de empresas como OpenAI en nuestro país que han desarrollado tecnologías o aplicaciones innovadoras que marcan época basadas en la investigación de algoritmos subyacentes, especialmente cuando vi en escena a muchos jóvenes emprendedores de la Generación Z. Espíritu, pero también sentimientos y sentido de la responsabilidad.
Pero convertirse en una empresa como OpenAI no significa crear una versión china de OpenAI . No necesitamos repetir el camino de otros. En el campo de la inteligencia artificial, la "innovación" es muy importante. Aunque OpenAI ha creado una plataforma subyacente para modelos grandes multimodales, lo que nos ha abierto la puerta a la aplicación de la tecnología de IA generativa, pero desde la perspectiva de los escenarios de aplicación del mundo real, los modelos grandes multimodales no son "uno- Disparo, come todo el "cielo".
Por ejemplo, de los 117 millones de GPT a los 175 mil millones de GPT-3, la cantidad de parámetros de modelos grandes ha aumentado casi 1500 veces en los últimos años, y la cantidad de parámetros de Switch Transformer de Google ha llegado a 1,6 billones. muchas empresas e incluso industrias no pueden proporcionar.
Por lo tanto, cómo mejorar la robustez del algoritmo, mejorar el efecto del modelo y lograr la capacitación en nuevos campos con una pequeña cantidad de datos a través del aprendizaje de muestras pequeñas y el aprendizaje multimodal son todavía cuestiones que la IA debe considerar.
En la actualidad, ya hay muchas empresas de inteligencia artificial en mi país que han expuesto las esquinas afiladas de Xiaohe y están prosperando, aunque todavía hay una brecha con las principales empresas de inteligencia artificial del mundo como OpenAI debido a la experiencia insuficiente en poder de cómputo o algoritmos. Pero creo firmemente que en un futuro cercano veremos nuestra propia IA representando a las empresas y sus tecnologías innovadoras.
Yuanyu Smart Zhu Lei : Creo que esta afirmación está un poco sobregeneralizada. Los llamados "diez años de afilar una espada" de OpenAI se deben a que originalmente se estableció como una organización sin fines de lucro. Recientemente, ha cooperado con Microsoft, y todo ha entrado en un estado de código cerrado, y también hay algunos modelos comerciales.
Pero, de hecho, muchas empresas extranjeras están realizando investigaciones técnicas destinadas a la comercialización, y hay muchas investigaciones técnicas no destinadas a la comercialización en China, como universidades, institutos de investigación o algunas comunidades de código abierto, etc. Hay una gran cantidad de desarrolladores. Los desarrolladores y las organizaciones están haciendo estas cosas con el propósito de código abierto.
Es solo que en el entorno doméstico actual, las personas generalmente solo prestan atención a algunos proyectos con un aura comercial, pero las personas prestan menos atención a aquellos proyectos no comerciales.
De hecho, incluidos los inversionistas como el Sr. Chen Shi o los medios como qubits, es posible que todos realmente quieran hacer una cosa, que es promover el desarrollo de conjuntos de datos de fuente abierta nacionales y modelos de fuente abierta. Esto puede convertirse en el futuro. de
Creo que no hay una diferencia esencial entre los países nacionales y extranjeros en este asunto.Todo el mundo tiene algunas empresas que consideran la comercialización y organizaciones que apuntan al código abierto.
Expectativas de nuevas oportunidades para AIGC en China
Qubit Jin Lei : La última palabra clave es el tema del foro de mesa redonda "Nuevas oportunidades para AIGC en China". Hablemos de nuestras expectativas en una frase breve.
Lin Laini de Huayuan : Hablando de esta expectativa, descubrimos que las empresas de Internet pueden no ser muy amigables con las personas mayores de 35 años, por lo que también estamos pensando en una pregunta, ¿la IA realmente creará una ola de desempleo? Entonces creo que no. También soy una persona de mediana edad mayor de 35 años, y hablaré sobre mis sentimientos aquí.
Me gusta mucho un eslogan publicitario, que es "Nunca te rindas, corre hacia el futuro". Aunque tengamos más de 35 años, también podemos usar algunos mecanismos para transformarnos como Transformer, nunca te rindas y corre hacia el futuro, usa Una actitud positiva y valiente enfrenta las oportunidades y desafíos del futuro.
IA sin límites Ma Qianli : Creo que puede ser más complicado. Mire las noticias recientes de que miles de científicos, incluido Musk, creen que AIGC y los modelos grandes de IA son algo peligroso.
Creo que la oportunidad interna radica en que incluso si hay una brecha entre usted y los países extranjeros, incluso si hay una brecha de varias veces, es suficiente para los seres humanos, al igual que la Unión Soviética y los Estados Unidos durante la guerra. todos dijeron cuántas veces podrían destruir la tierra, pero en realidad es suficiente para destruir una vez. Tal vez la capacidad del AIGC sea tan fuerte que no importa qué porcentaje de diferencia haya entre los dos modelos, siempre y cuando sea suficiente para los seres humanos. Esta es una visión a largo plazo.
Entonces, aunque nuestros grandes modelos actuales pueden no ser tan fuertes como los extranjeros, lógicamente hablando, aún podemos ponernos al día.
Chen Shi de Fengrui Capital : Esta oportunidad es en realidad una oportunidad para toda la humanidad, y China también tiene una gran oportunidad. En la actualidad, ya sea OpenAI, Google u otras grandes empresas extranjeras, muchos de nuestros ingenieros chinos están profundamente involucrados en este proceso de investigación y desarrollo. Creo que China tiene la oportunidad de hacer un modelo básico a gran escala, especialmente un modelo de lenguaje a gran escala, que se puede hacer. ¿por qué?
En el nivel del algoritmo, este es en realidad un logro de investigación científica común para todos. Desde el proceso de preentrenamiento de GPT-3 hasta el proceso de aprendizaje por refuerzo basado en la retroalimentación humana que usa ChatGPT, existen documentos relacionados que detallan el algoritmo y la lógica de implementación. , la mayoría de los datos de entrenamiento también están abiertos. Aunque los detalles de OpenAI pueden no estar claros, de hecho, lo más difícil que queda puede ser algún trabajo de implementación de ingeniería específico. Creo que nuestros ingenieros chinos no tienen miedo de la implementación de proyectos específicos.
En términos de poder de cómputo, creo que este asunto debe hacerse lentamente, tratar de pensar en algunos métodos alternativos, para tener nuestro propio poder de cómputo u obtener algo de poder de cómputo a través de otros métodos.
En términos de datos, creo que podemos hacerlo, debido al conjunto de datos, ahora son 450 mil millones de tokens (alrededor de 0,7 palabras cada uno), y los datos de este volumen son relativamente hablando. Después de nuestros esfuerzos, debería haber algunas formas para recopilarlos y organizarlos.
Creo que con la inteligencia del pueblo chino, se puede romper el modelo básico. Por supuesto, todavía puede haber una brecha para reproducir el nivel de GPT-4 hoy, pero es solo cuestión de tiempo. Nuestra ecología de aplicaciones definitivamente prosperará en base a estos modelos nacionales y extranjeros.
De hecho, incluidos WeChat, DingTalk u otros ecosistemas de aplicaciones móviles del año, hemos demostrado repetidamente que China es muy poderosa en aplicaciones de software, por lo que creo que esta es una nueva oportunidad para China.
Zhu Lei de Yuanyu Intelligence : Estoy muy de acuerdo con el Sr. Chen Shi. Aunque todavía hay un desfase técnico respecto a GPT-4, sí que es cuestión de tiempo, porque desde una perspectiva global, salvo Silicon Valley, es el boom doméstico.
Se dice que la gran ola de AIGC en China es el momento del "iPhone", pero creo que es más como el primer momento de Internet para PC. Cuando la conciencia de todos sobre la IA no es tan fuerte, de repente aparecen una gran oportunidad y oportunidades. En este momento, creo que para todos en nuestro escenario y la audiencia en la audiencia, incluida la audiencia de la transmisión en vivo, todos los ámbitos de la vida, es una gran oportunidad.
Pero al mismo tiempo que las oportunidades, esto también es un desafío, por lo que la última oración es que adoptemos la IA.
Qubit Jin Lei : Muchas gracias por su maravilloso resumen y por compartir. Debido a limitaciones de tiempo, esta mesa redonda termina aquí. Revelaremos las respuestas a las nuevas oportunidades que los invitados esperaban y esperan, y cómo se desarrollarán en el futuro.