https://mp.weixin.qq.com/s/ZunCFquj73XhMBIo97gesg
By 超神经
我们就快到了「宁愿相信世上有鬼，也不相信 AI 的破嘴」的时代，人工智能又在 NLP 领域进化到了新的巅峰。IA que é melhor do que outros está aqui
Dê um começo e deixe a outra pessoa escrever a seguinte história, o que pode confundir algumas pessoas. Então, se for dado à IA, quão boas elas podem ser?
Hoje, a OpenAI anunciou um modelo de geração automática de texto que pode escrever artigos "realistas".
Dado o início artificialmente, este modelo de IA pode ser rapidamente complementado em um manuscrito completo. Quanto à legibilidade e fluência do texto, se você não contar com antecedência, pode não conseguir adivinhar que este é o trabalho da IA.
Por exemplo, dê a ele o começo: os cientistas fizeram uma descoberta chocante de que um grupo de unicórnios vive em um vale remoto e subdesenvolvido nos Andes. Ainda mais surpreendente é que esses unicórnios falam um inglês perfeito.
Os artigos gerados por este modelo de IA são os seguintes (parciais):
Essas criaturas têm chifres únicos, e os cientistas os chamaram de Unicórnio de Ovídio. A criatura branca prateada com quatro chifres não era conhecida pela comunidade científica antes.
……
Embora a origem dessas criaturas ainda não esteja clara, algumas pessoas acreditam que elas nasceram da interseção de uma pessoa e um unicórnio, quando a civilização humana não existia. O professor Pérez disse: "Na América do Sul, esse fenômeno é muito comum."
...
Se você quiser confirmar que eles são descendentes da raça em extinção, o teste de DNA pode ser o único caminho.
Além de ser capaz de escrever manuscritos falsos, ele também tem a capacidade de compreensão de leitura, perguntas e respostas, gerar resumos de artigos e traduzir textos.
Tradução: do francês para o inglês
Conjunto de dados: WMT-14 Fr-En
Frase original
Um homem explicou que a operação gratuita que ele teve para tratar uma hérnia permitiria que ele voltasse a trabalhar.
Artificial
Um homem explicou que a cirurgia de hérnia gratuita que ele fez permitirá que ele volte a trabalhar.
Tradução AI
Um homem me disse que a gratificação da operação que lhe fora prometida não permitiria que ele viajasse.
AI 模型 翻译 实例
Esta IA é um pouco forte
Este modelo de IA é denominado GPT-2 e é uma "versão atualizada" do GPT. O mais cruel é que ele usa mais dados de treinamento desta vez, que é o mesmo que o princípio da versão anterior, mas o GPT-2 é uma amplificação direta do modelo GPT. Ele treina em mais de 10 vezes a quantidade de dados. A quantidade de parâmetros também é 10 vezes maior.
Ao analisar o texto de entrada, o GPT-2 pode realizar funções básicas de processamento de texto. É bom em tarefas de modelagem de linguagem. A tarefa é permitir que o programa preveja a capacidade de dar a próxima palavra na frase. Basta dar um título e a IA pode escrever o resto do artigo perfeitamente, mesmo com citações e estatísticas falsas.
Algumas pessoas dizem assim: "Quer um conto? Basta dizer a primeira linha e você pode obter uma história inesperada e maravilhosa. Se você tiver as dicas certas, ela pode até escrever uma longa história."
O objetivo de treinar GPT-2 é simples: dadas as palavras anteriores no texto, para prever as próximas palavras e frases. A diversidade dos conjuntos de dados de treinamento permite gerar um grande número de textos em diferentes áreas.
Embora não haja um novo lugar na tecnologia, as pessoas têm treinamento de nível mineral, e é por isso que novas ferramentas de nível de monstro foram criadas.
Os pesquisadores da OpenAI disseram que o GPT-2 alcançou excelentes pontuações em testes de modelagem de linguagem em vários conjuntos de dados específicos de domínio. Como um modelo que não foi especificamente treinado em nenhum dado de campo, seu desempenho é melhor do que os modelos especialmente construídos.
A era da ascensão da PNL?
O modelo de linguagem BERT lançado pelo Google há alguns meses tem despertado grande atenção do setor, pois há um certo tempo vem atualizando a tela constantemente, e seu volume de 300 milhões de parâmetros atualizou 11 registros. Mas o GPT-2 lançado pela OpenAI desta vez é ainda mais terrível: atingiu 1,5 bilhão de parâmetros.
Comparado com os modelos de inteligência artificial mais avançados anteriores, o modelo GPT2 é “12 vezes maior, o conjunto de dados é 15 vezes maior e o escopo é mais amplo”. Foi treinado em um conjunto de dados de aproximadamente 10 milhões de artigos, selecionados por meio de links de notícias com mais de 3 votos no Reddit. Os dados de texto treinados têm até 40 GB!
Antes do banho de sangue do BERT, PNL (Processamento de Linguagem Natural) vários indicadores principais, o GTP da OpenAI estava entre os mestres de primeira classe, e o novo GPT-2 trouxe diretamente esse campo a novos patamares por meio de dados de treinamento massivos. .
Com o BERT e o GPT-2, a estrada da PNL certamente estará em alta. Quanto a como beneficiar melhor a humanidade, este ainda é um tópico prudente.
Ani Kembhavi, pesquisador do Allen Institute for Artificial Intelligence, disse que um dos motivos para estar animado com a GPT-2 é que o texto preditivo pode ser considerado uma "supertarefa" do computador. Assim que esse desafio for resolvido, a porta para a sabedoria será aberta.
Será a caixa de Pandora?
Infelizmente, uma ferramenta tão poderosa ainda não pode ser anunciada. A consideração por trás disso são os perigos ocultos que pode trazer, como a geração de notícias falsas, comentários maliciosos, spam e assim por diante. Essas armas são usadas de forma ilegal e as consequências também são catastróficas.
Por esse aspecto, os desenvolvedores também estão preocupados. Os pesquisadores da OpenAI disseram que não podem prever o que isso trará. Eles ainda estão explorando. Por diversos motivos, eles são muito cautelosos com o conteúdo compartilhado pelo projeto e, atualmente, não divulgam o código básico principal e os dados de treinamento.
Eles apontaram que outro motivo para cautela é que se alguém fornecer textos GPT-2 sobre racismo, violência, misoginia ou abuso, isso criará uma situação muito perigosa. Afinal, ele depende de treinamento na Internet.
Não há como negar que essa tecnologia trará mudanças tremendas, mas qualquer ferramenta nas mãos de malfeitores trará consequências catastróficas.
Além disso, como o texto escrito pelo GPT-2 foi gerado recentemente, não há problema de copiar e colar, e é mais difícil encontrar e solucionar problemas com métodos de detecção anteriores, o que será uma ameaça potencial.
Então, aqui vem a pergunta chave: este artigo foi escrito por AI?
