** Notícias em 3 de junho, o Titanium Media App soube recentemente exclusivamente da Huawei que a Huawei lançará um modelo multimodal de 100 bilhões de níveis em grande escala chamado "Pangu Chat" que corresponde diretamente ao ChatGPT. **
**Espera-se que o Huawei Pangu Chat seja lançado e testado internamente na Huawei Cloud Developer Conference (HDC.Cloud 2023) realizada em 7 de julho deste ano. O produto é principalmente para clientes corporativos e governamentais To B/G. **
Isso significa que na corrida armamentista doméstica de modelos em grande escala, depois de Ali e Baidu, outro importante gigante da tecnologia entrou no jogo. Com base nas capacidades técnicas da Huawei, espera-se que o Pangu Chat se torne o produto ChatGPT com as capacidades técnicas mais fortes na China, e as empresas da cadeia industrial ecológica da Huawei também se beneficiarão disso.
**É relatado que **Pangu Large Model foi estabelecido com sucesso na Huawei Cloud em novembro de 2020. Em relação ao posicionamento do grande modelo Pangu, a equipe interna da Huawei estabeleceu três princípios principais de design: primeiro, o modelo deve ser grande o suficiente para absorver grandes quantidades de dados; a capacidade de generalização pode ser realmente aplicada a cenários de trabalho em todas as esferas da vida.
Em abril de 2021, o modelo grande de Pangu foi oficialmente lançado ao público. Entre eles, o modelo grande Pangu NLP é o primeiro modelo grande pré-treinamento chinês com 100 bilhões de parâmetros, e o modelo grande CV atingiu 3 bilhões de parâmetros pela primeira vez. Em abril de 2022, a Huawei Pangu atualizou para 2.0, lançou um plano de desenvolvimento hierárquico (LO, L1, L2) e construiu um modelo Pangu de nível industrial.
De acordo com a apresentação de informações PPT dos executivos da Huawei Cloud, atualmente, a camada básica do "modelo grande AI da série Pangu" da Huawei inclui principalmente modelo grande NLP, modelo grande CV e modelo grande de computação científica, etc., e a camada superior é Grande modelo da indústria da Huawei desenvolvido com parceiros.
Tian Qi, cientista-chefe no campo de inteligência artificial da Huawei Cloud, disse em abril deste ano que, em 2022, a Huawei acaba de entregar um modelo grande de 100 bilhões de parâmetros em árabe, abrangendo áreas como recuperação inteligente de documentos, ERP inteligente, e modelos de grande escala em linguagem pequena cobertos pelo modelo de grande escala Pangu NLP. Em termos de aplicação, o modelo Pangu pode ser aplicado em muitos campos, como atendimento inteligente ao cliente, tradução automática, reconhecimento de fala, etc., fornecendo suporte técnico de IA.
No ano passado, a Huawei aplicou o modelo grande Pangu no campo da indústria vertical. Um exemplo é que, com base no grande modelo Pangu AI, a Huawei construiu o primeiro "centro de treinamento de inteligência artificial baseado em um grande modelo" no campo de minas para realizar o desenvolvimento "industrializado" de aplicativos de Al, o que não apenas reduz custos - 80 % a mais do que a verificação manual, o custo por tonelada é reduzido em 8 yuans (a capacidade de produção anual é de 2,6 milhões de toneladas) e o benefício é aumentado - a pressão antichoque é 80%+ menor que a da verificação manual e a eficiência é melhorado - a eficiência dos clientes inteligentes é aumentada em 30%.
Em comparação com outros fabricantes, a vantagem da Huawei pode estar em sua cadeia industrial completa e fortes recursos de implantação de poder de computação. De acordo com a divulgação anterior da Zheshang Securities, quando ** estava treinando o grande modelo Pangu com 100 bilhões de parâmetros, a equipe da Huawei usou mais de 2.000 chips Shengteng 910 por mais de 2 meses de recursos de treinamento de dados. De acordo com a Huawei, mais de 4.000 placas GPU/TPU são usadas para treinamento de modelos em grande escala todos os anos, e o custo de poder de computação de modelos em grande escala em três anos chega a 960 milhões de yuans. **
De acordo com o relatório de pesquisa divulgado pela Soochow Securities em 27 de março, a vantagem do grande modelo Pangu da Huawei está em sua reserva de talentos e poder de computação controlável independente, e espera-se que se torne o modelo grande líder na China. Espera-se que dê início a um desenvolvimento acelerado, incluindo Tuowei Information, Sichuan Changhong, Kylin Software (China Software), Tongxin Software (ArcherMind Technology), Kylin Principal e outras empresas ecológicas da Huawei. A Guosheng Securities acredita que a Huawei Pangu é o primeiro modelo de grande escala multimodal de 100 bilhões de níveis, que deve capacitar todas as indústrias.
De acordo com os dados divulgados pela Huawei, os parâmetros do grande modelo Pangu-Σ da Huawei são de no máximo 1,085 trilhão, que é desenvolvido com base na estrutura MindSpore autodesenvolvida da Huawei. ** No geral, o modelo PanGu-Σ grande pode estar próximo do nível de GPT-3.5 em termos de diálogo. **
Vale a pena notar que, como o modelo Pangu possui parâmetros muito grandes, o custo de treinamento é relativamente alto. Embora o modelo Pangu tenha alta precisão e qualidade no processamento da língua chinesa, ele ainda apresenta certas limitações na compreensão semântica, especialmente ao lidar com estruturas complexas de linguagem e raciocínio semântico. Ao mesmo tempo, o modelo grande do Pangu Chat também enfrentará uma concorrência acirrada no setor e precisa otimizar e melhorar continuamente o desempenho e a qualidade do modelo para manter sua posição de liderança no mercado. (Este artigo é o primeiro lançamento do Titanium Media App, autor｜Lin Zhijia)
Ver original
O conteúdo é apenas para referência, não uma solicitação ou oferta. Nenhum aconselhamento fiscal, de investimento ou jurídico é fornecido. Consulte a isenção de responsabilidade para obter mais informações sobre riscos.
A versão do ChatGPT da Huawei será lançada no início de julho, chamada "Pangu Chat"
Fonte: Titanium Media
Autor: Lin Zhijia
** Notícias em 3 de junho, o Titanium Media App soube recentemente exclusivamente da Huawei que a Huawei lançará um modelo multimodal de 100 bilhões de níveis em grande escala chamado "Pangu Chat" que corresponde diretamente ao ChatGPT. **
**Espera-se que o Huawei Pangu Chat seja lançado e testado internamente na Huawei Cloud Developer Conference (HDC.Cloud 2023) realizada em 7 de julho deste ano. O produto é principalmente para clientes corporativos e governamentais To B/G. **
Isso significa que na corrida armamentista doméstica de modelos em grande escala, depois de Ali e Baidu, outro importante gigante da tecnologia entrou no jogo. Com base nas capacidades técnicas da Huawei, espera-se que o Pangu Chat se torne o produto ChatGPT com as capacidades técnicas mais fortes na China, e as empresas da cadeia industrial ecológica da Huawei também se beneficiarão disso.
**É relatado que **Pangu Large Model foi estabelecido com sucesso na Huawei Cloud em novembro de 2020. Em relação ao posicionamento do grande modelo Pangu, a equipe interna da Huawei estabeleceu três princípios principais de design: primeiro, o modelo deve ser grande o suficiente para absorver grandes quantidades de dados; a capacidade de generalização pode ser realmente aplicada a cenários de trabalho em todas as esferas da vida.
Em abril de 2021, o modelo grande de Pangu foi oficialmente lançado ao público. Entre eles, o modelo grande Pangu NLP é o primeiro modelo grande pré-treinamento chinês com 100 bilhões de parâmetros, e o modelo grande CV atingiu 3 bilhões de parâmetros pela primeira vez. Em abril de 2022, a Huawei Pangu atualizou para 2.0, lançou um plano de desenvolvimento hierárquico (LO, L1, L2) e construiu um modelo Pangu de nível industrial.
De acordo com a apresentação de informações PPT dos executivos da Huawei Cloud, atualmente, a camada básica do "modelo grande AI da série Pangu" da Huawei inclui principalmente modelo grande NLP, modelo grande CV e modelo grande de computação científica, etc., e a camada superior é Grande modelo da indústria da Huawei desenvolvido com parceiros.
Tian Qi, cientista-chefe no campo de inteligência artificial da Huawei Cloud, disse em abril deste ano que, em 2022, a Huawei acaba de entregar um modelo grande de 100 bilhões de parâmetros em árabe, abrangendo áreas como recuperação inteligente de documentos, ERP inteligente, e modelos de grande escala em linguagem pequena cobertos pelo modelo de grande escala Pangu NLP. Em termos de aplicação, o modelo Pangu pode ser aplicado em muitos campos, como atendimento inteligente ao cliente, tradução automática, reconhecimento de fala, etc., fornecendo suporte técnico de IA.
No ano passado, a Huawei aplicou o modelo grande Pangu no campo da indústria vertical. Um exemplo é que, com base no grande modelo Pangu AI, a Huawei construiu o primeiro "centro de treinamento de inteligência artificial baseado em um grande modelo" no campo de minas para realizar o desenvolvimento "industrializado" de aplicativos de Al, o que não apenas reduz custos - 80 % a mais do que a verificação manual, o custo por tonelada é reduzido em 8 yuans (a capacidade de produção anual é de 2,6 milhões de toneladas) e o benefício é aumentado - a pressão antichoque é 80%+ menor que a da verificação manual e a eficiência é melhorado - a eficiência dos clientes inteligentes é aumentada em 30%.
Em comparação com outros fabricantes, a vantagem da Huawei pode estar em sua cadeia industrial completa e fortes recursos de implantação de poder de computação. De acordo com a divulgação anterior da Zheshang Securities, quando ** estava treinando o grande modelo Pangu com 100 bilhões de parâmetros, a equipe da Huawei usou mais de 2.000 chips Shengteng 910 por mais de 2 meses de recursos de treinamento de dados. De acordo com a Huawei, mais de 4.000 placas GPU/TPU são usadas para treinamento de modelos em grande escala todos os anos, e o custo de poder de computação de modelos em grande escala em três anos chega a 960 milhões de yuans. **
De acordo com o relatório de pesquisa divulgado pela Soochow Securities em 27 de março, a vantagem do grande modelo Pangu da Huawei está em sua reserva de talentos e poder de computação controlável independente, e espera-se que se torne o modelo grande líder na China. Espera-se que dê início a um desenvolvimento acelerado, incluindo Tuowei Information, Sichuan Changhong, Kylin Software (China Software), Tongxin Software (ArcherMind Technology), Kylin Principal e outras empresas ecológicas da Huawei. A Guosheng Securities acredita que a Huawei Pangu é o primeiro modelo de grande escala multimodal de 100 bilhões de níveis, que deve capacitar todas as indústrias.
De acordo com os dados divulgados pela Huawei, os parâmetros do grande modelo Pangu-Σ da Huawei são de no máximo 1,085 trilhão, que é desenvolvido com base na estrutura MindSpore autodesenvolvida da Huawei. ** No geral, o modelo PanGu-Σ grande pode estar próximo do nível de GPT-3.5 em termos de diálogo. **
Vale a pena notar que, como o modelo Pangu possui parâmetros muito grandes, o custo de treinamento é relativamente alto. Embora o modelo Pangu tenha alta precisão e qualidade no processamento da língua chinesa, ele ainda apresenta certas limitações na compreensão semântica, especialmente ao lidar com estruturas complexas de linguagem e raciocínio semântico. Ao mesmo tempo, o modelo grande do Pangu Chat também enfrentará uma concorrência acirrada no setor e precisa otimizar e melhorar continuamente o desempenho e a qualidade do modelo para manter sua posição de liderança no mercado. (Este artigo é o primeiro lançamento do Titanium Media App, autor｜Lin Zhijia)