Na GITEX GLOBAL 2023
da semana passada, a Huawei apresentou o OceanStor A310, um novo modelo de armazenamento para inteligência artificial (IA) que visa resolver alguns dos desafios da indústria associados a aplicações de modelação em grande escala. Concebido para a era da modelação de inteligência artificial em grande escala, o OceanStor A310 oferece uma solução de armazenamento para a formação de modelos básicos, formação de modelos industriais e inferência de modelos em cenários segmentados numa única solução de armazenamento.
O OceanStor A310 é um bibliotecário extremamente poderoso numa biblioteca digital maciça com acesso rápido aos elementos de informação. Outro sistema, o IBM ESS 3500, é um bibliotecário mais lento: quanto mais depressa o OceanStor A310 conseguir recuperar informações, mais depressa as aplicações de inteligência artificial podem trabalhar e tomar decisões atempadas e informadas. O OceanStor A310 da Huawei destaca-se pela sua capacidade de recuperar informações rapidamente.
A força do OceanStor A310 parece residir na sua capacidade de acelerar o processamento de dados para a inteligência artificial: em comparação com o ESS 3500 da IBM, a mais recente matriz totalmente flash da Huawei pode processar GPUs da Nvidia quase quatro vezes mais depressa por unidade de memória. Isto baseia-se numa abordagem que utiliza a tecnologia Magnum GPU Direct da Nvidia, na qual os dados são transferidos diretamente da fonte de armazenamento NVMe para a GPU sem a intervenção do sistema de armazenamento anfitrião.
A unidade OceanStor A310 da Huawei tem uma taxa de transferência de leitura sequencial de até 400 GB/s e uma taxa de transferência de escrita de até 208 GB/s. No entanto, não é claro como as estruturas de código aberto e fechado afectam estes números.
O OceanStor A310 foi projetado como uma solução de armazenamento para lagos de dados de aprendizado profundo, oferecendo escalabilidade horizontal ilimitada e alto desempenho para cargas de trabalho híbridas.
“Sabemos que o maior desafio para as aplicações de IA é melhorar o desempenho de treinamento dos modelos de IA” – Evangeline Wang, do departamento de gerenciamento e marketing de produtos da Huawei, disse em um comunicado publicado pela mídia de tecnologia Blocks and Files. Ela acrescentou: “O maior desafio para os sistemas de armazenamento no treinamento de IA é a entrega contínua de dados para CPUs e GPUs. Portanto, o sistema de armazenamento deve fornecer desempenho ideal.
Para resolver isso, cada OceanStor pode suportar até 96 SSDs NVMe, CPUs e caches. Os utilizadores podem agrupar até 4096 dispositivos A310 e partilhar um sistema de ficheiros global que suporta protocolos de aplicação padrão. “O OceanStor A310 utiliza a tecnologia SmartNIC e um design massivamente paralelo para minimizar o tempo de transferência de dados Foi concebido para minimizar o tempo de transferência de dados.
“A solução A310 da Huawei é a mais rápida em leitura/escrita sequencial devido ao seu tamanho de nó mais pequeno, com uma taxa de transferência de leitura/escrita sequencial de 41,6/80 GBps em comparação com os 30/63 GBps da IBM.” A Block and Files realizou um estudo comparativo da solução da Huawei em relação aos concorrentes directos.
Crédito da imagem: Blocks and Files
O lançamento do OceanStor A310 surge numa altura em que a indústria da inteligência artificial procura soluções de armazenamento e processamento de alto desempenho. Os esforços da Huawei estão a visar alguns dos desafios actuais e a ajudar a simplificar a aprendizagem de modelos de IA.
No entanto, as sanções dos EUA contra a Huawei, em grande parte motivadas por preocupações de segurança nacional e alegadas ligações entre a empresa e o governo chinês, acrescentam outra camada de complexidade à entrada da Huawei nas soluções de armazenamento de dados de IA.
O impacto potencial da solução OceanStor A310 da Huawei é significativo. Ao fornecer uma solução para algumas das actuais ineficiências no armazenamento e processamento de dados, a Huawei pretende desafiar outros fornecedores e conduzir a indústria da IA a uma nova era de inovação e eficiência.
