Introdução às ferramentas de desenvolvimento
Este documento descreve as funções do notebook DevEnviron da nova versão.
O desenvolvimento de software é um processo de redução dos custos do desenvolvedor e melhoria da experiência de desenvolvimento. No desenvolvimento de IA, o ModelArts dedica-se a melhorar a experiência de desenvolvimento de IA e simplificar o processo de desenvolvimento. O DevEnviron ModelArts integra a cadeia de ferramentas de desenvolvimento para fornecer uma melhor experiência de IA na nuvem para desenvolvimento, exploração e ensino de IA.
O Notebook ModelArts para colaboração perfeita na nuvem e no local
- Plug-ins de JupyterLab na nuvem, IDE local e ModelArts para desenvolvimento e depuração remotos, adaptados às suas necessidades
- Ambiente de desenvolvimento em nuvem com recursos de computação de IA, armazenamento em nuvem e mecanismos de IA integrados
- Ambiente de tempo de execução personalizado salvo como uma imagem para treinamento e inferência
Característica 1: Desenvolvimento remoto, permitindo acesso remoto ao notebook a partir de um IDE local
O notebook da nova versão fornece desenvolvimento remoto. Depois de ativar o SSH remoto, você pode acessar remotamente o ambiente de desenvolvimento do notebook ModelArts para depurar e executar código de um IDE local.
Devido a recursos locais limitados, os desenvolvedores que usam um IDE local executam e depuram o código normalmente em um servidor de CPU ou GPU compartilhado entre os membros da equipe. Construção e manutenção do servidor de CPU ou GPU é caro.
As instâncias de notebook ModelArts estão prontas para uso com vários mecanismos e sabores internos para você selecionar. Você pode usar um ambiente de contêiner dedicado. Somente após configurações simples, você pode acessar remotamente o ambiente para executar e depurar o código do IDE local.
O notebook ModelArts pode ser considerado como uma extensão de um ambiente de desenvolvimento local. As operações como leitura de dados, treinamento e salvamento de arquivos são as mesmas realizadas em um ambiente local.
O notebook ModelArts permite que você use recursos na nuvem com os hábitos de codificação locais inalterados.
Um IDE local suporta o código do Visual Studio (VS), o PyCharm e o SSH.
Característica 2: Imagens predefinidas que são prontas para uso com configurações otimizadas e suporte a mecanismos de IA convencionais
Os motores de IA e as versões pré-configuradas em cada imagem são fixos. Ao criar uma instância de notebook, especifique um mecanismo de IA e uma versão, incluindo o tipo de chip.
O ModelArts fornece um grupo de imagens predefinidas, incluindo imagens PyTorch, TensorFlow e MindSpore. Você pode usar uma imagem predefinida para iniciar a instância do bloco de anotações. Após o desenvolvimento na instância, envie um trabalho de treinamento sem qualquer adaptação.
As versões de imagem predefinidas no ModelArts são determinadas com base no feedback do usuário e na estabilidade da versão. Se o seu desenvolvimento pode ser feito usando as versões predefinidas no ModelArts por exemplo, o MindSpore 1.5, use imagens predefinidas. Essas imagens foram totalmente verificadas e têm muitos pacotes de instalação comumente usados embutidos. Eles estão fora da caixa, aliviando você de configurar o ambiente.
As imagens predefinidas nos DevEnviron ModelArts são:
- Pacotes predefinidos comuns: Mecanismos comuns de IA como PyTorch e MindSpore, pacotes comuns de análise de dados como Pandas e Numpy, e ferramentas comuns como CUDA e CUDNN, atendendo aos requisitos comuns de desenvolvimento de IA.
- Ambientes predefinidos do Conda: Um ambiente Conda e um Python Conda básico (excluindo qualquer mecanismo de IA) são criados para cada imagem predefinida. A figura a seguir mostra o ambiente Conda para o MindSpore predefinido.
Selecione um ambiente Conda com base em se o mecanismo AI é usado para depuração.
- Notebook: um aplicativo da Web que permite codificar na GUI e combinar o código, as equações matemáticas e o conteúdo visualizado em um documento.
- Plug-ins do JupyterLab: permitem mudança de variante, compartilhamento de casos na Galeria de IA para comunicação, e interrupção de instâncias para melhorar a experiência do usuário.
- Remote SSH: permite que você depure remotamente uma instância de notebook a partir de um PC local.
- Depois que as imagens predefinidas no ModelArts DevEnviron suportam o desenvolvimento, os trabalhos de treinamento podem ser executados no ModelArts.
- Para simplificar as operações, o notebook ModelArts da nova versão não suporta alternância entre mecanismos de IA em uma instância de notebook.
- Os motores de IA variam de acordo com as regiões. Para obter detalhes sobre os mecanismos de IA disponíveis em uma região, consulte os mecanismos de IA exibidos no console de gerenciamento.
Característica 3: JupyterLab, uma ferramenta interativa de desenvolvimento e depuração online
O ModelArts integra JupyterLab de código aberto para desenvolvimento e depuração interativo online. Você pode usar o notebook no console de gerenciamento do ModelArts para compilar e depurar código e treinar modelos baseados no código, sem necessidade de instalação ou configuração de ambiente.
O JupyterLab é um ambiente de desenvolvimento interativo. É o produto da próxima geração do Jupyter Notebook. O JupyterLab permite compilar notebooks, operar terminais, editar texto Markdown, ativar interação e visualizar arquivos e imagens CSV.
