Schița de curs

Introducere în Huawei CloudMatrix

  • Ecosistemul și fluxul de implementare al CloudMatrix
  • Modele, formate și moduri de implementare suportate
  • Cazuri tipice de utilizare și chipset-uri suportate

Pregătirea modelelor pentru implementare

  • Exportarea modelului din instrumentele de antrenament (MindSpore, TensorFlow, PyTorch)
  • Folosirea ATC (Ascend Tensor Compiler) pentru conversia formaterilor
  • Modele cu formă statică vs. dinamică

Implementarea în CloudMatrix

  • Creația serviciilor și înregistrarea modelului
  • Implementarea serviciilor de inferență prin interfața utilizator sau CLI
  • Rutare, autentificare și control de acces

Furnizarea cererilor de inferență

  • Fluxuri de inferență în loturi vs. în timp real
  • Pipelines pentru preprocesarea și postprocesarea datelor
  • Apele serviciilor CloudMatrix din aplicațiile externe

Supraveghere și ajustare a performanței

  • Jurnale de implementare și urmărire a cererilor
  • Scalarea resurselor și echilibrarea sarcinii
  • Ajustarea întârzierii și optimizarea fluxului

Integrarea cu instrumentele enterpeziene

  • Conectarea CloudMatrix cu OBS și ModelArts
  • Folosirea fluxurilor de lucru și gestionării versiunilor modelului
  • CI/CD pentru implementarea și revenirea la o versiune anterioară a modelelor

Pipeline complet de inferență

  • Implementarea unui pipeline complet de clasificare a imaginilor
  • Mecanizmi de testare și validare a acurateței
  • Simuirea trecerii la rezerve și alertelor sistemului

Rezumat și următoarele pași

Cerințe

  • O înțelegere a fluxurilor de lucru pentru antrenarea modelelor AI
  • Experiență cu cadre ML bazate pe Python
  • Familiaritate de bază cu conceptele de deployare în noul cloud

Publicul vizat

  • Echipele AI ops
  • Inginerii de machine learning
  • Specialiștii de deployare în cloud care lucrează cu infrastructura Huawei
 21 ore

Numărul de participanți


Pret per participant

Mărturii (1)

Upcoming Courses

Categorii înrudite