Schița de curs
Introducere în platforma Stratio
- Prezentarea arhitecturii Stratio și a modulelor principale
- Rolul modulelor Rocket și Intelligence în ciclul de viață al datelor
- Autentificare și navigare în interfața Stratio
Lucru cu modulul Rocket
- Ingestie de date și creare de pipeline-uri
- Conectarea surselor de date și configurarea transformărilor
- Utilizarea PySpark pentru sarcini de preprocesare în Rocket
Esențiale PySpark pentru utilizatorii Stratio
- Structuri de date și operațiuni în PySpark
- Construcții de buclă: utilizarea for, while, if/else
- Scrierea funcțiilor personalizate cu def și aplicarea lor
Utilizare avansată a Rocket cu PySpark
- Ingestie streaming și transformări
- Utilizarea buclelor și funcțiilor în scenarii batch și real-time
- Practici optime pentru performanța în pipeline-urile PySpark
Explorarea modulului Intelligence
- Prezentarea funcțiilor de modelare și analiză a datelor
- Selectarea, transformarea și explorarea funcțiilor de date
- Rolul PySpark în analize și insight-uri personalizate
Construirea fluxurilor de lucru pentru analize avansate
- Createrea funcțiilor definite de utilizator (UDF) în Intelligence
- Aplicarea condiționalelor și buclelor pentru logica datelor
- Cazuri de utilizare: segmentare, agregare și predicție
Implementare și colaborare
- Salvarea, exportul și reutilizarea fluxurilor de lucru
- Colaborarea cu alți membri ai echipei în Stratio
- Revizuirea ieșirii și integrarea cu instrumente downstream
Rezumat și pașii următori
Cerințe
- Experiență în programare Python
- Înțelegerea conceptelor de analitică a datelor sau procesare big data
- Cunoștințe de bază despre Apache Spark și calcul distribuit
Public țintă
- Engineeri de date care lucrează pe platforme bazate pe Stratio
- Analști sau dezvoltatori care folosesc modulele Rocket și Intelligence
- Echipe tehnice care trec la fluxuri de lucru PySpark în Stratio
Mărturii (3)
Aflarea despre QGIS și un instrument care poate fi utilizat de către alți profesioniști din diferite domenii, precum topografii
Bame Duncan Koko - Bentel Technologies (Pty) Ltd
Curs - QGIS for Geographic Information System
Tradus de catre o masina
Cum să folosești datele satelitare deschise pentru aplicații reale
Tshering Dorji - Druk Holding and Investments
Curs - Advanced Geographic Information Systems (GIS)
Tradus de catre o masina
Exemplele practice ne-au permis să ne facem o idee clară despre modul în care funcționează programa. Explicațiile bune și integrarea conceptelor teoretice cu aplicările practice au fost apreciate.
Ian - Archeoworks Inc.
Curs - ArcGIS Fundamentals
Tradus de catre o masina