Schița de curs
Introducere în ecosistemele Big Data
- Prezentare generală a tehnologiilor și arhitecturilor big data
- Procesare batch vs. procesare în timp real
- Strategii de stocare a datelor pentru scalabilitate
Procesarea avansată a datelor cu Apache Spark
- Optimizarea joburilor Spark pentru performanță
- Transformări și acțiuni avansate
- Lucrul cu structured streaming
Machine Learning la scară
- Tehnici de antrenare distribuită a modelelor
- Optimizarea hiperparametrilor pe seturi mari de date
- Deploy-ul modelelor în medii big data
Deep Learning pentru Big Data
- Integrarea TensorFlow și PyTorch cu Spark
- Pipeline-uri distribuite de antrenare pentru deep learning
- Cazuri de utilizare în analiza imaginilor, textului și seriilor temporale
Analiza în timp real și streaming de date
- Apache Kafka pentru ingestia datelor în flux
- Framework-uri de procesare a stream-urilor
- Monitorizare și alertare în sistemele în timp real
Guvernanța datelor, securitate și etică
- Cerințe de confidențialitate și conformitate a datelor
- Controlul accesului și criptarea în sistemele big data
- Considerații etice în analiza la scară largă
Integrarea Big Data cu Business Intelligence
- Vizualizarea datelor și dashboarding pentru big data
- Conectarea pipeline-urilor big data la instrumentele de BI
- Generarea de rezultate de business cu advanced analytics
Rezumat și pașii următori
Cerințe
- Înțelegere solidă a conceptelor de analiză a datelor și modelare statistică
- Experiență cu instrumente de procesare a datelor și limbaje de programare precum Python, R sau Scala
- Familiaritate cu framework-uri de calcul distribuit precum Hadoop sau Spark
Public țintă
- Data scientists care își doresc să stăpânească procesarea datelor la scară largă și analiza predictivă
- Analiști seniori care urmăresc să proiecteze și să implementeze fluxuri de lucru analitice avansate
- Profesioniști din R&D axați pe soluții inovatoare bazate pe date
Mărturii (3)
Aflarea despre QGIS și un instrument care poate fi utilizat de către alți profesioniști din diferite domenii, precum topografii
Bame Duncan Koko - Bentel Technologies (Pty) Ltd
Curs - QGIS for Geographic Information System
Tradus de catre o masina
Cum să folosești datele satelitare deschise pentru aplicații reale
Tshering Dorji - Druk Holding and Investments
Curs - Advanced Geographic Information Systems (GIS)
Tradus de catre o masina
Exemplele practice ne-au permis să ne facem o idee clară despre modul în care funcționează programa. Explicațiile bune și integrarea conceptelor teoretice cu aplicările practice au fost apreciate.
Ian - Archeoworks Inc.
Curs - ArcGIS Fundamentals
Tradus de catre o masina
