Schița de curs
Introducere în ecosistemele Big Data
- Prezentare tehnologiilor și arhitecturilor big data
- Procesare în batch vs. procesare în timp real
- Strategii de stocare a datelor pentru scalabilitate
Procesare avansată a datelor cu Apache Spark
- Optimizarea job-urilor Spark pentru performanță
- Transformări și acțiuni avansate
- Lucrul cu structured streaming
Machine Learning la scară largă
- Tehnici de antrenare a modelelor distribuite
- Hyperparameter tuning pe seturi de date mari
- Implementarea (deployment) a modelelor în medii big data
Deep Learning pentru Big Data
- Integrarea TensorFlow și PyTorch cu Spark
- Pipeline-uri de antrenare pentru deep learning distribuit
- Cazuri de utilizare în analiza imaginilor, textului și serilor temporale
Analitică în timp real și streaming de date
- Apache Kafka pentru ingestion de date în streaming
- Framework-uri de procesare în streaming
- Monitorizare și alertare în sisteme în timp real
Governance, Securitate și Etică a datelor
- Cerințe de confidențialitate a datelor și conformitate
- Controlul accesului și criptarea în sistemele big data
- Considerații etice în analitica la scară largă
Integrarea Big Data cu Business Intelligence
- Vizualizarea datelor și dashboard-urile pentru big data
- Conectarea pipeline-urilor big data cu instrumentele BI
- Obținerea de rezultate de afaceri prin analitică avansată
Sinteza și pașii următori
Cerințe
- Înțelegere solidă a conceptelor de analiză a datelor și modelare statistică
- Experiență cu instrumente de procesare a datelor și limbaje de programare precum Python, R sau Scala
- Familiaritate cu framework-uri de calcul distribuit, cum ar fi Hadoop sau Spark
Publicație țintă
- Științifici de date care doresc să stăpânească procesarea datelor la scară largă și analitica predictivă
- Analizi seniori care își doresc să conceapă și să implementeze workflow-uri analitice avansate
- Specialiști R&D focalizați pe soluții inovatoare bazate pe date
Mărturii (3)
Aflarea despre QGIS și un instrument care poate fi utilizat de către alți profesioniști din diferite domenii, precum topografii
Bame Duncan Koko - Bentel Technologies (Pty) Ltd
Curs - QGIS for Geographic Information System
Tradus de catre o masina
Cum să folosești datele satelitare deschise pentru aplicații reale
Tshering Dorji - Druk Holding and Investments
Curs - Advanced Geographic Information Systems (GIS)
Tradus de catre o masina
Exemplele practice ne-au permis să ne facem o idee clară despre modul în care funcționează programa. Explicațiile bune și integrarea conceptelor teoretice cu aplicările practice au fost apreciate.
Ian - Archeoworks Inc.
Curs - ArcGIS Fundamentals
Tradus de catre o masina
