Big Data
Dozent:innen: Dr. rer. nat. Thomas KemmerKurzname: 08.079.548
Kurs-Nr.: 08.079.548
Kurstyp: Vorlesung/Übung
Voraussetzungen / Organisatorisches
Für diese Veranstaltung sind allgemeine Programmierkenntnisse erforderlich. Wir werden uns in den Übungen hauptsächlich mit der Programmiersprache Scala beschäftigen, daher sind Vorkenntnisse durchaus hilfreich, wenn auch nicht zwingend notwendig.Die Veranstaltung beinhaltet einen mehrwöchigen Projektteil vor Ende der Vorlesungszeit, in dem die erlernten Techniken an "echten" Datensätzen angewendet werden sollen (z. B. Twitter, Reddit, Wikimedia). Die Projektarbeiten ersetzen dafür in dem Zeitraum den normalen Übungsbetrieb.
Empfohlene Literatur
J. Leskovec et al. Mining of Massive Datasets, 3rd Ed. Cambridge University Press. 2020. (Kostenlos verfügbar über http://www.mmds.org/)J. Damji et al. Learning Spark: Lightning-Fast Data Analytics, 2en Ed. O'Reilly. 2020.
Inhalt
- Was is Big Data?
- Grenzen der Aussagekraft
- Skalierbarkeit
- Verteilte Dateisysteme
- Map-Reduce-Modell
- Komplexitätsanalyse von Map-Reduce-Programmen
- Erweiterung des Map-Reduce-Modells
- Framework: Apache Spark (Scala)
- Use cases: PageRank, Clustering, Recommender Systems
Termine
| Datum (Wochentag) | Zeit | Ort |
|---|---|---|
| 24.10.2022 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 31.10.2022 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 07.11.2022 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 14.11.2022 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 21.11.2022 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 28.11.2022 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 05.12.2022 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 12.12.2022 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 19.12.2022 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 09.01.2023 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 16.01.2023 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 23.01.2023 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 30.01.2023 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |
| 06.02.2023 (Montag) | 12:00 - 14:00 | 03 428 2413 - Neubau Physik/Mathematik |