HOBOD 2021 — различия между версиями
VeLKerr (обсуждение | вклад) (→Инфраструктура) |
VeLKerr (обсуждение | вклад) (→Общие сведения) |
||
Строка 4: | Строка 4: | ||
* [https://docs.google.com/spreadsheets/d/e/2PACX-1vRgbPJ1eI4f4rUnGYNDqd_Tz1PS838oN9wTdG0fARbiO3_nE4qc-iXP_diQgFXkdmaFcZK0h2tAOg5O/pubhtml?gid=359301262&single=true '''План курса'''] | * [https://docs.google.com/spreadsheets/d/e/2PACX-1vRgbPJ1eI4f4rUnGYNDqd_Tz1PS838oN9wTdG0fARbiO3_nE4qc-iXP_diQgFXkdmaFcZK0h2tAOg5O/pubhtml?gid=359301262&single=true '''План курса'''] | ||
* [https://t.me/joinchat/IYbBl5bdUze_j1Pi Телеграм-чат курса] | * [https://t.me/joinchat/IYbBl5bdUze_j1Pi Телеграм-чат курса] | ||
− | * [Форма регистрации]. Заполняют только те, кому '''не пришли письма''' от automation@atp-fivt.org | + | * [https://forms.gle/a4ihZhVEpZGKzTGKA Форма регистрации]. Заполняют только те, кому '''не пришли письма''' от automation@atp-fivt.org |
* [TBD Таблица с оценками] | * [TBD Таблица с оценками] | ||
Версия 12:17, 4 февраля 2021
Содержание
Общие сведения
- Семестр: 10 (пятый курс)
- Форма контроля: экзамен
- План курса
- Телеграм-чат курса
- Форма регистрации. Заполняют только те, кому не пришли письма от automation@atp-fivt.org
- [TBD Таблица с оценками]
Материалы занятий
- Презентации лекций
- Коды семинаров
- Видео занятий. Для доступа зайдите в аккаунт на @phystech.edu.
- Домашние задания.
- [Интересные ссылки]
Инфраструктура
- Форма для проблем с инфраструктурой
- Сервер GitLab:
http://gitlab.atp-fivt.org
- Кластер Hadoop:
ssh <user>@mipt-client.atp-fivt.org
- Презентация "как сдавать домашки"
Команда курса
Преподаватели
- Ивченко Олег
- Лахвич Дмитрий
- Ташоян Арсений
- Роман Липовский
- Пономарёв Иван
- Ахтямов Павел
- Федотов Иван
- Жестов Анатолий
Учебные ассистенты
- Чернецкий Аркадий (проверка ДЗ)
- Якушева Софья (проверка ДЗ)
- Воропаев Роберт (проверка ДЗ, разработка тестов)
- Цион Михаил (разработка тестов)
Критерии получения оценки
Суммарно за все активности курса (домашки, контрольные, экзамены и бонус) можно получить 17 / 10. Но если не сдана хотя бы одна (любая) домашка, за курс будет неуд. даже если по баллам набрано > 2.5.
Домашние задания
Планируется 6 домашних заданий.
- Каждое оценивается максимум в 1,5 балла.
- За сдачу позже мягкого дедлайна -50%
- За сдачу позже жёсткого -75%. Со штрафом -75% можно сдавать до экзамена.
Дедлайны по домашкам
Домашка | Мягкий deadline | Жёсткий deadline |
---|---|---|
[ MapReduce] | ||
[ Hive] | ||
[ Spark] | ||
[ RealTime & Kafka] | ||
[ HBase] | ||
[ Google Spanner] |
В идеальном случае за домашние задания можно получить 9 баллов.
Мини-контрольные работы (Quiz'ы)
Планируется 5 мини-контрольных (см. план курса). Каждая контрольная:
- проводится на семинарах (т.е. в четверг в 18:30).
- содержит 10-15 вопросов с выбором вариантов ответа,
- длится 10 мин.,
- оценивается максимум в 1 балл.
Название события на http://exams.mipt.ru/ | Дата |
---|---|
ХОБОД-2021. HDFS, MapReduce, YARN | 04.03.21 |
ХОБОД-2021. SQL over BigData | 18.03.21 |
ХОБОД-2021. Spark RDD & DF | 01.04.21 |
ХОБОД-2021. Realtime & Kafka, Kafka Streams | 06.05.21 |
ХОБОД-2021. NoSQL | 20.05.21 |
В идеальном случае за контрольные можно получить 5 баллов.
В случае если вы не сможете написать КР в указанную дату по технической или другой уважительной причине, просьба заполнить форму на дописывание. Дописывание состоится 20.05: 17:00 для 1го Quiz'a, 17:15 для 2го, 17:30 для 3-го...
Бонус
Бонус начисляется за:
- активное участие в семинарах,
- помощь коллегам в чате курса.
Возможно получить до 1 балла. Количество студентов, которым может быть начислен бонус, неограничено.
Экзамен
Является необязательным.
- 6 вопросов по всему курсу,
- 45 минут времени
- возможна устная защита по окончанию 45 минут
- Максимальная оценка: 2 балла.
Список рекомендуемых материалов
Основная
- Tom White, Hadoop: The Definitive Guide, 4th Edition Storage and Analysis at Internet Scale, Publisher: O'Reilly, Media Release Date: April 2015
- Karau, H., Konwinski, A., Wendell, P., & Zaharia, M, Learning Spark: Lightning-Fast Big Data Analysis
- Holden Karau et al. Learning Spark. Lightning-fast Data Analytics. Preview Edition. O’Reilly, 2015.
Дополнительная
- Chuck Lam. Hadoop in Action. New York: Manning Publications co., 2011.
- Alex Holmes , "Hadoop in Practice", 2012
- Martin Fowler, "NoSQL", 2013
- Eric Redmond, Jim R. Wilson, "Seven Databases in Seven Weeks", 2012
- Jonathan Leibiusky, "Getting Started with Storm", 2012
- Donald Miner, Adam Shook. MapReduce Design Patterns. O’Reilly, 2013.
- Arun C. Murthy et al. Apache Hadoop YARN. Addison-Wesley, 2014.
- Spark Core Programming. TutorialsPoint, 2015.
- Dario Simonassi, Gabriel Eisbruch, Jonathan Leibiusky. Getting Started with Storm. O’Reilly, 2012.
- Edward Capriolo, Dean Wampler, and Jason Rutherglen. Programming Hive. O’Reilly, 2012.
- Lars George. HBase: The Definitive Guide. O’Reilly, 2011.
- Eben Hewitt. Cassandra: The Definitive Guide. O’Reilly, 2011.