HOBOD 2023 — различия между версиями

Материал из Public ATP Wiki
Перейти к: навигация, поиск
(Материалы)
(Дедлайны по домашним заданиям)
 
(не показано 45 промежуточных версий 4 участников)
Строка 5: Строка 5:
 
== Важные ссылки ==
 
== Важные ссылки ==
 
* [https://docs.google.com/spreadsheets/d/1dh6YiXkA85a-jyTmapkf2m8vNG-EjV3ETk3h2D3vmxY/edit#gid=359301262 План курса]
 
* [https://docs.google.com/spreadsheets/d/1dh6YiXkA85a-jyTmapkf2m8vNG-EjV3ETk3h2D3vmxY/edit#gid=359301262 План курса]
* [https://t.me/+f64z3UiR3yA4N2Ni Чат курса]
+
* [https://t.me/+4xZ22reO6yQ0YzMy Чат курса]
 
* [https://forms.gle/chmfzFVHMJESgbMn6 Регистрация на курс]
 
* [https://forms.gle/chmfzFVHMJESgbMn6 Регистрация на курс]
* Таблица с оценками
+
* [https://docs.google.com/spreadsheets/d/e/2PACX-1vRhOwgDDryMloQbmlFjjKtPy8slDgkdJZ3yS4W01c5s8UpqYVf-RQJ4URjTIisQFJ2qo-M91WMO65In/pubhtml?gid=915915854&single=true '''Таблица с оценками''']
* Лог проверки ДЗ
+
* [https://docs.google.com/spreadsheets/d/e/2PACX-1vRhOwgDDryMloQbmlFjjKtPy8slDgkdJZ3yS4W01c5s8UpqYVf-RQJ4URjTIisQFJ2qo-M91WMO65In/pubhtml?gid=2075695586&single=true '''Лог проверки ДЗ''']
  
== Технические ссылки ==
+
== Доступы ==
* [https://forms.gle/PWhsFdPR9iVrsXbs9 Форма для проблем с инфраструктурой АТП]
+
По вопросам доступов и работы Gitlab-сервера пишите в [https://docs.google.com/forms/d/e/1FAIpQLSd_JxfMFOcWdaXKLC8sydJlDtwRG-B6Puiia_h3GqORXEDUKA/viewform форму] или на почту servers@atp-fivt.org.
* В случае проблем с кластером MPI, пишите на '''parallel-cluster-atp@googlegroups.com'''.
 
==== Сервер Gitlab ====
 
На данный момент сервер находится по адресу https://gitlab2.atp-fivt.org/, на котором наблюдаются проблемы с сертификатом SSL.
 
 
 
Если вы наблюдаете проблему <pre> fatal: unable to access 'https://gitlab2.atp-fivt.org/...': server certificate verification failed. CAfile: /etc/ssl/certs/ca-certificates.crt CRLfile: none </pre>, временно отключите проверку сертификата <pre>git config --global http.sslVerify "false"</pre>.
 
  
 
== Материалы ==
 
== Материалы ==
* [https://disk.yandex.ru/d/uwMc7AF8fLUecA '''Видео занятий''']
+
* [https://drive.google.com/drive/folders/18Tx2zJfND3uYWAFiO5naYliIQryh8MqD?usp=sharing '''Видео занятий Google Диск ''']
* [https://disk.yandex.ru/d/hLAyFNYioytyqw '''Слайды презентаций''']
+
* [https://www.youtube.com/playlist?list=PLHVUfYYv0xklnCAk1Zs_Q4EzAJp6zJNSK '''Видео занятий youtube''']
* Коды семинаров
+
* [https://drive.google.com/drive/folders/0B2n4K2J_6IZdfjBETENNMnQxWU85cGFmb0w2NVZkXzJLRFJRUXdxREhMWDJTY1J4WWV0b1U?resourcekey=0-aPaLJZs_yaDSDSQ9548wBg&usp=sharing Видео за 2022 год]
 +
* [https://drive.google.com/drive/folders/1Lhwtp7OynTkc1u0ePlIxlYSDytDriSex?usp=sharing '''Слайды презентаций''']
 +
* [https://gitlab.com/hobod/hobod-practice Коды семинаров]
  
 
=== Домашние задания ===
 
=== Домашние задания ===
Строка 29: Строка 26:
 
* Каждое оценивается максимум в 1,5 балла.
 
* Каждое оценивается максимум в 1,5 балла.
 
* За сдачу позже мягкого дедлайна - 50%
 
* За сдачу позже мягкого дедлайна - 50%
* За сдачу позже жёсткого -75%. Со штрафом -75% можно сдавать до экзамена.
+
* За сдачу позже жёсткого -75%. Со штрафом -75% можно сдавать до 20.06, 23:59.
 +
 
 +
5 мини-тестов (~10 мин.) на семинарах
 +
* в сумме 5 баллов
  
 
==== Дедлайны по домашним заданиям ====
 
==== Дедлайны по домашним заданиям ====
Строка 38: Строка 38:
 
! Жёсткий deadline
 
! Жёсткий deadline
 
|-
 
|-
|[https://docs.google.com/document/d/1FViOqe_szEp1idZ3mJ0yUe1W7tZEgo1Cmp74JC5_ky0 MapReduce] || -- || --
+
|[https://docs.google.com/document/d/1Vt7himH7vbNkyJPp-rbF0PkA9VTw5mURJAOVcm4gH1Q/edit?usp=sharing MapReduce] || 30.03 || 06.04
 
|-
 
|-
|[https://docs.google.com/document/d/14NuJRSHoFFj8ND2zOM_ZfKXgahstmz4PMiUUCVQFG_o Hive] || -- || --
+
|[https://docs.google.com/document/d/1vPcfqfe4hhAlTLq55uuQr0hi_NuxAZyRGIidhri2n7c/edit?usp=sharing Hive] || 23.04 || 30.04
 
|-
 
|-
|[https://docs.google.com/document/d/1OP8x8lPFCHcDBbxZ-Ny7W1uagrCzk8Ez1OWCTONzcLQ Spark] || -- ||--
+
|[https://docs.google.com/document/d/1KQkr7xNTUysBDKJMl-vI-sVl_LAvV_wuE8dqs4r8s-g/edit?usp=sharing Spark] || 07.05 ||14.05
 
|-
 
|-
|[https://docs.google.com/document/d/1fljwR-DKlo91NZIHIgMxtVqaTTaWh5-MzJeDBTO3bAw RealTime & Kafka] || -- || --
+
|[https://docs.google.com/document/d/1B4VgtlbGWcgKPZfFip7rLImbFNZW_o1XRFRuQuMMLwo/edit?usp=sharing RealTime & Kafka] || 21.05 || 28.05
 
|-
 
|-
|[https://docs.google.com/document/d/1Js0C2aSa-acffSIANZc-I7nc4147N-92suw8vr9HUrw HBase / Casssandra] || -- || --
+
|[https://docs.google.com/document/d/1Js0C2aSa-acffSIANZc-I7nc4147N-92suw8vr9HUrw HBase / Casssandra] || 28.05 || 18.06
 
|-
 
|-
|[https://docs.google.com/document/d/1sY9ZCztEzbqLQSjOGtsJ8vQQohrk4ZgyNcN122D-wMc Google Spanner] || -- || --
+
|[https://docs.google.com/document/d/1MRQ-jDXU8GNyoUKa2DhB0oNAP1uyBeWscql67BUQQKI/edit?usp=sharing Google Spanner] || 18.06 || 25.06
 
|}
 
|}
  
 
В идеальном случае за домашние задания можно получить '''9 баллов'''.
 
В идеальном случае за домашние задания можно получить '''9 баллов'''.
 +
 +
Как сдавать ДЗ [https://docs.google.com/presentation/d/1eDxnTeBWSB1OrA3BwEUa2vJAJm3_OJMuoRxyA13RzTY/edit#slide=id.g4f2997e0e1_1_24 ссылка ]
 +
 +
Сдать ДЗ со штрафом, возможно до 20.06.2023
  
 
=== Бонус ===
 
=== Бонус ===
Строка 60: Строка 64:
  
 
=== Экзамен ===
 
=== Экзамен ===
Экзамен состоится '''Дата и время уточняется'''. Он будет проходить через Прокторинг.
+
Экзамен состоится '''30.06.2023'''. Он будет проходить через Прокторинг.
  
 
Является '''необязательным'''.
 
Является '''необязательным'''.
 
* вопросы по всему курсу
 
* вопросы по всему курсу
* 30 минут времени
+
* письменная работа (6 вопросов по всему курсу) на 45 мин
 
* возможна устная защита по окончанию 30 минут
 
* возможна устная защита по окончанию 30 минут
 
* максимальная оценка: 2 балла.
 
* максимальная оценка: 2 балла.
 +
 +
Итого
 +
*идеальный вариант: 9 + 5 + 2 + 1 = 17 из 10
 +
*но надо сделать хоть 1 ДЗ.
  
 
=== Перезачет курса ===
 
=== Перезачет курса ===
Если вы хотите перпезачесть курс, просьба заполнить [https://docs.google.com/forms/d/1aVgv1MPgd5Zh6AMGWgKAW6-6E2zF9-1UefTQAAwVGxg/prefill форму] до '''29.06.2023'''.
+
Если вы хотите перпезачесть курс, просьба заполнить [https://docs.google.com/forms/d/e/1FAIpQLSd5pXEleAII2VfBdsNhI4Qon5DoWLfS_2KRBZK7o3E_jN5FUg/viewform?usp=sf_link форму] до '''28.02.2023'''.
 +
 
 +
Курс PD (a.k.a. МВС) не перезасчитывается т.к. ХОБОД является его продолжением.
  
Курс PD-2019 (a.k.a. МВС) не перезасчитывается т.к. ХОБОД является его продолжением.
+
=== Дописывание Quiz'ов  ===
 +
В случае если вы не смогли написать Quiz в указанную дату по технической или другой уважительной причине, заполните, пожалуйста, [https://docs.google.com/forms/d/e/1FAIpQLScMYTPUe4bMLaquF6ao-KLkkD6WHdigow3UzgwfuUubpvnDJA/viewform форму.]
  
 
= Список рекомендуемых материалов =
 
= Список рекомендуемых материалов =

Текущая версия на 13:14, 16 июня 2023

Общие сведения

  • Семестр: 10 (5й курс)
  • Форма контроля: экзамен

Важные ссылки

Доступы

По вопросам доступов и работы Gitlab-сервера пишите в форму или на почту servers@atp-fivt.org.

Материалы

Домашние задания

Если ни одно домашнее задание не сдано - оценка неудовлетворительно, даже если вы набрали > 2.5.

Планируется 6 домашних заданий.

  • Каждое оценивается максимум в 1,5 балла.
  • За сдачу позже мягкого дедлайна - 50%
  • За сдачу позже жёсткого -75%. Со штрафом -75% можно сдавать до 20.06, 23:59.

5 мини-тестов (~10 мин.) на семинарах

  • в сумме 5 баллов

Дедлайны по домашним заданиям

Задание Мягкий deadline Жёсткий deadline
MapReduce 30.03 06.04
Hive 23.04 30.04
Spark 07.05 14.05
RealTime & Kafka 21.05 28.05
HBase / Casssandra 28.05 18.06
Google Spanner 18.06 25.06

В идеальном случае за домашние задания можно получить 9 баллов.

Как сдавать ДЗ ссылка

Сдать ДЗ со штрафом, возможно до 20.06.2023

Бонус

Бонус начисляется за:

  • активное участие в семинарах,
  • помощь коллегам в чате курса.

Возможно получить до 1 балла. Количество студентов, которым может быть начислен бонус, неограничено.

Экзамен

Экзамен состоится 30.06.2023. Он будет проходить через Прокторинг.

Является необязательным.

  • вопросы по всему курсу
  • письменная работа (6 вопросов по всему курсу) на 45 мин
  • возможна устная защита по окончанию 30 минут
  • максимальная оценка: 2 балла.

Итого

  • идеальный вариант: 9 + 5 + 2 + 1 = 17 из 10
  • но надо сделать хоть 1 ДЗ.

Перезачет курса

Если вы хотите перпезачесть курс, просьба заполнить форму до 28.02.2023.

Курс PD (a.k.a. МВС) не перезасчитывается т.к. ХОБОД является его продолжением.

Дописывание Quiz'ов

В случае если вы не смогли написать Quiz в указанную дату по технической или другой уважительной причине, заполните, пожалуйста, форму.

Список рекомендуемых материалов

Основная

  1. Tom White, Hadoop: The Definitive Guide, 4th Edition Storage and Analysis at Internet Scale, Publisher: O'Reilly, Media Release Date: April 2015
  2. Karau, H., Konwinski, A., Wendell, P., & Zaharia, M, Learning Spark: Lightning-Fast Big Data Analysis
  3. Holden Karau et al. Learning Spark. Lightning-fast Data Analytics. Preview Edition. O’Reilly, 2015.

Дополнительная

  1. Chuck Lam. Hadoop in Action. New York: Manning Publications co., 2011.
  2. Alex Holmes , "Hadoop in Practice", 2012
  3. Martin Fowler, "NoSQL", 2013
  4. Eric Redmond, Jim R. Wilson, "Seven Databases in Seven Weeks", 2012
  5. Jonathan Leibiusky, "Getting Started with Storm", 2012
  6. Donald Miner, Adam Shook. MapReduce Design Patterns. O’Reilly, 2013.
  7. Arun C. Murthy et al. Apache Hadoop YARN. Addison-Wesley, 2014.
  8. Spark Core Programming. TutorialsPoint, 2015.
  9. Dario Simonassi, Gabriel Eisbruch, Jonathan Leibiusky. Getting Started with Storm. O’Reilly, 2012.
  10. Edward Capriolo, Dean Wampler, and Jason Rutherglen. Programming Hive. O’Reilly, 2012.
  11. Lars George. HBase: The Definitive Guide. O’Reilly, 2011.
  12. Eben Hewitt. Cassandra: The Definitive Guide. O’Reilly, 2011.