HOBOD 2023 — различия между версиями

Материал из Public ATP Wiki
Перейти к: навигация, поиск
(Важные ссылки)
(Дедлайны по домашним заданиям)
 
(не показана 51 промежуточная версия 4 участников)
Строка 5: Строка 5:
 
== Важные ссылки ==
 
== Важные ссылки ==
 
* [https://docs.google.com/spreadsheets/d/1dh6YiXkA85a-jyTmapkf2m8vNG-EjV3ETk3h2D3vmxY/edit#gid=359301262 План курса]
 
* [https://docs.google.com/spreadsheets/d/1dh6YiXkA85a-jyTmapkf2m8vNG-EjV3ETk3h2D3vmxY/edit#gid=359301262 План курса]
* [https://t.me/+f64z3UiR3yA4N2Ni Чат курса]
+
* [https://t.me/+4xZ22reO6yQ0YzMy Чат курса]
 
* [https://forms.gle/chmfzFVHMJESgbMn6 Регистрация на курс]
 
* [https://forms.gle/chmfzFVHMJESgbMn6 Регистрация на курс]
* Таблица с оценками
+
* [https://docs.google.com/spreadsheets/d/e/2PACX-1vRhOwgDDryMloQbmlFjjKtPy8slDgkdJZ3yS4W01c5s8UpqYVf-RQJ4URjTIisQFJ2qo-M91WMO65In/pubhtml?gid=915915854&single=true '''Таблица с оценками''']
* Лог проверки ДЗ
+
* [https://docs.google.com/spreadsheets/d/e/2PACX-1vRhOwgDDryMloQbmlFjjKtPy8slDgkdJZ3yS4W01c5s8UpqYVf-RQJ4URjTIisQFJ2qo-M91WMO65In/pubhtml?gid=2075695586&single=true '''Лог проверки ДЗ''']
  
== Технические ссылки ==
+
== Доступы ==
* [https://forms.gle/PWhsFdPR9iVrsXbs9 Форма для проблем с инфраструктурой АТП]
+
По вопросам доступов и работы Gitlab-сервера пишите в [https://docs.google.com/forms/d/e/1FAIpQLSd_JxfMFOcWdaXKLC8sydJlDtwRG-B6Puiia_h3GqORXEDUKA/viewform форму] или на почту servers@atp-fivt.org.
* В случае проблем с кластером MPI, пишите на '''parallel-cluster-atp@googlegroups.com'''.
 
==== Сервер Gitlab ====
 
На данный момент сервер находится по адресу https://gitlab2.atp-fivt.org/, на котором наблюдаются проблемы с сертификатом SSL.
 
  
Если вы наблюдаете проблему <pre> fatal: unable to access 'https://gitlab2.atp-fivt.org/...': server certificate verification failed. CAfile: /etc/ssl/certs/ca-certificates.crt CRLfile: none </pre>, временно отключите проверку сертификата <pre>git config --global http.sslVerify "false"</pre>.
+
== Материалы ==
 +
* [https://drive.google.com/drive/folders/18Tx2zJfND3uYWAFiO5naYliIQryh8MqD?usp=sharing '''Видео занятий Google Диск ''']
 +
* [https://www.youtube.com/playlist?list=PLHVUfYYv0xklnCAk1Zs_Q4EzAJp6zJNSK '''Видео занятий youtube''']
 +
* [https://drive.google.com/drive/folders/0B2n4K2J_6IZdfjBETENNMnQxWU85cGFmb0w2NVZkXzJLRFJRUXdxREhMWDJTY1J4WWV0b1U?resourcekey=0-aPaLJZs_yaDSDSQ9548wBg&usp=sharing Видео за 2022 год]
 +
* [https://drive.google.com/drive/folders/1Lhwtp7OynTkc1u0ePlIxlYSDytDriSex?usp=sharing '''Слайды презентаций''']
 +
* [https://gitlab.com/hobod/hobod-practice Коды семинаров]
  
== Материалы ==
+
=== Домашние задания ===
* Видео занятий
+
'''Если ни одно домашнее задание не сдано - оценка неудовлетворительно, даже если вы набрали > 2.5.'''
* Слайды презентаций
+
 
* Коды семинаров
+
Планируется 6 домашних заданий.
 +
* Каждое оценивается максимум в 1,5 балла.
 +
* За сдачу позже мягкого дедлайна - 50%
 +
* За сдачу позже жёсткого -75%. Со штрафом -75% можно сдавать до 20.06, 23:59.
 +
 
 +
5 мини-тестов (~10 мин.) на семинарах
 +
* в сумме 5 баллов
 +
 
 +
==== Дедлайны по домашним заданиям ====
 +
{|  class="wikitable"
 +
|-
 +
! Задание
 +
! Мягкий deadline
 +
! Жёсткий deadline
 +
|-
 +
|[https://docs.google.com/document/d/1Vt7himH7vbNkyJPp-rbF0PkA9VTw5mURJAOVcm4gH1Q/edit?usp=sharing MapReduce] || 30.03 || 06.04
 +
|-
 +
|[https://docs.google.com/document/d/1vPcfqfe4hhAlTLq55uuQr0hi_NuxAZyRGIidhri2n7c/edit?usp=sharing Hive] || 23.04 || 30.04
 +
|-
 +
|[https://docs.google.com/document/d/1KQkr7xNTUysBDKJMl-vI-sVl_LAvV_wuE8dqs4r8s-g/edit?usp=sharing Spark] || 07.05 ||14.05
 +
|-
 +
|[https://docs.google.com/document/d/1B4VgtlbGWcgKPZfFip7rLImbFNZW_o1XRFRuQuMMLwo/edit?usp=sharing RealTime & Kafka] || 21.05 || 28.05
 +
|-
 +
|[https://docs.google.com/document/d/1Js0C2aSa-acffSIANZc-I7nc4147N-92suw8vr9HUrw HBase / Casssandra] || 28.05 || 18.06
 +
|-
 +
|[https://docs.google.com/document/d/1MRQ-jDXU8GNyoUKa2DhB0oNAP1uyBeWscql67BUQQKI/edit?usp=sharing Google Spanner] || 18.06 || 25.06
 +
|}
 +
 
 +
В идеальном случае за домашние задания можно получить '''9 баллов'''.
 +
 
 +
Как сдавать ДЗ [https://docs.google.com/presentation/d/1eDxnTeBWSB1OrA3BwEUa2vJAJm3_OJMuoRxyA13RzTY/edit#slide=id.g4f2997e0e1_1_24 ссылка ]
 +
 
 +
Сдать ДЗ со штрафом, возможно до 20.06.2023
 +
 
 +
=== Бонус ===
 +
Бонус начисляется за:
 +
* активное участие в семинарах,
 +
* помощь коллегам в чате курса.
 +
Возможно получить до 1 балла. Количество студентов, которым может быть начислен бонус, неограничено.
 +
 
 +
=== Экзамен ===
 +
Экзамен состоится '''30.06.2023'''. Он будет проходить через Прокторинг.
 +
 
 +
Является '''необязательным'''.
 +
* вопросы по всему курсу
 +
* письменная работа (6 вопросов по всему курсу) на 45 мин
 +
* возможна устная защита по окончанию 30 минут
 +
* максимальная оценка: 2 балла.
 +
 
 +
Итого
 +
*идеальный вариант: 9 + 5 + 2 + 1 = 17 из 10
 +
*но надо сделать хоть 1 ДЗ.
 +
 
 +
=== Перезачет курса ===
 +
Если вы хотите перпезачесть курс, просьба заполнить [https://docs.google.com/forms/d/e/1FAIpQLSd5pXEleAII2VfBdsNhI4Qon5DoWLfS_2KRBZK7o3E_jN5FUg/viewform?usp=sf_link форму] до '''28.02.2023'''.
 +
 
 +
Курс PD (a.k.a. МВС) не перезасчитывается т.к. ХОБОД является его продолжением.
 +
 
 +
=== Дописывание Quiz'ов  ===
 +
В случае если вы не смогли написать Quiz в указанную дату по технической или другой уважительной причине, заполните, пожалуйста, [https://docs.google.com/forms/d/e/1FAIpQLScMYTPUe4bMLaquF6ao-KLkkD6WHdigow3UzgwfuUubpvnDJA/viewform форму.]
 +
 
 +
= Список рекомендуемых материалов =
 +
=== Основная ===
 +
# Tom White, Hadoop: The Definitive Guide, 4th Edition Storage and Analysis at Internet Scale,  Publisher: O'Reilly, Media Release Date: April 2015
 +
# Karau, H., Konwinski, A., Wendell, P., & Zaharia, M, Learning Spark: Lightning-Fast Big Data Analysis
 +
# Holden Karau et al. Learning Spark. Lightning-fast Data Analytics. Preview Edition. O’Reilly, 2015.
 +
=== Дополнительная ===
 +
# Chuck Lam. Hadoop in Action. New York: Manning Publications co., 2011.
 +
# Alex Holmes , "Hadoop in Practice", 2012
 +
# Martin Fowler, "NoSQL", 2013
 +
# Eric Redmond, Jim R. Wilson, "Seven Databases in Seven Weeks", 2012
 +
# Jonathan Leibiusky, "Getting Started with Storm", 2012
 +
# Donald Miner, Adam Shook. MapReduce Design Patterns. O’Reilly, 2013.
 +
# Arun C. Murthy et al. Apache Hadoop YARN. Addison-Wesley, 2014.
 +
# Spark Core Programming. TutorialsPoint, 2015.
 +
# Dario Simonassi, Gabriel Eisbruch, Jonathan Leibiusky. Getting Started with Storm. O’Reilly, 2012.
 +
# Edward Capriolo, Dean Wampler, and Jason Rutherglen. Programming Hive. O’Reilly, 2012.
 +
# Lars George. HBase: The Definitive Guide. O’Reilly, 2011.
 +
# Eben Hewitt. Cassandra: The Definitive Guide. O’Reilly, 2011.
 +
 
 +
* '''[https://docs.google.com/spreadsheets/d/1X7lhS8aYlyhX9gb1yT6t3A8K7OfCA-x0GJRfMcykDJk/edit?usp=sharing Интересные ссылки]'''

Текущая версия на 13:14, 16 июня 2023

Общие сведения

  • Семестр: 10 (5й курс)
  • Форма контроля: экзамен

Важные ссылки

Доступы

По вопросам доступов и работы Gitlab-сервера пишите в форму или на почту servers@atp-fivt.org.

Материалы

Домашние задания

Если ни одно домашнее задание не сдано - оценка неудовлетворительно, даже если вы набрали > 2.5.

Планируется 6 домашних заданий.

  • Каждое оценивается максимум в 1,5 балла.
  • За сдачу позже мягкого дедлайна - 50%
  • За сдачу позже жёсткого -75%. Со штрафом -75% можно сдавать до 20.06, 23:59.

5 мини-тестов (~10 мин.) на семинарах

  • в сумме 5 баллов

Дедлайны по домашним заданиям

Задание Мягкий deadline Жёсткий deadline
MapReduce 30.03 06.04
Hive 23.04 30.04
Spark 07.05 14.05
RealTime & Kafka 21.05 28.05
HBase / Casssandra 28.05 18.06
Google Spanner 18.06 25.06

В идеальном случае за домашние задания можно получить 9 баллов.

Как сдавать ДЗ ссылка

Сдать ДЗ со штрафом, возможно до 20.06.2023

Бонус

Бонус начисляется за:

  • активное участие в семинарах,
  • помощь коллегам в чате курса.

Возможно получить до 1 балла. Количество студентов, которым может быть начислен бонус, неограничено.

Экзамен

Экзамен состоится 30.06.2023. Он будет проходить через Прокторинг.

Является необязательным.

  • вопросы по всему курсу
  • письменная работа (6 вопросов по всему курсу) на 45 мин
  • возможна устная защита по окончанию 30 минут
  • максимальная оценка: 2 балла.

Итого

  • идеальный вариант: 9 + 5 + 2 + 1 = 17 из 10
  • но надо сделать хоть 1 ДЗ.

Перезачет курса

Если вы хотите перпезачесть курс, просьба заполнить форму до 28.02.2023.

Курс PD (a.k.a. МВС) не перезасчитывается т.к. ХОБОД является его продолжением.

Дописывание Quiz'ов

В случае если вы не смогли написать Quiz в указанную дату по технической или другой уважительной причине, заполните, пожалуйста, форму.

Список рекомендуемых материалов

Основная

  1. Tom White, Hadoop: The Definitive Guide, 4th Edition Storage and Analysis at Internet Scale, Publisher: O'Reilly, Media Release Date: April 2015
  2. Karau, H., Konwinski, A., Wendell, P., & Zaharia, M, Learning Spark: Lightning-Fast Big Data Analysis
  3. Holden Karau et al. Learning Spark. Lightning-fast Data Analytics. Preview Edition. O’Reilly, 2015.

Дополнительная

  1. Chuck Lam. Hadoop in Action. New York: Manning Publications co., 2011.
  2. Alex Holmes , "Hadoop in Practice", 2012
  3. Martin Fowler, "NoSQL", 2013
  4. Eric Redmond, Jim R. Wilson, "Seven Databases in Seven Weeks", 2012
  5. Jonathan Leibiusky, "Getting Started with Storm", 2012
  6. Donald Miner, Adam Shook. MapReduce Design Patterns. O’Reilly, 2013.
  7. Arun C. Murthy et al. Apache Hadoop YARN. Addison-Wesley, 2014.
  8. Spark Core Programming. TutorialsPoint, 2015.
  9. Dario Simonassi, Gabriel Eisbruch, Jonathan Leibiusky. Getting Started with Storm. O’Reilly, 2012.
  10. Edward Capriolo, Dean Wampler, and Jason Rutherglen. Programming Hive. O’Reilly, 2012.
  11. Lars George. HBase: The Definitive Guide. O’Reilly, 2011.
  12. Eben Hewitt. Cassandra: The Definitive Guide. O’Reilly, 2011.