ХОБОД Альфа 2026: различия между версиями

Материал из Public ATP Wiki
Перейти к навигации Перейти к поиску
← Предыдущая правка
 
(не показано 18 промежуточных версий 3 участников)
Строка 2: Строка 2:
* Семестр: 9 (5й курс)
* Семестр: 9 (5й курс)
* Форма контроля: экзамен
* Форма контроля: экзамен
* Дни и время занятий: пн., 17:05 - 20:00.
* Дни и время занятий: пн., 18:40 - 21:35.
 
==Описание курса==
 
[https://drive.google.com/file/d/1o3DxZRYoQB4-S9VgjShp3tB-VEgGSTnr/view?usp=sharing По ссылке вы найдете видео-презентацию курса] с ответами на вопросы:
 
Что такое большие данные?
 
Где они используются?
 
Какими методами их обрабатывают?
 
Какие разделы и подходы будут представлены на курсе?
 
Будет ли практика?


== Важные ссылки ==
== Важные ссылки ==
* [ План курса]
* [https://docs.google.com/spreadsheets/d/e/2PACX-1vSietEbjRwYFk3Q888gREuKDHld_vM1AIRbSTiowKt-9zTb2Not11I9hkTdhIm68-OB7GJ1X6GF4oQi/pubhtml?gid=1384110737&single=true План курса]
* [https://t.me/+5KZGSfvbA3swMWUy Чат курса]
* [https://t.me/+5KZGSfvbA3swMWUy Чат курса]
* ['''Таблица с оценками''']
* [https://docs.google.com/spreadsheets/d/e/2PACX-1vSietEbjRwYFk3Q888gREuKDHld_vM1AIRbSTiowKt-9zTb2Not11I9hkTdhIm68-OB7GJ1X6GF4oQi/pubhtml?gid=915915854&single=true '''Таблица с оценками''']
* ['''Очередь проверки ДЗ''']
* [https://docs.google.com/spreadsheets/d/e/2PACX-1vSietEbjRwYFk3Q888gREuKDHld_vM1AIRbSTiowKt-9zTb2Not11I9hkTdhIm68-OB7GJ1X6GF4oQi/pubhtml?gid=2075695586&single=true '''Очередь проверки ДЗ''']


== Доступы ==
== Доступы ==
Строка 14: Строка 28:


== Материалы ==
== Материалы ==
* [https://drive.google.com/drive/folders/1_4PB9PQWmopq1hwF39MTKXpduaqCtbi8?usp=sharing '''Видео занятий''']
* [https://drive.google.com/drive/folders/1x65gaoeA4opWvki4UCD8APgFJQbc07lq?usp=sharing '''Видео занятий''']
* [https://dzen.ru/id/6914713ea9b3de7cf99c3859 '''Видео занятий на ДЗЕН''']
* [https://dzen.ru/suite/cc1d1e65-9ef3-4d46-84df-b2971cba81c8?share_to=link '''Видео занятий ДЗЕН''']
* [https://drive.google.com/drive/folders/1KnNhe8KTndZKjBH5YhulF3ch9l-cxIo3?usp=drive_link '''Слайды презентаций''']
* [https://drive.google.com/drive/folders/1HQy3le_QWMN0jZgaHmLzjViqJuELBqLG?usp=sharing '''Слайды презентаций''']
* [https://gitlab.atp-fivt.org/courses-public/bigdata/hobod2025 Коды семинаров 2026 г.]
* [https://gitlab.atp-fivt.org/courses-public/bigdata/hobod2025 Коды семинаров 2026 г.]
* [https://gitlab.com/hobod/hobod-practice Коды семинаров до 2025 г.]
* [https://gitlab.com/hobod/hobod-practice Коды семинаров до 2025 г.]
Строка 25: Строка 39:
* Каждое оценивается максимум в 1,5 балла.
* Каждое оценивается максимум в 1,5 балла.
* За сдачу позже мягкого дедлайна - 50%
* За сдачу позже мягкого дедлайна - 50%
* За сдачу позже жёсткого -75%. Со штрафом -75% можно сдавать до 26.06, 23:59.
* За сдачу позже жёсткого -75%. Со штрафом -75% можно сдавать до 17.01, 23:59.


=== Мини-тесты ===
=== Мини-тесты ===
Строка 38: Строка 52:
! Жёсткий deadline
! Жёсткий deadline
|-
|-
|[https://docs.google.com/document/d/1IU5vQU5DVHQkI07uWQxaNGooyHl4dl5TzLXFaWcqHGY/edit?usp=drive_link MapReduce] || 22.03 || 29.03
|[https://docs.google.com/document/d/1IU5vQU5DVHQkI07uWQxaNGooyHl4dl5TzLXFaWcqHGY/edit?usp=drive_link MapReduce] || 18.10 || 25.10
|-
|[https://docs.google.com/document/d/1rapw2j1m4xt6d2DkVSTy6kRhxWVPFvZR_SqS3BUFYT8/edit?usp=drive_link Hive] || 12.04 || 19.04
|-
|-
|[https://docs.google.com/document/d/1o5QVjeiKDfDk9zwDxwTMGjHDIDFqRpsmhUg_nR6I4hI/edit?usp=drive_link Spark] || 3.05 ||10.05
|[https://docs.google.com/document/d/1rapw2j1m4xt6d2DkVSTy6kRhxWVPFvZR_SqS3BUFYT8/edit?usp=drive_link Hive] || 01.11 || 08.11
|-
|-
|[https://docs.google.com/document/d/1cTClqFFuMATPorrJPM12APk7RbMdm_emvrhGPjimpW0/edit?usp=drive_link RealTime & Kafka] || 17.05 || 24.05
|[https://docs.google.com/document/d/1o5QVjeiKDfDk9zwDxwTMGjHDIDFqRpsmhUg_nR6I4hI/edit?usp=drive_link Spark] || 22.11 || 29.11
|-
|-
|[https://docs.google.com/document/d/1gidkon_9Mjmnjz2T5E6r3XBTvOYPe76Jut3hcden9Is/edit?usp=drive_link HBase / Casssandra] || 31.05 || 07.06
|[https://docs.google.com/document/d/1cTClqFFuMATPorrJPM12APk7RbMdm_emvrhGPjimpW0/edit?usp=drive_link RealTime & Kafka] || 06.12 || 20.12
|-
|-
|[https://docs.google.com/document/d/1lwPdRx85FS3eWJEq4FPkeQELwqqJSyWgBbap2xZRW70/edit?usp=drive_link Google Spanner] || 07.06 || 14.06
|[https://docs.google.com/document/d/1gidkon_9Mjmnjz2T5E6r3XBTvOYPe76Jut3hcden9Is/edit?usp=drive_link HBase / Casssandra] || 27.12 || 10.01
|}
|}


Строка 64: Строка 76:


=== Экзамен ===
=== Экзамен ===
Экзамен состоится '''ХХ.06.2025'''. Он будет проходить через Прокторинг.
Экзамен состоится '''ХХ.01.2027'''. Он будет проходить через Прокторинг.


Является '''необязательным'''.
Является '''необязательным'''.
Строка 77: Строка 89:


=== Перезачет курса ===
=== Перезачет курса ===
Если вы хотите перпезачесть курс, просьба заполнить [https://forms.gle/rc9SQ6HRT6aXa5AR9 форму] до '''28.02.2026'''.
Если вы хотите перпезачесть курс, просьба заполнить [https://docs.google.com/forms/d/e/1FAIpQLSeE1wMy_jkP6JEt1zIPuDrrhQBvHfZLdXICU_S7FBZT3_NK_g/viewform?usp=dialog форму] до '''28.10.2026'''.


Курс PD (a.k.a. МВС) не перезасчитывается т.к. ХОБОД является его продолжением.
Курс PD (a.k.a. МВС) не перезасчитывается т.к. ХОБОД является его продолжением.


=== Дописывание Quiz'ов  ===
=== Дописывание Quiz'ов  ===
В случае если вы не смогли написать Quiz в указанную дату по технической или другой уважительной причине, заполните, пожалуйста, [https://forms.gle/1Au5AkCmLnadDW816 форму.] до 25.06, 23:59.
В случае если вы не смогли написать Quiz в указанную дату по технической или другой уважительной причине, заполните, пожалуйста, [https://docs.google.com/forms/d/e/1FAIpQLSdFrQ5-Yypsz0oFe7BiCyYeFxOYX2AGJB0EF97tQVHyOAEPqw/viewform?usp=dialog форму.] до '''20.12, 23:59'''.


Дописывание состоится 26.06 начиная с 10:00.
Дописывание состоится 21.12 начиная с 21:40.


{|  class="wikitable"
{|  class="wikitable"
Строка 91: Строка 103:
! Время начала
! Время начала
|-
|-
|HDFS & MapReduce || 10:00
|HDFS & MapReduce || 21:40
|-
|-
|SQL over BigData || 10:15
|SQL over BigData || 21:55
|-
|-
|Spark || 10:30
|Spark || 22:10
|-
|-
|Spark streaming, Kafka & NoSQL over BigData || 10:40
|Spark streaming, Kafka & NoSQL over BigData || 22:20
|}
|}


Текущая версия от 19:11, 5 октября 2026

Общие сведения

  • Семестр: 9 (5й курс)
  • Форма контроля: экзамен
  • Дни и время занятий: пн., 18:40 - 21:35.

Описание курса

По ссылке вы найдете видео-презентацию курса с ответами на вопросы:

Что такое большие данные?

Где они используются?

Какими методами их обрабатывают?

Какие разделы и подходы будут представлены на курсе?

Будет ли практика?

Важные ссылки

Доступы

По вопросам доступов и работы Gitlab-сервера пишите в форму или на почту servers@atp-fivt.org.

Материалы

Домашние задания

Если ни одно домашнее задание не сдано - оценка неудовлетворительно, даже если вы набрали > 2.5.

Планируется 6 домашних заданий.

  • Каждое оценивается максимум в 1,5 балла.
  • За сдачу позже мягкого дедлайна - 50%
  • За сдачу позже жёсткого -75%. Со штрафом -75% можно сдавать до 17.01, 23:59.

Мини-тесты

4 мини-тестов (~10 мин.) на семинарах

  • в сумме 5 баллов

Дедлайны по домашним заданиям

Задание Мягкий deadline Жёсткий deadline
MapReduce 18.10 25.10
Hive 01.11 08.11
Spark 22.11 29.11
RealTime & Kafka 06.12 20.12
HBase / Casssandra 27.12 10.01

В идеальном случае за домашние задания можно получить 9 баллов.

Как сдавать ДЗ:

Бонус

Бонус начисляется за:

  • активное участие в семинарах,
  • помощь коллегам в чате курса.

Возможно получить до 1 балла. Количество студентов, которым может быть начислен бонус, неограничено.

Экзамен

Экзамен состоится ХХ.01.2027. Он будет проходить через Прокторинг.

Является необязательным.

  • вопросы по всему курсу
  • Тест по всему курсу на 30 мин.
  • возможна устная защита по окончанию 30 минут
  • максимальная оценка: 2 балла.

Итого

  • идеальный вариант: 9 + 5 + 2 + 1 = 17 из 10
  • но надо сделать хоть 1 ДЗ.

Перезачет курса

Если вы хотите перпезачесть курс, просьба заполнить форму до 28.10.2026.

Курс PD (a.k.a. МВС) не перезасчитывается т.к. ХОБОД является его продолжением.

Дописывание Quiz'ов

В случае если вы не смогли написать Quiz в указанную дату по технической или другой уважительной причине, заполните, пожалуйста, форму. до 20.12, 23:59.

Дописывание состоится 21.12 начиная с 21:40.

Тест Время начала
HDFS & MapReduce 21:40
SQL over BigData 21:55
Spark 22:10
Spark streaming, Kafka & NoSQL over BigData 22:20

Список рекомендуемых материалов

Основная

  1. Tom White, Hadoop: The Definitive Guide, 4th Edition Storage and Analysis at Internet Scale, Publisher: O'Reilly, Media Release Date: April 2015
  2. Karau, H., Konwinski, A., Wendell, P., & Zaharia, M, Learning Spark: Lightning-Fast Big Data Analysis
  3. Holden Karau et al. Learning Spark. Lightning-fast Data Analytics. Preview Edition. O’Reilly, 2015.

Дополнительная

  1. Chuck Lam. Hadoop in Action. New York: Manning Publications co., 2011.
  2. Alex Holmes , "Hadoop in Practice", 2012
  3. Martin Fowler, "NoSQL", 2013
  4. Eric Redmond, Jim R. Wilson, "Seven Databases in Seven Weeks", 2012
  5. Jonathan Leibiusky, "Getting Started with Storm", 2012
  6. Donald Miner, Adam Shook. MapReduce Design Patterns. O’Reilly, 2013.
  7. Arun C. Murthy et al. Apache Hadoop YARN. Addison-Wesley, 2014.
  8. Spark Core Programming. TutorialsPoint, 2015.
  9. Dario Simonassi, Gabriel Eisbruch, Jonathan Leibiusky. Getting Started with Storm. O’Reilly, 2012.
  10. Edward Capriolo, Dean Wampler, and Jason Rutherglen. Programming Hive. O’Reilly, 2012.
  11. Lars George. HBase: The Definitive Guide. O’Reilly, 2011.
  12. Eben Hewitt. Cassandra: The Definitive Guide. O’Reilly, 2011.
Источник — https://wiki.atp-fivt.org/index.php?title=ХОБОД_Альфа_2026&oldid=5376