Версия 01:21, 5 сентября 2022

Содержание

1 Общие сведения
- 1.1 Материалы занятий
  - 1.1.1 Лекции
  - 1.1.2 Семинары
- 1.2 Технические ссылки
  - 1.2.1 Сервер Gitlab
  - 1.2.2 Сервера
2 Преподаватели
3 Критерии получения оценки
- 3.1 Домашние задания
- 3.2 Мини-контрольные
4 Литература

Общие сведения

Материалы занятий

Доступ открыт для всех аккаунтов @phystech.edu.

Лекции

Семинары

Технические ссылки

Форма для проблем с инфраструктурой АТП
В случае проблем с кластером MPI, пишите на parallel-cluster-atp@googlegroups.com.

Сервер Gitlab

На данный момент сервер находится по адресу https://gitlab.atp-fivt.org/.

Сервера

MPI & OpenMP:
```
ssh <user>@calc.cod.phystech.edu
```
CUDA:
```
ssh <user>@lorien.atp-fivt.org
```
Hadoop ecosystem:
```
ssh <user>@mipt-client.atp-fivt.org
```

Преподаватели

Лекторы
- Долуденко Алексей
- Ахтямов Павел
- Ивченко Олег
- Липовский Роман (?)

Семинаристы
- Ахтямов Павел Ибрагимович
- Бабин Олег Борисович
- Павлов Дмитрий Владимирович
- Чернецкий Аркадий

Учебные ассистенты

Критерии получения оценки

Формально по курсу экзамен. Он выставляется на основании баллов, полученных в течение семестра.

Домашние задания

Планируется 7 домашних (6 основных и 1 бонусное) заданий. Проверка включает 2 этапа:

прохождение автоматических тестов (начиная с ДЗ по HDFS).
code review при условии выполненного п.1. Исправления по code review можно делать в течение 1 месяца после 1-го комментария.

Репозиторий с домашками

Штраф за опоздание по soft deadline: -50%
Штраф за опоздание по hard deadline: -75%

Сдавать и исправлять домашки можно до 16.01.2023, 23:59.

Мини-контрольные

Состоятся 3 теста. На контрольных нельзя пользоваться IDE и интернетом. Код писать не потребуется.

Название	Дата	Длительность
PD-2021. HDFS & MapReduce	?	15 мин.
PD-2021. Hive & Spark	?	15 мин.
PD-2021. Kafka, Zookeeper	?	15 мин.

В случае если вы не сможете написать КР в указанную дату по технической или другой уважительной причине, просьба заполнить форму на дописывание. Дописывание состоится в январе 2023:

PD-2020. Дописывание. HDFS & MAPREDUCE
PD-2020. Дописывание. Hive & Spark
PD-2020. Дописывание. Zookeeper, Kafka, Cassandra

Каждое дописывание длится ? минут.

Литература

MPI & OpenMP

Антонов А.С. Технологии параллельного программирования MPI и OpenMP: Учеб. пособие. Предисл.: В.А.Садовничий. - М.: Издательство Московского университета, 2012.

CUDA

Дж. Сандерс, Э. Кэррот. Технология CUDA в примерах и задачах, 2013 (рус).
Курс "GPU programming" в Caltech.
Лекция по Scan курсе по комп. графике, Ben-Gurion university
Parallel Prefix Sum (Scan) with CUDA, Mark Harris, NVidia
Книги от Nvidia: GPU gems, GPU gems 2, GPU gems 3. Особенно интересна глава 39 из GPU Gems про Scan.

HDFS

T. White. "Hadoop. The definitive guide", гл. 3 "Hadoop distributed filesystem". (есть русский перевод). 4е издание
Статья про архитектуру HDFS от Константина Швачко (Yahoo!)
Статья про архитектуру HDFS в блоге HortonWorks (Китайская копия :))
Что в действительности делает SNN
Выдержка из курсов Яндекс про HDFS

@@ Строка 3: / Строка 3: @@
 * Форма контроля: диф. зачет
 * '''[https://docs.google.com/forms/d/1z_NK9sEI8fOe03mBf4eZDOzJxypMz1l23VHACUw9eko/edit?usp=sharing Форма регистрации на курс].
-* [https://docs.google.com/spreadsheets/d/1mlCZEKPL5cn9etwAH-O6lyxPwlKUYB2llZl0om7yvxM/edit?usp=sharing План лекций, семинаров, контрольных]
+* [https://docs.google.com/spreadsheets/d/e/2PACX-1vQo2dBxiF80B19Mys-QGPcb8PdnJhjZekofpjG9Q5kr7NJ3UST_7-DzvhCwaRFCFWQcrZPK5qGgIfkC/pubhtml?gid=0&single=true План лекций, семинаров, контрольных]
 * [https://docs.google.com/spreadsheets/d/e/2PACX-1vRPoSdeLaSX2Tli_RgW91JkGqrsl7kCpvF7734u-l_ovXJFJvvmFdYnYowm1UPv50MLhVYxPlUZxokz/pubhtml?gid=1942469843&single=true Таблица с оценками]
 * [https://t.me/+lcRdIVyu8DJjZWVi Телеграм-чат курса]

Параллельные и распределенные вычисления 2022 осень — различия между версиями