Параллельные и распределенные вычисления 2022s - История изменений

VeLKerr: /* Общие сведения */

2022-10-19T09:08:23Z

‎Общие сведения

VeLKerr: /* Мини-контрольные */

2022-04-09T07:01:31Z

‎Мини-контрольные

VeLKerr: /* Общие сведения */

2022-04-05T15:17:13Z

‎Общие сведения

VeLKerr: /* Семинары */

2022-03-16T08:09:35Z

‎Семинары

VeLKerr: /* Домашние задания */

2022-02-01T22:21:39Z

‎Домашние задания

VeLKerr: /* Мини-контрольные */

2022-02-01T22:21:19Z

‎Мини-контрольные

VeLKerr: /* Мини-контрольные */

2022-02-01T22:18:52Z

‎Мини-контрольные

VeLKerr: /* Мини-контрольные */

2022-02-01T22:03:42Z

‎Мини-контрольные

VeLKerr: /* Лекции */

2022-02-01T22:01:48Z

‎Лекции

VeLKerr в 22:01, 1 февраля 2022

2022-02-01T22:01:34Z

@@ Строка 11: / Строка 11: @@
 ===== Лекции =====
-* [https://drive.google.com/drive/folders/11U_3grzJTdIH30GWLMW33MpxYc8JB13b?usp=sharing Видео лекций].
+* [https://drive.google.com/drive/folders/0B2n4K2J_6IZdflFRaUJveTdvR2REdDVxTkp1cm1VRnRNWmdsSGcxWlI4Y1kyVTJmZWtBWE0?resourcekey=0-sk8F-iNm8_2O8g7SDG24IA&usp=sharing Видео лекций].
 * [https://drive.google.com/drive/folders/1HCJLJBEH1eZgDOu104-OIF4cXPC--hgF?usp=sharing Слайды презентаций]

@@ Строка 74: / Строка 74: @@
 ! Длительность
 |-
-| PD-2022s. HDFS & MapReduce || 13.04 || 15 мин.
+| PD-2022s. HDFS & MapReduce || 20.04 || 15 мин.
 |-
 | PD-2022s. Hive & Spark || 11.05 || 20 мин.

@@ Строка 4: / Строка 4: @@
 * '''[http://gg.gg/pd22s-apply Форма регистрации на курс].
 * [http://gg.gg/pd22s-plan План лекций, семинаров, контрольных]
-* [ Таблица с оценками]
+* [https://docs.google.com/spreadsheets/d/1IEfY3pzj4bEErNr-xh3r3HB1OXfX8d09EbnSOqfSvk8/edit#gid=1942469843 Таблица с оценками]
 * [http://gg.gg/pd22s-join Телеграм-чат курса]

@@ Строка 18: / Строка 18: @@
 * [https://gitlab.com/fpmi-atp/pd2022s-supplementary Коды и презентации семинаров]
-*[ '''Домашние задания''']
+*[https://gitlab.com/fpmi-atp/pd2022s-supplementary/global/-/tree/master/homeworks '''Домашние задания''']
 *[https://docs.google.com/spreadsheets/d/1rxr465J4VtRxXnRtID1aRy0RzhpBltpjJYKximAQMB8/edit#gid=0 Интересные ссылки]

@@ Строка 55: / Строка 55: @@
 == Домашние задания ==
 Планируется 6 домашних заданий. Проверка включает 2 этапа:
-# прохождение автоматических тестов (начиная с ДЗ по HDFS).
+# прохождение автоматических тестов (начиная с ДЗ по CUDA).
 # code review при условии выполненного п.1. Исправления по code review можно делать в течение '''1 месяца''' после 1-го комментария.

@@ Строка 78: / Строка 78: @@
 | PD-2022s. Hive & Spark || 11.05 || 20 мин.
 |-
-| PD-2022s. Zookeeper, Kafka, Cassandra || 18.05 || 15 мин.
+| PD-2022s. Zookeeper, Kafka, Cassandra || 25.05 || 15 мин.
 |}
-В случае если вы не сможете написать КР в указанную дату по технической или другой уважительной причине, просьба заполнить [https://forms.gle/uupcgKqiMvbjBvYt8 '''форму на дописывание'''].
+В случае если вы не сможете написать КР в указанную дату по технической или другой уважительной причине, просьба заполнить [https://docs.google.com/forms/d/e/1FAIpQLScJfnIe94kmZwi1ZmB11GwYPPnMJbAuwwJ7PtJDpiJg9dv54Q/viewform?usp=sf_link '''форму на дописывание'''].
 * PD-2022s. Дописывание. HDFS & MAPREDUCE
 * PD-2022s. Дописывание. Hive & Spark
 = Литература =

@@ Строка 74: / Строка 74: @@
 ! Длительность
 |-
-| PD-2021. HDFS & MapReduce || 1.12 || 15 мин.
+| PD-2022s. HDFS & MapReduce || --- || 15 мин.
 |-
-| PD-2021. Hive & Spark || 8.12 || 15 мин.
+| PD-2022s. Hive & Spark || --- || 20 мин.
 |-
-| PD-2021. Kafka, Zookeeper || 15.12 || 15 мин.
+| PD-2022s. Zookeeper, Kafka, Cassandra || --- || 15 мин.
 |}
-В случае если вы не сможете написать КР в указанную дату по технической или другой уважительной причине, просьба заполнить [https://forms.gle/uupcgKqiMvbjBvYt8 '''форму на дописывание''']. Дописывание состоится в январе 2022:
+В случае если вы не сможете написать КР в указанную дату по технической или другой уважительной причине, просьба заполнить [https://forms.gle/uupcgKqiMvbjBvYt8 '''форму на дописывание'''].
-* PD-2020. Дописывание. HDFS & MAPREDUCE
+* PD-2022s. Дописывание. HDFS & MAPREDUCE
-* PD-2020. Дописывание. Hive & Spark
+* PD-2022s. Дописывание. Hive & Spark
-* PD-2020. Дописывание. Zookeeper, Kafka, Cassandra
+* PD-2022s. Дописывание. Zookeeper, Kafka, Cassandra
 = Литература =

← Предыдущая		Версия 22:01, 1 февраля 2022
Строка 1:		Строка 1:
−	PD	+	= Общие сведения =
		+	* Семестр: 6 (третий курс)
		+	* Форма контроля: диф. зачет
		+	* '''[http://gg.gg/pd22s-apply Форма регистрации на курс].
		+	* [http://gg.gg/pd22s-plan План лекций, семинаров, контрольных]
		+	* [ Таблица с оценками]
		+	* [http://gg.gg/pd22s-join Телеграм-чат курса]
		+
		+	=== Материалы занятий ===
		+	Доступ открыт для всех аккаунтов @phystech.edu.
		+
		+	===== Лекции =====
		+	* [https://drive.google.com/drive/folders/11U_3grzJTdIH30GWLMW33MpxYc8JB13b?usp=sharing Видео лекций]. Доступ через почту @phystech.edu
		+	* [https://drive.google.com/drive/folders/1HCJLJBEH1eZgDOu104-OIF4cXPC--hgF?usp=sharing Слайды презентаций]
		+
		+	===== Семинары =====
		+	* [https://drive.google.com/drive/folders/1ire-Ojewis5HQxzrpOVXlRmHr97w2k2I?usp=sharing Видео семинаров]
		+	* [https://gitlab.com/fpmi-atp/pd2022s-supplementary Коды и презентации семинаров]
		+
		+	*[ '''Домашние задания''']
		+	*[https://docs.google.com/spreadsheets/d/1rxr465J4VtRxXnRtID1aRy0RzhpBltpjJYKximAQMB8/edit#gid=0 Интересные ссылки]
		+
		+	== Технические ссылки ==
		+	* [https://forms.gle/PWhsFdPR9iVrsXbs9 Форма для проблем с инфраструктурой АТП]
		+	* В случае проблем с кластером MPI, пишите на '''parallel-cluster-atp@googlegroups.com'''.
		+	==== Сервер Gitlab ====
		+	На данный момент сервер находится по адресу https://gitlab2.atp-fivt.org/, на котором наблюдаются проблемы с сертификатом SSL.
		+
		+	Если вы наблюдаете проблему <pre> fatal: unable to access 'https://gitlab2.atp-fivt.org/...': server certificate verification failed. CAfile: /etc/ssl/certs/ca-certificates.crt CRLfile: none </pre>, временно отключите проверку сертификата <pre>git config --global http.sslVerify "false"</pre>.
		+
		+	==== Сервера ====
		+	* MPI & OpenMP: <pre>ssh <user>@calc.cod.phystech.edu</pre>
		+	* CUDA: <pre>ssh <user>@lorien.atp-fivt.org</pre>
		+	* Hadoop ecosystem: <pre>ssh <user>@mipt-client.atp-fivt.org</pre>
		+
		+	= Преподаватели =
		+	* '''Лекторы'''
		+	** Долуденко Алексей
		+	** Ахтямов Павел
		+	** Ивченко Олег
		+	** Липовский Роман
		+
		+	* '''Семинаристы'''
		+	** Иванова Юлия Александровна
		+	** Госткин Евгений
		+	** Чернецкий Аркадий
		+
		+	* '''Учебные ассистенты'''
		+	** Копец Максим
		+	** Павлов Дмитрий
		+
		+	= Критерии получения оценки =
		+	Зачет выставляется на основании баллов, полученных в течение семестра.
		+
		+	== Домашние задания ==
		+	Планируется 6 домашних заданий. Проверка включает 2 этапа:
		+	# прохождение автоматических тестов (начиная с ДЗ по HDFS).
		+	# code review при условии выполненного п.1. Исправления по code review можно делать в течение '''1 месяца''' после 1-го комментария.
		+
		+	[https://gitlab.com/fpmi-atp/pd2022s-supplementary/global/-/tree/master/homeworks Репозиторий с домашками]
		+
		+	* Штраф за опоздание по soft deadline: -50%
		+	* Штраф за опоздание по hard deadline: -75%
		+
		+	Сдавать и исправлять домашки можно до начала сессии.
		+
		+	== Мини-контрольные ==
		+	Состоятся 3 теста. На контрольных нельзя пользоваться IDE и интернетом. Код писать не потребуется.
		+
		+	{\| class="wikitable"
		+	\|-
		+	! Название
		+	! Дата
		+	! Длительность
		+	\|-
		+	\| PD-2021. HDFS & MapReduce \|\| 1.12 \|\| 15 мин.
		+	\|-
		+	\| PD-2021. Hive & Spark \|\| 8.12 \|\| 15 мин.
		+	\|-
		+	\| PD-2021. Kafka, Zookeeper \|\| 15.12 \|\| 15 мин.
		+	\|}
		+
		+	В случае если вы не сможете написать КР в указанную дату по технической или другой уважительной причине, просьба заполнить [https://forms.gle/uupcgKqiMvbjBvYt8 '''форму на дописывание''']. Дописывание состоится в январе 2022:
		+	* PD-2020. Дописывание. HDFS & MAPREDUCE
		+	* PD-2020. Дописывание. Hive & Spark
		+	* PD-2020. Дописывание. Zookeeper, Kafka, Cassandra
		+
		+	Каждое дописывание длится 15 минут.
		+
		+	= Литература =
		+	=== MPI & OpenMP ===
		+	# Антонов А.С. Технологии параллельного программирования MPI и OpenMP: Учеб. пособие. Предисл.: В.А.Садовничий. - М.: Издательство Московского университета, 2012.
		+
		+	=== CUDA ===
		+	# Дж. Сандерс, Э. Кэррот. Технология CUDA в примерах и задачах, 2013 (рус).
		+	# [http://courses.cms.caltech.edu/cs179/ Курс "GPU programming" в Caltech].
		+	# [https://www.cs.bgu.ac.il/~graph161/wiki.files/09f-GPU%20-%20Scans.pdf Лекция по Scan курсе по комп. графике, Ben-Gurion university]
		+	# [http://developer.download.nvidia.com/compute/cuda/1.1-Beta/x86_website/projects/scan/doc/scan.pdf Parallel Prefix Sum (Scan) with CUDA, Mark Harris, NVidia]
		+	# Книги от Nvidia: [https://developer.nvidia.com/gpugems/gpugems/contributors GPU gems], [https://developer.nvidia.com/gpugems/gpugems2/inside-front-cover GPU gems 2], [https://developer.nvidia.com/gpugems/gpugems3/foreword GPU gems 3]. Особенно интересна глава 39 из [https://developer.nvidia.com/gpugems/gpugems3/part-vi-gpu-computing/chapter-39-parallel-prefix-sum-scan-cuda GPU Gems] про Scan.
		+
		+	=== HDFS ===
		+	# [https://www.oreilly.com/library/view/hadoop-the-definitive/9781491901687/ T. White. "Hadoop. The definitive guide"], гл. 3 "Hadoop distributed filesystem". (есть русский перевод). 4е издание
		+	# [https://storageconference.us/2010/Papers/MSST/Shvachko.pdf Статья про архитектуру HDFS от Константина Швачко (Yahoo!)]
		+	# [http://www.blogjava.net/DLevin/archive/2015/01/25/422428.html Статья про архитектуру HDFS в блоге HortonWorks (Китайская копия :))]
		+	# [http://blog.madhukaraphatak.com/secondary-namenode---what-it-really-do/ Что в действительности делает SNN]
		+	# [https://nancyyanyu.github.io/posts/49a14c15/ Выдержка из курсов Яндекс про HDFS]