https://wiki.atp-fivt.org/api.php?action=feedcontributions&feedformat=atom&user=93.175.9.185 2026-10-16T15:35:44Z Вклад MediaWiki 1.43.3 https://wiki.atp-fivt.org/index.php?title=%D0%9F%D0%B0%D1%80%D0%B0%D0%BB%D0%BB%D0%B5%D0%BB%D1%8C%D0%BD%D1%8B%D0%B5_%D0%B8_%D1%80%D0%B0%D1%81%D0%BF%D1%80%D0%B5%D0%B4%D0%B5%D0%BB%D1%91%D0%BD%D0%BD%D1%8B%D0%B5_%D0%B2%D1%8B%D1%87%D0%B8%D1%81%D0%BB%D0%B5%D0%BD%D0%B8%D1%8F&diff=60 2019-01-21T16:47:50Z

<p>93.175.9.185: /* Семинаристы */</p> <hr /> <div>= Общие сведения =<br /> * Семестр: 5 (третий курс)<br /> * Форма контроля: экзамен<br /> * '''[https://goo.gl/forms/F8TQRkiA1gwdiqkH2 Форма регистрации на курс]'''<br /> * [https://docs.google.com/spreadsheets/d/1mBps9pmarBpU51IQt4KH0jDgf0gsSXrXReIcPM2S3yE Таблица с оценками]<br /> * [https://t.me/joinchat/E1sBpVHHkmZZpZiXhGMFvg Телеграм-чат курса]<br /> * Дополнительную информацию см. в [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI/edit#slide=id.p29 вводной презентации курса]<br /> <br /> '''Материалы занятий'''<br /> * [https://drive.google.com/drive/folders/1divEnjZKOVQWgw-Gk3LWuAeJOEREiljy?usp=sharing Видео лекций]<br /> * [https://drive.google.com/drive/folders/1X2zu88PVzAEPqgHoWYp8G5DXZ0sKQYMx?usp=sharing Слайды презентаций]<br /> * [https://gitlab.com/VeLKerr/pardistrib Материалы семинаров и домашние задания]<br /> * [http://gg.gg/par_distr_piazza Q&amp;A форум &quot;Piazza&quot;]<br /> * [http://gitlab.atp-fivt.org Gitlab для автоматического тестирования ДЗ]<br /> <br /> = Распределённая часть =<br /> == Преподаватели ==<br /> * '''Модуль &quot;Обработка больших данных&quot;:''' <br /> ** Ивченко Олег, <br /> ** Штохов Александр<br /> * '''Модуль &quot;Отказоустойчивые распределенные системы&quot;:''' <br /> ** Липовский Роман<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Ивченко Олег<br /> * Ахтямов Павел<br /> * Сурин Михаил<br /> <br /> == Теоретический трек (лекции) ==<br /> # [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI Распределённые файловые системы (GFS, HDFS). Её составляющие. Их достоинства, недостатки и сфера применения. Чтение и запись в HDFS. HDFS APIs: WebUI, shell, Java API].<br /> # [https://drive.google.com/file/d/1j5NEBSGjROwEXCujSNhFqKfrf9fL-ZGR/view?usp=sharing Парадигма MapReduce. Основная идея, формальное описание. Обзор реализаций. API для работы с Hadoop (Native Java API vs. Streaming), примеры].<br /> # [https://drive.google.com/file/d/1E_90b6GxA7wym3BB5RVsvBSS62bqjreh/view?usp=sharing Типы Join'ов и их реализации в парадигме MR. Паттерны проекттирования MR (pairs, stripes, составные ключи). PageRank в MR. Планировщик задач в YARN].<br /> # [https://drive.google.com/drive/folders/151645JTf7yK3CjuQMn5SM2AlPHtYCPcY?usp=sharing SQL поверх BigData].<br /> <br /> == Практический трек (семинары) ==<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/01-hdfs.md Устройство Hadoop-кластера, HDFS CLI, Web API, внутреннее устройство HDFS].<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/02-hadoop.md Hadoop streaming API. Простейшая программа на MapReduce (подсчёт слов в тексте). Её модификации. Инструменты отладки в MapReduce]<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/03-hadoop2.md Advanced HDFS shell. Hadoop Java API, Joins в MapReduce, Счётчики в MapReduce].<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/04-Hive.md Apache Hive. Язык HiveQL, его расширения (Hive Streaming, User defined functions)].<br /> <br /> == P.S. ==<br /> Если имеются проблемы с доступами на какой-нибудь из сервисов, напишите [https://goo.gl/forms/r5TC8njYkjiY9X7X2 сюда].<br /> <br /> = Параллельная часть =<br /> == Преподаватели ==<br /> Сальников Алексей Николаевич<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Сальников Алексей Николаевич<br /> * Котельников Алексей<br /> * Сурин Михаил<br /> * Ахтямов Павел<br /> <br /> == Теоретический трек (лекции) ==<br /> <br /> == Практический трек (семинары) ==</div>

93.175.9.185 https://wiki.atp-fivt.org/index.php?title=%D0%9F%D0%B0%D1%80%D0%B0%D0%BB%D0%BB%D0%B5%D0%BB%D1%8C%D0%BD%D1%8B%D0%B5_%D0%B8_%D1%80%D0%B0%D1%81%D0%BF%D1%80%D0%B5%D0%B4%D0%B5%D0%BB%D1%91%D0%BD%D0%BD%D1%8B%D0%B5_%D0%B2%D1%8B%D1%87%D0%B8%D1%81%D0%BB%D0%B5%D0%BD%D0%B8%D1%8F&diff=59 2018-10-26T23:05:11Z

<p>93.175.9.185: /* Общие сведения */</p> <hr /> <div>= Общие сведения =<br /> * Семестр: 5 (третий курс)<br /> * Форма контроля: экзамен<br /> * '''[https://goo.gl/forms/F8TQRkiA1gwdiqkH2 Форма регистрации на курс]'''<br /> * [https://docs.google.com/spreadsheets/d/1mBps9pmarBpU51IQt4KH0jDgf0gsSXrXReIcPM2S3yE Таблица с оценками]<br /> * [https://t.me/joinchat/E1sBpVHHkmZZpZiXhGMFvg Телеграм-чат курса]<br /> * Дополнительную информацию см. в [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI/edit#slide=id.p29 вводной презентации курса]<br /> <br /> '''Материалы занятий'''<br /> * [https://drive.google.com/drive/folders/1divEnjZKOVQWgw-Gk3LWuAeJOEREiljy?usp=sharing Видео лекций]<br /> * [https://drive.google.com/drive/folders/1X2zu88PVzAEPqgHoWYp8G5DXZ0sKQYMx?usp=sharing Слайды презентаций]<br /> * [https://gitlab.com/VeLKerr/pardistrib Материалы семинаров и домашние задания]<br /> * [http://gg.gg/par_distr_piazza Q&amp;A форум &quot;Piazza&quot;]<br /> * [http://gitlab.atp-fivt.org Gitlab для автоматического тестирования ДЗ]<br /> <br /> = Распределённая часть =<br /> == Преподаватели ==<br /> * '''Модуль &quot;Обработка больших данных&quot;:''' <br /> ** Ивченко Олег, <br /> ** Штохов Александр<br /> * '''Модуль &quot;Отказоустойчивые распределенные системы&quot;:''' <br /> ** Липовский Роман<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Ивченко Олег<br /> * Ахтямов Павел<br /> * Емельянов Антон<br /> * Сурин Михаил<br /> <br /> == Теоретический трек (лекции) ==<br /> # [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI Распределённые файловые системы (GFS, HDFS). Её составляющие. Их достоинства, недостатки и сфера применения. Чтение и запись в HDFS. HDFS APIs: WebUI, shell, Java API].<br /> # [https://drive.google.com/file/d/1j5NEBSGjROwEXCujSNhFqKfrf9fL-ZGR/view?usp=sharing Парадигма MapReduce. Основная идея, формальное описание. Обзор реализаций. API для работы с Hadoop (Native Java API vs. Streaming), примеры].<br /> # [https://drive.google.com/file/d/1E_90b6GxA7wym3BB5RVsvBSS62bqjreh/view?usp=sharing Типы Join'ов и их реализации в парадигме MR. Паттерны проекттирования MR (pairs, stripes, составные ключи). PageRank в MR. Планировщик задач в YARN].<br /> # [https://drive.google.com/drive/folders/151645JTf7yK3CjuQMn5SM2AlPHtYCPcY?usp=sharing SQL поверх BigData].<br /> <br /> == Практический трек (семинары) ==<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/01-hdfs.md Устройство Hadoop-кластера, HDFS CLI, Web API, внутреннее устройство HDFS].<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/02-hadoop.md Hadoop streaming API. Простейшая программа на MapReduce (подсчёт слов в тексте). Её модификации. Инструменты отладки в MapReduce]<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/03-hadoop2.md Advanced HDFS shell. Hadoop Java API, Joins в MapReduce, Счётчики в MapReduce].<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/04-Hive.md Apache Hive. Язык HiveQL, его расширения (Hive Streaming, User defined functions)].<br /> <br /> == P.S. ==<br /> Если имеются проблемы с доступами на какой-нибудь из сервисов, напишите [https://goo.gl/forms/r5TC8njYkjiY9X7X2 сюда].<br /> <br /> = Параллельная часть =<br /> == Преподаватели ==<br /> Сальников Алексей Николаевич<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Сальников Алексей Николаевич<br /> * Котельников Алексей<br /> * Сурин Михаил<br /> * Ахтямов Павел<br /> <br /> == Теоретический трек (лекции) ==<br /> <br /> == Практический трек (семинары) ==</div>

93.175.9.185 https://wiki.atp-fivt.org/index.php?title=%D0%9F%D0%B0%D1%80%D0%B0%D0%BB%D0%BB%D0%B5%D0%BB%D1%8C%D0%BD%D1%8B%D0%B5_%D0%B8_%D1%80%D0%B0%D1%81%D0%BF%D1%80%D0%B5%D0%B4%D0%B5%D0%BB%D1%91%D0%BD%D0%BD%D1%8B%D0%B5_%D0%B2%D1%8B%D1%87%D0%B8%D1%81%D0%BB%D0%B5%D0%BD%D0%B8%D1%8F&diff=58 2018-10-26T22:59:03Z

<p>93.175.9.185: Добавил Пашу в параллелки</p> <hr /> <div>= Общие сведения =<br /> * Семестр: 5 (третий курс)<br /> * Форма контроля: экзамен<br /> * '''[https://goo.gl/forms/F8TQRkiA1gwdiqkH2 Форма регистрации на курс]'''<br /> * [https://docs.google.com/spreadsheets/d/1mBps9pmarBpU51IQt4KH0jDgf0gsSXrXReIcPM2S3yE Таблица с оценками]<br /> * Дополнительную информацию см. в [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI/edit#slide=id.p29 вводной презентации курса]<br /> <br /> '''Материалы занятий'''<br /> * [https://drive.google.com/drive/folders/1divEnjZKOVQWgw-Gk3LWuAeJOEREiljy?usp=sharing Видео лекций]<br /> * [https://drive.google.com/drive/folders/1X2zu88PVzAEPqgHoWYp8G5DXZ0sKQYMx?usp=sharing Слайды презентаций]<br /> * [https://gitlab.com/VeLKerr/pardistrib Материалы семинаров и домашние задания]<br /> * [http://gg.gg/par_distr_piazza Q&amp;A форум &quot;Piazza&quot;]<br /> * [http://gitlab.atp-fivt.org Gitlab для автоматического тестирования ДЗ]<br /> <br /> = Распределённая часть =<br /> == Преподаватели ==<br /> * '''Модуль &quot;Обработка больших данных&quot;:''' <br /> ** Ивченко Олег, <br /> ** Штохов Александр<br /> * '''Модуль &quot;Отказоустойчивые распределенные системы&quot;:''' <br /> ** Липовский Роман<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Ивченко Олег<br /> * Ахтямов Павел<br /> * Емельянов Антон<br /> * Сурин Михаил<br /> <br /> == Теоретический трек (лекции) ==<br /> # [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI Распределённые файловые системы (GFS, HDFS). Её составляющие. Их достоинства, недостатки и сфера применения. Чтение и запись в HDFS. HDFS APIs: WebUI, shell, Java API].<br /> # [https://drive.google.com/file/d/1j5NEBSGjROwEXCujSNhFqKfrf9fL-ZGR/view?usp=sharing Парадигма MapReduce. Основная идея, формальное описание. Обзор реализаций. API для работы с Hadoop (Native Java API vs. Streaming), примеры].<br /> # [https://drive.google.com/file/d/1E_90b6GxA7wym3BB5RVsvBSS62bqjreh/view?usp=sharing Типы Join'ов и их реализации в парадигме MR. Паттерны проекттирования MR (pairs, stripes, составные ключи). PageRank в MR. Планировщик задач в YARN].<br /> # [https://drive.google.com/drive/folders/151645JTf7yK3CjuQMn5SM2AlPHtYCPcY?usp=sharing SQL поверх BigData].<br /> <br /> == Практический трек (семинары) ==<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/01-hdfs.md Устройство Hadoop-кластера, HDFS CLI, Web API, внутреннее устройство HDFS].<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/02-hadoop.md Hadoop streaming API. Простейшая программа на MapReduce (подсчёт слов в тексте). Её модификации. Инструменты отладки в MapReduce]<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/03-hadoop2.md Advanced HDFS shell. Hadoop Java API, Joins в MapReduce, Счётчики в MapReduce].<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/04-Hive.md Apache Hive. Язык HiveQL, его расширения (Hive Streaming, User defined functions)].<br /> <br /> == P.S. ==<br /> Если имеются проблемы с доступами на какой-нибудь из сервисов, напишите [https://goo.gl/forms/r5TC8njYkjiY9X7X2 сюда].<br /> <br /> = Параллельная часть =<br /> == Преподаватели ==<br /> Сальников Алексей Николаевич<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Сальников Алексей Николаевич<br /> * Котельников Алексей<br /> * Сурин Михаил<br /> * Ахтямов Павел<br /> <br /> == Теоретический трек (лекции) ==<br /> <br /> == Практический трек (семинары) ==</div>

93.175.9.185 https://wiki.atp-fivt.org/index.php?title=%D0%9F%D0%B0%D1%80%D0%B0%D0%BB%D0%BB%D0%B5%D0%BB%D1%8C%D0%BD%D1%8B%D0%B5_%D0%B8_%D1%80%D0%B0%D1%81%D0%BF%D1%80%D0%B5%D0%B4%D0%B5%D0%BB%D1%91%D0%BD%D0%BD%D1%8B%D0%B5_%D0%B2%D1%8B%D1%87%D0%B8%D1%81%D0%BB%D0%B5%D0%BD%D0%B8%D1%8F&diff=57 2018-10-03T13:49:04Z

<p>93.175.9.185: /* Практический трек (семинары) */</p> <hr /> <div>= Общие сведения =<br /> * Семестр: 5 (третий курс)<br /> * Форма контроля: экзамен<br /> * '''[https://goo.gl/forms/F8TQRkiA1gwdiqkH2 Форма регистрации на курс]'''<br /> * [https://docs.google.com/spreadsheets/d/1mBps9pmarBpU51IQt4KH0jDgf0gsSXrXReIcPM2S3yE Таблица с оценками]<br /> * Дополнительную информацию см. в [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI/edit#slide=id.p29 вводной презентации курса]<br /> <br /> '''Материалы занятий'''<br /> * [https://drive.google.com/drive/folders/1divEnjZKOVQWgw-Gk3LWuAeJOEREiljy?usp=sharing Видео лекций]<br /> * [https://drive.google.com/drive/folders/1X2zu88PVzAEPqgHoWYp8G5DXZ0sKQYMx?usp=sharing Слайды презентаций]<br /> * [https://gitlab.com/VeLKerr/pardistrib Материалы семинаров и домашние задания]<br /> * [http://gg.gg/par_distr_piazza Q&amp;A форум &quot;Piazza&quot;]<br /> * [http://gitlab.atp-fivt.org Gitlab для автоматического тестирования ДЗ]<br /> <br /> = Распределённая часть =<br /> == Преподаватели ==<br /> * '''Модуль &quot;Обработка больших данных&quot;:''' <br /> ** Ивченко Олег, <br /> ** Штохов Александр<br /> * '''Модуль &quot;Отказоустойчивые распределенные системы&quot;:''' <br /> ** Липовский Роман<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Ивченко Олег<br /> * Ахтямов Павел<br /> * Емельянов Антон<br /> * Сурин Михаил<br /> <br /> == Теоретический трек (лекции) ==<br /> # [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI Распределённые файловые системы (GFS, HDFS). Её составляющие. Их достоинства, недостатки и сфера применения. Чтение и запись в HDFS. HDFS APIs: WebUI, shell, Java API].<br /> # [https://drive.google.com/file/d/1j5NEBSGjROwEXCujSNhFqKfrf9fL-ZGR/view?usp=sharing Парадигма MapReduce. Основная идея, формальное описание. Обзор реализаций. API для работы с Hadoop (Native Java API vs. Streaming), примеры].<br /> # [https://drive.google.com/file/d/1E_90b6GxA7wym3BB5RVsvBSS62bqjreh/view?usp=sharing Типы Join'ов и их реализации в парадигме MR. Паттерны проекттирования MR (pairs, stripes, составные ключи). PageRank в MR. Планировщик задач в YARN].<br /> # [https://drive.google.com/drive/folders/151645JTf7yK3CjuQMn5SM2AlPHtYCPcY?usp=sharing SQL поверх BigData].<br /> <br /> == Практический трек (семинары) ==<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/01-hdfs.md Устройство Hadoop-кластера, HDFS CLI, Web API, внутреннее устройство HDFS].<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/02-hadoop.md Hadoop streaming API. Простейшая программа на MapReduce (подсчёт слов в тексте). Её модификации. Инструменты отладки в MapReduce]<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/03-hadoop2.md Advanced HDFS shell. Hadoop Java API, Joins в MapReduce, Счётчики в MapReduce].<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/04-Hive.md Apache Hive. Язык HiveQL, его расширения (Hive Streaming, User defined functions)].<br /> <br /> == P.S. ==<br /> Если имеются проблемы с доступами на какой-нибудь из сервисов, напишите [https://goo.gl/forms/r5TC8njYkjiY9X7X2 сюда].<br /> <br /> = Параллельная часть =<br /> == Преподаватели ==<br /> Сальников Алексей Николаевич<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Сальников Алексей Николаевич<br /> * Котельников Алексей<br /> * Сурин Михаил <br /> <br /> == Теоретический трек (лекции) ==<br /> <br /> == Практический трек (семинары) ==</div>

93.175.9.185 https://wiki.atp-fivt.org/index.php?title=%D0%9F%D0%B0%D1%80%D0%B0%D0%BB%D0%BB%D0%B5%D0%BB%D1%8C%D0%BD%D1%8B%D0%B5_%D0%B8_%D1%80%D0%B0%D1%81%D0%BF%D1%80%D0%B5%D0%B4%D0%B5%D0%BB%D1%91%D0%BD%D0%BD%D1%8B%D0%B5_%D0%B2%D1%8B%D1%87%D0%B8%D1%81%D0%BB%D0%B5%D0%BD%D0%B8%D1%8F&diff=56 2018-09-30T12:32:49Z

<p>93.175.9.185: /* Практический трек (семинары) */</p> <hr /> <div>= Общие сведения =<br /> * Семестр: 5 (третий курс)<br /> * Форма контроля: экзамен<br /> * '''[https://goo.gl/forms/F8TQRkiA1gwdiqkH2 Форма регистрации на курс]'''<br /> * [https://docs.google.com/spreadsheets/d/1mBps9pmarBpU51IQt4KH0jDgf0gsSXrXReIcPM2S3yE Таблица с оценками]<br /> * Дополнительную информацию см. в [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI/edit#slide=id.p29 вводной презентации курса]<br /> <br /> '''Материалы занятий'''<br /> * [https://drive.google.com/drive/folders/1divEnjZKOVQWgw-Gk3LWuAeJOEREiljy?usp=sharing Видео лекций]<br /> * [https://drive.google.com/drive/folders/1X2zu88PVzAEPqgHoWYp8G5DXZ0sKQYMx?usp=sharing Слайды презентаций]<br /> * [https://gitlab.com/VeLKerr/pardistrib Материалы семинаров и домашние задания]<br /> * [http://gg.gg/par_distr_piazza Q&amp;A форум &quot;Piazza&quot;]<br /> * [http://gitlab.atp-fivt.org Gitlab для автоматического тестирования ДЗ]<br /> <br /> = Распределённая часть =<br /> == Преподаватели ==<br /> * '''Модуль &quot;Обработка больших данных&quot;:''' <br /> ** Ивченко Олег, <br /> ** Штохов Александр<br /> * '''Модуль &quot;Отказоустойчивые распределенные системы&quot;:''' <br /> ** Липовский Роман<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Ивченко Олег<br /> * Ахтямов Павел<br /> * Емельянов Антон<br /> * Сурин Михаил<br /> <br /> == Теоретический трек (лекции) ==<br /> # [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI Распределённые файловые системы (GFS, HDFS). Её составляющие. Их достоинства, недостатки и сфера применения. Чтение и запись в HDFS. HDFS APIs: WebUI, shell, Java API].<br /> # [https://drive.google.com/file/d/1j5NEBSGjROwEXCujSNhFqKfrf9fL-ZGR/view?usp=sharing Парадигма MapReduce. Основная идея, формальное описание. Обзор реализаций. API для работы с Hadoop (Native Java API vs. Streaming), примеры].<br /> # [https://drive.google.com/file/d/1E_90b6GxA7wym3BB5RVsvBSS62bqjreh/view?usp=sharing Типы Join'ов и их реализации в парадигме MR. Паттерны проекттирования MR (pairs, stripes, составные ключи). PageRank в MR. Планировщик задач в YARN].<br /> # [https://drive.google.com/drive/folders/151645JTf7yK3CjuQMn5SM2AlPHtYCPcY?usp=sharing SQL поверх BigData].<br /> <br /> == Практический трек (семинары) ==<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/01-hdfs.md Устройство Hadoop-кластера, HDFS CLI, Web API, внутреннее устройство HDFS].<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/02-hadoop.md Hadoop streaming API. Простейшая программа на MapReduce (подсчёт слов в тексте). Её модификации. Инструменты отладки в MapReduce]<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/03-hadoop2.md Advanced HDFS shell. Hadoop Java API, Joins в MapReduce, Счётчики в MapReduce].<br /> # Apache Hive. Язык HiveQL, его расширения (Hive Streaming, User defined functions).<br /> <br /> == P.S. ==<br /> Если имеются проблемы с доступами на какой-нибудь из сервисов, напишите [https://goo.gl/forms/r5TC8njYkjiY9X7X2 сюда].<br /> <br /> = Параллельная часть =<br /> == Преподаватели ==<br /> Сальников Алексей Николаевич<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Сальников Алексей Николаевич<br /> * Котельников Алексей<br /> * Сурин Михаил <br /> <br /> == Теоретический трек (лекции) ==<br /> <br /> == Практический трек (семинары) ==</div>

93.175.9.185 https://wiki.atp-fivt.org/index.php?title=%D0%9F%D0%B0%D1%80%D0%B0%D0%BB%D0%BB%D0%B5%D0%BB%D1%8C%D0%BD%D1%8B%D0%B5_%D0%B8_%D1%80%D0%B0%D1%81%D0%BF%D1%80%D0%B5%D0%B4%D0%B5%D0%BB%D1%91%D0%BD%D0%BD%D1%8B%D0%B5_%D0%B2%D1%8B%D1%87%D0%B8%D1%81%D0%BB%D0%B5%D0%BD%D0%B8%D1%8F&diff=55 2018-09-26T22:41:13Z

<p>93.175.9.185: /* Теоретический трек (лекции) */</p> <hr /> <div>= Общие сведения =<br /> * Семестр: 5 (третий курс)<br /> * Форма контроля: экзамен<br /> * '''[https://goo.gl/forms/F8TQRkiA1gwdiqkH2 Форма регистрации на курс]'''<br /> * [https://docs.google.com/spreadsheets/d/1mBps9pmarBpU51IQt4KH0jDgf0gsSXrXReIcPM2S3yE Таблица с оценками]<br /> * Дополнительную информацию см. в [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI/edit#slide=id.p29 вводной презентации курса]<br /> <br /> '''Материалы занятий'''<br /> * [https://drive.google.com/drive/folders/1divEnjZKOVQWgw-Gk3LWuAeJOEREiljy?usp=sharing Видео лекций]<br /> * [https://drive.google.com/drive/folders/1X2zu88PVzAEPqgHoWYp8G5DXZ0sKQYMx?usp=sharing Слайды презентаций]<br /> * [https://gitlab.com/VeLKerr/pardistrib Материалы семинаров и домашние задания]<br /> * [http://gg.gg/par_distr_piazza Q&amp;A форум &quot;Piazza&quot;]<br /> * [http://gitlab.atp-fivt.org Gitlab для автоматического тестирования ДЗ]<br /> <br /> = Распределённая часть =<br /> == Преподаватели ==<br /> * '''Модуль &quot;Обработка больших данных&quot;:''' <br /> ** Ивченко Олег, <br /> ** Штохов Александр<br /> * '''Модуль &quot;Отказоустойчивые распределенные системы&quot;:''' <br /> ** Липовский Роман<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Ивченко Олег<br /> * Ахтямов Павел<br /> * Емельянов Антон<br /> * Сурин Михаил<br /> <br /> == Теоретический трек (лекции) ==<br /> # [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI Распределённые файловые системы (GFS, HDFS). Её составляющие. Их достоинства, недостатки и сфера применения. Чтение и запись в HDFS. HDFS APIs: WebUI, shell, Java API].<br /> # [https://drive.google.com/file/d/1j5NEBSGjROwEXCujSNhFqKfrf9fL-ZGR/view?usp=sharing Парадигма MapReduce. Основная идея, формальное описание. Обзор реализаций. API для работы с Hadoop (Native Java API vs. Streaming), примеры].<br /> # [https://drive.google.com/file/d/1E_90b6GxA7wym3BB5RVsvBSS62bqjreh/view?usp=sharing Типы Join'ов и их реализации в парадигме MR. Паттерны проекттирования MR (pairs, stripes, составные ключи). PageRank в MR. Планировщик задач в YARN].<br /> # [https://drive.google.com/drive/folders/151645JTf7yK3CjuQMn5SM2AlPHtYCPcY?usp=sharing SQL поверх BigData].<br /> <br /> == Практический трек (семинары) ==<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/01-hdfs.md Устройство Hadoop-кластера, HDFS CLI, Web API, внутреннее устройство HDFS].<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/02-hadoop.md Hadoop streaming API. Простейшая программа на MapReduce (подсчёт слов в тексте). Её модификации. Инструменты отладки в MapReduce]<br /> # Hadoop Java API, Joins в MapReduce, Счётчики в MapReduce.<br /> # Apache Hive. Язык HiveQL, его расширения (Hive Streaming, User defined functions).<br /> <br /> == P.S. ==<br /> Если имеются проблемы с доступами на какой-нибудь из сервисов, напишите [https://goo.gl/forms/r5TC8njYkjiY9X7X2 сюда].<br /> <br /> = Параллельная часть =<br /> == Преподаватели ==<br /> Сальников Алексей Николаевич<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Сальников Алексей Николаевич<br /> * Котельников Алексей<br /> * Сурин Михаил <br /> <br /> == Теоретический трек (лекции) ==<br /> <br /> == Практический трек (семинары) ==</div>

93.175.9.185 https://wiki.atp-fivt.org/index.php?title=%D0%9F%D0%B0%D1%80%D0%B0%D0%BB%D0%BB%D0%B5%D0%BB%D1%8C%D0%BD%D1%8B%D0%B5_%D0%B8_%D1%80%D0%B0%D1%81%D0%BF%D1%80%D0%B5%D0%B4%D0%B5%D0%BB%D1%91%D0%BD%D0%BD%D1%8B%D0%B5_%D0%B2%D1%8B%D1%87%D0%B8%D1%81%D0%BB%D0%B5%D0%BD%D0%B8%D1%8F&diff=52 2018-09-17T16:37:43Z

<p>93.175.9.185: /* Практический трек (семинары) */</p> <hr /> <div>= Общие сведения =<br /> * Семестр: 5 (третий курс)<br /> * Форма контроля: экзамен<br /> * '''[https://goo.gl/forms/F8TQRkiA1gwdiqkH2 Форма регистрации на курс]'''<br /> * [https://docs.google.com/spreadsheets/d/1mBps9pmarBpU51IQt4KH0jDgf0gsSXrXReIcPM2S3yE Таблица с оценками]<br /> * Дополнительную информацию см. в [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI/edit#slide=id.p29 вводной презентации курса]<br /> <br /> '''Материалы занятий'''<br /> * [https://drive.google.com/drive/folders/1divEnjZKOVQWgw-Gk3LWuAeJOEREiljy?usp=sharing Видео лекций]<br /> * [https://drive.google.com/drive/folders/1X2zu88PVzAEPqgHoWYp8G5DXZ0sKQYMx?usp=sharing Слайды презентаций]<br /> * [https://gitlab.com/VeLKerr/pardistrib Материалы семинаров и домашние задания]<br /> * [http://gg.gg/par_distr_piazza Q&amp;A форум &quot;Piazza&quot;]<br /> * [http://gitlab.atp-fivt.org Gitlab для автоматического тестирования ДЗ]<br /> <br /> = Распределённая часть =<br /> == Преподаватели ==<br /> * '''Модуль &quot;Обработка больших данных&quot;:''' <br /> ** Ивченко Олег, <br /> ** Штохов Александр<br /> * '''Модуль &quot;Отказоустойчивые распределенные системы&quot;:''' <br /> ** Липовский Роман<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Ивченко Олег<br /> * Ахтямов Павел<br /> * Емельянов Антон<br /> * Сурин Михаил<br /> <br /> == Теоретический трек (лекции) ==<br /> # [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI Распределённые файловые системы (GFS, HDFS). Её составляющие. Их достоинства, недостатки и сфера применения. Чтение и запись в HDFS. HDFS APIs: WebUI, shell, Java API].<br /> # [https://drive.google.com/file/d/1j5NEBSGjROwEXCujSNhFqKfrf9fL-ZGR/view?usp=sharing Парадигма MapReduce. Основная идея, формальное описание. Обзор реализаций. API для работы с Hadoop (Native Java API vs. Streaming), примеры].<br /> # Типы Join'ов и их реализации в парадигме MR. Паттерны проекттирования MR (pairs, stripes, составные ключи). PageRank в MR. Планировщик задач в YARN.<br /> # SQL поверх BigData.<br /> <br /> == Практический трек (семинары) ==<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/01-hdfs.md Устройство Hadoop-кластера, HDFS CLI, Web API, внутреннее устройство HDFS].<br /> # Hadoop streaming API. Простейшая программа на MapReduce (подсчёт слов в тексте). Её модификации. Инструменты отладки в MapReduce<br /> # Hadoop Java API, Joins в MapReduce, Счётчики в MapReduce.<br /> # Apache Hive. Язык HiveQL, его расширения (Hive Streaming, User defined functions).<br /> <br /> == P.S. ==<br /> Если имеются проблемы с доступами на какой-нибудь из сервисов, напишите [https://goo.gl/forms/r5TC8njYkjiY9X7X2 сюда].<br /> <br /> = Параллельная часть =<br /> == Преподаватели ==<br /> Сальников Алексей Николаевич<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Сальников Алексей Николаевич<br /> * Котельников Алексей<br /> * Сурин Михаил <br /> <br /> == Теоретический трек (лекции) ==<br /> <br /> == Практический трек (семинары) ==</div>

93.175.9.185 https://wiki.atp-fivt.org/index.php?title=%D0%9F%D0%B0%D1%80%D0%B0%D0%BB%D0%BB%D0%B5%D0%BB%D1%8C%D0%BD%D1%8B%D0%B5_%D0%B8_%D1%80%D0%B0%D1%81%D0%BF%D1%80%D0%B5%D0%B4%D0%B5%D0%BB%D1%91%D0%BD%D0%BD%D1%8B%D0%B5_%D0%B2%D1%8B%D1%87%D0%B8%D1%81%D0%BB%D0%B5%D0%BD%D0%B8%D1%8F&diff=51 2018-09-16T14:20:06Z

<p>93.175.9.185: /* Общие сведения */</p> <hr /> <div>= Общие сведения =<br /> * Семестр: 5 (третий курс)<br /> * Форма контроля: экзамен<br /> * '''[https://goo.gl/forms/F8TQRkiA1gwdiqkH2 Форма регистрации на курс]'''<br /> * [https://docs.google.com/spreadsheets/d/1mBps9pmarBpU51IQt4KH0jDgf0gsSXrXReIcPM2S3yE Таблица с оценками]<br /> * Дополнительную информацию см. в [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI/edit#slide=id.p29 вводной презентации курса]<br /> <br /> '''Материалы занятий'''<br /> * [https://drive.google.com/drive/folders/1divEnjZKOVQWgw-Gk3LWuAeJOEREiljy?usp=sharing Видео лекций]<br /> * [https://drive.google.com/drive/folders/1X2zu88PVzAEPqgHoWYp8G5DXZ0sKQYMx?usp=sharing Слайды презентаций]<br /> * [https://gitlab.com/VeLKerr/pardistrib Материалы семинаров и домашние задания]<br /> * [http://gg.gg/par_distr_piazza Q&amp;A форум &quot;Piazza&quot;]<br /> * [http://gitlab.atp-fivt.org Gitlab для автоматического тестирования ДЗ]<br /> <br /> = Распределённая часть =<br /> == Преподаватели ==<br /> * '''Модуль &quot;Обработка больших данных&quot;:''' <br /> ** Ивченко Олег, <br /> ** Штохов Александр<br /> * '''Модуль &quot;Отказоустойчивые распределенные системы&quot;:''' <br /> ** Липовский Роман<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Ивченко Олег<br /> * Ахтямов Павел<br /> * Емельянов Антон<br /> * Сурин Михаил<br /> <br /> == Теоретический трек (лекции) ==<br /> # [https://docs.google.com/presentation/d/1206T54F84HDhKbScxrDFzLnERRGwu0oLrbWEJ3mT9GI Распределённые файловые системы (GFS, HDFS). Её составляющие. Их достоинства, недостатки и сфера применения. Чтение и запись в HDFS. HDFS APIs: WebUI, shell, Java API].<br /> # [https://drive.google.com/file/d/1j5NEBSGjROwEXCujSNhFqKfrf9fL-ZGR/view?usp=sharing Парадигма MapReduce. Основная идея, формальное описание. Обзор реализаций. API для работы с Hadoop (Native Java API vs. Streaming), примеры].<br /> # Типы Join'ов и их реализации в парадигме MR. Паттерны проекттирования MR (pairs, stripes, составные ключи). PageRank в MR. Планировщик задач в YARN.<br /> # SQL поверх BigData.<br /> <br /> == Практический трек (семинары) ==<br /> # [https://gitlab.com/VeLKerr/pardistrib/blob/master/practice/01-hdfs.md Устройство Hadoop-кластера, HDFS CLI, Web API, внутреннее устройство HDFS].<br /> # Hadoop Java API, Hadoop streaming API. Простейшая программа на MapReduce (подсчёт слов в тексте). Её модификации.<br /> # Joins в MapReduce, инструменты отладки в MapReduce.<br /> # Apache Hive. Язык HiveQL, его расширения (Hive Streaming, User defined functions).<br /> <br /> == P.S. ==<br /> Если имеются проблемы с доступами на какой-нибудь из сервисов, напишите [https://goo.gl/forms/r5TC8njYkjiY9X7X2 сюда].<br /> <br /> = Параллельная часть =<br /> == Преподаватели ==<br /> Сальников Алексей Николаевич<br /> <br /> == Семинаристы ==<br /> * Долуденко Алексей<br /> * Сальников Алексей Николаевич<br /> * Котельников Алексей<br /> * Сурин Михаил <br /> <br /> == Теоретический трек (лекции) ==<br /> <br /> == Практический трек (семинары) ==</div>

93.175.9.185