Курс Обработка больших объемов структурированной и неструктурированной информации из различных источников (Big Data) в авторизованном центре обучения ФОРС.

Главная

Курсы

Другие направления обучения

Большие данные

Обработка больших объемов структурированной и неструктурированной информации из различных источников (Big Data)

F.PBD

Обработка больших объемов структурированной и неструктурированной информации из различных источников (Big Data)

Цели обучения

Получение знаний о технологиях и инструментарии Big Data.
Приобретение компетенций по формированию информационных ресурсов с большим объемом данных и использованию инструментария Big Data в прикладных целях.
Совершенствование компетенций использования современных методов накопления, хранения, обработки, анализа и представления данных и результатов расчета на их основе неструктурированной и структурированной информации.
Повышение эффективности работы: сокращение времени выполнения заданий, уменьшение риска ошибок.

40 000₽

Длительность

2 дня (16ч в неделю)

Доступ к курсу

Навсегда в личном кабинете

Документы

Удостоверение о повышении квалификации

Количество слушателей

Укажите чтобы рассчитать скидку

Не подходит расписание? Выберите дату и форму обучения удобную для вас!

Выбрать свою дату

Для корпоративных клиентов

Основные вопросы:

Описание методов и задач обработки Big Data.
Методы машинного обучения (задача классификации и кластеризации, в частности задача формирования статистических выборок).
Области применения технологий Big Data.
Основные характеристики больших данных и их влияние на сбор, хранение, обработку и анализ данных.
Критерии аналитических задач, решение которых предпочтительно с использованием технологий Big Datа.
Обзор методов бизнес-аналитики.
Введение в бизнес-аналитику с использованием методов класса machine learning.
Языки и модели программирования, используемые в технологиях Big Data.
Средства визуализации в стеке Big Data.
Верхнеуровневая архитектура Big Data решений.
Ограничения текущих технологий Big Data.
Организационные аспекты внедрения бизнес-аналитики на Big Data.

Введение

Цели и содержание курса
Домашняя страница виртуальной машины Oracle Big Data Lite используемая в данном курсе
Старт виртуальной машины Oracle Big Data Lite

Большие данные

Обзор
Big Data
Характеристики Big Data
Значение Big Data
Возможности Big Data: Примеры
«Вызовы» Big Data
Расширение границ управления информацией
Простая функциональная модель для Big Data
Концептуальная архитектура логики управления информацией от Oracle
Шаблон разработки архитектуры управления данными
Лаборатория данных
Шаблон разработки архитектуры управления данными: информационная платформа
Шаблон разработки архитектуры управления данными: применение данных
Шаблон разработки архитектуры управления данными : информационное решение
Шаблон разработки архитектуры управления данными: события в реальном времени
Шаблоны проектирования и карта использования компонент
Адаптация Big Data и шаблоны внедрения
Подходы к архитектуре управления данными: Схема на запись и Схема на чтение

Экосистема больших данных

Цели
Компьютерные кластеры
Распределенные вычисления
Apache Hadoop
Виды аналитики, используемые в Hadoop
Экосистема Apache Hadoop
Основные компоненты Apache Hadoop
Ключевые определения HDFS
NameNode (NN)
DataNodes (DN)
Платформа MapRedu
Преимущества MapReduce
MapReduce Job
MapReduce пример: простой счетчик слов в тексте MapReduce различия версий
Apache Spark
Введение в Spark - Spark: компоненты для распределенной работы
Resilient
Distributed Dataset (RDD)
Операции RDD - Свойства RDD - Система обработки Directed Acyclic Graph –
Поставка дистрибутива Cloudera,включающая Apache Hadoop(CDH)
CDH Архитектура - CDH Компоненты - CDH Архитектура - CDH компоненты

Способы интеграции Больших Данных - Обзор

Унификация данных: типичные требования
Интеграция данных по разным шаблонам
Введение в опции унификации данных
Унификация данных:
- Пакетная загрузка Sqoop
- Oracle Loader для Hadoop (OLH) Copy to BDA
Унификация данных: Пакетная и динамическая загрузка
Oracle SQL Connector для Hadoop
Унификация данных: ETL и синхронизация
Oracle Data Integrator for Big Data
Oracle GoldenGate for Big Data
Унификация данных:
- Динамический доступ
- Барьеры на пути эффективного внедрения технологий Big Data
Преодоление барьеров перед началом использования Big Data
Oracle Big Data SQL
Цели и преимущества
Oracle Big Data SQL
Когда использовать какие технологии Oracle?

Углубленная Аналитика

Цели
Oracle Advanced Analytics (OAA)
OAA: Oracle Data Mining
Что такое Data Mining?
Возможности применения Data Mining
Определение основных свойств Data Mining
Контролируемые (Supervised) методы Data Mining
Контролируемые алгоритмы Data Mining
Неконтролируемые (Unsupervised) методы Data Mining
Oracle Data Mining: Обзор
OAA: Oracle R Enterprise
Что такое R?
Кто использует R?
Почему статистики, аналитики, ученые по данным используют R?
Ограничения R
Стратегия Oracle для R-сообщества
Oracle R Enterprise
ORE: Возможности программы
ORE: Целевая среда
ORE: Источники данных
ORE и Hadoop
ORAAH:
- Архитектура

Big Data Discovery

Обзор
Big Data Discovery
Поиск данных
Просмотр данных
Преобразование и обогащение данные
Поиск информации
Обмен мнениями
BDD: Технические инновации в Hadoop

Анна Черникова

О курсе "Java SE 11: Programming Complete"

Большое спасибо преподавателю за отлично проведенное обучение, грамотный подход к учащимся и понятные объяснения. Очень важно, когда можно сразу в процессе обучения задать вопрос и получить корректный понятный ответ. Преподаватель был явно заинтересован, чтобы все было понятно.

Юлия Мельникова

О курсе "Расширенное администрирование ОС Astra Linux Special Edition 1.8"

Проходила курсы у Керимова Георгия. Правильное решение было пойти именно на очное обучение. Информации много, пришлось прям поднапрячься. Преподаватель очень много объяснял, отвечал на миллионы вопросов. После пройденного модуля делали сразу задания по практике.

Анонимно

О курсе "Java SE 11: Programming Complete"

Проходил курсы "Java. Основы программирования". Проведение было интересным, преподаватель очень много объяснял. Параллельно применяли на практике пройденное.
Преподаватель интересно все объяснял, также поправлял на практических этапах.
Советую данные курсы для прохождения другим людям.

Алексей Бармичев

О курсе "Расширенное администрирование ОС Astra Linux Special Edition 1.8"

Обучение понравилось, не первый раз проходил курсы у Керимова Георгия. Нравится его подход и настойчивость в стремлении нас научить, сдать экзамен. Подробно разбирает наши вопросы.

Вообще, очень понравилось именно очное обучение, очень комфортно .

Анонимно

О курсе "Администрирование PostgreSQL 16. Базовый курс"

Очень доволен прохождением этого курса! Материал подается четко, структурированно и по существу, без лишней "воды". Информация излагается доступно, но при этом достаточно глубоко, чтобы сразу применять знания на практике.
Особенно хочется отметить отличную техническую базу — все примеры и задания актуальные, работают в реальных условиях, а лабораторные среды хорошо подготовлены.
Еще один большой плюс — практика после каждой главы. Это помогает сразу закреплять теорию и разбирать нюансы в работе с PostgreSQL. При этом курс дает хорошую основу, а для тех, кто хочет углубиться, есть возможность самостоятельного изучения дополнительных материалов.
Рекомендую этот курс всем, кто хочет системно освоить администрирование PostgreSQL 16!
Отдельная благодарность Иванову Олегу за прекрасную подачу материала, отличную дикцию и высокое качество звука

Олег Рябов

О курсе "Сетевое администрирование РЕД ОС. 2024"

В работе администратора очень важно иметь практический навык. На данном курсе было большое количество практических занятий: развернута небольшая сеть на несколько машин, настроены отдельные различные сетевые сервисы (DNS, DHCP, DDNS). При этом все практические занятия шли по нарастающей: на последнем задании нужно было выполнить работу легко именно благодаря тому, что предыдущие были выполнены даже в рамках заданий "со звездочкой". Преподаватель очень подробно все объяснял и, при необходимости, помогал с вопросами, возникшими у слушателя на каждом индивидуальном тестовом стенде.

Всем рекомендую прохождение обучение по курсу "RS.102" в УЦ "ФОРС".

Денис Зайцев

О курсе "Разработка серверной части приложений PostgreSQL 16. Базовый курс"

Отличный вводный курс для разработчиков, планирующих начать разработку серверной части приложений PostgreSQL.
Не заменяет необходимость самостоятельного изучения, но дает хороший обзор тем для проработки.
Я уже сталкивался в своей практике с миграцией серверного кода Oracle на PostgreSQL, но за несколько лет успел позабыть многие нюансы.
Курс позволил их освежить в памяти и подготовиться к изучению более углубленной части (PP.16.DEV2)

Олег Мансуров

О курсе "PostgreSQL 16. Оптимизация запросов"

Очень интересный курс. Преподаватель Иванов Олег очень хорошо всё объяснил. Это новый курс по PostgreSQL16, увеличение курса с 2 до 3 дней это хорошо. Удалось более хорошо разобраться в теме курса. Курс и преподавателя рекомендую.

Владислав Лещинский

О курсе "Расширенная защита инфраструктуры"

Добрый день!
Отличный курс с разборами и применением на практике!
Хороший преподаватель, практик.
Дается максимально практика и дозированно теория, причем теория - выжимка Важных, необходимых знаний! Даже превысил мои ожидания!

В целях продвижения курса, возможно необходимо, скорректировать его название, позиционирование и рекламную компанию! Возможно стоит добавить материалов по ИБ.
Подобных практических курсов мало, но они востребованы, особенно специалистами ИБ.
Например, специалисты по ИБ обычно рассматривают курсы по Пентесту, Компьютерной криминалистике, Предупреждению компьютерных преступлений и др.
Он будет популярным, актуальность такого курса растет!
Спасибо большое учебному центру Форс и преподавателю за возможность прикоснуться к этим знаниям!

Татьяна Измоденова

О курсе "Основы администрирования РЕД ОС. 2024"

Благодарю УЦ ФОРС и тренера Новоселова Аркадия за обучение на курсе RS.101.24 Основы администрирования, материал был хорошо изложен, практические задания разнообразные. Впервые проходила обучение удаленно, подключение к онлайн-трансляции курса и ПК для выполнения лабораторных работ проходило без проблем, ошибок и прочих трудностей, материалы курса были успешно скачаны из личного кабинета.
Отдельно хочется отметить Аркадия, лекции он проводил хорошо, материал излагал понятно, интересовался обратной связью от всех обучающихся, спокойно и грамотно отвечал на все заданные вопросы.
В целом обучение удалось на все 100%.
Развития и процветания вашему учебному центру! Буду рекомендовать ваш центр знакомым.

Алексей Петрушов

О курсе "Администрирование PostgreSQL 13. Резервное копирование и репликация"

Очень познавательный курс. Рассматриваются многие аспекты резервного копирования и репликации в СУБД PostgreSQL (речь идет о "ванильном" Postgres). Курс позволил собрать воедино мои разрозненные знания по данной тематике, а также расширить их. Осталось только пробовать воплотить все на практике.

Дмитрий Жуков

О курсе "Администрирование PostgreSQL 16. Базовый курс"

Хорошо сформулированный курс и подобраны задания. Преподаватель очень грамотно, профессионально вел занятия, доносил тему, отвечал на вопросы.
Большое спасибо за организацию курса и преподавателю за вовлеченность в дело.

Антон Садиков

О курсе "Миграция с Oracle на Postgres: Подходы, проблемы и решения. Практический курс"

Было бы интересно услышать рассказ об опыте перенесения из Oracle в PostgreSQL/Postgres Pro непереносимых конструкций и процессов: автономных транзакций, глобальных переменных пакета, фоновых заданий. Причём, разными способами. Также были бы очень полезны реальные примеры встраивания Java-кода. Материал курса насыщен примерами, но хотелось бы больше и более сложных. Это не говорит о недостатке прослушанного курса в том объёме, который для него выбран создателями, просто хочется большего. Раз уж сказали "проблемы и решения", так давайте постараемся охватить пошире.
Но в целом - молодцы! :-)

Илья Степанов

О курсе "Администрирование PostgreSQL 16. Базовый курс"

Курс очень понравился. Особенно понравились комментарии преподавателя о соответствии сущностей БД Oracle и Postgres - очень помогло разобраться.

Дмитрий Акимов

О курсе "Автоматизация с использованием Ansible: Базовый курс"

Посетил курс очно. Организация на очень хорошем уровне, в том числе и технически. Приятно, что курс построен на открытых популярных дистрибутивах Debian и Ubuntu.

Материал подавался последовательно от простого к сложному, преподаватель оперативно отвечал на вопросы.
Важно, что было много практических самостоятельных занятий с последующим разбором.

Систему уже начал применять для некоторых задач в своей организации.

Также отзыв оставил преподавателю устно, по окончанию обучения. По моему мнению, как ИТ-специалиста государственной сферы связанной со здравоохранением, в подобном курсе с учетом политических и юридических реалий хорошо бы уделять внимание использованию этой системы для эмуляции групповых политик Windows и работы SCCM. В этом случае систему Ansible можно использовать вместе с графическим интерфейсом Foreman (который входит в том числе репозитарии "отечественных" операционных систем).

Олег Анищенко

О курсе "Oracle Database: Managing Multitenant Architecture"

Курс для меня был очень полезен. Прояснил для себя множество деталей.
Отдельная благодарность преподавателя за плотную подачу информации. Было очень познавательно.

Олег Блинов

О курсе "Администрирование PostgreSQL 13. Резервное копирование и репликация"

Цель поставленная для данного курса достигнута.
Подробно рассмотрены способы обеспечения отказоустойчивости и защиты от потери данных.
На возникающие вопросы преподаватель давал развернутый ответ.

Максим Демидов

О курсе "Администрирование Astra Linux 1.7"

Курс прошел на одном дыхании, материал донесли качественно и в полном объеме. После прохождения курса сразу получилось применить на практике. Большое спасибо преподавателю Керимову Георгию.

Константин Муравьёв

О курсе "Автоматизация с использованием Ansible: Базовый курс"

Курс полезен. Есть плюс - грамотный и хорошо подготовленный преподаватель. Много примеров и практики, даже больше, что мне понравилось, курс преподавателя практически полностью основан на реальных примерах подаваемого материала. Есть небольшой минус - из-за профессиональных навыков преподавателя, он считает, что все слушатели такие же профессионалы, как и он. Материал подается временами очень быстро. В остальном все прекрасно. Курс полностью оправдал ожидания.

Анонимно

О курсе "Oracle Application Express Workshop I"

Добрый день!
проходила обучение в УЦ в апреле 2025 года.
Преподаватель - Панченко Петр.
Большой объем материала и практических работ, на дополнительные вопросы были получены ответы, все интересно и понятно. Спасибо большое!

Как проходит обучение на платформе ФОРС

[ 01 ]

Знакомство с платформой

Платформа учебного центра ФОРС предназначена для удобного и комфортного обучения. Доступ к материалам будет открыт сразу после приобретения курса, а также навсегда доступен в личном кабинете.

[ 02 ]

Обучение

Каждый раздел содержит уроки с теоретическими материалами в видео и текстовых форматах, а так же демонстрацию практических примеров от преподавателей. Самостоятельная работа поможет закрепить полученные знания.

[ 03 ]

Обратная связь и поддержка

Мы поддерживаем онлайн-ресурс, где слушатели всегда могут задать вопрос преподавателю или коллективно обсудить возможные проблемы с другими студентами. Вы всегда сможете получить необходимую информацию в личном кабинете.

[ 04 ]

Дипломы и сертификаты

Все документы об окончании курсов собраны в одном месте в электронном формате — вы всегда можете посмотретьи скачать их в личном кабинете.

Остались вопросы?

Оставьте свои контактные данные — мы с вами свяжемся и все расскажем

Нажимая на кнопку «Отправить», я принимаю условия Политики конфиденциальности, и даю согласие на обработку персональных данных

Свяжитесь с нами

Вы можете написать нам по любому интересующему вас вопросу: от обучения до сотрудничества

Свяжитесь с нами

Вы можете написать нам по любому интересующему вас вопросу: от обучения до сотрудничества

IT Для личностей консультация

Здесь Вы можете записаться на сдачу сертифицированных экзаменов и задать любой интересующий Вас вопрос

Свяжитесь с нами

Здесь Вы можете записаться на сдачу сертифицированных экзаменов и задать любой интересующий Вас вопрос

Свяжитесь с нами

Вы можете написать нам по любому интересующему вас вопросу: от обучения до сотрудничества

Свяжитесь с нами

Здесь Вы можете записаться на сдачу сертифицированных экзаменов и задать любой интересующий Вас вопрос

Свяжитесь с нами

Вы можете написать нам по любому интересующему вас вопросу: от обучения до сотрудничества

Свяжитесь с нами

Здесь Вы можете записаться на сдачу сертифицированных экзаменов и задать любой интересующий Вас вопрос

Выбрать свою дату курса

Записаться на курс

Записаться на вебинар

Анна Черникова

О курсе "Java SE 11: Programming Complete"

Юлия Мельникова

О курсе "Расширенное администрирование ОС Astra Linux Special Edition 1.8"

Анонимно

О курсе "Java SE 11: Programming Complete"

Алексей Бармичев

О курсе "Расширенное администрирование ОС Astra Linux Special Edition 1.8"

Анонимно

О курсе "Администрирование PostgreSQL 16. Базовый курс"

Олег Рябов

О курсе "Сетевое администрирование РЕД ОС. 2024"

Денис Зайцев

О курсе "Разработка серверной части приложений PostgreSQL 16. Базовый курс"

Олег Мансуров

О курсе "PostgreSQL 16. Оптимизация запросов"

Владислав Лещинский

О курсе "Расширенная защита инфраструктуры"

Татьяна Измоденова

О курсе "Основы администрирования РЕД ОС. 2024"

Алексей Петрушов

О курсе "Администрирование PostgreSQL 13. Резервное копирование и репликация"

Дмитрий Жуков

О курсе "Администрирование PostgreSQL 16. Базовый курс"

Антон Садиков

О курсе "Миграция с Oracle на Postgres: Подходы, проблемы и решения. Практический курс"

Илья Степанов

О курсе "Администрирование PostgreSQL 16. Базовый курс"

Дмитрий Акимов

О курсе "Автоматизация с использованием Ansible: Базовый курс"

Олег Анищенко

О курсе "Oracle Database: Managing Multitenant Architecture"

Олег Блинов

О курсе "Администрирование PostgreSQL 13. Резервное копирование и репликация"

Максим Демидов

О курсе "Администрирование Astra Linux 1.7"

Константин Муравьёв

О курсе "Автоматизация с использованием Ansible: Базовый курс"

Анонимно

О курсе "Oracle Application Express Workshop I"

Наше комьюнити