Электронный курс

Стандартизация и очистка НСИ

В курсе подробно рассматриваются проблемы, связанные с ведением нормативно-справочной информации организации (НСИ): неполнота, противоречивость, недостоверность или некорректность описаний объектов, несоответствие форматов и другие вопросы. Обсуждаются основные способы очистки и стандартизации объектов: словари, классификаторы, частотный анализ, контрольные числа, регулярные выражения. Практическая часть  построена на решении задач в Loginom.

Для прохождения курса рекомендуется иметь базовые навыки работы с платформой Loginom.

Программа курса

Блок 1. Общие сведения

Объемы данных. Качество данных. Причины загрязнения. Виды ошибок в данных. Понятия очистки и стандартизации данных. Причины необходимости очистки. Показатели качества данных.

Блок 2. Методы очистки данных

Основные методы очистки. Использование справочников и таблиц замены. Анализ строк. Регулярные выражения. Частотный анализ. Контрольные числа. Отработка теории на практике в Loginom.

Блок 3. Основы регулярных выражений

Регулярные выражения и история их возникновения. Диалекты регулярных выражений. Регулярные выражения Perl. Возможности регулярных выражений. Инструменты для проверки. Метасимволы. Квантификаторы. Дополнительные опции. Примеры. Знакомство с регулярными выражениями в Loginom.

Блок 4. Объединение методов

Применимость методов. Использование одного метода. Комбинирование методов. Общий алгоритм очистки данных. Решение задачи по очистке и стандартизации списка регионов в Loginom.

Блок 5. Контроль

Практический кейс для самостоятельного решения. Итоговый тест.

 

pdfПодробная программа курса
Смотрите также
Основы работы в Loginom
Стартовый курс для быстрого погружения в работу с low-code платформой Loginom за 12 занятий
Подготовка данных
Базовый курс по подготовке и преобразованию данных в Loginom. Рассматриваются различные методы преобразования данных и приведения их к различному формату.
Loginom Silver Kit
Бесплатный набор компонентов, облегчающий рутинный труд аналитика по работе в Loginom
Все курсы и библиотеки
Этот курс доступен в тарифах:
Во все тарифные планы входит:
  • Доступ к курсам и библиотекам компонентов на время действия подписки
  • Общение на форуме с другими слушателями и разработчиками курсов
  • Весь новый контент, вышедший во время действия подписки
Вашу квалификацию подтвердит сертификат о прохождении курсов
Отзывы

Для того, чтобы оценить возможности промышленного использования платформы в целях Data Mining и аналитики, я решил пройти стандартный пакет обучающих курсов Loginom. Был приятно удивлен обилием материала и его четко структурированным изложением. Материал легко усваивается, однако сдача тестов показала, что не всё так просто. 

Подробнее по ссылке.

Билибин Александр Владимирович
Руководитель отдела разработки аналитической отчетности ДИТ

Стоит отдать должное авторам курсов. Даже если вы никогда ранее не были знакомы с бизнес-аналитикой и не представляете с чего начать, то в подготовительном модуле можно узнать/вспомнить основы информатики, статистики, алгоритмизации и баз данных. Только освоив необходимый «багаж», вы приступаете к изучению основных курсов.

Подробнее по ссылке.

Константин Татьянкин
Бизнес-аналитик отдела разработки и внедрения бизнес-процессов «Рельеф-Центр»

Нашим банком были выбраны курсы тарифа «Enterprise» с упором на изучение кредитного скоринга. При их прохождении сотрудники подразделения открыли для себя целый ряд новых инструментов, навыков и техник для использования в своей профессиональной деятельности.

 

Подробнее по ссылке.

ОАО «АСБ Беларусбанк»
Платформа Loginom
Практические задания в курсах на тарифе для для физических лиц можно делать на бесплатной версии аналитической платформы — Loginom Community.
Для задач в рамках курсов для юридических лиц, могут потребоваться возможности коммерческих редакций Loginom.
Скачать Loginom Community