Язык Python — для бизнес аналитиков

Построение отчетов и визуализация данных для офисных приложений.

Продолжительность: 40 академических часов.

Начальная подготовка — желание автоматизировать свою непосредственную работу средствами выполнения SQL запросов в базу данных и публикацией данных в файлы стандартных форматов.  Научиться программировать.

Курс предназначен:

• Для бизнес аналитиков, начинающих разработчиков отчетов, которые будут использовать язык Python для построения отчетов, управлением отображения данных, генерацией отчетности в стандартных форматах — WORD, EXCEL, PDF.

Программа

• Инсталяция интерпретатора Python. Механизм PIP – и создание песочницы для выполнения кода приложения, подготовка песочницы для работы с базами данных на примерах с Oracle и Postgresql. 
• «Привет Мир» – Первое приложение, созданное и запущенное в песочнице. Анатомия приложения. Подключение и использование библиотек, использование модулей — простейших примерах. Далее, по ходу курса, будут определяться те или иные языковые конструкции, основные правила работы с языком Python. 
• Типы данных языка, встроенные типы данных. Основные встроенные типы данных языка Python и ПРАВИЛА PEP8 – которые не соблюдают, но соблюдать нужно.
• А в какой среде разработки писать приложение. Вариантов много – но родные PyCharm — именно в этой среде и проходит вся работа по созданию отчетов. PIP – утилита и конфигурация песочницы, для взаимодействия с Excel, Word, файлами формата PDF. Дополнение песочницы средствами для работы с базой данных Oracle и Postgresql. В чем сходство и различия. 
• Обзор средств написания SQL запросов в базы данных Oracle и Postgresql (далее — База Данных ( DB))
• Что такое запрос в базу данных. Как выполняется запрос, основные синтаксические команды языка SQL. Основная команда SQL  для аналитических запросов — SELECT. Общее описание команды. Разделы SELECT, FROM, ORDER BY и другие — на примерах простых запросов в  DB с использованием штатных средств для работы с данными, которые всегда должны быть под рукой. Введение в план выполнения запроса, как получить план и как правильно его читать. Аналитические функции в SQL запросах, функции группировок и сортировок. Как ускорить выполнение сложных запросов — введение в оптимизацию SQL на примере DB. Важность использования индексов, партиционирования, сохранения результатов выполнения запросов в памяти сервера — чисто теоретически — но это нужно требовать от администратора базы данных. Написание более сложных запросов SELECT — связывание нескольких таблиц, построение деревьев и виртуальных таблиц, оконные функции.  
• Начало программирования, Объектная опция в Python – Инкапсуляция – Полиморфизм – Наследование – Абстракция, об этом можно говорить очень много, но АНАЛИТИК или ТЕСТИРОВЩИК это должен просто понимать и иногда ИСПОЛЬЗОВАТЬ – Легкое введение в ООП и абстракции Python.
• Понятие @dataclass — описание класса для последующего создания на его основе объекта, для наполнения последнего данными из базы данных. Методы сортировки данных. Простые механизмы сравнения объектов, хранение объектов в Python. Списки, множества, кортежи, словари — функциональность, разница, механизмы использования. Строка в Python — это тоже список.
• Правила доступа к данным в DB из Python. Как правильно соединиться с базой данных. Что такое курсор в Python и как он взаимодействует с базой данных. Легкое введение в транзакционные механизмы DB. Передача параметров в SQL запрос из Python, получение данных из курсора и размещение их в памяти аналитического приложения. Предварительная обработка данных, перед отправкой их в отчеты (сортировки, создание дополнительных колонок, маркировка групп, выполнение дополнительных вычислений)
• Получение данных для аналитический вычислений в Python приложение из других источников данных, таких как WEB и REST сервисы. Обзор механизмов подключения. Получение данных для дальнейшей обработки на примерах REST сервисов 
• Обзор пакетов Python для взаимодействия с файлами операционной системы для дальнейшей выгрузки данных, которые были получены из DB. Для работы с EXCEL, WORD, PDF файлами, в текстовые файлы SCV — мы выгружаем данные встроенными в Python пакетами
• Создание рабочей книги EXCEL средсвами Python, заполнение книги листами, определение стилей форматирования, заполнение листа данными из Python, определение формул на листах, использование условного форматирования ячеек листа EXCEL из Python приложения.  Построение Диаграмм для визуализации данных средствами Python в Excel
• Выгрузка данных из Python в документы Word. Использование шаблонов документов для их дальнейшего наполнения данными. Форматирование документа средсвами Python,
• Особенности выгрузки данных в PDF формата,
• Публикация отчета на стандартном сервере приложений, на примере WildFly сервера. Легкое создание Web сервера средствами Python для отправки аналитического отчета конечному пользователю. Тестирование собственного аналитического сервера,
• Сравнение полученных результатов с аналогичными BI серверами, такими ка Oracle BI, Microsoft BI и другими. Преимущества и недостатки.