Проект Customer360 за 2 месяца:- Развернул и настроил Airflow- Написал кастомный оператор к Airflow для переноса данных из MS SQL в Postgres- Настроил около 100 источников сбор информации из других систем (HTTPS, XML, CSV, MS SQL таблицы и запросы)- Настроил ETL операции для обогащения данных карточки клиентаПроект aCRM:- Настроил CI/CD через GItLab с использование GitLabRunner (установка и настройка)- Сделал pipeline deploy приложения по commit в GitLab- Развернул RabbitMQ- Настроил оповещение если docker контейнеры упали- Разработал архитектуру приложения- Написал backend реализацию приложения stack: python, fastapi, postgres, rabbitmq, docker, pandas- Написал сервисы для работы с другими системами Sendsay, IMessageGate, SMStraffic, выгрузки в csv файлов в сетевые папки- Написал Frontend приложение stack: react, ant design, docker

За короткий срок нужно было разобраться в специфики и работе алгоритмов расчета витрин (PySpark, Impala, Hive, Airflow).Задокументировал всю специфику расчета витрин.Были выявлены архитектурные ошибки, составлен план их устранения без негативного влияния на бизнес процессы.Запустил мониторинг качества данных для быстрой реакции на инциденты.Создал тестовый стенд, предварительная подготовка для внедрения CI/CD.После устранения архитектурных ошибок, решил покинуть компанию, из-за неудовлетворенности организации внутренних процессов.

Извлечение, преобразование, загрузка данных и их обработка.Реализация ETL в Hadoop (с помощью Airflow).Работа с различными источниками данных: Oracle, API личных кабинетов, микросервисы.Батч и стримы с помощью PySpark и Kafka.Подготовка витрин для анализа (Hive + Spark).

Ведение 3-х Django/DRF проектов с использованием docker, airflow, celery, Создание плановых отчетов по данным в БД (Python)Скрипты автоматического обслуживания (Python).Разворачивал тестовые среды на docker контейнерах для остальных участников группы разработки на Python. Настроил airflow для загрузки и обработки данных по кассам.

Поддержка трекинговой системы Omnitracker. (VBScript)Доработка Omnitracker под нужны заказчика. (VBScript)Интеграция Omnitracker с другими системами (SQL, Oralcle, SOAP)Скрипты автоматического обслуживания OmniTracker (Python). В первый месяц работы, самостоятельно изучил структуру БД Omnitracker (закрытый продукт, описания БД нет), что дало возможность быстро делать выгрузку данных и строить отчеты используя SQL запросы. Базу дынных omnitracker использовалась только на select, изменения не вносились.Настроил при помощи Python, автоматизированное обслуживание omnitracker.( Плановые отчеты на почту, выгрузка скриптов из Omnitracker и сохранение их в git репозитарий, что позволило отслеживать изменения. Перезагрузка системы при превышении пороговых значений по потреблении памяти. и т.п. )

Внедрение отчетности ЦБ на базе хранилища данных RS­-DataHouse.Поиск и устранение ошибок, Доработка отчета для более удобного использования. Внесения изменений в алгоритмы расчета. Оптимизация SQL-запросов. Разработка нового функционала (PL/SQL код ).

Программирование SQL (сложные запросы, процедуры, функции), обработка большого объема данных. Создание автоматических отчетов на базе Excel и VBA программирования (таблицы, графики, диаграммы). Участие в исследованиях, проводимых компанией; обработка и презентация результатов ответственным сотрудникам.

Внедрение информационной системы управления надежностью электроснабжения (ИСУНЭ), сопровождение проекта, обучение людей, решение технических вопросов, связанных с системой. На стадии формирования базы данных оборудования убедил разработчиков системы в возможности конвертации данных, которые на данный момент уже велись у нас в формах Excel, в базу ИСУНЭ. Подготовил шаблон для конвертации и конвертировал 52000 записей объектов, в результате чего было сэкономлено почти 4000 человеко-часов.Создание новой сети предприятия (180 рабочих мест - экономия, связанная с переходом домена на ОС Linux.), объединение четырех филиалов в одну сеть (OpenVPN, для сетевых районов (1-2 компьютера) использовали подключение по 3G через сеть сотового оператора), Настроил Samba, squid, e-mail (на базе IceWarp с использование базы LDAP), DHCP, Настроил систему заявок OTRS с привязкой к LDAP. Настроил Yandex.Server для поиска файлов на файловом сервере предприятия. Создал "горячую линию" для диспетчерского персонала на основе IP-телефонии.ООО "Оренбургэнергонефть" (до 2012 входила в состав ТНК-ВР)

Сопровождение программы автоматизации списания материально-технических ценностей ("Баркас"), разработка программы по учету аварийности на базе MS Access и MySQL. Помощь при внедрении новых технологий в компании. Диплом за лучшую инновацию в секции "Экономика, финансы, бухгалтерский учет" на региональном конкурсе молодых специалистов ТНК-ВР в 2010 году. Тема работы: "Оптимизация процесса списания ТМЦ: эффективное снижение непроизводительных затрат рабочего времени и периода оборачиваемости ТМЦ" (за разработку и успешное внедрение программы "Баркас"). Победа в Московском конкурсе молодых специалистов ТНК-ВР в секции "Управление системой снабжения и логистика".ООО "Оренбургэнергонефть" (до 2012 входила в состав ТНК-ВР)

Имею опыт работы на линиях электропередач 6-110 кВ.Фактически выполнял обязанности инженера Службы линий. C помощью VBA в Excel создал электронные варианты следующих форм: наряд-допуска, материального пропуска, что способствовало ускорению заполнения и увеличению времени на подготовку к работам. Грамота за 1 место "за разработку системы автоматического заполнения материального пропуска". На этом этапе был начат процесс разработки программы автоматизации списания материально-технических ценностей "Баркас".Эффект от внедрения: высвобождены 17600 чел/ч в год.