Marina Zaporozhets Email and Phone Number

ООО "1Т"Москва, data.1t.ru/c/index.htmlData Engineer - стажер1. Проработка и развертывание архитектуры ПО в Docker-compose:postgres: Сервер базы данных PostgreSQL для Airflow.clickhouse: Сервер базы данных ClickHouse для хранения данных вакансий.click-ui: Web-интерфейс для работы с базой данных ClickHouse.redis: Сервер Redis для работы с Airflow.grafana: Сервер Grafana для визуализации данных.prometheus: Сервер для сбора метрик.airflow-*: Набор сервисов, образующих среду выполнения Apache Airflow.selenium-*: Набор сервисов для выполнения сбора данных с помощью Selenium Grid.chrome: Сервис для запуска экземпляров браузера Chrome;2. На выбор заказчику предложено 2 БД:- Создание БД СlickHouse с 0, разработка структуры таблиц, применяемых ENGINE для каждой таблицы, настройка условий поддержания версионности, записи и перезаписи данных (был выбран Psql);- Создание БД PostreSQL с 0, разработка схемы и структуры таблиц, тип данных для каждой таблицы; "поднятие" Meta для Backend разработчика; настройка условий поддержания версионности, записи и перезаписи данных; логирование, обработка исключений, триггеры, транзакции PSQL: ETL; постановка на расписание в Airflow, настройка Dags, Subdags, TaskGroups, настройка alerting's.3. Написание кода парсеров (Selenium), постановка на расписание в Airflow, настройка обновлений в таблицах (Python, SQL Alchemy);4. Командная работа в Confluence;5. Назначена старшей по направлению DE стажировки, выданы права SU для администрирования WM и назначение прав пользователей на ее использование. Отмечены отличные коммуникационные навыки, лидерские качества, умение работать в команде, своевременное выполнение поставленных задач.