Инженер по данным

Компания Andersen приглашает на работу Инженера по данным для проекта по разработке платформы анализа изображений на основе машинного обучения для автоматизации обнаружения дефектов и улучшения контроля качества в гальванике и финишных обработках. Наш клиент - международная компания, предоставляющая специализированные промышленные материалы и технологические решения для бизнеса в различных секторах. Объединяя технические знания с возможностями исследований и разработок, организация помогает клиентам улучшать производственные процессы, повышать качество продукции и увеличивать операционную эффективность. Ее деятельность сосредоточена на предоставлении инновационных решений, поддержке устойчивых промышленных практик и адаптации к меняющимся технологическим и рыночным требованиям. Проект направлен на разработку и совершенствование платформы анализа изображений для контроля качества в процессах гальванизации и финишной обработки. В нем используются машинное обучение и компьютерное зрение для автоматизации обнаружения дефектов, сегментации изображений, измерения характеристик и сравнения с эталонными значениями экспертов, что позволяет проводить точные, последовательные и объективные оценки качества.

Обязанности

• Проектирование структур данных для эталонных данных, метаданных изображений, промежуточных и окончательных результатов, а также решений о соответствии/несоответствии.
• Обеспечение прослеживаемости от изображения до результата модели и до окончательного решения.
• Оценка расширения существующей базы данных versus внедрения отдельного хранилища данных.
• Реализация схемы базы данных и потоков данных для конвейера машинного обучения.
• Реализация интеграции и синхронизации данных между локальными инструментами и AWS.
• Добавление проверок качества данных и правил валидации.
• Документирование модели данных и потоков данных.

Требования

• Опыт работы в области Инженерии данных от 5 лет.
• Большой опыт работы с проектированием баз данных и моделированием данных с нуля.
• Продвинутые навыки SQL и практический опыт работы с PostgreSQL или другими реляционными базами данных.
• Высокая квалификация в Python для разработки и поддержки конвейеров данных.
• Опыт интеграции и синхронизации данных между несколькими системами.
• Опыт хранения и версионирования результатов моделей машинного обучения, характеристик и результатов оценки.
• Практический опыт работы с AWS, включая S3, RDS, Glue и Lambda.
• Уровень английского языка - от Intermediate+ и выше.

Желательно

• Опыт работы с SQLite и миграцией локальных баз данных в облачные среды.
• Знания о происхождении данных, аудите и прослеживаемости.
• Опыт работы с Terraform и конвейерами CI/CD для рабочих процессов инженерии данных.

Компенсация: 2800–4550 EUR в месяц.