Вакансия: Инженер машинного обучения::
www.samag.ru
     
Поиск   
              
 www.samag.ru    Web  0 товаров , сумма 0 руб.
E-mail
Пароль  
 Запомнить меня
Регистрация | Забыли пароль?
Журнал "Системный администратор"
Журнал «БИТ»
Подписка
Архив номеров
Где купить
Наука и технологии
Авторам
Рекламодателям
Контакты
   

  Опросы
  Статьи

Событие  

В банке рассола ждет сисадмина с полей фрактал-кукумбер

Читайте впечатления о слете ДСА 2024, рассказанные волонтером и участником слета

 Читать далее...

Организация бесперебойной работы  

Бесперебойная работа ИТ-инфраструктуры в режиме 24/7 Как обеспечить ее в нынешних условиях?

Год назад ИТ-компания «Крок» провела исследование «Ключевые тренды сервисного рынка 2023». Результаты

 Читать далее...

Книжная полка  

Читайте и познавайте мир технологий!

Издательство «БХВ» продолжает радовать выпуском интересных и полезных, к тому же прекрасно

 Читать далее...

СУБД PostgreSQL  

СУБД Postgres Pro

Сертификация по новым требованиям ФСТЭК и роль администратора без доступа к данным

 Читать далее...

Критическая инфраструктура  

КИИ для оператора связи. Готовы ли компании к повышению уровня кибербезопасности?

Похоже, что провайдеры и операторы связи начали забывать о требованиях законодательства

 Читать далее...

Архитектура ПО  

Архитектурные метрики. Качество архитектуры и способность системы к эволюционированию

Обычно соответствие программного продукта требованиям мы проверяем через скоуп вполне себе понятных

 Читать далее...

Как хорошо вы это знаете  

Что вам известно о разработках компании ARinteg?

Компания ARinteg (ООО «АРинтег») – системный интегратор на российском рынке ИБ –

 Читать далее...

Графические редакторы  

Рисование абстрактных гор в стиле Paper Cut

Векторный графический редактор Inkscape – яркий представитель той прослойки open source, с

 Читать далее...

День сисадмина  

Учите матчасть! Или как стать системным администратором

Лето – время не только отпусков, но и хорошая возможность определиться с профессией

 Читать далее...

День сисадмина  

Живой айтишник – это всегда движение. Остановка смерти подобна

Наши авторы рассказывают о своем опыте и дают советы начинающим системным администраторам.

 Читать далее...

Виртуализация  

Рынок решений для виртуализации

По данным «Обзора российского рынка инфраструктурного ПО и перспектив его развития», сделанного

 Читать далее...

Книжная полка  

Как стать креативным и востребованным

Издательский дом «Питер» предлагает новинки компьютерной литературы, а также книги по бизнесу

 Читать далее...

Книжная полка  

От создания сайтов до разработки и реализации API

В издательстве «БХВ» недавно вышли книги, которые будут интересны системным администраторам, создателям

 Читать далее...

Разбор полетов  

Ошибок опыт трудный

Как часто мы легко повторяем, что не надо бояться совершать ошибки, мол,

 Читать далее...

1001 и 1 книга  
19.03.2018г.
Просмотров: 6144
Комментарии: 0
Машинное обучение с использованием библиотеки Н2О

 Читать далее...

12.03.2018г.
Просмотров: 6857
Комментарии: 0
Особенности киберпреступлений в России: инструменты нападения и защита информации

 Читать далее...

12.03.2018г.
Просмотров: 4140
Комментарии: 0
Глубокое обучение с точки зрения практика

 Читать далее...

12.03.2018г.
Просмотров: 2978
Комментарии: 0
Изучаем pandas

 Читать далее...

12.03.2018г.
Просмотров: 3781
Комментарии: 0
Программирование на языке Rust (Цветное издание)

 Читать далее...

19.12.2017г.
Просмотров: 3789
Комментарии: 0
Глубокое обучение

 Читать далее...

19.12.2017г.
Просмотров: 6283
Комментарии: 0
Анализ социальных медиа на Python

 Читать далее...

19.12.2017г.
Просмотров: 3134
Комментарии: 0
Основы блокчейна

 Читать далее...

19.12.2017г.
Просмотров: 3434
Комментарии: 0
Java 9. Полный обзор нововведений

 Читать далее...

16.02.2017г.
Просмотров: 7246
Комментарии: 0
Опоздавших не бывает, или книга о стеке

 Читать далее...

17.05.2016г.
Просмотров: 10616
Комментарии: 0
Теория вычислений для программистов

 Читать далее...

30.03.2015г.
Просмотров: 12336
Комментарии: 0
От математики к обобщенному программированию

 Читать далее...

18.02.2014г.
Просмотров: 13969
Комментарии: 0
Рецензия на книгу «Читаем Тьюринга»

 Читать далее...

13.02.2014г.
Просмотров: 9100
Комментарии: 0
Читайте, размышляйте, действуйте

 Читать далее...

12.02.2014г.
Просмотров: 7053
Комментарии: 0
Рисуем наши мысли

 Читать далее...

10.02.2014г.
Просмотров: 5362
Комментарии: 3
Страна в цифрах

 Читать далее...

18.12.2013г.
Просмотров: 4594
Комментарии: 0
Большие данные меняют нашу жизнь

 Читать далее...

18.12.2013г.
Просмотров: 3402
Комментарии: 0
Компьютерные технологии – корень зла для точки роста

 Читать далее...

04.12.2013г.
Просмотров: 3129
Комментарии: 0
Паутина в облаках

 Читать далее...

03.12.2013г.
Просмотров: 3379
Комментарии: 0
Рецензия на книгу «MongoDB в действии»

 Читать далее...

02.12.2013г.
Просмотров: 3000
Комментарии: 0
Не думай о минутах свысока

 Читать далее...

Друзья сайта  

 Вакансия: Инженер машинного обучения

Архив номеров / 2021 / Выпуск №11 (228) / Вакансия: Инженер машинного обучения

Рубрика: Карьера/Образование /  Рынок труда

 

Вакансия:

Инженер машинного обучения

По данным Indeed, с 2015 по 2018 год сфера машинного обучения выросла на 344 %. А согласно отчету LinkedIn за 2020 год, потребность в ML- инженерах увеличилась за 12 месяцев на 74 %. И востребованность этих специалистов на российском ИТ-рынке продолжает расти.
Представители компаний и организаций рассказывают, каких инженеров машинного обучения они охотно берут на работу.

1. Какими знаниями и навыками должен обладать инженер машинного обучения (Machine Learning Engineer )?
2. Каков его инструментарий?
3. Каковы требования компании к уровню образования соискателей на место инженера машинного обучения?
4. Какие требования предъявляются к опыту работы?
5. Есть ли особые требования к ML- инженерам, которые обусловлены спецификой работы вашей компании?

 

Михаил Левитин, R&D директор Qrator Labs


«Для нас желательно, чтобы ML-специалист понимал специфику работы компьютерных сетей, протокола HTTP и принципов работы современных Web-приложений»

1. Для того чтобы применять алгоритмы ML, обычно требуется выполнить некоторую общую последовательность шагов по обработке входных данных. У каждого шага есть нюансы, сильно влияющие на его эффективность. Необходимо понимать, зачем нужны эти шаги, что именно мы хотим получить, и, собственно, уметь реализовывать все необходимые действия. Каждый из шагов подразумевает, что вы владеете необходимым набором навыков и соответствующим инструментарием.

В первую очередь, нужно собрать входные данные, при необходимости очистить их от шума или явного “мусора”. В том случае, когда входные данные никак не размечены – их приходится дополнительно размечать.

Далее из входных данных необходимо выделить признаки, подлежащие анализу, а для этого требуется понимание предметной области, к которой относятся входные данные. Затем нужно применить алгоритмы анализа и получить обученную модель, и тут важно знать и уметь применять алгоритмы машинного обучения с учителем и без учителя, понимать, в каких случаях и какие алгоритмы стоит применять. По итогам следует оценить качество получившейся обученной модели, для этого важно понимать, как правильно работать с обучающей и тестовой выборками и на какие показатели эффективности модели надо смотреть.

2. Основной инструментарий достаточно стандартен – python, jupyter-ноутбуки и библиотеки numpy/scipy/sklearn. Этого инструментария хватает для большинства исследовательских задач до момента получения хорошей обученной модели. Когда модель готова и необходима ее интеграция с production-кодом, каждый раз возникает своя специфика. Ряд решаемых задач накладывает дополнительные ограничения на скорость работы обученной модели. В этом случае требуется поиск/переписывание требуемых алгоритмов на C/C++ для интеграции с продакшн-кодом и обеспечения требуемой производительности.

3. Безусловно – высшее образование. Еще лучше высшее математическое, которое каким-то образом гарантирует наличие знаний математического аппарата, применяемого в ML (в основном это линейная алгебра). Крайне желательны знания в части построения и использования структур данных, базовых алгоритмов.

4. Необходимо, чтобы специалист мог самостоятельно выполнить все шаги, описанные выше. Обычно нужно около двух-трех лет плотной работы с задачами, связанными с ML.

5. Для нас желательно, чтобы ML-специалист понимал специфику работы компьютерных сетей, протокола HTTP и принципов работы современных Web-приложений. Это, с одной стороны, позволяет более эффективно находить признаки для анализа и выполнять разметку данных, с другой – самостоятельно оценивать качество получившейся модели и ее применимость в продакшне.




Ольга Соловей, эксперт в области бизнес-анализа и тренер Luxoft Training


«Общим для всех можно выделить требование наличия опыта программирования в Python (знание библиотеки scikit-learn), R, C++ и опыта работы с большими наборами данных»

1. Анализировать большие объемы данных с целью проектирования конвейеров для первичной обработки данных. Разрабатывать модели машинного обучения. Уметь разобраться и улучшить существующие модели машинного обучения.

2. Я использую фреймворк Jupyter и язык программирования Python. Кроме известных библиотек: анализа данных – pandas, визуализации – seaborn, matplotlib; моделирования – scikit-learn и математического моделирования – scipy and numpy, Python включает библиотеки с оптимизированными алгоритмами.

Например, есть выбор провести классификацию, используя метод опорных вектор (SVM), Наи́вный ба́йесовский классифика́тор (NB), случайный лес (Random forest) или оптимизированные алгоритмы из библиотек Catboost, LGBMClassifier.

Актуальные сегодня задачи анализа текстовых наборов, выполняются с помощью библиотеки NLTK, при этом, есть возможность подключить библиотеку gensim и использовать вероятностный подход для анализа текстов, который позволит существенно улучшить результат моделирования.

Для тех, кто начинает свой путь в машинном обучении, огромной помощью может быть библиотека datasets, которая включает учебные наборы данных для моделирования классификации, регрессии, кластеризации и т.д.

Учебные наборы, позволяют научиться строить модели неплохого качества, таким образом стимулируя интерес к углубленному изучению инженерии машинного обучения. Для нейронных сетей, строящих предсказания для изображений, в первую очередь стоит обратить внимание на фреймворки TensorFlow, Pytorch, Keras.

3. Диплом в области компьютерных наук, математики, статистики или смежных дисциплин. Навыки моделирования данных и архитектуры данных. Опыт программирования на Python, R или Java. Опыт работы с фреймворками машинного обучения, такими как TensorFlow, Pytorch, Keras. Продвинутые математические навыки (линейная алгебра, статистика).

4. Требования зависят от работодателя. Общим для всех можно выделить требование наличия опыта программирования в Python (знание библиотеки scikit-learn), R, C++ и опыта работы с большими наборами данных. Luxoft Training — первый учебный центр в России, авторизованный IIBA. Компания проводит оценку и обучение ИТ-специалистов по ключевым направлениям разработки программного обеспечения — по языкам программирования, системному и бизнес-анализу, архитектуре ПО, ручному и автоматизированному тестированию ПО, Big Data и машинному обучению, управлению проектами и Agile.




Илья Душин, исполнительный директор ComBox Technology


«Желателен опыт работы с видеопотоками, понимание основ систем видеонаблюдения и установки камер, опыт детекции и распознавания различных объектов»

1. Знания и навыки, необходимые инженеру машинного обучения (Machine Learning Engineer ):

  • Понимание архитектуры нейронных сетей для решения различных задач (CV, NLP и др.).
  • Уверенные знания Python, PyTorch/Tensorflow.
  • Опыт обучения нейронных сетей Tensorflow, желательно Huawei MindSpore.
  • Желателен опыт деплоя и оптимизации инференса (Huawei ACL, Intel OpenVINO toolkit).
  • Понимание отличий ARM/x86 и оптимизации инференса под них.
  • Понимание и опыт работы с виртуализацией и контейнерами (Docker).
  • Понимание способов инференса на различном оборудовании и преимуществах устройств различных видов (FPGA, GPU, CPU/iGPU, Movidius, Ascend и др.).
  • Понимание архитектуры построения пайплайна для облачного и "краевого" инференса нейронных сетей

2. Инструментарий – Python, PyTorch/Tensorflow, Huawei MindSpore, Huawei ACL, Intel OpenVINO, Intel CVAT

3. Должно быть высшее техническое образование, опыт работы в ИТ не менее трех лет.

4. Опыт работы – 1-3 года в ML, от 3-х лет в ИТ

5. Да, наше направление – объектная видеоаналитика и компьютерное зрение (CV). Желателен опыт работы с видеопотоками, понимание основ систем видеонаблюдения и установки камер, опыт детекции и распознавания различных объектов.



Роман Васильев, руководитель SAS Data Laboratory в SAS Россия/СНГ


«Особое внимание при выборе ML-инженеров мы уделяем soft skills. Для нас важно, чтобы соискатель не только качественно решал аналитические задачи, но и мог эффективно коммуницировать по ходу всего ml-проекта»

1.  В первую очередь нужна хорошая математическая база – теория вероятностей, линейная алгебра и др. Во-вторых, нужны навыки программирования. И последнее, но не менее важное – это представление о предметной области. Можно уметь строить самые сложные модели машинного обучения, но без понимания того, как работает шаровая мельница, сложно будет предсказать выход из строя этого оборудования.

2. Классический инструментарий – Python и SQL. Плюсом для нашей компании будет опыт работы с инструментами SAS.

3. Сложно представить вышеперечисленные навыки и инструментарий у соискателя без высшего образования. Однако это не является обязательным требованием.

4. Зависит от позиции. Например, для старшего консультанта-аналитика необходим опыт работы от 3 лет.

5. Особое внимание при выборе ML-инженеров мы уделяем soft skills. Для нас важно, чтобы соискатель не только качественно решал аналитические задачи, но и мог эффективно коммуницировать по ходу всего ml-проекта – от обсуждения требований с заказчиком, взаимодействия с командой и до презентации результатов своей работы. При этом важно уметь менять подход в общении, так как встречаются люди с совершенно разным бэкграундом – от менеджеров до технологов.



Екатерина Пачковская, консультант практики IT&Telecoms в Санкт-Петербурге международной рекрутинговой компании Hays


«Для успешного прохождения интервью в компании рекомендуется практиковать свои навыки, решать алгоритмические задачи, чтобы быть готовым продемонстрировать все свои знания»

1. Прежде всего, речь идет о хорошей математической подготовке (теория вероятности, статистика, линейная алгебра) и знании теории и алгоритмов Machine Learning (нейросети, классификация, регрессия, кластеризация, древесные/линейные алгоритмы). Также важно знать один или несколько языков программирования (в зависимости от конкретной компании, команды и задач). Наиболее популярный сейчас язык в ML — Python. Помимо него, иногда требуется знание C++ (когда есть задача имплементации моделей в prod, например, и не только). Реже, но могут встречаться среди требуемых для ML языков такие, как Java, Scala, C#. Если речь идет о работе в какой-то специфической области (медицина, промышленность, ритейл ), то важно понимать ее особенности.

2. Если мы говорим об инструментарии ML Engineer, то сейчас это различные библиотеки, такие как TensorFlow, Pytorch, Keras, Scikit-learn, Numpy, Pandas.

3. В большинстве случаев работодатели прежде всего отдают предпочтение кандидатам с математическим образованием: прикладная математика, математико-механический и физический факультеты, а также компьютерная лингвистика (для направления NLP в рамках Machine Learning) и информатика. Желательно иметь как минимум степень бакалавра.

В определенных случаях бывают жесткие требования к наличию степени магистра или даже кандидата наук. Иногда компании готовы рассматривать кандидатов с непрофильным образованием, но с подтвержденным успешным опытом работы и, например, с законченными профильными курсами (желательно продолжительными и с сильной практической частью). При этом такой кандидат должен продемонстрировать свои знания на техническом собеседовании.

4. В зависимости от грейда, на который рассматривают специалиста, требования могут отличаться (как и сами грейды — от компании к компании). Если мы говорим про Machine Learning Engineer уверенного middle-уровня, то обычно это опыт как минимум от 2 лет (кому-то еще особенно важно, чтобы это был опыт в одной компании), опыт работы с необходимыми технологиями (языки программирования, библиотеки), знание английского языка на техническом уровне и выше. На собеседовании будет уделяться внимание математической базе, навыкам, алгоритмам и пр. Поэтому для успешного прохождения интервью в компании рекомендуется практиковать свои навыки, решать алгоритмические задачи, чтобы быть готовым продемонстрировать все свои знания.



Данил Жеребцов, Head of Machine Learning & Analytics, Bell Integrator


«Немаловажным является опыт работы в команде. Самые блестящие успехи в Data Science не будут ничего значить, если человек не сможет найти общий язык с коллегами»

1. Есть мнение, что ML Engineer – это специалист, который должен концептуально понимать Data Science, его основным приоритетом является не работа с данными, а внедрение и масштабирование предиктивной модели (результат работы Data Scientist). Это разделение ответственности возникло по причине ежегодного пополнения пула соискателей новыми молодыми специалистами, которые еще не вникли во все особенности полноценного создания и внедрения моделей машинного обучения в продуктивную среду. Таким образом, Data Scientist специализируется только на работе с данными, а Machine Learning Engineer занимается деплоем обученной модели в производственную среду.

Я же считаю, что инженер по машинному обучению – это full stack Data Scientist, который виртуозно работает с данными, создает предиктивную модель, настраивает весь пайплайн трансформации новых данных (данных, используемых для предсказания) и применения модели в среде заказчика. Такие компетенции приходят только с прикладным опытом решения задач с применением машинного обучения на реальных данных.

2. Python и R являются основными фреймворками для работы с данными. Я начинал с R, но отдаю свое предпочтение Python, по причине кроссплатформенности и более удобного процесса встраивания готового решения в любое окружение.

Если говорить о библиотеках, то джентльменский набор: numpy, pandas, scipy, scikit-learn, matplotlib, seaborn, xgboost, lightgbm, keras, TF. Кроме навыков использования открытых библиотек, успешный соискатель должен уметь самостоятельно разрабатывать подходы и методы на основе требований решаемой задачи и с учетом глубокого анализа особенностей данных. Также полезно уметь использовать фремворки по созданию микросервисов и веб-приложений: Flask, Jango. Отличительной особенностью являются навыки работы с по-настоящему большими данными и умение пользоваться инструментами контейнеризации приложений: Docker/Kubernetes.

3. Конечно, изучение фундаментальных наук является большим плюсом. Computer Science также отличный плацдарм для погружения в машинное обучение. Однако наличие профильного опыта является первостепенным условием для рассмотрения кандидата на любую позицию выше Junior.

4. Подтвержденный опыт самостоятельного end-to-end выполнения ряда задач по машинному обучению – хороший фундамент для успешного прохождения собеседования. Ряд успешных соискателей не имеют фактического опыта работы, но они отлично показали себя в соревнованиях на Kaggle. Такие успехи также могут являться достаточной валидацией компетенций. Немаловажным является опыт работы в команде. Самые блестящие успехи в Data Science не будут ничего значить, если человек не сможет найти общий язык с коллегами.

5. Многие отличные специалисты по машинному обучению являются интровертами. По моему мнению, эта отличительная особенность помогает хорошо сосредоточиться на данных и вникнуть во все детали решаемой задачи. Что называется “follow the error…”. Однако хорошо развитые коммуникативные навыки в дополнение к хорошему техническому бэкграунду – являются бесспорным плюсом.

Как правило, заказчиком аналитических моделей является бизнес, на финальном этапе реализации проекта нужно презентовать результаты своей работы и объяснить руководителям, менеджерам, финансистам, маркетологам, что такое ROC- кривая и что нам даст разработанная модель. Возможность простым и понятным языком донести сложные технические концепции – это уже компетенции технического пресейла, которые очень ценятся в любой компании.

 


Подпишитесь на журнал
Купите в Интернет-магазине

Комментарии отсутствуют

Добавить комментарий

Комментарии могут оставлять только зарегистрированные пользователи

               Copyright © Системный администратор

Яндекс.Метрика
Tel.: (499) 277-12-45
E-mail: sa@samag.ru