
Привет! Это команда Обработки данных в отделе ML-модерации.
Привет! Это команда Обработки данных в отделе ML-модерации.
Мы ищем начинающего специалиста, которому интересно работать на стыке ML и данных. Команда состоит из опытных и весёлых аналитиков данных, которые всегда готовы прийти на помощь в трудную минуту!
ML-модерация наполнена различными процессам обработки и проверки пользовательских данных, поэтому в нашу команду могут прилетать абсолютно разные задачи связанные с анализом данных и моделей, исследованиями новых подходов к оценке качества существующих решений, разработку новых продуктовых решений и многое другое.
Тестировать новые алгоритмы обработки и исследования данных, а также выстраивать автоматизированые процессы, для упрощения жизни.
Организовывать и планировать хранение больших данных.
Писать sql–запросы в различные БД.
Обрабатывать данные с помощью spark.
Использовать различные ML-модели для автоматической проверки данных.
Строить и изучать зависимости с помощью инструментов python.
Знание основных библиотек Python (в том числе регулярные выражения).
Знание теории вероятностей и математической статистики.
Понимание устройства DWH системы.
Умение работать с hdfs и pyspark.
Знание SQL (диалекты clickhouse, vertica), умение оптимизировать запросы.
Понимание и использование ML-алгоритмов для анализа данных желательно.
Grafana
Superset
AirFlow
опыт работы с запросами http/grpc, в том числе через swagger
опыт работы с CI/CD пайплайнами в gitlab
опыт работы c NVIDIA Triton Inference Server и docker
HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.