Senior/Staff Evaluation Data Analyst (Agentic Search)

London, United Kingdom; on-site/hybrid work format with global teams.

Зарплата не указанаВеликобританияLondon
Текст:
Оригинал доступен только пользователям с подпиской

Location

London, United Kingdom; on-site/hybrid work format with global teams.

About the company

A global AI cloud platform provider building full-stack infrastructure for AI development, from data and model training to production deployment. The company operates at scale with R&D hubs across Europe, the UK, North America and Israel, and focuses on compute, storage, networking and applied AI.

Responsibilities

  • Own the end-to-end quality measurement and improvement cycle for search built for AI agents, from identifying user needs and defining success to diagnosing failures and driving fixes with engineering and product teams.
  • Design, build and evolve evaluation systems, including datasets, benchmarks, metrics and automated pipelines that inform development and launch decisions.
  • Assess response quality across dimensions such as relevance, completeness, freshness, factual accuracy and usefulness to downstream agents, and investigate regressions and metric anomalies to find root causes.
  • Help prioritize the product and engineering roadmap by making quality trade-offs explicit and determining whether changes deliver meaningful user improvements.

Requirements

  • Substantial hands-on experience designing and building evaluation or quality measurement systems for complex technology products such as search, AI agents, voice technologies, autonomous driving, recommendation systems or advertising.
  • Strong Python skills and an engineering mindset, with the ability to turn analytical ideas into reliable, maintainable pipelines and tools.
  • Solid foundation in mathematical statistics and practical experience with experimental design, sampling, uncertainty and measurement bias.
  • Strong analytical judgment and communication skills, with the independence to make progress in a fast-moving environment where requirements and success criteria are still evolving.

Похожие вакансии Аналитика данных

hh.ru
до 198k ₽РоссияМоскваГибрид

RUSSPASS – новая цифровая платформа для туристов, помогающая открывать незнакомые места и путешествовать удобно и легко. Мы стремимся создать уникальный пользовательский опыт – положительные эмоции и яркие впечатления. С RUSSPASS будет просто узнавать самые неизведанные уголки страны, быстро планировать сложные поездки, чувствовать себя безопасно и уверенно. RUSSPASS будет знать о России то, чего не знают другие сайты и приложения.

Наша миссия

Создать крупнейший в России туристический сервис, объединяющий миллионы российских и иностранных пользователей, а также тысячи компаний и предпринимателей.

Наше видение

В нашей стране много удивительных и красивых мест, про которые мало кто знает. Мы хотим заново изобрести путешествия по России, сделав их максимально доступными и удобными.

Обязанности:

  • Готовить выгрузки и выборки данных под задачи бизнеса и продуктовых команд

  • Разрабатывать и поддерживать дашборды в BI-системе (Apache Superset)

  • Проводить исследовательский анализ данных: искать причины изменений ключевых метрик и формулировать выводы

  • Строить и анализировать пользовательские воронки, определять точки потерь и зоны роста конверсии

  • Анализировать продуктовые метрики: конверсия, retention, активность (MAU/WAU/DAU), ARPU/ARPPU, средний чек, эффективность каналов привлечения

  • Проводить сегментный анализ пользователей, продуктов и сценариев

  • Оценивать результаты A/B-тестов и продуктовых изменений

  • Выявлять аномалии и расхождения в данных, взаимодействовать с командой разработки для устранения проблем

  • Участвовать в развитии системы аналитики: предлагать новые метрики и требования к витринам данных

Требования:

  • Опыт работы дата-аналитиком или продуктовым аналитиком от 1 года

  • SQL: сложные выборки, JOIN, CTE, оконные функции, оптимизация запросов. Опыт с PostgreSQL и/или ClickHouse

  • Python (pandas, numpy): обработка и очистка данных, исследовательский анализ, автоматизация расчётов

  • Опыт работы с BI-системами (в нашем стеке — Apache Superset)

  • Понимание A/B-тестирования: постановка гипотез, выбор метрик, интерпретация статистической значимости

  • Умение самостоятельно проводить исследование: от вопроса до готовых рекомендаций

  • Навык сегментации аудитории и анализа поведения разных групп

  • Умение понятно представлять результаты как техническим специалистам, так и бизнес-заказчикам

Будет плюсом:

  • Опыт с Tableau Desktop и Tableau Prep Builder

  • Работа с Dremio

  • Знание систем веб-аналитики (Яндекс.Метрика, PostHog, Amplitude)

  • Анализ маркетинговых каналов и атрибуции

  • Понимание DWH, ETL/ELT, работа с витринами данных

  • Опыт работы с продуктами, имеющими большое количество сценариев и сегментов

Условия:
  • Возможность создавать цифровые сервисы для миллионов людей, формирующие образ отрасли и страны
  • Официальное оформление
  • Гибридный формат работы
  • Соблюдаем work-life balance
  • Мы всегда готовы помочь, в нашей команде открытые и честные отношения
  • Лотереи для сотрудников с подарками от партнеров
  • Бесплатное изучение английского языка в офисе
  • Возможность прохождения курсов на платформе Яндекс.Практикум
  • Офис в шаговой доступности от метро "Белорусская"
Сайты компаний

Senior Data Analyst

Автоподнятие
Зарплата не указанаФилиппины
Текст:
Оригинал доступен только пользователям с подпиской

Location

Not specified; the role is tied to consumer lending analytics and does not state an on-site or remote format.

About the company

A consumer lending business focused on credit risk, pricing, and portfolio economics. The work centers on making lending growth capital-efficient and sustainable through risk-adjusted profitability.

Responsibilities

  • Analyze profitability at the loan and segment level, covering interest income, fees, funding costs, expected losses, and operating expenses, and build RAROC and contribution margin frameworks for approval cutoffs, risk-based pricing, and credit limit decisions.
  • Identify underperforming or negative-RAROC segments, recommend pricing or policy corrections, and quantify the profit impact of strategy changes before rollout.
  • Monitor portfolio health through delinquency, roll rates, charge-offs, recoveries, and vintage performance; maintain early-warning indicators and support stress testing and downside scenarios.
  • Write and optimize BigQuery SQL, use R, Python, or similar tools for segmentation and forecasting, and automate profitability reporting, dashboards, and data quality checks.

Requirements

  • 5+ years in credit risk, consumer lending, or portfolio analytics.
  • Hands-on experience with BigQuery or comparable cloud data warehouses.
  • Solid grasp of consumer credit economics: expected loss mechanics, risk-based pricing trade-offs, and portfolio profitability drivers.
  • Ability to turn analytics into business decisions and communicate complex findings to senior credit, risk, and finance stakeholders; FRM certification and experience with RAROC, economic capital, or capital-constrained growth are preferred.
Сайты компаний
vk

Старший продуктовый аналитик

vkАвтоподнятие
Зарплата не указанаРоссияМосква

Дзен является частью большой экосистемы VK. Это крупнейшая новостная платформа, где миллионы пользователей следят за событиями по всему миру. Здесь можно всё: смотреть новости, читать новости, обсуждать новости с ИИ-ассистентом Глифом или стать автором и самому создавать актуальный контент. Мы строим высоконагруженные сервисы и рекомендательные технологии, которые в реальном времени обрабатывают потоки информации и помогают пользователю получить максимально персональную ленту обо всём, что произошло в мире.

Стек технологий: SQL для обработки больших данных, Python — для небольших данных и их визуализации.

Задачи

  • Строить и поддерживать витрины данных и дашборды в DataLens 
  • Следить за изменениями в метриках, искать причины аномальных изменений
  • Проводить полный флоу работы над фичей: генерация гипотез, приоритизация, проведение исследований, дизайн и анализ A/B-тестов
  • Частая прямая коммуникация с продактом направления

Требования

  • Уверенное владение SQL (сложные запросы и подзапросы)
  • Опыт дизайна и анализа A/B-тестов
  • Знание статистики
  • Умение объяснять вещи простым языком

HireSeeker собирает вакансии со всех площадок и присылает только релевантные. Бесплатно.