Senior Manager AI Model Validation

This is a high-visibility, high-impact role suitable for experienced data scientists who also have strong communications ability and business awareness, as well as the ability to make judgment calls in ambiguous situations. You will support Global AI Model Validation and Governance’s mandate of identifying, assessing, and communicating AI/ML model risks across all AI/ML models deployed across Manulife globally. You will provide thoughtful independent challenge ot models, weighing the risks and benefits and explaining your conclusions to technical and non-technical audiences alike.

You will interact heavily with model developers, business stakeholders, and other risk management teams, each potentially offering contrasting perspectives that you will have to navigate and align simultaneously. You will also be expected to use your data science experience to mentor and guide junior members of the team.

Position Responsibilities:

• Provide independent challenge and constructive feedback for AI/ML, GenAI, and agentic models by identifying model weaknesses, limitations, assumptions, and risks, and recommending appropriate remediation actions.

• Manage competing deadlines, competing expectations, and coordinate procedural alignment to ensure the balance of risk management activities is commensurate with the business risk exposure.

• Communicate complex technical concepts and validation findings to technical and non-technical stakeholders, while ensuring that the risk management process is followed.

• Review model documentation, assess model design and performance, and communicate validation findings through clear, evidence-based reports and recommendations.

• Conduct model testing, benchmarking, sensitivity analysis, and other validation activities.

• When appropriate, evaluate whether AI models are reliable, fair, safe, explainable, and fit for their intended purpose.

• Support model inventory management, model risk operations and other AI governance processes.

• Mentor and support junior data scientists through technical coaching, knowledge sharing, and review of validation approaches and methodologies.

Required Qualifications:

• Master's degree or higher in Statistics, Biostatistics, Data Science, Engineering, Mathematics, or a related quantitative field.

• At least 3-5 years of a mix of hands-on data science experience (data science, statistics, AI/ML model development, AI/ML research, model validation, model risk management, or a related quantitative discipline) and a stakeholder-exposed role (functions that interact with varying teams and business units across the organization.)

• Strong critical thinking skills and the ability to independently challenge assumptions and assess model risk in the context of the business problem it solves.

• Hands-on keyboard report writing and code implementation; being able to implement your ideas yourself.

• Experience interpreting model performance metrics and conducting quantitative analyses in a variety of standard and non-standard contexts.

• Strong communication, written documentation, and stakeholder management skills.

• The ability to collaborate with parties from all walks of a large corporation.

Preferred Qualifications:

• Prior model validation experience for AI/ML models or development of AI/ML models for production environments with tangible risk exposures. Comparable experience includes model development in stringently risk-controlled contexts such as pharmaceuticals, aerospace, etc.

• Knowledge of AI governance and model risk regulatory expectations, with emphasis on OSFI E-23.

• Familiarity with Responsible AI concepts, including fairness, explainability, robustness, transparency, safety, and monitoring. Being passionate about Responsible AI is a plus.

• Experience evaluating Generative AI, LLMs, RAG systems, or agentic AI solutions built or customized to solve a very broad range of business problems.

• Experience developing validation frameworks, testing libraries, or automated assurance tooling.

• Experience working in a global, cross-functional environment.

• Experience performing research on AI/ML models in academic or industry settings.

When you join our team:

• We’ll empower you to learn and grow the career you want.
• We’ll recognize and support you in a flexible environment where well-being and inclusion are more than just words.
• As part of our global team, we’ll support you in shaping the future you want to see.

#LI-Hybrid

Le poste annoncé correspond à une vacance existante.

À propos de Manuvie et de John Hancock

La Société Financière Manuvie est un chef de file mondial des services financiers qui aide les gens à prendre leurs décisions plus facilement et à vivre mieux. Pour en apprendre plus à notre sujet, rendez vous à l’adresse www.manuvie.com.

Manuvie est un employeur qui souscrit au principe de l’égalité d’accès à l’emploi

Chez Manulife/John Hancock nous valorisons notre diversité. Nous nous efforçons d’attirer, de perfectionner et de maintenir une main d'oeuvre qui est aussi diversifiée que nos clients, et de favoriser la création d’un milieu de travail inclusif qui met à profit la diversité de nos employés et les compétences de chacun. Nous nous engageons à assurer un recrutement, une fidélisation, une promotion et une rémunération équitables, et nous administrons toutes nos pratiques et tous nos programmes sans discrimination en raison de la race, de l’ascendance, du lieu d’origine, de la couleur, de l’origine ethnique, de la citoyenneté, de la religion ou des croyances ou des convictions religieuses, du genre (y compris grossesse et affection liée à une grossesse), de l’orientation sexuelle, des caractéristiques génétiques, du statut d’ancien combattant, de l’identité de genre, de l’expression de genre, de l’âge, de l’état matrimonial, de la situation de famille, d’une invalidité ou de tout autre motif protégé par la loi applicable.

Nous nous sommes donné comme priorité d’éliminer les obstacles à l’accès égalitaire à l’emploi. C’est pourquoi un représentant des Ressources humaines collaborera avec les candidats qui demandent accommodement raisonnable pendant le recrutement. Tous les renseignements communiqués pendant le processus de demande d'accommodement seront stockés et utilisés conformément aux lois et aux politiques applicables de Manuvie. Pour demander une mesure d’accommodement raisonnable dans le cadre du recrutement, écrivez à hr@manulife.com.

Région de référence du salaire

Modalités de travail

L’échelle salariale devrait se situer entre

Les employés ont également la possibilité de participer à des programmes incitatifs et de recevoir une rémunération liée à la performance de l’entreprise et des individus. Le salaire réel variera selon les conditions du marché local, la région géographique et les facteurs propres au poste, tels que les connaissances, les compétences, les qualifications, l’expérience et la formation. Si vous postulez à ce poste en dehors de votre lieu principal, veuillez contacter hr@manulife.com pour connaître la fourchette salariale applicable à votre région.

Manuvie offre aux employés admissibles une vaste gamme d’avantages sociaux personnalisables, notamment une assurance soins médicaux, soins dentaires, santé mentale, soins de la vue, invalidité de courte et de longue durée, assurance vie et assurance DMA, assurance adoption, de maternité de substitution et de soins médicaux non urgents ainsi que des programmes d’aide aux employés et leur famille. Nous proposons également aux employés admissibles différents régimes d’épargne-retraite (y compris des régimes de rente et un programme international d’actionnariat assortie de cotisations patronales de contrepartie) ainsi que des ressources en matière d’éducation et de conseils financiers. Notre généreux programme de congés rémunérés au Canada comprend les jours fériés, les congés annuels, les congés personnels et les congés de maladie, et nous offrons toute la gamme des congés autorisés prévus par la loi. Si vous posez votre candidature à ce poste aux États-Unis, veuillez écrire à hr@manulife.com pour obtenir de plus amples renseignements sur les dispositions relatives aux congés rémunérés spécifiques aux États-Unis.

Nous utilisons des technologies de données et d’analytique, telles que l’intelligence artificielle (IA), ainsi que des outils de traitement automatisé pour analyser et traiter les renseignements que vous nous fournissez ou que des tiers nous transmettent dans le cadre du processus de demande. Pour en savoir plus, veuillez consulter notre énoncé sur la collecte de renseignements personnels.