L'Analyste QA est responsable de la validation de la qualité des livrables. L'analyste QA devra démontrer une forte appétence pour l'automatisation et collaborer étroitement avec les équipes de client afin de structurer et industrialiser cette pratique selon une approche.
Nous cherchons à instaurer une plus grande connaissance des pratiques d'assurances qualité à l'ensemble de nos contributeurs. Nous avons à cœur l'optimisation des différents types de tests mais aussi l'élaboration d'un processus d'assurance qualité dès le début du cycle de livraison selon le contexte de chaque projet.
Your future duties and responsibilities
Conception et mise en œuvre de stratégies de test complètes pour les systèmes et modèles d'IA, incluant l'ingénierie des invites, l'évaluation des résultats et les tests de biais et de sécurité. Maîtrise approfondie du comportement des modèles de langage (tokenisation, plongements lexicaux, mécanismes d'attention et inférence) afin d'anticiper les modes de défaillance. Création d'invites efficaces, identification des hallucinations et des résultats hors cible, et évaluation de la qualité selon les critères de précision, de tonalité, de cohérence et de biais. Application de métriques d'évaluation spécifiques à l'IA générative et définition de seuils appropriés.
Test des systèmes d'IA intégrés aux pipelines RAG et aux bases de connaissances, en validant la qualité des données et la précision de la récupération, et leur impact sur les résultats du modèle. Compréhension des mécanismes des bases de données vectorielles, des seuils de recherche de similarité, de la dérive des plongements lexicaux, et test des cas limites tels que les documents quasi-dupliqués, les plongements lexicaux clairsemés et denses, et les performances à grande échelle. Utilisation des frameworks LangChain et LangGraph pour la lecture de code, la compréhension de la construction des chaînes et des graphes, l'identification des points de défaillance et la création de bancs d'essai. Validation des points d'intégration à l'aide de MCP (Multiple Check Point), de la disponibilité des outils de test et de la gestion des erreurs.
Stratégie et planification des tests : Définir et exécuter des stratégies de test complètes pour les plateformes de titrisation, garantissant une couverture optimale des tests fonctionnels, de régression, d'intégration et de performance. Établir des normes et des bonnes pratiques de test couvrant à la fois l'assurance qualité traditionnelle et la validation spécifique à l'IA.
Automatisation des tests et développement de frameworks : Concevoir, développer et maintenir des suites de tests automatisés afin d'accélérer les cycles de publication et d'améliorer la couverture. Tirer parti des outils d'IA et d'apprentissage automatique pour optimiser la couverture des tests, améliorer l'efficacité et réduire les cycles de régression.
Assurance qualité du cycle de vie de la titrisation : Valider les flux de travail de bout en bout des transactions, y compris la configuration, la structuration, le traitement et la distribution. Garantir l'intégrité des données entre les systèmes en amont et en aval grâce à des tests de réconciliation et à la production de rapports.
Tests de publication et de régression : Coordonner les tests de régression pour les mises à jour de la plateforme, les correctifs et les modifications d'infrastructure. Garantir la stabilité et la rétrocompatibilité, en particulier pendant les périodes de traitement critiques.
Collaboration interfonctionnelle : Collaborer avec les développeurs, les analystes fonctionnels et les responsables produit pour clarifier les exigences, identifier les cas limites et garantir la testabilité des nouvelles fonctionnalités. Animer des sessions de triage des anomalies, prioriser les problèmes en fonction de leur impact sur l'activité et maintenir une documentation claire jusqu'à leur résolution.
Leadership et reporting qualité : Définir et suivre les indicateurs clés de qualité, notamment la densité des défauts, la couverture des tests et les taux d’automatisation. Présenter les résultats à la direction et recommander des améliorations. Encadrer les membres juniors de l’équipe QA et promouvoir une culture de la qualité au sein de l’équipe.
Support à la production : Fournir un support à la production pendant les périodes de traitement critiques, enquêter sur les incidents et coordonner l’analyse des causes profondes et les actions correctives.
Required qualifications to be successful in this role
Expérience de plus de 7 ans en assurance qualité ou en ingénierie qualité, dont au moins 3 ans à un poste de responsable ou de cadre supérieur. Solides connaissances du secteur de la titrisation, des marchés de capitaux ou de classes d'actifs similaires.
Compétences techniques : Expérience pratique des outils d'automatisation des tests (Selenium, Robot Framework, Playwright ou équivalent). Maîtrise des langages de programmation, notamment Java et Python, avec une expertise avérée en implémentation de frameworks. Expérience pratique de l'automatisation des API et de la validation des systèmes backend. Maîtrise du développement de requêtes de base de données, de la validation des données et des tests de réconciliation. Expérience des pipelines CI/CD et des pratiques DevOps (Jenkins, GitHub ou équivalent).
Compétences en IA et ML : Compréhension approfondie de l'architecture et du comportement des modèles de langage (LLM). Expérience pratique des frameworks LangChain et/ou LangGraph. Connaissance des pipelines RAG, des bases de données vectorielles et des solutions agentiques. Familiarité avec les protocoles de contexte de modèle (MCP) et les tests d'intégration. Compréhension des méthodologies de tests de biais, de sécurité et de tests d'intrusion (red team) pour les systèmes d'IA.
- CGI offre une estimation raisonnable de la fourchette salariale pour ce poste. Le calcul de cette fourchette dépend de divers facteurs, notamment le niveau de compétence, le marché géographique, l’expérience, la formation ainsi que les licences et certifications professionnelles. Les décisions en matière de rémunération dépendent des particularités de chaque cas. Une estimation raisonnable de cette fourchette salariale se situe entre 60,000 $ et 115,000 $. Ce poste est vacant.
#LI-BZ1
Ensemble, en tant que propriétaires, mettons notre savoir-faire à l’œuvre.
La vie chez CGI est ancrée dans l’actionnariat, le travail d’équipe, le respect et un sentiment d’appartenance. Chez nous, vous pourrez exploiter votre plein potentiel parce que…
Nous vous invitons à devenir propriétaire dès le jour 1 alors que nous travaillons ensemble à faire de notre rêve une réalité. C’est pourquoi nous nous désignons comme associés de CGI, plutôt que comme employés. Nous tirons profit des retombées de notre succès collectif et contribuons activement à l’orientation et à la stratégie de notre entreprise.
Votre travail crée de la valeur. Vous élaborerez des solutions novatrices et développerez des relations durables avec vos collègues et clients, tout en ayant accès à des capacités mondiales pour concrétiser vos idées, saisir de nouvelles opportunités, et bénéficier d’une expertise sectorielle et technologique de pointe.
Vous ferez évoluer votre carrière en vous joignant à une entreprise bâtie pour croître et durer. Vous serez soutenus par des leaders qui ont votre santé et bien-être à cœur et qui vous permettront de saisir des occasions afin de parfaire vos compétences et élargir les horizons.
Chez CGI, nous valorisons la richesse que la diversité apporte et nous nous engageons à favoriser un environnement de travail où chacun s’épanouit. Nous collaborons avec nos clients pour bâtir des communautés plus inclusives et permettre à tous les associés de CGI de réussir. En tant qu’employeur prônant l’égalité des chances, il est important pour nous que vous puissiez donner le meilleur de vous-même durant le processus de recrutement. Si vous avez besoin d’un accommodement particulier, veuillez en informer votre recruteur.
Pour en savoir plus sur l'accessibilité chez CGI, contactez-nous par courriel. Veuillez noter que ce courriel est strictement réservé aux demandes d'accessibilité et ne peut être utilisé pour vérifier l'état d’une candidature.
Joignez-vous à nous, l’une des plus importantes entreprises de conseil en technologie de l’information (TI) et en management au monde.
