Test Lead (AI Validation & Integration) - poste à distance

L'entreprise Digital Forms recrute : Test Lead (AI Validation & Integration). C'est un poste d'encadrement, donc la responsabilité d'une équipe ou de tout un périmètre. Le poste relève de la catégorie IT et développement et se fait entièrement à distance. Aucune restriction n'est posée sur le lieu de résidence du candidat, vous pouvez donc postuler de partout.

Les principaux outils cités dans l'annonce sont les suivants : Salesforce, Agile / Scrum. Votre CV doit montrer des exemples concrets de ces compétences.

L'entreprise a publié la rémunération : 19k - 30k PLN par mois. L'annonce ne pose aucune condition d'horaires.

Cette offre a passé un contrôle automatique : les annonces qui exigent un permis de travail étranger, un parrainage de visa, une nationalité précise ou une résidence dans un pays nommé n'entrent pas dans la liste.

Nous recherchons une piste d'essai expérimentée pour guider la stratégie Qualité et Validation d'un projet à impact élevé, particulièrement dans une industrie réglementée qui intègre des composants d'IA et l'intégration Salesforce. Ce rôle supervisera la création et la mise en oeuvre de la Stratégie d'essai et de validation de l'IA. Vous vous assurerez que la sortie de la solution est validée avec précision pour l'exactitude, la fiabilité et la sécurité, en connectant le développement de nouveaux composants AI Agent avec l'environnement Salesforce du client.

Responsabilités

- Stratégie et planification : - Élaborer et peaufiner la stratégie d'AQ, qui couvre l'unité fonctionnelle, l'E2E, l'intégration, la régression et les tests d'acceptation des utilisateurs. - Veiller à l'alignement sur les exigences non fonctionnelles (NFR), telles que le RGPD, le HIPAA et le HITRUST. - Définir des protocoles de validation pour les composants d'IA, établir des critères pour les extrants « corrects » et établir des normes d'évaluation, y compris des scénarios de manipulation pour les hallucinations et les règles d'échouement. - Élaborer des plans détaillés pour les environnements d'essai (Dev/Test/Prod) et établir une stratégie de données d'essai pour couvrir les cas standard et de bord, ainsi que les problèmes d'ingestion de données.

- Exécution et rapports : - Effectuer des essais de fonctionnement, de régression, d'exploration, de performance et de charge. - Coordonner les efforts de validation conjointe de bout en bout, en étroite collaboration avec l'équipe cliente pour gérer les tests d'intégration de Salesforce. - Intégrer les activités d'essai dans le pipeline CI/CD pour assurer la qualité continue. - Gérer les structures de cas de test Jira qui s'harmonisent avec les histoires des utilisateurs et les critères d'acceptation. - Fournir des mises à jour régulières, suivre les paramètres d'AQ comme les rapports de défaut.

Contexte du projet - C'est un nouveau projet pour un client avec qui nous avons déjà collaboré. Nous en sommes maintenant aux dernières étapes de la phase de découverte et nous nous dirigeons vers la phase de livraison. - Le projet consiste à développer un moteur de validation et d'automatisation des données qui traite les données structurées et non structurées à travers un cadre logique complexe. Les modèles d'IA interprètent les données soumises par les utilisateurs, identifiant les incohérences et les informations manquantes avant de convertir les résultats en format structuré. Les éléments clés comprennent l'ingestion automatisée de données, la validation fondée sur des règles et l'intégration à l'architecture d'entreprise existante dans un environnement hautement réglementé.

Prescriptions techniques - Compétence en anglais. - Expérience dans la conception et la mise en œuvre de stratégies d'essais complètes de bout en bout pour des solutions complexes. - Expertise dans la validation des modèles d'IA et l'exécution de tests de bout en bout pour des systèmes complexes et intégrés. - Forte expérience en testant des exigences non fonctionnelles telles que la performance, la fiabilité, l'auditabilité et la sécurité. - Connaissance approfondie de la protection de la vie privée et du traitement des données sensibles, y compris la minimisation de l'IIP/ISP et du masquage/anonymisation des données. - Expérience pratique en automatisation utilisant au moins un cadre robuste (p. ex. Python/Java/JS + cadres comme pytest/JUnit). - Capacité de surveiller et de faire rapport sur les mesures de l'AQ telles que les rapports de défaut. - Excellente capacité de communication, écrite et verbale. - Compétence en Jira.

Disponibilité - Disponibilité à temps plein, avec chevauchement préféré pendant 14:00-18:00 pour assurer une collaboration en douceur avec le client américain.

Compétences complémentaires souhaitables - Familiarité avec la plateforme AWS. - Certifications ISTQB ou similaires. - Expérience antérieure dans des projets de consultation rapides ou orientés vers le client.

Faits saillants - Diriger le processus de validation de l'AQ et de l'IA pour un projet AI + Salesforce réglementé, de la formulation de la stratégie aux tests pratiques, en assurant la validation de bout en bout et une collaboration étroite avec le client.

Initialement posté sur Himalayas