Ανώτερος Μηχανικός Αυτοματισμού Δοκιμών Ποιότητας AI – CX Agent

Ο Ρόλος:

Αναζητούμε έναν Ανώτερο Μηχανικό Αυτοματισμού Δοκιμών Ποιότητας AI για να αναλάβει ηγετικό τεχνικό ρόλο στην ποιότητα AI και την αυτοματοποίηση δοκιμών. Θα εργαστείτε κυρίως με το AWS Bedrock AgentCore-based CX Agent Suite, ένα πολυ-πράκτορα σύστημα υποστήριξης πελατών που καλύπτει δρομολόγηση προθέσεων, συχνές ερωτήσεις, ερωτήματα κατάστασης καταθέσεων και μεταβίβαση σε ανθρώπινο παράγοντα. Θα σχεδιάσετε και θα δημιουργήσετε τα εργαλεία αξιολόγησης και ποιότητας που απαιτούνται για την αξιόπιστη επαλήθευση των πρακτόρων AI και θα συνεισφέρετε στα τεχνικά πρότυπα και τις βέλτιστες πρακτικές στον τομέα της ποιότητας.

Αυτή είναι μια θέση Ανώτερου Ατομικού Συνεργάτη (IC) με ισχυρό τεχνικό και στρατηγικό προσανατολισμό. Θα συνεργαστείτε στενά με τη διοίκηση ποιότητας, τη δεδομένα επιστήμης, και τη μηχανική για να αρχιτεκτονήσετε κλιμακούμενα συστήματα αξιολόγησης AI, να καθιερώσετε τεχνικά πρότυπα και να προωθήσετε την εξέλιξη του πλαισίου αξιολόγησης AI. Το τρέχον περιβάλλον αξιολόγησης βασίζεται στο DeepEval και εξελίσσεται σε μια ευρύτερη αρχιτεκτονική αξιολόγησης πρακτόρων. Θα έχετε την ευκαιρία να αξιολογήσετε και να δημιουργήσετε πρωτότυπα μεθόδους ορχήστρωσης πρακτόρων, όπως τα Strands Agents, και να συμβάλετε σε αρχιτεκτονικές αποφάσεις για την υιοθέτησή τους.

Οι κύριες ευθύνες της θέσης περιλαμβάνουν:

• Ενεργοποίηση ως κύριος τεχνικός παράγοντας για την ποιότητα, δημιουργώντας κλιμακούμενα πλαίσια AI/ML, βιβλιοθήκες και εργαλεία για το CX Agent Suite και πέραν αυτού
• Σχεδιασμός και κατασκευή δομών αξιολόγησης AI που αξιολογούν τις πολυπρακτορικές απαντήσεις του CX Agent Suite (Intent Detector, FAQ Agent, Missing-Deposits Agent) για ακρίβεια, συνάφεια, τόνο, ποσοστό ψευδών πληροφοριών, συμμόρφωση με προστατευτικούς κανόνες και ολοκλήρωση εργασιών — επεκτείνοντας ή αντικαθιστώντας το τρέχον περιβάλλον DeepEval
• Αξιολόγηση και πρωτοτυποποίηση των Strands Agents (ή αντίστοιχων πλαισίων ορχήστρωσης πρακτόρων) για δημιουργία αυτόνομων πρακτόρων QA που εξελίσσονται αυτόνομα, με στόχο την απόφαση αποδοχής ή μη
• Συνεργασία με τα τμήματα QA, Data Science και Μηχανικής για την ενσωμάτωση δοκιμών AI στη υπάρχουσα αλυσίδα GitLab CI/CD (ανάπτυξη → δοκιμή → στάδιο → παραγωγή), μαζί με υπηρεσίες υποδομής μέσω Terraform, EKS και AgentCore
• Κατασκευή ανθεκτικού και προσαρμοστικού αυτοματισμού που ανιχνεύει και ανταποκρίνεται σε αλλαγές στη συμπεριφορά πρακτόρων, ρυθμίσεις Bedrock Guardrails και λογική δρομολόγησης
• Ανάπτυξη ποιοτικών αναλυτικών εργαλείων βάσει δεδομένων, περιλαμβάνοντας ανάλυση αιτιών, τάσεις ποιότητας και έξυπνη ιεράρχηση δοκιμών, αξιοποιώντας δεδομένα από OpenTelemetry, CloudWatch, X-Ray και LangFuse
• Ηγεσία έρευνας σε αναδυόμενες μεθοδολογίες δοκιμών AI και καθοδήγηση μηχανικών μέσω ανασκοπήσεων κώδικα, εργαστηρίων και αρχιτεκτονικής καθοδήγησης

Κύρια απαιτούμενα προσόντα:

• Πτυχίο/Μεταπτυχιακό στην Πληροφορική, Τεχνητή Νοημοσύνη ή συναφή τομέα
• Πάνω από 6 χρόνια πρακτικής εμπειρίας στην ποιότητα/αυτοματισμό δοκιμών, με ισχυρή εμπειρία στον σχεδιασμό και διαχείριση πλαισίων αυτοματισμού
• Πάνω από 1 χρόνο εμπειρίας στην εφαρμογή AI/ML σε δοκιμές λογισμικού ή βελτίωση διαδικασιών QA, με αποδεδειγμένο ιστορικό εισαγωγής λύσεων AI/ML σε παραγωγικές ροές εργασίας
• Ισχυρές γνώσεις Python σε περιβάλλοντα τεχνολογίας Python/AWS· γνώσεις Java και/ή TypeScript επιπλέον συν
• Πρακτική εμπειρία σε τεχνικές αξιολόγησης LLM, συμπεριλαμβανομένων LLM-as-a-judge, human-in-the-loop, RAG και πολυπρακτορικής ορχήστρωσης
• Εμπειρία με DeepEval ή αντίστοιχα περιβάλλοντα αξιολόγησης και γνώση SDK ορχήστρωσης πρακτόρων όπως Strands Agents
• Γνώση εργαλείων LLM, βάσεων δεδομένων vector και pipelines MLOps
• Εμπειρία ενσωμάτωσης εργαλείων AI σε περιβάλλοντα CI/CD, ειδικά GitLab, και εργασία με cloud-native κοντέινερ όπως Docker, Kubernetes/EKS
• Ισχυρές επικοινωνιακές δεξιότητες για την επιρροή τεχνικών αποφάσεων και την προώθηση προτύπων μηχανικής εντός ομάδων

Θα εκτιμηθούν ιδιαίτερα:

• Εμπειρία με αυτόνομους πρακτορες QA ή πλαίσια ορχήστρωσης για αυτο-εξελισσόμενες σειρές δοκιμών
• Εμπειρία με εργαλεία παρατηρησιμότητας LLM όπως LangFuse, LangSmith ή Arize για μέτρηση πιθανοτήτων και ανθεκτικότητας
• Γνώση ηθικής AI, δικαιοσύνης και ανίχνευσης μεροληψίας για έλεγχο προστατευτικών κανόνων και επικύρωση μοντέλων
• Εμπειρία με gRPC, WebSockets και/ή HTTP/2
• Γνώση AWS Bedrock και εξοικείωση με GCP Vertex AI ή Azure AI

Οφέλη:

• Ελκυστικό πακέτο αποδοχών
• Πνευματικά διεγερτικό εργασιακό περιβάλλον
• Συνεχής προσωπική ανάπτυξη και διεθνείς ευκαιρίες κατάρτισης

Η διαδικασία πρόσληψης περιλαμβάνει:

• Πρώτη επαφή – Εισαγωγική συνομιλία με τμήμα επιλογής προσωπικού
• Εμβάθυνση – Πρώτη συνέντευξη με την ομάδα
• Τελική σύνδεση – Τελική συνέντευξη

Όλες οι αιτήσεις θα αντιμετωπιστούν με απόλυτη εμπιστευτικότητα!

Με την υποβολή της αίτησης, επιβεβαιώνω ότι διάβασα και αποδέχομαι τους όρους της Πολιτικής Απορρήτου και Προστασίας Δεδομένων καθώς και της Υποχρέωσης Εχεμύθειας.

Η XM δημοσιεύει αυτή τη θέση στον δικό της ιστότοπο καριέρας. Οι αιτήσεις αποστέλλονται απευθείας στην XM: χρησιμοποιήστε το κουμπί Αίτηση σε αυτή τη σελίδα.