Chatbot/AI-Application Tester

vor 2 Wochen


Wien, Wien, Österreich ERSTE Immobilien KAG Vollzeit
  • Dienstort: Vienna
  • Arbeitszeitausmaß: Vollzeit
  • Berufsfeld: Internet banking
  • Unternehmen: Erste Bank Oesterreich

Die Erste Bank Oesterreich ist eines der führenden heimischen Geldinstitute. Als Teil der international tätigen Erste Group sind wir eine attraktive Arbeitgeberin, die ihren Mitarbeiter:innen interessante Karrierechancen eröffnet.

Der Bereich Digital Platforms ist verantwortlich für die Weiterentwicklung und den Betrieb der digitalen Kanäle George, George Business, Advisorapplications und diverse interne Web-Anwendungen. Aktuell suchen wir für unser dynamisches und offenes George Österreich Team eine:n Chatbot/AI-Application Tester:in für das George Österreich Quality Assurance Team, der/die mit technischer Expertise und analytischem Weitblick zur Qualitätssicherung unserer AI-gestützten Anwendungen und Chatbots beiträgt.

Deine Tasks

  • Testen und Qualitätssicherung: Selbstständiges Testen von LLM-Chatbots, Flow-Chatbots und AI-gestützten Anwendungen in unseren digitalen Kanälen wie George/George Business (Web, iOS, Android & Huawei)
  • Durchführung von GPT-Grading/Testing: Validierung und Bewertung der Leistung von LLM-gestützten Chatbots, einschließlich Überprüfung von Genauigkeit, Relevanz und Benutzerfreundlichkeit
  • Testdesign und Abnahmetests: Erstellung und laufende Erweiterung eines Testkatalogs sowie Durchführung von User Acceptance Tests (UAT) und Analyse von AI-Leistungsmetriken
  • Adversarial Testing und Datenanalyse: Überprüfung der Robustheit unserer AI-Applikationen gegenüber unerwarteten Eingaben oder Angriffen (Prompt Injections) sowie Analyse von Test- und Nutzungsdaten zur Identifikation von Schwachstellen in Datenpipelines oder Modellen
  • Zusammenarbeit und Dokumentation: Enge Abstimmung mit Product Ownern, IT-Teams und zentralen Testteams zur Bewertung von Testergebnissen und Kritikalität von Fehlern sowie Einmeldung und Dokumentation von Bugs in Jira mit Empfehlungen zur Optimierung der Systeme
  • Unterstützung bei Deployments: Durchführung von Smoke-Tests und Validierung neuer AI-Funktionen im Produktivsystem

Dein Background

  • Technische Expertise: Grundlegendes Verständnis von Large Language Modellen, der Funktionsweise von AI-Applikationen und Chatbots sowie Erfahrung mit Testautomatisierung und Skripterstellung
  • Testing-Know-how: Vertrautheit mit QA-Tools und Testmanagementsystemen wie Jira, Cypress, TestRail oder Selenium sowie praktische Erfahrung im Testen und Validieren von LLM- und Flow-Chatbots
  • Analytische Fähigkeiten: Fähigkeit zur Identifikation von Schwächen in Applikationen und zur Entwicklung gezielter Verbesserungsmaßnahmen
  • Kommunikation & Zusammenarbeit: Klare und strukturierte Dokumentation sowie Präsentation von Testergebnissen und Empfehlungen, sicheres Arbeiten in funktionsübergreifenden Teams mit Entwicklern, Data Scientists und Produktmanagern
  • Wünschenswerte Eigenschaften: Qualitätsbewusstsein, Liebe zum Detail, Eigenantrieb, Flexibilität, Freude an teamorientierter Zusammenarbeit sowie Interesse an Conversational Interfaces, Chatbots und AI-Anwendungen

Unser Angebot

  • Modernes Arbeitsumfeld: Flexible Arbeitszeiten und eine offene, innovationsfreundliche Unternehmenskultur.
  • Attraktive Benefits: Vielfältige Weiterbildungs- und Entwicklungsmöglichkeiten sowie umfangreiche Sozialleistungen und ein attraktives Gehaltspaket.
  • Chancengleichheit: Unsere Unternehmenskultur schätzt Vielfalt und fördert Gleichberechtigung.
  • Weiterbildung und persönliche Entwicklung: Vielfältige Möglichkeiten zur Weiterbildung und persönlichen Entwicklung.
  • Das Mindestentgelt für diese Vollzeitposition (38,5h) nach dem geltenden Kollektivvertrag beträgt 48.323,1 Euro brutto pro Jahr bei vollständiger Erfüllung des Funktionsprofils. Aber das ist nur eine Formalität - über dein tatsächliches Gehalt sprechen wir gerne persönlich
  • Wir bieten unseren Mitarbeiter:innen individuelle Homeoffice-Lösungen.
  • Wir sehen in der Diversität unserer Mitarbeiter:innen einen Schlüssel für Innovation und Exzellenz. Als Arbeitgeberin sind wir stolz darauf, allen die gleichen Chancen zu bieten, unabhängig von Alter, Hautfarbe, Religion, Geschlecht, sexueller Orientierung oder Herkunft.
#J-18808-Ljbffr

  • Wien, Wien, Österreich Erste Bank Vollzeit

    Bei uns zu arbeiten, bedeutet, an die Zukunft zu glauben; an die großartigen Menschen, die sie jeden Tag gemeinsam gestalten und an die verschiedensten Karrieremöglichkeiten, die sich damit eröffnen. #glaubandichAI Data and Business Analyst (w/m/d)Dienstort: WienArbeitszeitausmaß: VollzeitBerufsfeld: Innovation / Digital BankingUnternehmen: Erste Bank...

  • Product Owner

    Vor 7 Tagen


    Wien, Wien, Österreich Magenta Telekom Teilzeit

    Product Owner (f/m/d) AI Automation/Chatbot Apply Now Wien asap Teilzeit / Vollzeit unbefristet We are MagentaMagenta Telekom is a leading provider of internet, mobile communications, entertainment and business solutions in Austria. The company counts around 2,200 employees and is part of the Deutsche Telekom Group. Your Team As a Product...

  • Product Owner

    Vor 2 Tagen


    Wien, Wien, Österreich Magenta Telekom Teilzeit

    Product Owner (f/m/d) AI Automation/Chatbot Apply Now Wien asap Teilzeit / Vollzeit unbefristet We are MagentaMagenta Telekom is a leading provider of internet, mobile communications, entertainment and business solutions in Austria. The company counts around 2,200 employees and is part of the Deutsche Telekom Group. Your Team As a Product...


  • Wien, Wien, Österreich UNIQA Insurance Group Vollzeit

    Competencies: Handlungsorientiert; Arbeitet mit anderen zusammen; Effektive Lösungen finden; Vertrauen schaffenAls eine der führenden Versicherungen wissen wir, dass wir gemeinsam mehr bewegen können. Bei UNIQA sind wir deshalb die Gemeinschaft für ein besseres Leben. Wir nutzen unsere individuellen Fähigkeiten, um zusammen eine bessere Zukunft zu...


  • Wien, Wien, Österreich UNIQA Group Vollzeit

    Tab drücken, um zum Link "Weiter zu Inhalt" zu gelangenAls eine der führenden Versicherungen wissen wir, dass wir gemeinsam mehr bewegen können. Bei UNIQA sind wir deshalb die Gemeinschaft für ein besseres Leben. Wir nutzen unsere individuellen Fähigkeiten, um zusammen eine bessere Zukunft zu gestalten.Wir, das Team Group Data & AI, sind eine Gruppe von...


  • Wien, Wien, Österreich Uniqa Insurance Group AG Vollzeit

    Competencies: Handlungsorientiert; Arbeitet mit anderen zusammen; Effektive Lösungen finden; Vertrauen schaffenAls eine der führenden Versicherungen wissen wir, dass wir gemeinsam mehr bewegen können. Bei UNIQA sind wir deshalb die Gemeinschaft für ein besseres Leben. Wir nutzen unsere individuellen Fähigkeiten, um zusammen eine bessere Zukunft zu...


  • Wien, Wien, Österreich UNIQA Insurance Group AG Vollzeit

    AI Governance Expert:inAls eine der führenden Versicherungen wissen wir, dass wir gemeinsam mehr bewegen können. Bei UNIQA sind wir deshalb die Gemeinschaft für ein besseres Leben. Wir nutzen unsere individuellen Fähigkeiten, um zusammen eine bessere Zukunft zu gestalten.Wir, das Team Group Data & AI, sind eine Gruppe von motivierten, kreativen und...


  • Wien, Wien, Österreich at Vollzeit

    General Manager, AI Innovation and Growth (Brisbane-based)Earn a Competitive Salary + Super & benefitsFor over a decade, NetEngine has been delivering digital innovation, building custom software solutions that empower businesses across industries—from travel and healthcare to recruitment, government, and not-for-profits. Our expertise in workflow...


  • Wien, Wien, Österreich ONTEC AG Vollzeit

    Full-Stack AI Developer (m/f/x)ONTEC is a specialist for business-critical systems. As a leading implementation partner, we support companies in digitizing their business-critical business processes, integrating AI solutions and operating their critical infrastructure. Our employees appreciate the excellent working atmosphere, the opportunity to get...

  • Full-Stack AI Developer

    vor 15 Stunden


    Wien, Wien, Österreich ONTEC Vollzeit

    Full-Stack AI Developer (m/f/x)ONTEC is a specialist for business-critical systems. As a leading implementation partner, we support companies in digitizing their business-critical processes, integrating AI solutions, and operating their critical infrastructure. Our employees appreciate the excellent working atmosphere, the opportunity to get involved, to...


  • Wien, Wien, Österreich ONTEC AG Vollzeit

    Full-Stack AI Developer (m/w/x)ONTEC ist Spezialist für businesskritische Systeme. Als führender Implementierungspartner unterstützen wir Unternehmen bei der Digitalisierung ihrer businesskritischen Geschäftsprozesse, bei der Integration von AI-Lösungen sowie beim Betrieb ihrer kritischen Infrastruktur. Unsere Mitarbeiter*innen schätzen das...


  • Wien, Wien, Österreich Ontec Vollzeit

    Technical AI Project Coordinator (m/f/x)ONTEC is a specialist for business-critical systems. As a leading implementation partner, we support companies in digitizing their business-critical business processes, integrating AI solutions and operating their critical infrastructure. Our employees appreciate the excellent working atmosphere, the opportunity to get...


  • Wien, Wien, Österreich ONTEC AG Vollzeit

    Technical AI Project Coordinator (m/f/x)ONTEC is a specialist for business-critical systems. As a leading implementation partner, we support companies in digitizing their business-critical business processes, integrating AI solutions and operating their critical infrastructure. Our employees appreciate the excellent working atmosphere, the opportunity to get...


  • Wien, Wien, Österreich GeoSphere Austria Vollzeit

    Scientist for Numerical Weather Prediction and AI integrationGeoSphere Austria is the national geological, geophysical, climatological, and meteorological service in Austria. We combine over 150 years of expertise and experience with the latest research findings, always prioritizing the needs of people in all our efforts. With a team of over 500 experts, we...


  • Wien, Wien, Österreich GeoSphere Austria Vollzeit

    Scientist for Numerical Weather Prediction and AI integrationGeoSphere Austria is the national geological, geophysical, climatological, and meteorological service in Austria. We combine over 150 years of expertise and experience with the latest research findings, always prioritizing the needs of people in all our efforts. With a team of over 500 experts, we...


  • Wien, Wien, Österreich Tiroler Sparkasse Bankaktiengesellschaft Innsbruck Vollzeit

    Location: WienWorking hours: Full-timeOccupational Area: ITCompany: Erste DigitalWe are part of Erste Group – the largest banking group in Central and Eastern Europe with more than 2,500 branches and over 45,000 employees. Our more than 2,000 IT experts and enthusiasts are the bank's Digital Muscle.Over 10 million people across Europe organize their...

  • Test Engineer

    vor 2 Wochen


    Wien, Wien, Österreich Austriaische Post AG Vollzeit

    Press Tab to Move to Skip to Content LinkSelect how often (in days) to receive an alert:Österreichische Post AG is a leading company in the field of postal and logistics services in Austria, successfully expanding into international markets. An important part of our strategy is our digital channels, such as our website www.post.at and our Post App. For the...


  • Wien, Wien, Österreich UNIQA Insurance Group Vollzeit

    Willkommen bei der UNIQA VersicherungsgruppeBeschreibung des AufgabenbereichsWir suchen eine/n Daten- und KI-Governance-Spezialist:in, die mit uns gemeinsam einen Beitrag zur digitalen Transformation leistet. Als Mitglied unseres agilen Teams entwickelt du neue und innovative Lösungen, um unsere internen Richtlinien an aktuelle Anforderungen...

  • Product Owner AI

    Vor 7 Tagen


    Wien, Wien, Österreich KERN engineering careers GmbH Vollzeit

    Product Owner AI (m/w/d/) Innovationstreiber:in für KI-Produkte 03.03.2025 Job-Nr.: 215341 Jetzt Bewerben Unser Kunde ist ein junges, dynamisches & stets wachsendes Unternehmen, dass sich auf die Digitalisierung von Versicherungsprodukten spezialisiert. Der Fokus liegt auf dem Vorantreiben von Innovationen und dem Schaffen von digitalen...

  • Senior Test Lead

    vor 2 Wochen


    Wien, Wien, Österreich at Vollzeit

    Testing & Quality Assurance (Information & Communication Technology)Contract/TempI am currently looking for Senior Test Lead/ Test Manager to join our client for a 6 months engagement with potential for extensionThis role will be responsible for working with business stakeholders and the relevant project stakeholders in ensuring that new/changed services...