SlideShare a Scribd company logo
1 of 14
Download to read offline
us.sogeti.com
Cognitive Quality Assurance:
Traditionelle Qualitätssicherung steht vor erheblichen Herausforderungen,
die einen neuen Ansatz erfordern: Cognitive QA
OOP 2018 - SOFTWARE MEETS BUSINESS
München 07. Februar 2018
Mehr Informationen unter www.cognitive-qa.com
us.sogeti.com
KUNDENERFOLGE MIT COGNITIVE QA
• Beschleunigung der Auswahl von wichtigsten
Kombinationen aus Hard und Software
• 10 Wochen PoV
• 8 TestOps Regeln in IBM SPSS
• neu Priorisierung der 896 Testfälle und 185
Konfigurationen
• 63% der Testfälle wurden herunter priorisiert
• Ableitung kritischer Tests und Konfigurationen
• Systematische Sichtweise auf die Planung
• Effizienzsteigerung der Hardware-Nutzung
Ergebnis
Ziel
• Dynamische Testauswahl der Regressionstests
und Priorisierung der Testautomatisierung
• 8 Wochen PoV
• 6 TestOps Regeln in IBM SPSS
• Reduzierung der 13.721 Regressionstests
• 1.664 Regressionstest, 88% weniger
Testaufwand
• QA-Dashboard für System- und
Performance-Tests
• automatisierte Zusammenstellung des Testsets
Ergebnis
MEDICAL IMAGING SOLUTION
PROVIDER
Ziel
INDUSTRIAL AUTOMATION OEM
KUNDE
• Aufwandersparnis und verbessertes
Risikomanagement
• 10 Wochen PoV
• 6 TestOps Regeln in IBM SPSS
• Reduzierung der 22.289 Regressionstests
• Transparents des Qualitäts
• 2.288 Regressionstest, 90% weniger
Testaufwand
• kürzere Release-Zyklen
• verbessertes Risikomanagement
• Früherkennung von Fehlern
Ergebnis
Ziel
2
us.sogeti.com
FAKTEN ÜBER SOGETI
3
Teil der Capgemini
Gruppe
Mitarbeiter
weltweit
200,000 +
Erfahrungsjahre
In 15 Ländern präsent: Europa,
Indien und USA sowie 40+
Länder durch Capgemini
Milliarden
Euro Umsatz
50 2
25,000 +
Lokal & Global
Zukunftsweisende Lösungen in: Digital,
BI & Analytics, Qualitätssicherung und -
prüfung, Cybersicherheit, Cloud & Digital
Manufacturing
Führend
Starke globale Partnerschaften mit
z. B. IBM, Microsoft und
Mikrofocus
Partnerschaften
3
us.sogeti.com
• Wie erreiche ich eine ausreichende Qualität und halte die
Entwicklungsgeschwindigkeit?
• Wie können wir herausfinden, welche Testfälle wirklich wichtig sind?
• Decken unsere Tests alle wichtigen Risikobereiche ab?
• Was sind unsere Risikobereiche?
• Wie kann ich meine vorhandenen Systemdaten nutzen?
• Können sich unsere Tests automatisch an Randbedingungen anpassen?
• Wie kann ich mit der zunehmenden Komplexität und der intelligenten
Anwendungen im Test mithalten?
• Wie kann ich das Qualitätsniveau meiner Anwendungen in Echtzeit überprüfen?
DAS FRAGEN UNSERE KUNDEN
4
us.sogeti.com
UNSERE ANTWORT: COGNITIVE QA
„Wir generieren täglich Daten in
der Entwicklung, bei QS-
Aktivitäten und vielleicht auch
im Kundenservice, aber was
dann?“
Artificial
Intelligence
Prediction
Data Analysis
Qualitätssicherung
Kundenservice
Entwicklung
Data
Management
Wir verwandeln Ihre Daten in
gewinnbringende Informationen
durch Analyse, BI-Funktionen
und ein angepasstes QA-
Dashboard.
Wir verwenden IBM SPSS und
historische sowie aktuelle Daten, um
vorherzusagen, wo Fehler auftreten,
erkennen Nutzungsmuster oder
decken kritische Bereiche auf.
Basierend auf Vorhersagen und der
gemachten Erfahrungen, optimieren wir
weiter z. B. das Qualitätsmanagement, die
Aufwandsverteilung oder die Time-to-Market
durch Automatisieren von KI-Aktionen.
Unstrukturiert
Daten
Dashboards
5
us.sogeti.com
•Online-Portal mit Konnektoren um
Verbindungen zu Datenquellen zu
verwalten.
•Gefilterte Daten werden in das Datenmodel
geladen und integriert, welches zur
Visualisierung genutzt wird.
•Nutzten der Power von IBM SPSS für
Vorhersagen und Watson für KI-Modelle.
•KI-Verfahren können automatisiert und
durch historische Daten gesteuert werden.
Cognitive QA platform
WIE KOMMEN WIR AN DIE DATEN ?
AI-based
actions
Cognitive QA
platform
6
6
us.sogeti.com
QA SMART ANALYTICS
8
Gruppierer
Datenregeln
Software Lifecycle
Artifact Quality
Selbstlernende
Empfehlungs-Engine
Cognitive QA
Regeln
Testergebnisse
Optimierte Testliste
basierend auf Echtzeitdaten
Test Engine
Feedback
Operative
Datensammlungen
RTM Systeme
Nutzungsmuster
Support Mitarbeiter
Notizen
App. Logs and traces
strukturierte
Daten
nicht strukturierte
Daten
Source ctrl /Build Mgmt
System
Project Mgmt System
nicht strukturierte
Daten
strukturierte
Daten
IT-Systeme aus Test,
Entwicklung und Betrieb
Test Mgmt System
Req. Mgmt System
Code
Qualitätsparameter
Defect Mgmt System
us.sogeti.com
COGNITIVE QA HILFT UNS ZU SEHEN
WAS NICHT OFFENSICHTLICH IST.
8
us.sogeti.com
VORHERSAGEN SIND DIE BASIS, UM ZU SEHEN.
UND DIES IST DIE BASIS, UM ZU HANDELN.
Prognostizierte Diagramme
für die nächsten Zyklen
Vorausgesagte
MetrikenVertrauens-
indikatoren
9
us.sogeti.com
Test-Fehlerfrequenz
Konfig.
Score
TESTS
Beispiel - Dell EMC
10
NeuesteTestfehler
Testfehler Score während
Release Phase
Fehlgeschlagene Test die zu
Codeänderung führten
SUT
Konfig.
Konfig.-Fehlerfrequenz
Neueste Konfig.-Fehler
Konfig.-fehler Score
während Release Phase
Fehlgeschlagene Konfig.
die zu Codeänderung
führten
Test
Score
Die meisten
fehlgeschlagenen
Kombinationen von SUT-
Konfiguration undTests.
Fehlervorhersage-
Modell mit ARIMA
us.sogeti.com
DAS SAGT DELL EMC
NACH DEM POV
1
https://www.youtube.com/watch?time_continue=7&v=6sqmOMs2Pvg
Schritt-für-Schritt-Implementierung zur Lösung Ihrer geschäftlichen Herausforderungen
• Automatisierte Testfallauswahl und Priorisierung - Effizienzsteigerung durch gezielten Testaufwand.
• Vordefinierte Testumgebungskonfiguration - Minimierung der Leerlaufzeit durch optimierte Umgebungsbereitstellung
• Priorisierung der Testautomatisierung - Maximierung des ROI des Testautomatisierungsaufwands.
• Testabdeckungsoptimierung – Treffen Sie die bestmöglichen Entscheidungen basierend auf der „Was-wäre-wenn“-Analyse.
• Testausführungsanalyse - Test auf tatsächliche Nutzungsmuster ausrichten.
• Automatische Generierung von Testskripten - Erstellen Sie optimierte Testsets und reduzieren Sie den Vorbereitungsaufwand.
SCHRITT-FÜR-SCHRITT
Bewährte Analytics-Lösungselemente für echte Geschäftsvorteile
> 40 bewährte Regeln
• Faustregeln
• Gesunder Menschenverstand
• Best Practices
• Intuitives Urteilen
• Positiv / Negativ-Muster
Applying our IP
Kick-Start Proof of Value Deployment
• Sammeln von grundlegenden
Informationen mithilfe Pre-Assessment-
Fragebögen zur Cognitive QA.
• Überprüfung der Verfügbarkeit,
Zugänglichkeit und Qualität der Daten.
• Durchführung eines halbtägigen Solution
Build-Workshops zur Definition des POV-
Bereiches.
Durchführung eines 8-Wochen-PoV mit den
folgenden Schritten:
• Überprüfung der Analysebereitschaft.
• Datenerfassung und -aufbereitung.
• Modellierung Kognitiver QA-Regeln.
• Validierung und Berichterstattung.
• Definieren Sie den Deployment-Ansatz.
Operationalisierungsregeln während der PoV
implementiert.
Die wichtigsten Aktivitäten beteiligen:
• Implementierung von Konnektoren, um Live-
Daten zu nutzen.
• Implementierung des Orchestrierungsmoduls
zur Automatisierung von Workflows.
• Portal-Implementierung (reaktionsschnelles
Web)
12
us.sogeti.com
IHR WEG IN DIE ZUKUNFT DER
QUALITÄTSSICHERUNG
Daten
Mgt.
Daten
Analyse
Vorhersagen
Künstliche
Intelligenz
Future of
Quality
Assurance
14
us.sogeti.com
VIELEN DANK

More Related Content

Similar to Cognitive Quality Assurance

Universität Zürich - erfolgreiches Testing
Universität Zürich - erfolgreiches TestingUniversität Zürich - erfolgreiches Testing
Universität Zürich - erfolgreiches TestingIBM Switzerland
 
Mit Performance-Modellierung Test- und Betriebskosten senken
Mit Performance-Modellierung Test- und Betriebskosten senkenMit Performance-Modellierung Test- und Betriebskosten senken
Mit Performance-Modellierung Test- und Betriebskosten senkenDynatrace
 
QS von IT-Consulting bis Software Development
QS von IT-Consulting bis Software DevelopmentQS von IT-Consulting bis Software Development
QS von IT-Consulting bis Software Developmentadesso AG
 
Next Level Unit Testing
Next Level Unit TestingNext Level Unit Testing
Next Level Unit TestingDaniel Lehner
 
Die nächste Generation des Unit Testing
Die nächste Generation des Unit TestingDie nächste Generation des Unit Testing
Die nächste Generation des Unit TestingDaniel Lehner
 
mimacom f the_process
mimacom f the_processmimacom f the_process
mimacom f the_processFelix Kubasch
 
Mimacom f the_process
Mimacom f the_processMimacom f the_process
Mimacom f the_processFelix Kubasch
 
Dev Day 2019: Kay Grebenstein – Wie wir müssen das noch testen? - design for ...
Dev Day 2019: Kay Grebenstein – Wie wir müssen das noch testen? - design for ...Dev Day 2019: Kay Grebenstein – Wie wir müssen das noch testen? - design for ...
Dev Day 2019: Kay Grebenstein – Wie wir müssen das noch testen? - design for ...DevDay Dresden
 
Windows as a Service - Herausforderungen ohne Windows Desktop Analytics
Windows as a Service - Herausforderungen ohne Windows Desktop AnalyticsWindows as a Service - Herausforderungen ohne Windows Desktop Analytics
Windows as a Service - Herausforderungen ohne Windows Desktop AnalyticsFabian Niesen
 
ASQF Dresden: Benötigen wir mit SCRUM noch einen Testmanager?
ASQF Dresden: Benötigen wir mit SCRUM noch einen Testmanager?ASQF Dresden: Benötigen wir mit SCRUM noch einen Testmanager?
ASQF Dresden: Benötigen wir mit SCRUM noch einen Testmanager?René Spengler
 
Mit agilen Prinzipien große Integrationstests einfach managen
Mit agilen Prinzipien große Integrationstests einfach managenMit agilen Prinzipien große Integrationstests einfach managen
Mit agilen Prinzipien große Integrationstests einfach managenChristoph Schmiedinger
 
Steigern Sie die Effizienz beim Testen Ihres S/4HANA-Systems
Steigern Sie die Effizienz beim Testen Ihres S/4HANA-SystemsSteigern Sie die Effizienz beim Testen Ihres S/4HANA-Systems
Steigern Sie die Effizienz beim Testen Ihres S/4HANA-Systemspanayaofficial
 
20191113 dev ops und continuous delivery_testautomatisierung ist trumpf
20191113 dev ops und continuous delivery_testautomatisierung ist trumpf20191113 dev ops und continuous delivery_testautomatisierung ist trumpf
20191113 dev ops und continuous delivery_testautomatisierung ist trumpfStefan Jobst
 
Panaya Test Center – Auf zu postmodernem ERP Testing
Panaya Test Center – Auf zu postmodernem ERP TestingPanaya Test Center – Auf zu postmodernem ERP Testing
Panaya Test Center – Auf zu postmodernem ERP TestingPanaya
 
Wie steigere ich die Effizienz und Zufriedenheit meiner Mitarbeiter
Wie steigere ich die Effizienz und Zufriedenheit meiner MitarbeiterWie steigere ich die Effizienz und Zufriedenheit meiner Mitarbeiter
Wie steigere ich die Effizienz und Zufriedenheit meiner MitarbeiterThomas Jenewein
 
BizDataX Testdatenmanagement Konzepte
BizDataX Testdatenmanagement KonzepteBizDataX Testdatenmanagement Konzepte
BizDataX Testdatenmanagement KonzepteDragan Kinkela
 

Similar to Cognitive Quality Assurance (20)

Universität Zürich - erfolgreiches Testing
Universität Zürich - erfolgreiches TestingUniversität Zürich - erfolgreiches Testing
Universität Zürich - erfolgreiches Testing
 
Mit Performance-Modellierung Test- und Betriebskosten senken
Mit Performance-Modellierung Test- und Betriebskosten senkenMit Performance-Modellierung Test- und Betriebskosten senken
Mit Performance-Modellierung Test- und Betriebskosten senken
 
QS von IT-Consulting bis Software Development
QS von IT-Consulting bis Software DevelopmentQS von IT-Consulting bis Software Development
QS von IT-Consulting bis Software Development
 
Next Level Unit Testing
Next Level Unit TestingNext Level Unit Testing
Next Level Unit Testing
 
Die nächste Generation des Unit Testing
Die nächste Generation des Unit TestingDie nächste Generation des Unit Testing
Die nächste Generation des Unit Testing
 
"Design & Generate": Standard ERP Systeme nach Mass
"Design & Generate": Standard ERP Systeme nach Mass"Design & Generate": Standard ERP Systeme nach Mass
"Design & Generate": Standard ERP Systeme nach Mass
 
Testautomatisierung
TestautomatisierungTestautomatisierung
Testautomatisierung
 
SAP Business ByDesign - IBIS AG
SAP Business ByDesign - IBIS AGSAP Business ByDesign - IBIS AG
SAP Business ByDesign - IBIS AG
 
mimacom f the_process
mimacom f the_processmimacom f the_process
mimacom f the_process
 
Mimacom f the_process
Mimacom f the_processMimacom f the_process
Mimacom f the_process
 
Dev Day 2019: Kay Grebenstein – Wie wir müssen das noch testen? - design for ...
Dev Day 2019: Kay Grebenstein – Wie wir müssen das noch testen? - design for ...Dev Day 2019: Kay Grebenstein – Wie wir müssen das noch testen? - design for ...
Dev Day 2019: Kay Grebenstein – Wie wir müssen das noch testen? - design for ...
 
Windows as a Service - Herausforderungen ohne Windows Desktop Analytics
Windows as a Service - Herausforderungen ohne Windows Desktop AnalyticsWindows as a Service - Herausforderungen ohne Windows Desktop Analytics
Windows as a Service - Herausforderungen ohne Windows Desktop Analytics
 
ASQF Dresden: Benötigen wir mit SCRUM noch einen Testmanager?
ASQF Dresden: Benötigen wir mit SCRUM noch einen Testmanager?ASQF Dresden: Benötigen wir mit SCRUM noch einen Testmanager?
ASQF Dresden: Benötigen wir mit SCRUM noch einen Testmanager?
 
Mit agilen Prinzipien große Integrationstests einfach managen
Mit agilen Prinzipien große Integrationstests einfach managenMit agilen Prinzipien große Integrationstests einfach managen
Mit agilen Prinzipien große Integrationstests einfach managen
 
Steigern Sie die Effizienz beim Testen Ihres S/4HANA-Systems
Steigern Sie die Effizienz beim Testen Ihres S/4HANA-SystemsSteigern Sie die Effizienz beim Testen Ihres S/4HANA-Systems
Steigern Sie die Effizienz beim Testen Ihres S/4HANA-Systems
 
20191113 dev ops und continuous delivery_testautomatisierung ist trumpf
20191113 dev ops und continuous delivery_testautomatisierung ist trumpf20191113 dev ops und continuous delivery_testautomatisierung ist trumpf
20191113 dev ops und continuous delivery_testautomatisierung ist trumpf
 
Panaya Test Center – Auf zu postmodernem ERP Testing
Panaya Test Center – Auf zu postmodernem ERP TestingPanaya Test Center – Auf zu postmodernem ERP Testing
Panaya Test Center – Auf zu postmodernem ERP Testing
 
Process Monitoring mit Camunda
Process Monitoring mit Camunda Process Monitoring mit Camunda
Process Monitoring mit Camunda
 
Wie steigere ich die Effizienz und Zufriedenheit meiner Mitarbeiter
Wie steigere ich die Effizienz und Zufriedenheit meiner MitarbeiterWie steigere ich die Effizienz und Zufriedenheit meiner Mitarbeiter
Wie steigere ich die Effizienz und Zufriedenheit meiner Mitarbeiter
 
BizDataX Testdatenmanagement Konzepte
BizDataX Testdatenmanagement KonzepteBizDataX Testdatenmanagement Konzepte
BizDataX Testdatenmanagement Konzepte
 

More from Capgemini

Top Healthcare Trends 2022
Top Healthcare Trends 2022Top Healthcare Trends 2022
Top Healthcare Trends 2022Capgemini
 
Top P&C Insurance Trends 2022
Top P&C Insurance Trends 2022Top P&C Insurance Trends 2022
Top P&C Insurance Trends 2022Capgemini
 
Commercial Banking Trends book 2022
Commercial Banking Trends book 2022Commercial Banking Trends book 2022
Commercial Banking Trends book 2022Capgemini
 
Top Trends in Payments 2022
Top Trends in Payments 2022Top Trends in Payments 2022
Top Trends in Payments 2022Capgemini
 
Top Trends in Wealth Management 2022
Top Trends in Wealth Management 2022Top Trends in Wealth Management 2022
Top Trends in Wealth Management 2022Capgemini
 
Retail Banking Trends book 2022
Retail Banking Trends book 2022Retail Banking Trends book 2022
Retail Banking Trends book 2022Capgemini
 
Top Life Insurance Trends 2022
Top Life Insurance Trends 2022Top Life Insurance Trends 2022
Top Life Insurance Trends 2022Capgemini
 
キャップジェミニ、あなたの『RISE WITH SAP』のパートナーです
キャップジェミニ、あなたの『RISE WITH SAP』のパートナーですキャップジェミニ、あなたの『RISE WITH SAP』のパートナーです
キャップジェミニ、あなたの『RISE WITH SAP』のパートナーですCapgemini
 
Property & Casualty Insurance Top Trends 2021
Property & Casualty Insurance Top Trends 2021Property & Casualty Insurance Top Trends 2021
Property & Casualty Insurance Top Trends 2021Capgemini
 
Life Insurance Top Trends 2021
Life Insurance Top Trends 2021Life Insurance Top Trends 2021
Life Insurance Top Trends 2021Capgemini
 
Top Trends in Commercial Banking: 2021
Top Trends in Commercial Banking: 2021Top Trends in Commercial Banking: 2021
Top Trends in Commercial Banking: 2021Capgemini
 
Top Trends in Wealth Management: 2021
Top Trends in Wealth Management: 2021Top Trends in Wealth Management: 2021
Top Trends in Wealth Management: 2021Capgemini
 
Top Trends in Payments: 2021
Top Trends in Payments: 2021Top Trends in Payments: 2021
Top Trends in Payments: 2021Capgemini
 
Health Insurance Top Trends 2021
Health Insurance Top Trends 2021Health Insurance Top Trends 2021
Health Insurance Top Trends 2021Capgemini
 
Top Trends in Retail Banking: 2021
Top Trends in Retail Banking: 2021Top Trends in Retail Banking: 2021
Top Trends in Retail Banking: 2021Capgemini
 
Capgemini’s Connected Autonomous Planning
Capgemini’s Connected Autonomous PlanningCapgemini’s Connected Autonomous Planning
Capgemini’s Connected Autonomous PlanningCapgemini
 
Top Trends in Retail Banking: 2020
Top Trends in Retail Banking: 2020Top Trends in Retail Banking: 2020
Top Trends in Retail Banking: 2020Capgemini
 
Top Trends in Life Insurance: 2020
Top Trends in Life Insurance: 2020Top Trends in Life Insurance: 2020
Top Trends in Life Insurance: 2020Capgemini
 
Top Trends in Health Insurance: 2020
Top Trends in Health Insurance: 2020Top Trends in Health Insurance: 2020
Top Trends in Health Insurance: 2020Capgemini
 
Top Trends in Payments: 2020
Top Trends in Payments: 2020Top Trends in Payments: 2020
Top Trends in Payments: 2020Capgemini
 

More from Capgemini (20)

Top Healthcare Trends 2022
Top Healthcare Trends 2022Top Healthcare Trends 2022
Top Healthcare Trends 2022
 
Top P&C Insurance Trends 2022
Top P&C Insurance Trends 2022Top P&C Insurance Trends 2022
Top P&C Insurance Trends 2022
 
Commercial Banking Trends book 2022
Commercial Banking Trends book 2022Commercial Banking Trends book 2022
Commercial Banking Trends book 2022
 
Top Trends in Payments 2022
Top Trends in Payments 2022Top Trends in Payments 2022
Top Trends in Payments 2022
 
Top Trends in Wealth Management 2022
Top Trends in Wealth Management 2022Top Trends in Wealth Management 2022
Top Trends in Wealth Management 2022
 
Retail Banking Trends book 2022
Retail Banking Trends book 2022Retail Banking Trends book 2022
Retail Banking Trends book 2022
 
Top Life Insurance Trends 2022
Top Life Insurance Trends 2022Top Life Insurance Trends 2022
Top Life Insurance Trends 2022
 
キャップジェミニ、あなたの『RISE WITH SAP』のパートナーです
キャップジェミニ、あなたの『RISE WITH SAP』のパートナーですキャップジェミニ、あなたの『RISE WITH SAP』のパートナーです
キャップジェミニ、あなたの『RISE WITH SAP』のパートナーです
 
Property & Casualty Insurance Top Trends 2021
Property & Casualty Insurance Top Trends 2021Property & Casualty Insurance Top Trends 2021
Property & Casualty Insurance Top Trends 2021
 
Life Insurance Top Trends 2021
Life Insurance Top Trends 2021Life Insurance Top Trends 2021
Life Insurance Top Trends 2021
 
Top Trends in Commercial Banking: 2021
Top Trends in Commercial Banking: 2021Top Trends in Commercial Banking: 2021
Top Trends in Commercial Banking: 2021
 
Top Trends in Wealth Management: 2021
Top Trends in Wealth Management: 2021Top Trends in Wealth Management: 2021
Top Trends in Wealth Management: 2021
 
Top Trends in Payments: 2021
Top Trends in Payments: 2021Top Trends in Payments: 2021
Top Trends in Payments: 2021
 
Health Insurance Top Trends 2021
Health Insurance Top Trends 2021Health Insurance Top Trends 2021
Health Insurance Top Trends 2021
 
Top Trends in Retail Banking: 2021
Top Trends in Retail Banking: 2021Top Trends in Retail Banking: 2021
Top Trends in Retail Banking: 2021
 
Capgemini’s Connected Autonomous Planning
Capgemini’s Connected Autonomous PlanningCapgemini’s Connected Autonomous Planning
Capgemini’s Connected Autonomous Planning
 
Top Trends in Retail Banking: 2020
Top Trends in Retail Banking: 2020Top Trends in Retail Banking: 2020
Top Trends in Retail Banking: 2020
 
Top Trends in Life Insurance: 2020
Top Trends in Life Insurance: 2020Top Trends in Life Insurance: 2020
Top Trends in Life Insurance: 2020
 
Top Trends in Health Insurance: 2020
Top Trends in Health Insurance: 2020Top Trends in Health Insurance: 2020
Top Trends in Health Insurance: 2020
 
Top Trends in Payments: 2020
Top Trends in Payments: 2020Top Trends in Payments: 2020
Top Trends in Payments: 2020
 

Cognitive Quality Assurance

  • 1. us.sogeti.com Cognitive Quality Assurance: Traditionelle Qualitätssicherung steht vor erheblichen Herausforderungen, die einen neuen Ansatz erfordern: Cognitive QA OOP 2018 - SOFTWARE MEETS BUSINESS München 07. Februar 2018 Mehr Informationen unter www.cognitive-qa.com
  • 2. us.sogeti.com KUNDENERFOLGE MIT COGNITIVE QA • Beschleunigung der Auswahl von wichtigsten Kombinationen aus Hard und Software • 10 Wochen PoV • 8 TestOps Regeln in IBM SPSS • neu Priorisierung der 896 Testfälle und 185 Konfigurationen • 63% der Testfälle wurden herunter priorisiert • Ableitung kritischer Tests und Konfigurationen • Systematische Sichtweise auf die Planung • Effizienzsteigerung der Hardware-Nutzung Ergebnis Ziel • Dynamische Testauswahl der Regressionstests und Priorisierung der Testautomatisierung • 8 Wochen PoV • 6 TestOps Regeln in IBM SPSS • Reduzierung der 13.721 Regressionstests • 1.664 Regressionstest, 88% weniger Testaufwand • QA-Dashboard für System- und Performance-Tests • automatisierte Zusammenstellung des Testsets Ergebnis MEDICAL IMAGING SOLUTION PROVIDER Ziel INDUSTRIAL AUTOMATION OEM KUNDE • Aufwandersparnis und verbessertes Risikomanagement • 10 Wochen PoV • 6 TestOps Regeln in IBM SPSS • Reduzierung der 22.289 Regressionstests • Transparents des Qualitäts • 2.288 Regressionstest, 90% weniger Testaufwand • kürzere Release-Zyklen • verbessertes Risikomanagement • Früherkennung von Fehlern Ergebnis Ziel 2
  • 3. us.sogeti.com FAKTEN ÜBER SOGETI 3 Teil der Capgemini Gruppe Mitarbeiter weltweit 200,000 + Erfahrungsjahre In 15 Ländern präsent: Europa, Indien und USA sowie 40+ Länder durch Capgemini Milliarden Euro Umsatz 50 2 25,000 + Lokal & Global Zukunftsweisende Lösungen in: Digital, BI & Analytics, Qualitätssicherung und - prüfung, Cybersicherheit, Cloud & Digital Manufacturing Führend Starke globale Partnerschaften mit z. B. IBM, Microsoft und Mikrofocus Partnerschaften 3
  • 4. us.sogeti.com • Wie erreiche ich eine ausreichende Qualität und halte die Entwicklungsgeschwindigkeit? • Wie können wir herausfinden, welche Testfälle wirklich wichtig sind? • Decken unsere Tests alle wichtigen Risikobereiche ab? • Was sind unsere Risikobereiche? • Wie kann ich meine vorhandenen Systemdaten nutzen? • Können sich unsere Tests automatisch an Randbedingungen anpassen? • Wie kann ich mit der zunehmenden Komplexität und der intelligenten Anwendungen im Test mithalten? • Wie kann ich das Qualitätsniveau meiner Anwendungen in Echtzeit überprüfen? DAS FRAGEN UNSERE KUNDEN 4
  • 5. us.sogeti.com UNSERE ANTWORT: COGNITIVE QA „Wir generieren täglich Daten in der Entwicklung, bei QS- Aktivitäten und vielleicht auch im Kundenservice, aber was dann?“ Artificial Intelligence Prediction Data Analysis Qualitätssicherung Kundenservice Entwicklung Data Management Wir verwandeln Ihre Daten in gewinnbringende Informationen durch Analyse, BI-Funktionen und ein angepasstes QA- Dashboard. Wir verwenden IBM SPSS und historische sowie aktuelle Daten, um vorherzusagen, wo Fehler auftreten, erkennen Nutzungsmuster oder decken kritische Bereiche auf. Basierend auf Vorhersagen und der gemachten Erfahrungen, optimieren wir weiter z. B. das Qualitätsmanagement, die Aufwandsverteilung oder die Time-to-Market durch Automatisieren von KI-Aktionen. Unstrukturiert Daten Dashboards 5
  • 6. us.sogeti.com •Online-Portal mit Konnektoren um Verbindungen zu Datenquellen zu verwalten. •Gefilterte Daten werden in das Datenmodel geladen und integriert, welches zur Visualisierung genutzt wird. •Nutzten der Power von IBM SPSS für Vorhersagen und Watson für KI-Modelle. •KI-Verfahren können automatisiert und durch historische Daten gesteuert werden. Cognitive QA platform WIE KOMMEN WIR AN DIE DATEN ? AI-based actions Cognitive QA platform 6 6
  • 7. us.sogeti.com QA SMART ANALYTICS 8 Gruppierer Datenregeln Software Lifecycle Artifact Quality Selbstlernende Empfehlungs-Engine Cognitive QA Regeln Testergebnisse Optimierte Testliste basierend auf Echtzeitdaten Test Engine Feedback Operative Datensammlungen RTM Systeme Nutzungsmuster Support Mitarbeiter Notizen App. Logs and traces strukturierte Daten nicht strukturierte Daten Source ctrl /Build Mgmt System Project Mgmt System nicht strukturierte Daten strukturierte Daten IT-Systeme aus Test, Entwicklung und Betrieb Test Mgmt System Req. Mgmt System Code Qualitätsparameter Defect Mgmt System
  • 8. us.sogeti.com COGNITIVE QA HILFT UNS ZU SEHEN WAS NICHT OFFENSICHTLICH IST. 8
  • 9. us.sogeti.com VORHERSAGEN SIND DIE BASIS, UM ZU SEHEN. UND DIES IST DIE BASIS, UM ZU HANDELN. Prognostizierte Diagramme für die nächsten Zyklen Vorausgesagte MetrikenVertrauens- indikatoren 9
  • 10. us.sogeti.com Test-Fehlerfrequenz Konfig. Score TESTS Beispiel - Dell EMC 10 NeuesteTestfehler Testfehler Score während Release Phase Fehlgeschlagene Test die zu Codeänderung führten SUT Konfig. Konfig.-Fehlerfrequenz Neueste Konfig.-Fehler Konfig.-fehler Score während Release Phase Fehlgeschlagene Konfig. die zu Codeänderung führten Test Score Die meisten fehlgeschlagenen Kombinationen von SUT- Konfiguration undTests. Fehlervorhersage- Modell mit ARIMA
  • 11. us.sogeti.com DAS SAGT DELL EMC NACH DEM POV 1 https://www.youtube.com/watch?time_continue=7&v=6sqmOMs2Pvg
  • 12. Schritt-für-Schritt-Implementierung zur Lösung Ihrer geschäftlichen Herausforderungen • Automatisierte Testfallauswahl und Priorisierung - Effizienzsteigerung durch gezielten Testaufwand. • Vordefinierte Testumgebungskonfiguration - Minimierung der Leerlaufzeit durch optimierte Umgebungsbereitstellung • Priorisierung der Testautomatisierung - Maximierung des ROI des Testautomatisierungsaufwands. • Testabdeckungsoptimierung – Treffen Sie die bestmöglichen Entscheidungen basierend auf der „Was-wäre-wenn“-Analyse. • Testausführungsanalyse - Test auf tatsächliche Nutzungsmuster ausrichten. • Automatische Generierung von Testskripten - Erstellen Sie optimierte Testsets und reduzieren Sie den Vorbereitungsaufwand. SCHRITT-FÜR-SCHRITT Bewährte Analytics-Lösungselemente für echte Geschäftsvorteile > 40 bewährte Regeln • Faustregeln • Gesunder Menschenverstand • Best Practices • Intuitives Urteilen • Positiv / Negativ-Muster Applying our IP Kick-Start Proof of Value Deployment • Sammeln von grundlegenden Informationen mithilfe Pre-Assessment- Fragebögen zur Cognitive QA. • Überprüfung der Verfügbarkeit, Zugänglichkeit und Qualität der Daten. • Durchführung eines halbtägigen Solution Build-Workshops zur Definition des POV- Bereiches. Durchführung eines 8-Wochen-PoV mit den folgenden Schritten: • Überprüfung der Analysebereitschaft. • Datenerfassung und -aufbereitung. • Modellierung Kognitiver QA-Regeln. • Validierung und Berichterstattung. • Definieren Sie den Deployment-Ansatz. Operationalisierungsregeln während der PoV implementiert. Die wichtigsten Aktivitäten beteiligen: • Implementierung von Konnektoren, um Live- Daten zu nutzen. • Implementierung des Orchestrierungsmoduls zur Automatisierung von Workflows. • Portal-Implementierung (reaktionsschnelles Web) 12
  • 13. us.sogeti.com IHR WEG IN DIE ZUKUNFT DER QUALITÄTSSICHERUNG Daten Mgt. Daten Analyse Vorhersagen Künstliche Intelligenz Future of Quality Assurance 14