1

TESTING

REALITY REAL USERS, REAL DEVICES, REAL

TIME

Powered by Crowd & Cloud Technologies

ASQF Quality Night Munich

2

Agenda

Über uns

Testing Realität

Die Crowd

Die Plattform

Der Prozess

Praxisbeispiel

3

Testbirds

Über uns

Vision: „The World’s Leading Company for Innovative

Testing Services”

Gegründet 2011 / Vertrauen von 500+ Kunden / 1200+

durchgeführte Projekte

Entstanden aus dem Feld automatisiertes Testing und

Last- und Performancetests

Erbringung von funktionalen Tests und Usability-Studien

mittels Crowdtesting und cloudbasierten Lösungen

Kundenzufriedenheit 9.2 von 10

Gewinner des Deutschen Innovationspreises 2017 und

unter den Top 10 European B2B Scale-Ups laut Google,

Rocket Internet und McKinsey

4 4

Testbirds Group

100 Mitarbeiter in 8 Büros

HQ in München

DACH-Region

50+ Mitarbeiter aus 12

Ländern

Gestartet 2013

10 Mitarbeiter

Amsterdam Büro seit

Jan 2015

Gestartet 2013

10 Mitarbeiter

London Büro seit

Jan 2015

Gestartet 2015

5+ Mitarbeiter

Turin, IT

Gestartet 2013

11 Mitarbeiter

Budapest, HU

Gestartet 2014

5 Mitarbeiter

Neues Büro: Seit

Februar 2017 in

Stockholm

Gestartet 2016

5+ Mitarbeiter

Moskau, RU

Gestartet 2016

Franchise Partner

Testbirds Standorte

Strategische Partner

5

Ihr Ansprechpartner

David Lukele

Senior QA Projektmanager

d.lukele@testbirds.com

+49 89 856 33 35 45

+49 171 33 55 238

Testbirds GmbH

Radlkoferstr. 2

81373 München, Deutschland

www.testbirds.de

6

Endgeräte-/Browservielfalt

Liegen Ihnen alle Android-Endgeräte zum Testen vor?

7

Endgeräte-/Browservielfalt

Wie testen Sie Ihre Lokalisierung?

8

Zielgruppenrelevanz

Kennen Sie die Bedürfnisse Ihrer Zielgruppe?

9

Endgerätevielfalt

Liegen Ihnen wirklich alle

Endgeräte zum Testen vor? 500.000+ Endgeräte

Ressourcenmangel

Termindruck, Personalmangel und

weitere priorisierte Projekte. Ad-hoc verfügbar

Zielgruppenrelevanz

Zielgruppe hat andere

Erwartungen/Fähigkeiten

als angenommen. Soziodemografische Selektion

Betriebsblindheit

Klappt alles! …wirklich?

Unvoreingenommene Nutzer testen

anders. Unvoreingenommene Tester

Herausforderungen im Markt

Unzureichende QA, ungenügende Marktanalysen und Ressourcenmangel

10

Crowd

Treffen Sie die Nutzer

STUDENTEN

ANGESTELLTE

ANDERE SELBSTSTÄNDIGE

MANAGER

62% 38% Gesamt

300.000+

DACH

55.000+

14%

24%

Konsumenten

Professionals

Spezialisten

62%

Endgeräte:

500.000+ Mobile

Desktop

TVs

Cars

Wearables …

Selektions-

kriterien

65

Countries

193

11

Testing Reality – Umsetzung

Plattform, Projektmanagement und Tester

PLATTFORM PROJEKTMANAGER TESTER/ TESTGERÄTE

• Plattform zur Durchführung der

Tests („Nest“)

• Kundenspezifischer „Formular-

Builder”

• Tool zum Management

eingereichter Berichte/ Bugs

• Live Tracking des Projektstatus,

24/7

• Kundenkommunikation vor,

während und nach Tests

• Selektion der Tester/ Geräte

• Kommunikation mit Testern

während eines Tests

• Genehmigung der Berichte

• Auswertung der Ergebnisse

• Ausführung der vorgegebenen

Testaufgaben

• Testen auf eigenen Geräten

• Einreichen der Testberichte

12

Nest Demo

13

Nest - Eigenschaften

Crowd - Merkmale

Incentives für Tester

Intelligente Selektion der gewünschten Zielgruppe durch

automatisierte Filterfunktionen

Live Tracking des Projektstatus, 24/7

Testen von Enterprise Apps mit Hilfe von Bring-Your-Own-

Crowd™ möglich

Vertraulichkeit und Sicherheit durch Verschwiegenheits-

klausel, NDA oder Private Secure Crowd

Exportfunktion der Bugs (JIRA, CSV etc.)

Kundenspezifischer „Formular-Builder”

14

Crowdtesting

Projektablauf

Testbirds

Projektmanager

Nest

Erarbeiten des Briefings 1 wählt aus und

betreut 2

analysiert und erstellt

Abschlussbericht inkl.

Handlungsempfehlungen

7

sichert Qualität 4

Testreports und

Bugs/Defects 6

Kunde mit neuer

Software/App

Schreiben Testreports,

legen Bugs/Defects an 5

Tester mit eigenen End-

geräten 3

Live-Tracking während des gesamten Projekts

15

Development Life Cycle

Agile Prozesse als Eckpfeiler moderner Softwareentwicklung

Result

Daily

Stand up

Meeting

1-4 Week

Sprint

Sprint

Backlog

Product

Backlog

Retrospective

Meeting

16

App Testing mit Remote Interviews

Fallstudie – Baufinanzierung im digitalen Zeitalter

Bedürfnisse der Endnutzer sind unbekannt

Spezielle Zielgruppe benötigt: Personen, die bereits eine

Immobilie finanziert haben oder dies in der Zukunft vorhaben

HERAUS-

FORDERUNG

Auswahl von zielgruppenspezifischen Testern aus der Crowd

Durchführung von Remote Interviews: Austausch mit Testern

per Videokonferenz möglich, während diese die App-

Prototypen testeten

Pro Sprint fünf Interviews à 30 – 45 Minuten

Tester arbeiteten verschiedene Anwendungsszenarien in der

App durch und gaben Feedback zu den beiden Prototypen

TESTBIRDS

LÖSUNG

Während der Interviews konnten bei Bedarf bestimmte Punkte

vertieft werden

Per Screensharing konnte nachverfolgt werden, wie die Nutzer

sich in der App bewegen

Testergebnisse konnten schnell und unkompliziert in die

Optimierung der App einfließen

KUNDEN-

VORTEIL

USABILITY UND UX

ENTWICKLUNGS-

ZYKLUS: Prototype

CROWDTESTING

17

Ihr Ansprechpartner

David Lukele

Senior QA Projektmanager

d.lukele@testbirds.com

+49 89 856 33 35 45

+49 171 33 55 238

Testbirds GmbH

Radlkoferstr. 2

81373 München, Deutschland

www.testbirds.de