IoT verändert das Application-Testing · TRENDSTUDIE IoT verändert das Application-Testing Wie...

TRENDSTUDIE

IoT verändert das Application-Testing

Wie Unternehmen sich der Heraus-forderung stellen, ein zuverlässiges Testing in dynamischen IoT-Umge-bungen zu gewährleisten. Eine Trendstudie von PAC und Accenture

Joachim Hackmann Principal Analyst

Oktober 2017

I oT verändert das Appl icat ion-Test ing – Copyr ight CXP Gr oup, 2017 2

INHALTSVERZEICHNIS

Einleitung ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3

Die wichtigsten Ergebnisse ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 4

IoT-Status und -Strategie ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5Wo stehen Unternehmen in der Region DACH? .... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .5TK-Provider gehen vorweg, Spediteure hinken hinterher .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .7Investi tionen in IoT-Projekte ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .9

IoT-Testing-Strategien ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .10Gibt es bereits eine IoT-Testing-Strategie? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11Wer verantwortet die IoT-Testing-Strategie? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 12Welche Ziele soll das IoT-Testing erfüllen? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13Was s ind die grössten Herausforderungen? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14Wie erfolgt das IoT-Testing in der Praxis? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 15

Investitionsvorhaben ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .16Wie hoch ist das IoT-Testing-Budget? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17Wie verändert sich das IoT-Testing-Budget? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 18Welche Anpassungen sind geplant? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19Welche Tools oder Hi lfsmittel kommen zum Einsatz? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 20

Methodik .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .22Über Accenture ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 23Über PAC .... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24Haftungsausschluss, Nutzungsrechte, Unabhängigkeit und Datenschutz .. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 25

ABBILDUNGSVERZEICHNIS

Abb. 1: Welche der folgenden Optionen beschreibt den derzeit igen Status Ihrer IoT-Strategie am besten? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .6

Abb. 2: Welche der folgenden Aspekte beschreiben die Hauptziele Ihrer IoT-Ini tiativen am besten? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .8

Abb. 3: Was erwarten Sie: Werden die Investi tionen in IoT-Aktivitäten in den nächsten drei Jahren abnehmen, gleich bleiben oder ansteigen? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .9

Abb. 4: Welche der folgenden Aussagen beschreibt am besten Ihren aktuellen Stand bzgl. Ihrer IoT-Testing-Strategie? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11

Abb. 5: Hat Ihr Unternehmen einen Verantwortlichen, der die IoT-Testing-Strategie über verschiedene Unternehmenseinheiten hinweg vorantreibt, oder plant Ihr Unternehmen die Einrichtung einer solchen Posit ion? Falls ja, wer ist dies?.... . . . . . . . . . . . . . . . . . . . . . . 12

Abb. 6: Was s ind bzw. werden die Hauptziele Ihrer IoT-Testing-Strategie sein? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13Abb. 7: Welche Gebiete des IoT-Testing sehen Sie als die größte Herausforderung? ... . . . . . . . . . . . . . . . . . . . . . 14Abb. 8: Welche Aussage würde Ihr Vorgehen bzw. Ihr beabsichtigtes Vorgehen beim IoT-

Testing am besten beschreiben? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 15Abb. 9: Wie hoch ist der Antei l Ihres IoT-Budgets, den Sie derzeit in Testing und

Quali tätssicherung investieren? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17Abb. 10: Was erwarten Sie: Werden die Kosten für das IoT-Testing in den nächsten drei Jahren

s inken, gleich bleiben oder steigen?.... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 18Abb. 11: Wie werden Sie Ihre Testing-Strategie anpassen, wenn die IoT-Projektvolumina

steigen? ... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19Abb. 12: Welche Arten von Testautomatisierungs-Tools setzen Sie derzeit a ls Tei l Ihrer IoT-

Testing-Aktivi täten ein?.... . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 20


IoT verändert das Application-Testing

EINLEITUNG

Das Internet der Dinge beziehungsweise Internet of Things (IoT) hat die Vorstandsetagen deutscher Unternehmen erreicht. Fast überall wi rd das Geschäftspotential von IoT-Anwendungen eruiert, vielerorts wurden schon konkrete Testinstallationen und Umsetzungsprojekte gestartet. In der Fertigung, im Einzelhandel, in der Energieversorgung und im Ge-sundheitswesen verspricht man sich viel von der Analyse von Daten, die von mobi len Geräten und Sensoren geliefert werden. Das Spektrum der Erwartungen erstreckt s ich von internen Effizienzverbesserungen über neue Wege im Kundenservice bis hin zu innovativen Geschäftsmodel-len. Branchenspezi fi sche IoT-Ausprägungen wie das Connected Car und Industr ie 4.0 zeigen erste Erfolge dieser Bemühungen.

Große Herausforderungen ziehen diese Veränderungen aber auch im Bereich Testing und Quali tätss icherung nach sich, denn sobald IoT in aller Konsequenz eingeführt wi rd, dr ingen Techniken und Applikationen in kri tische und anspruchsvolle Geschäftsabläufe vor. IoT-Lösungen müssen daher hohen Ansprüchen an Sicherheit, Skalierbarkeit und Qua-li tät genügen. Dafür s ind spezielle Prüfverfahren erforderlich, die – ver-glichen mit dem traditionellen Software-Testing – einige Besonderheiten aufweisen: So müssen die Tester mit Einflüssen vieler vernetzter Devices umgehen und die Interoperabi li tät vielfält iger und kaum standardisier-ter Protokolle und Techniken bewerten.

Der vorliegende Report analysiert den Status und die P läne von Anwen-derunternehmen rund um das IoT-Testing. Basis dieses Berichts sind die Aussagen von über 100 IT-, IoT- und Testing-Verantwortlichen in Deutschland, Österreich und der Schweiz zum Thema IoT-Testing. Die telefonischen Interviews wurden in der Zeit von August bis September 2017 durchgeführt. Die Ergebnisse der Erhebung wurden, wo sinnvoll, mit den Resultaten einer internationalen Befragung verglichen, die wir Anfang 2017 mit mehr als 200 Verantwortlichen in Asien, Amerika und Europa zum gleichen Thema durchgeführt haben. Beide Erhebungen wurden im Auftrag von Accenture betrieben.


DIE WICHTIGSTEN ERGEBNISSE

Die IoT-Aktiv itäten der befragten Unternehmen befinden s ich überwiegend in einer frühen Phase: 73% der Fi rmen planen noch oder haben Pi lotprojekte gestartet. 16% können bereits auf Ergebnisse verweisen.

In der Hälfte der Unternehmen ist die Verantwortung für das IoT-Testing ungeklärt: Oft verant-wortet der IoT-Leiter das IoT-Testing, häufig auch der CIO. Doch in den meisten Fällen ist die Rolle unbesetzt.

• Das IoT-Testing-Budget is t sehr schmal: 62% der befragten Unternehmen geben weniger als 5%ihres IoT-Budgets für Testing aus. Immerhin: Die Mittel sollen in den kommenden Jahren kräftigansteigen.

• Respekt vor hohen Sicherheitsanforderungen und fehlender Interoperabili tät: Die größten Her-ausforderungen sehen die Unternehmen im Securi ty-Testing (70%) und mangelnder Interopera-bi li tät (63%), etwa mit Altsystemen.

Unternehmen wollen sich stärker auf ihre Kernkompetenzen konzentr ieren: Um den zu erwar-tenden Mehraufwand im IoT-Umfeld zu bewältigen, bauen Unternehmen vermehrt auf externeHi lfe und Automatisierung.

Unternehmen der DACH-Region hinken gegenüber der internationalen Konkurrenz hinterher:Der Vergleich zur weltweiten IoT-Testing-Studie weist in fast allen Belangen auf Defizi te derDACH-Unternehmen hin.


IOT-STATUS UND -STRATEGIE

Die einzelnen Bausteine für das Internet der Dinge sind seit Jahren ver-fügbar. Geändert haben sich die Leistungsfähigkeit und Verfügbarkeit von Netzen, Sensoren, Speichersystemen, sicheren Cloud-Umgebungen und Anwendungen. Diese Entwicklungen haben zu einem schnell an-steigenden Interesse an IoT-Anwendungen in vielen Bereichen und Branchen geführt.

Die vorliegende Erhebung konzentriert sich darauf, die IoT-Umsetzungs-szenarien insbesondere im Testing-Umfeld näher zu beleuchten. Dabei wurden nur solche Unternehmen befragt, die zumindest schon in die IoT-P lanungsphase eingetreten sind. Ziel der Analyse war es hierbei nicht, einen repräsentativen Blick auf die IoT-Entwicklungen zu werfen, sondern den Umgang der Unternehmen mit den Besonderheiten im IoT-Testing zu ergründen. Tei lnehmer ohne aktuelle IoT-Umsetzungspläne wurden daher bereits zu Beginn der telefonischen Interviews herausge-fi ltert.


WO STEHEN UNTERNEHMEN IN DER REGION DACH?

Die Analyse der Daten zeigt, dass sich sehr v iele Unternehmen in Deutschland, Österreich und der Schweiz aktuell noch in einer sehr frü-hen Phase der IoT-Nutzung befinden. Insgesamt 73% der befragten Fi r-men experimentieren oder planen noch und ihr Erfahrungsschatz be-schränkt sich maximal auf abgeschlos-sene Pi lotprojekte. Dennoch sind auch ihre Einschätzungen zum Thema wichtig, l iefern sie doch wichtige Hinweise auf den Umgang mit dem IoT-Testing, etwa wenn es um die frühzeit ige Integration von Prüf-verfahren und um Zuständigkeiten geht.

27% der befragten Unternehmen in der Re-gion DACH sind IoT-erfahren. Sie können auf erste Geschäftserfolge, auf eine un-ternehmensweite IoT-Strategie oder auf konsistente Methoden und Architekturen verweisen. Im internationalen Vergleich ist das ein eher dürftiger Wert (s iehe neben-stehenden Textkasten).

Abb. 1: Welche der folgenden Optionen beschreibt den derzeitigen Status Ih-rer IoT-Strategie am besten?

11%

16%

38%

35%

Fortgeschrittene Phase: Wir haben bereits eine organisationsweite

IoT-Strategie, basierend auf einer einheitlichen Architektur und

definierten Methoden.

Mittlere Phase: Unsere IoT-Initiativen zeigen erste Geschäftserfolge oder

-veränderungen.

Frühphase: Wir haben schon erste Pilotprojekte umgesetzt.

Planung: Wir befinden uns noch in der Planungs- und

Evaluierungsphase.

N=102

© P

AC

- a

CX

P G

rou

p C

om

pa

ny,

201

7

Internationaler Vergleich: IoT-Status

Die weltweite PAC-Studie weist hier 43% an Unternehmen aus, die bereits in die mittlere und fortgeschrittene Phase ihrer IoT-Pläne eingetreten sind. Geantwortet hatten damals 200 IT- oder IoT-Verantwortliche aus Amerika, Europa und Asien. Die Diskrepanz zwischen dem Erfahrungspotenzial hiesiger und internationaler Unternehmen geht über ein Maß hinaus, das sich mit typisch deutscher Zurückhaltung bei der Selbstauskunft erklären ließe. Fakt ist, dass die deutschen Unternehmen das Thema IoT im internationalen Vergleich deutlich vorsichtiger angehen.


TK-PROVIDER GEHEN VORWEG, SPEDITEURE HINKEN HINTERHER

Die Detai lauswertung nach Branchenzugehörigkeit der Tei lnehmer weist die Telekommunikationsunternehmen a ls Vorreiter im IoT-Segment aus: Fast die Hälfte der Befragten aus diesem Segment sehen bereits erste Geschäftserfolge

und haben eine organisationsweite IoT-Strategie implementiert. Sie ha-ben sich also in der obigen Grafik der mitt leren oder der fortgeschri t-tenen Phase zugeordnet. Ihr besonderes Engagement ist nachvollzieh-bar, profi tieren doch die TK-Provider ganz besonders vom steigenden Datenverkehr infolge des IoT-Trends. Zum anderen sind die Produktions-anlagen per se vernetzt, der Schri tt zu intensiveren Nutzung von Senso-ren und Analytics ist da nicht mehr weit.

Auch im Einzelhandel gibt es laut vorliegender Erhebung einige fortgeschri ttene Anwender von IoT-Lösungen. Die breite Masse der Befragten aus dem Einzelhandel befindet s ich jedoch noch in der Start- und Frühphase – was s ich auch mit PACs Brancheneinschätzung deckt, die wiederum

aus vielen Gesprächen mit Anwendern und IT-Providern gewonnen wurde. IoT-Anwendungen zielen in vielen Fällen darauf ab, mit Hi lfe von RFID-Tags die Lieferkette zu optimieren.

Die für die deutsche Wirtschaft besonders bedeutsame Fer-t igungsindustrie setzt große Hoffnungen in IoT beziehungs-weise Industrie 4.0. In diesem vertikalen Marktsegment gibt es sehr viele Aktivi täten zur Vernetzung von Maschinen und

Produktionsanlagen. Der große Durchbruch mit funktionierenden neuen Geschäftsmodellen ist aber noch nicht geschafft. Laut vorliegender Er-hebung steckt die Masse der Befragten noch in der P lanungs- und Frühphase ihrer IoT-Bemühungen.

Überdurchschnitt lich häufig haben sich Unternehmen der Transportbranche a ls Einsteiger in das IoT-Thema zu erken-nen gegeben. Das Potential in diesem Marktsegment ist groß, denn IoT-Techniken können die Abläufe noch trans-

parenter und schlanker gestalten. Die ersten Speditionen haben bereits entsprechende Projekte gestartet (etwa Deutsche Post DHL, Kühne + Nagel). Insgesamt jedoch reagiert die Transportbranche noch verhal-ten auf das IoT-Angebot – so das Ergebnis der vorliegenden Erhebung, die sich im Übrigen mit PACs genereller Brancheneinschätzung deckt.


WIE INTENSIV NUTZEN DIE UNTERNEHMEN IOT-LÖSUN-GEN?

Die Reife von IoT-Ini tiativen lässt sich aus den Zielen ablesen, die Un-ternehmen mit den Projekten verfolgen. Typischerweise bewegen sich die Unternehmen in der ersten Phase ihrer IoT-Bemühungen in den bekannten Bahnen, s ie streben Kos-teneinsparungen und optimierte Services an. Dabei geht es in der Regel um inkrementelle Verbesse-rungen mit Hi lfe neuer Technolo-gien. Daten aus smarten, vernetz-ten Sensoren können helfen, Opti -mierungspotentiale mit Hi lfe ausge-fei lter Analyseverfahren aufzuspü-ren, um anschließend an bekannten Stellschrauben zu drehen, oder auch neue Lösungen zu entwickeln, um etwa die Produktion zu flexibi-l i sieren.

E ine höhere Reife kann man solchen Unternehmen attestieren, die über die üblichen Effizienzziele hinaus neue Geschäftsmodelle oder Kunden-services anstreben. Das Connected Car i st ein gutes Beispiel hierfür: Intell igente Sensoren liefern Informationen über Standort, Status, Leis-tung und Fahrerverhalten. Die Daten nutzen Autohersteller, um neue Serviceangebote zu kreieren, etwa für nutzungsabhängige Versiche-rungsangebote, für die vorbeugende Wartung oder für kundenindiv i-duelle Unterhaltungsangebote. Vergleichbares streben Fertigungsun-ternehmen mit Predictive-Maintenance-Services in Industrie-4.0-Szena-r ien an.

Das Ergebnis der aktuellen Erhebung ist eindeutig: Aktuell streben die Unternehmen vornehmlich Kosteneinsparungen und eine erhöhte Be-triebseffizienz an (81%). Weitere 70% wollen Kundenservice und -bezie-hung verbessern. Aber immerhin jedes zweite Unternehmen wi ll völlig neue Produkte und Dienstleistungen auf IoT-Basis anbieten, lässt sich also der innovativen Gruppe zuordnen.

Abb. 2: Welche der folgenden Aspekte beschreiben die Hauptziele Ihrer IoT-

Initiativen am besten?

32%

52%

70%

81%

Steigerung des Einnahmenpotenzials.

Angebot neuer Produkte/Dienstleistungen.

Verbesserung von Kundenservice und -beziehungen.

Kosteneinsparungen und Erhöhung der Betriebseffizienz.

N=102

© P

AC

- a

CX

P G

rou

p C

om

pa

ny,

201

7

Internationaler Vergleich: IoT-Status

Auch in der internationalen Studie stehen Kosteneinspa-rungen ganz oben auf der Agenda der befragten Unternehmen. Viel häufiger streben sie aber auch eine Steigerung ihres Einnahmenpotenzials an (80% versus 32%). Sie wollen IoT-Möglichkeiten offenbar sehr viel intensiver für neue Geschäftsmodelle erschließen.


INVESTITIONEN IN IOT-PROJEKTE

Das Thema IoT ist bei der überwiegenden Zahl der befragten Unterneh-men mit hohen Erwartungen behaftet. Sie verfolgen k lare Ziele etwa in Hinblick auf neue Services und Geschäftsmodelle oder Effizienzverbes-serungen. Folgerichtig wollen die meisten Unternehmen ihre IoT-Bud-gets künftig aufstocken, fast die Hälfte sogar um zweistell ige Zuwachs-raten.

Aber es gibt auch ein erkennbares Zögern unter den befragten Firmen: Wenn 31% der Unternehmen sagen, dass s ie die Investi tionen weder erhöhen noch reduzieren werden, zeugt das von einer unbestimmten Haltung gegenüber der künftigen Bedeutung von IoT: Man schließt eine wachsende Rolle nicht aus, hat aber noch keine konkrete Vorstellung, was mit IoT machbar ist. Daher belässt man die IoT-Investitionen auf dem aktuellen Niveau. Hier i st offenbar noch Aufk lärungsarbeit erfor-derlich.

Abb. 3: Was erwarten Sie: Werden die Investitionen in IoT-Aktivitäten in den

nächsten drei Jahren abnehmen, gleich bleiben oder ansteigen?

1%

31%

19%

32%

13%

2%

2%

Die Investitionen werden abnehmen.

Sie werden gleich bleiben.

Anstieg um bis zu 10%

Anstieg zwischen 11% und 25%



Anstieg um mehr als 100% N=102

© PAC - a CXP Group Company, 2017


IOT-TESTING-STRATEGIEN

Der eigentliche Gegenstand dieser Erhebung ist das IoT-Testing. Wäh-rend die vorherigen Ergebnisse s ich auf Einschätzungen zu IoT im Allge-meinen fokussierten, sollen im Folgenden die IoT-Testing-Aktivi täten ge-nauer analysiert werden.

Dazu haben wir die Unternehmen sowohl nach ihrer IoT-Testing-Strate-gie als auch nach der Verantwortlichkeit für das Thema befragt. Erfah-rungsgemäß werden Projekte dann ernsthaft und dauerhaft vorange-trieben, wenn s ie einer Strategie folgen können, also ein definiertes Z iel haben, und wenn es einen Fürsprecher beziehungsweise Verantwortli -chen im Unternehmen gibt, der das Thema, im Falle dieser Studie das IoT-Testing, mit konkreten Vorstellungen konsequent vorantreibt.


GIBT ES BEREITS EINE IOT-TESTING-STRATE-GIE?

Angesichts des insgesamt begrenzten Erfahrungsschatzes der Fi rmen der Region DACH verwundert es kaum, dass nur wenige Unternehmen schon eine definierte IoT-Testing-Strategie haben und s ie auch in der praktischen Umsetzung ver-folgen. Das i st derzeit bei ledig-lich 12% der Befragten der Fall.

Allerdings ist eine konsistente Blaupause für Quali tätssicherung und Testing in IoT-Umgebungen auch schwer zu formulieren. Vor-dergründig unterscheiden sich IoT- und traditionelle Testing-Ver-fahren kaum, im Detai l jedoch zeigen sich die Besonderheiten. Etwa wenn es um Fragen geht, wie s ich Sicherheit und Skalierbarkeit gewährleisten lassen und wie die Interoperabi li tät geprüft werden kann. Um all das richtig bewerten zu können und dann noch in eine unternehmensweite Strategie einfließen zu lassen, sind eine genaue Kenntnis der Materie und besonderes IoT-Wissen erforderlich, das vielerorts noch fehlt.

Vor diesem Hintergrund ist es ermutigend, dass deutlich über zwei Dri t-tel immerhin die Notwendigkeit einer IoT-Testing-Strategie bejahen: Ne-ben den oben erwähnten 12% der Befragten mit implementierter Stra-tegie gibt es weitere 41%, die gerade eine entsprechende Leit linie für das IoT-Testing entwerfen. Weitere 16% stehen vor der Umsetzung.

Abb. 4: Welche der folgenden Aussagen beschreibt am besten Ihren aktuellen Stand bzgl. Ihrer IoT-Testing-Strategie?

31%

41%

16%

12%

Derzeit haben wir keine Strategie.

Wir entwickeln derzeit eine Strategie, die innerhalb der

nächsten 12 Monate etabliert sein wird.

Wir haben eine Strategie etabliert, haben aber noch

nicht begonnen, diese umzusetzen.

Wir haben unsere digitale Testing-Strategie bereits

umgesetzt.

N=102

© P

AC

- a

CX

P G

rou

p C

om

pa

ny,

201

7

Internationaler Vergleich: IoT-Testing

Auch im Bereich IoT-Testing attestiert die vorliegende Erhebung den befragten DACH-Unternehmen ein Defizit im internationalen Vergleich. Während 31% der hiesigen Firmen noch keine IoT-Testing-Strategie formuliert haben, ist das in der internationalen Vergleichsgruppe nur bei 6% der Fall. Zu den fortgeschrittenen Anwendern (also „Strategie etabliert“ oder „Strategie umgesetzt“ in der untenstehenden Grafik) zählen im DACH-Raum 28% der Unternehmen und 62% der international befragten Firmen.


WER VERANTWORTET DIE IOT-TESTING-STRA-TEGIE?

Um eine konsistente und unternehmensweite IoT-Testing-Strategie durchsetzen und implementieren zu können, braucht es einen Mentor beziehungsweise einen Verantwortlichen, der qua seiner Posi tion die Umsetzung forciert. Gibt es diese zentrale Posi tion der Verantwortlich-keit nicht, so droht eine definierte IoT-Testing-Strategie zu einem Papier-t iger zu verkümmern. Genau dieses Risiko besteht in gut jedem zweiten Unternehmen: Erstaunliche 51% der Befragten konnten keine Posi tion o-der Verantwortlichen benennen. Hier sollten viele Unternehmen nach-bessern.

Unter den Tei lnehmern, in deren Unternehmen die Verantwortung k lar geregelt ist, gibt es eine breite Streuung der genannten Posi tion. Keine Überraschung ist die häufige Wahl des CIOs beziehungsweise IT-Leiters (34%). Diesen Weg verfolgen insbesondere die eher kleineren Unter-nehmen mit bis zu 1.000 Mitarbeitern, da sie seltener als größere Unter-nehmen dedizierte IoT-Leiter beziehungsweise Leiter der Digitalabtei-lung haben.

Abb. 5: Hat Ihr Unternehmen einen Verantwortlichen, der die IoT-Testing-Strate-gie über verschiedene Unternehmenseinheiten hinweg vorantreibt, oder plant Ihr Unternehmen die Einrichtung einer solchen Position? Falls ja, wer ist dies?

51%

49%

Nein

Ja

N=102

34%

14% 14%

10%

8%

20% CIO/IT-Leiter

Der IoT-Leiter

Ein dedizierter Leiter für IoT-Testing

Der Leiter der Digitalabteilung

Leiter Software-Entwicklung

Andere IoT-Testing-Verantwortlichkeit

© P

AC

- a

CX

P G

rou

p C

om

pa

ny,

201

7


WELCHE ZIELE SOLL DAS IOT-TESTING ERFÜL-LEN?

Das IoT-Testing soll eine Vielzahl von Anforderungen und Zielen erfüllen. Auffallend ist zum einen die breite Streuung der Antworten und die deutlichen Unterschiede zwischen den Tei lnehmern aus der DACH-Re-gion und der internationalen Ver-gleichsgruppe (siehe nebenstehen-den Textkasten).

Befragt nach den Zielen, die man mit einer IoT-Testing-Strategie verfolge, fanden Aspekte wie Quali tätsverbes-serung (81%), Gewährleistung der Si -cherheit (74%) und Effizienzverbesse-rung (72%) die höchsten Zustimmungs-werte. Insgesamt haben die hiesigen Befragten fast alle Auswahlkri terien recht hoch bewertet, was die enorme Bedeutung einer IoT-Testing-Strategie einmal mehr betont.

Abb. 6: Was sind bzw. werden die Hauptziele Ihrer IoT-Testing-Strategie sein?

Bemerkenswerte Ergebnisse ergibt die Detai lanalyse je nach Posi tion, die die IoT-Testing-Strategie verantwortet: Die befragten IoT-Leiter ha-ben fast allen Kr iterien überdurchschnitt l ich hohe Priorität eingeräumt, s icher auch deshalb, wei l sie qua ihrer Posit ion um die hohe Bedeutung der Themen wissen. Die befragten Produktionslei ter wiesen hingegen der Sicherheit die höchste Priorität zu, erstaunlicherweise jedoch nicht der Effizienzverbesserung. Eine mögliche Erk lärung liefern frühere Be-fragungen im Produktionsumfeld: Im Allgemeinen haben die Produkti -onsleiter eigener Einschätzung zufolge bereits ein sehr hohes Effizienz-niveau in der Fertigung erreicht und sind skeptisch, ob s ich mit IoT-Mit-teln noch große Verbesserungssprünge erzielen lassen.

30%

61%

68%

72%

74%

81%

Integration neuer Testing-Szenarien

Verbesserung der Anwenderzufriedenheit

Gewährleistung der Einhaltung von Standards

Effizienzverbesserung

Gewährleistung der Sicherheit

Qualitätsverbesserung

N=102

© P

AC

- a

CX

P G

rou

p C

om

pa

ny,

201

7

Internationaler Vergleich: die Ziele des IoT-Testing

In der internationalen Umfrage ergibt sich in diesem Punkt eine nahezu identische Reihenfolge, nur auf insgesamt niedrigerem Niveau. Qualitätsverbesserung und Sicherheit wurden am häufigsten genannt (jeweils 63% der Befragten), gefolgt von Effizienzverbesserung und Einhaltung von Standards (53% beziehungsweise 46%). Das zeigt, dass die Erwartungen unter den internationalen Studienteilnehmern nicht ganz so hoch sind. Dies erleichtert möglicherweise den Projektstart, weil Vorhaben nicht mit hohen Vorgaben und Zielen überfrachtet sind.


WAS SIND DIE GRÖSSTEN HERAUSFORDERUN-GEN?

Großen Respekt scheinen die Unternehmen aus der Region DACH vor dem Securi ty-Testing sowie vor unvorhersehbaren Problemen zu haben, die infolge mangelnder Interoperabi li tät und unausgereifter Standards auftreten können. Das ergab die Auswertung der Frage nach den be-deutendsten Herausforderungen. Die Bedenken sind verständlich, las-sen sich aber nicht ohne Weiteres ausräumen, da das IoT-Umfeld sehr dynamisch ist und ständig neue Entwicklungen und Techniken hervor-bringt.

E ine Besonderheit des IoT-Testing stellt s icherlich das Verhalten im Feld dar, wei l eine Vielzahl von Sensoren, Geräten, Knoten und intelligenten Geräten ausgebracht werden muss, um das Internet der Dinge zur Re-alität zu machen. Das Testing ist schwierig, wei l die späteren Einsatzum-gebungen simuliert werden müssen. Wenn Unternehmen Sensoren etwa für das Smart Farming ausrollen, sollten sie diese in einer vergleichba-ren k limatischen Umgebung testen können, da Ausfälle und Reparatu-ren später erhebliche Kosten nach sich ziehen würden.

Abb. 7: Welche Gebiete des IoT-Testing sehen Sie als die größte Herausforde-rung?

22%

33%

38%

41%

42%

44%

52%

52%

58%

63%

70%

Modellieren des physischen Verhaltens

Leistung und Skalierbarkeit

Physisches Testing von Geräten

Connectivity Testing

Interpretation der Ergebnisse bzw. des Verhaltens im Feld

Verfügbarkeit

Benutzererfahrung/User Experience

Verhalten im Feld

Unausgereifte Standards

Interoperabilität

Security Testing

N=102

© P

AC

- a

CX

P G

rou

p C

om

pa

ny,

201

7


WIE ERFOLGT DAS IOT-TESTING IN DER PRA-XIS?

Zumeist nähern sich die Unternehmen dem Testing-Szenario in pragma-tischer Weise und integrieren das Testing in die Projektarbeit. Das i st vor dem Hintergrund, dass IoT-Projekte in der Regel sehr schnell und agi l entwickelt werden, auch absolut s innvoll. 61% der befrag-ten Unternehmen folgen diesem Modell, das mit dem DevOps-Konzept im Übrigen bereits als Methodologie definiert wurde.

Nichtsdestotrotz verfolgt ein be-achtlicher Tei l der Unternehmen einen anderen Weg: 27% der Be-fragten haben das IoT-Testing über verschiedene Abtei lungen hinweg vertei lt, was möglicherweise dem Vorhaben zuwiderläuft, ein unternehmensweit einheitliches Vorgehen zu etablieren. Weitere 12% unterhalten ein eigenes Testlabor, das sicher über v ielfältiges Testing-Fachwissen verfügt, dem aber möglicherweise die Nähe zu den fachli-chen Anforderungen fehlt.

Abb. 8: Welche Aussage würde Ihr Vorgehen bzw. Ihr beabsichtigtes Vorgehen beim IoT-Testing am besten beschreiben?

61%

27%

12%

Es wird im Rahmen von Projekten angetrieben.

Es wird von Teams in verschiedenen Bereichen

unseres Unternehmens betrieben.

Wir haben ein zentrales Testing-Labor bzw. Kompetenzzentrum,

das alle IoT-Tests verantwortet. N=102 ©

PA

C -

a C

XP

Gro

up

Co

mp

an

y, 2

017

Internationaler Vergleich: IoT-Testing in der Praxis

Bei der tatsächlichen Umsetzung des IoT-Testing verfolgen die Unternehmen aus dem DACH-Raum in der Regel den besseren Weg, indem sie das Testen in die Projektarbeit integrieren (61%) und weniger häufig den typischen Silostrukturen eines Unternehmens unterwerfen. Die Befragung der international Peer-Group ergab ein umgekehrtes Bild: Das IoT-Testing ist hier zumeist in verteilten Unternehmensbereichen verankert (42%) und weniger häufig in die Projektarbeit integriert (35%).


INVESTITIONSVORHABEN

Letzten Endes lässt sich die Bedeutung eines Themas auch immer an der Höhe seines Budgets erkennen. Aus diesem Grund haben wir die Umfragetei lnehmer nach ihren IoT-Testing-Budgets sowie nach den In-vestitionsplänen in den Bereich Plattformen und externer Support be-fragt.

Dabei zeigt sich – so viel sei vorweggenommen – ein ernüchterndes Bi ld, was die aktuelle Ausstattung des IoT-Testing mit finanziellen Mitteln betri fft. Das kann jedoch nur eine Momentaufnahme sein, denn wenn IoT tatsächlich die Bedeutung erlangt, die dem Thema im Allgemeinen zugesprochen wird, dann müssen auch Testszenarien finanziell besser ausgestattet werden.


WIE HOCH IST DAS IOT-TESTING-BUDGET?

Testing ist immer ein wesentlicher Bestandtei l der Quali tätssicherung. Das ist hinlänglich bekannt und in der k lass ischen Softwareentwicklung werden diversen Erhebungen zufolge bis zu 40% der Projektbudgets in das Testing und die Quali tätssicherung investiert. Legt man diese Zahl zugrunde, i st das aktuell für das IoT-Testing bereitgestellte Budget ver-schwindend gering. Die große Masse der Befragten geben we-niger als 5% ihres IoT-Budgets für das Testing aus. Zweistellige An-tei le erreichen lediglich 10% der Befragten.

Diese sehr dürft ige finanzielle Ausstattung lässt sich nur mit der allgemein fehlenden Reife von IoT-Projekten in den Unterneh-men der DACH-Region erk lären. Viele Vorhaben stecken noch in der Pi lotphase, IoT-Strategien sind noch nicht implementiert und dem IoT-Testing fehlt in jedem zweiten Unternehmen ein starker Mentor (siehe Grafik 6). Insgesamt verfügen viele Unternehmen offenbar noch nicht über die Strukturen, um das IoT-Testing professionell und nachhal-t ig in ihre IoT-Projektarbeit zu integrieren. All das mag dazu führen, dass die Unternehmen im DACH-Raum mit IoT-Testing-Budgets äußerst zu-rückhaltend verfahren. Im internationalen Vergleich sind hiesige IoT-Testing-Teams zumindest mit sehr mageren finanziellen Mitteln ausge-stattet.

Abb. 9: Wie hoch ist der Anteil Ihres IoT-Budgets, den Sie derzeit in Testing und

Qualitätssicherung investieren?

11%

6%

4%

18%

62%

Weiß nicht/keine Angabe

16% und mehr

11%-15%

6%-10%

0-5%

N=102

© P

AC

- a

CX

P G

rou

p C

om

pa

ny,

201

7

Internationaler Vergleich: Das IoT-Testing-Budget

Der Unterschied in der Budgetfrage ist frappierend. Während in der Region DACH 7% der Befragten mehr als 10% vom IoT-Budget ins Testing investieren, beläuft sich der Anteil in der weltweiten Studie auf 71%. Lediglich 8% gaben an, weniger als 5% vom IoT-Budget für das Testing auszugeben. Unter den DACH-Befragten sind es 61%. Der Vergleich ist ein Indiz mehr, dass hiesige Unternehmen in IoT-Fragen erheblichen Nachholbedarf haben.


WIE VERÄNDERT SICH DAS IOT-TESTING-BUDGET?

Vielen Unternehmen ist offenbar k lar, dass heutige IoT-Testing-Budgets zu schmal sind. Zwei Dri ttel der Befragten planen mit steigenden Aus-gaben, mehr als jeder Dri tte sogar im zweistell igen Bereich. Allerdings legt auch die globale Konkurrenz in diesem Bereich mächtig zu: PACs internationaler Erhebung zufolge wollen 45% der Befragten ihr IoT-Tes-t ing-Budget um zweistell ige Zuwachsraten erhöhen. Besonders investi-t ionsfreudig in der Region DACH sind Unternehmen aus der Ver- und Entsorgungsbranche. Hier stehen mit dem seit Anfang 2017 begonne-nen flächendeckenden Rollout der Smart Meter große Veränderungen an, so dass die betroffenen Unternehmen ihre IoT-Testing-Budgets er-heblich ausweiten werden.

Abb. 10: Was erwarten Sie: Werden die Kosten für das IoT-Testing in den nächs-ten drei Jahren sinken, gleich bleiben oder steigen?

6%

27%

32%

23%

10%

1%

1%

Budget wird sinken.

Budget wird gleich bleiben.

Anstieg um bis zu 10%




Anstieg um mehr als 100% N=102

© P

AC

- a

CX

P G

rou

p C

om

pa

ny,

201

7


WELCHE ANPASSUNGEN SIND GEPLANT?

Eine besondere Herausforderung im IoT-Umfeld ist die rasend schnelle Vermehrung von Datenquellen. Die Zahl der M2M-Verbindungen (Ma-chine to Machine) soll s ich von 4,9 Mi lliarden im Jahr 2014 auf 12,2 Mi l-l iarden im Jahr 2020 vervielfachen und von dem damit einhergehen-den explosionsartigen Anstieg der Datenmengen sind alle Branchen mehr oder weniger betroffen.

Auf die Wucht der bevorstehenden Entwicklung müssen s ich die Unter-nehmen vorbereiten. 70% der Studientei lnehmer werden die eigenen Aufgaben im IoT-Umfeld reduzieren und sich auf ihre Kernkompetenzen konzentr ieren. Das bedeutet nicht, dass sämtliche Arbeiten außerhalb des Kerngeschäfts aufgegeben werden, vieles wird an externe Provider vergeben: Die Hälfte der befragten Unternehmen gab an, dass man vermehrt Hi lfe von außen hinzuziehen werde. Aber auch der Ausbau technischer Hi lfsmittel in Form von Automatisierungs-Tools ist ein häufig genannter Weg, um mit den kommenden Herausforderungen umzuge-hen (61%).

Die Analyse des branchenbezogenen Antwortverhaltens zeigt übri -gens, dass insbesondere Unternehmen aus der TK-Branche bei steigen-der Belastung externe Ressourcen zur Unterstützung anfordern werden, wohingegen die Ver- und Entsorger vor allem ihre interne Organisation stärken wollen.

Abb. 11: Wie werden Sie Ihre Testing-Strategie anpassen, wenn die IoT-Projektvo-lumina steigen?

50%

51%

55%

61%

70%

Zusätzlicher Bezug manueller Testing-Ressourcen von externen

Partnern.

Vergrößerung der internen Testing-Organisation.

Anpassung der internen Testing-Organisationsstruktur zur

Verbesserung der Skalierbarkeit.

Erweiterter Einsatz von Testautomatisierungs-Tools.

Konzentration auf die wichtigen Kernkompetenzen.

N=102

© P

AC

- a

CX

P G

rou

p C

om

pa

ny,

201

7


WELCHE TOOLS ODER HILFSMITTEL KOMMEN ZUM EINSATZ?

Der Hang der Unternehmen in der Region DACH, v iele Aufgaben im eigenen Haus zu er ledigen, spiegelt s ich auch in der Wahl der Tools für das IoT-Testing wieder. Nur jedes zehnte Unternehmen nutzt Crowdsour-cing-Plattformen, auf denen man den eigenen Code zum Testing frei -gegen kann. Die meisten Firmen greifen auf bewährte oder selbst ent-wickelte Werkzeuge zurück (30% bzw. 69%).

Ob dieser Weg auf Dauer zielführend sein wird, ist zumindest fraglich. Im Zuge der agi len Softwareentwicklung, die wiederum im IoT-Umfeld gang und gäbe ist, werden die Unternehmen mehr und mehr auf die Testautomatisierung zurückgreifen müssen, andernfalls i st die Vielzahl der Software-Neuerungen nicht zu bewältigen. 50% der befragten Un-ternehmen haben diese Richtung bereits eingeschlagen. Zum Ver-gleich: In der internationalen Umfrage gaben 68% der Firmen an, Au-tomatisierungs-Tools im IoT-Testing zu nutzen.

Abb. 12: Welche Arten von Testautomatisierungs-Tools setzen Sie derzeit als Teil

Ihrer IoT-Testing-Aktivitäten ein?

30%

10%

30%

52%

69%


Crowdsourcing-Plattformen

Bewährte Testautomatisierungs-Suiten

Open-Source-Testautomatisierungs-Tools

Intern entwickelte Tools

N=102

© P

AC

- a

CX

P G

rou

p C

om

pa

ny,

201

7


Die Ergebnisse der vorliegenden Erhebung s ind ernüchternd. Die meisten der befragten Unternehmen stehen noch am Anfang der IoT-Entwicklung, sie befinden sich entweder in der P lanungsphase oder in der Pi lotierung.

Dabei muss an dieser Stelle erwähnt werden, dass Unternehmen ohne jegliche IoT-Erfahrung in der Umfrage gar nicht erst berücksichtigt wurden. Ernüchternd ist das Ergebnis vor allem im Vergleich mit der internationalen Erhebung, in der k lar erkenn-bar wird, dass die weltweite Konkurrenz in Sachen IoT zügig vorweg schreitet. Laut PACs globaler Umfrage zum IoT-Testing ist die globale Vergleichsgruppe sowohl deutlich weiter in ihren IoT-Projekten als auch sehr viel investi tionsfreudiger, wenn es um den Ausbau des künftigen IoT-Budgets geht. Der schon heute erkennbare Vorsprung gegenüber Unternehmen im DACH-Raum könnte s ich demnach in Zukunft sogar noch vergrößern.

Erstaunlich s ind auch die DACH-Ergebnisse mit Blick auf das IoT-Testing. Wenn mehr als die Hälfte der Unternehmen keinen Verantwortlichen für das IoT-Testing benennen kann, darf man durchaus die organisatori -sche Reife diesbezüglich in Frage stellen. Auch die Angaben zum IoT-Testing-Budget offenbaren Nachholbedarf. Das Gros der Unternehmen gibt weniger als 5% ihres IoT-Budgets für die Quali tätssicherung aus. Das spricht nicht gerade für ernsthafte Zukunftspläne im IoT-Markt.

Insofern gibt es in den Unternehmen viel zu tun, wenn man den An-schluss an die IoT-Entwicklung nicht verpassen wi ll. Wichtig ist, dass IoT-Projekte gestartet werden und einer unternehmensweiten IoT-Strategie folgen. Dazu sind ausreichende IoT-Budgets erforderlich, die auch eine verläss liche und hochwertige Quali tätssicherung ermöglichen. Denn k lar i st, dass IoT-Innovationen dynamisch, zunehmend häufig und agi l entwickelt werden und daher ein ebenso dynamisches, agi les und au-tomatisiertes Testing benötigen.

Ermutigend ist immerhin, dass die DACH-Unternehmen die Qualitätssi -cherung auch im IoT-Umfeld durchaus wertschätzen (solange man die Budget-Frage ausk lammert) und Aspekten wie Sicherheit und Effizienz-steuerung einen hohen Stellenwert einräumen. Weiterhin sind sie auch bereit, Arbeiten abzugeben oder zu automatisieren, um sich intensiver auf Kernaufgaben konzentrieren zu können. Um jedoch im weltweiten Wettbewerb auch in Zukunft eine ernstzunehmende Rolle zu spielen, sollten sie auch ihre finanziellen Mittel rund um IoT und das IoT-Testing aufstocken.


METHODIK

PAC hat im Auftrag von Accenture 102 telefonische Interviews durch-geführt. Alle Tei lnehmer sind in verantwortlicher Posi tion entscheidungs-befugt und haben IoT-Erfahrung wenigstens im Rahmen von Evaluie-rungsprojekten gesammelt. Die Erhebung fand im August und Septem-ber 2017 statt.

75%

17%

9%

Deutschland

Österreich

Schweiz

51% 49%

250 - 1.000 Mitarbeiter

Mehr als 1.000 Mitarbeiter

6%

12%

43%

5%

11%

8%

16%

Geschäftsführung/ Unternehmensentwicklung

Leiter IoT/Digitalisierung (CDO)

CIO/IT-Leiter

Application/Testing Manager

Leiter Engineering/Produktion

Leiter Forschung & Entwicklung

Andere Position mit IoT-, M2M- oder Testing-Verantwortung

32%

22%

20%

14%

13%

Fertigung/verarbeitendes Gewerbe

Transport

Einzelhandel

Ver- und Entsorgung

Telekommunikation


ÜBER ACCENTURE

Accenture ist ein weltweit führendes Dienstleistungsunternehmen, das ein breites Portfolio von Services und Lösungen in den Bereichen Stra-tegie, Consulting, Digital, Technologie und Operations anbietet. Mit umfassender Erfahrung und spezialis ierten Fähigkeiten über mehr als 40 Branchen und alle Unternehmensfunktionen hinweg – gestützt auf das weltweit größte Delivery-Netzwerk – arbeitet Accenture an der Schnittstelle von Business und Technologie, um Kunden dabei zu un-terstützen, ihre Leistungsfähigkeit zu verbessern und nachhaltigen Wert für ihre Stakeholder zu schaffen. Mit rund 442.000 Mitarbeitern, die für Kunden in über 120 Ländern tätig sind, treibt Accenture Inno-vationen voran, um die Art und Weise, wie die Welt lebt und arbeitet, zu verbessern.

Besuchen Sie uns unter www.accenture.de/testing.

Kontakt : Inti F lorez-Brandel Senior Manager Testing Service +49 175 576 09 09 inti . [email protected] www.accenture.de

http://www.accenture.de/testing

mailto:[email protected]

http://www.accenture.de


ÜBER PAC

Die CXP Group ist das führende unabhängige, europäische Marktana-lyse- und Beratungsunternehmen für den Software- und IT-Dienstleis-tungsmarkt sowie digitale Transformation.

Wir bieten unseren Kunden umfassende Support-Serv ices in der Bewer-tung, Auswahl und Optimierung ihrer Softwarelösungen und begleiten s ie bei ihrer digitalen Transformation. Unsere Expertise deckt ein breites Themenspektrum ab, wie z.B. BI, Content Management, ERP, Finanzwe-sen, Personalinformationssysteme (PIS), CRM, BPM, IT-Management o-der Cyber Securi ty.

Darüber hinaus unterstützt die CXP Group IKT-Entscheidungsträger bei der Bewertung und Auswahl von IT-Dienstleistern und begleitet sie bei der Optimierung ihrer Sourcing- und Investi tionsstrategien.

Schließlich steht die CXP Group Software- und IT-Dienstleistungsanbie-tern mit quanti tativen und quali tativen Analysen sowie strategischer und operativer Beratung bei der Optimierung ihres Go-to-Market-Ansat-zes zur Seite. Auch öffentliche Einrichtungen vertrauen bei der Entwick-lung ihrer IT-Richtlinien auf unsere Studien.

Mit 40 Jahren Markterfahrung, 17 Niederlassungen in weltweit acht Län-dern und 150 Mitarbeitern unterstützt die CXP Group jährlich mehr als 1.500 IKT-Entscheidungsträger und die operativen Unternehmensberei-che sowohl großer als auch mittelständischer Unternehmen und deren Provider. Die CXP Group besteht aus drei Gesellschaften: Le CXP, BARC (Business Application Research Center) und PAC (Pierre Audoin Consul-tants).

Weitere Informationen unter www.pac-online.com.

PACs News: www.pac-online.com/blog

PAC GmbH Holzst r. 26 80469 München +49 (0)89 23 23 68 0 [email protected] www.pac-onl ine.com

http://www.pac-online.com

http://www.pac-online.com/blog








HAFTUNGSAUSSCHLUSS, NUTZUNGSRECHTE, UNABHÄNGIGKEIT UND DATENSCHUTZ

Diese Studie wurde im Auftrag von Accenture erstellt.

Haftungsausschluss

Die Inhalte dieser Studie wurden mit der größtmöglichen Sorgfalt zu-

sammengestellt, eine Gewähr für ihre Richtigkeit kann jedoch nicht

übernommen werden. Einschätzungen und Beurtei lungen spiegeln un-

seren gegenwärtigen Wissensstand im Oktober 2017 wider und können

s ich jederzeit ändern. Das gi lt insbesondere, aber nicht ausschließlich,

für zukunftsgerichtete Aussagen. In dieser Studie vorkommende Namen

und Bezeichnungen s ind möglicherweise eingetragene Warenzeichen.

Nutzungsrechte

Diese Studie ist urheberrechtlich geschützt. Jegliche Vervielfältigung

oder Weitergabe an Dri tte, auch auszugsweise, bedarf der vorherigen

explizi ten Einwi lligung. Auch die Veröffentlichung oder Weitergabe von

Tabellen, Grafiken etc. in anderen Publikationen bedarf der vorherigen

Genehmigung.

Unabhängigkeit und Datenschutz

Diese Studie wurde allein von Pierre Audoin Consultants (PAC) erstellt.

Der Auftraggeber hatte keinen Einfluss auf die Auswertung der Daten

und die Erstellung der Studie.

Den Befragungstei lnehmern an der Studie wurde Vertraulichkeit ihrer

Angaben zugesichert. Keine Aussage lässt Rückschlüsse auf individu-

elle Unternehmen zu, und keine individuellen Befragungsdaten wurden

an den Auftraggeber oder Dri tte weitergegeben. Alle Tei lnehmer wur-

den zufällig ausgewählt. Es besteht kein Bezug zwischen der Studiener-

stellung und einer etwaigen Kundenbeziehung zwischen den Befragten

und dem Auftraggeber dieser Studie.


Das IoT-Testing hält neue Herausforderungen bereit

Joachim Hackmann Principal Consultant

Februar 2018

In Kooperation mit

Das IoT -Test ing hält neue Her ausfor der ungen ber eit 2

INHALT

Einleitung ........................................................................................................................................... 3 Die Testing-Strategie: Fokus auf die Kernkompetenz ......................................................................... 4

PAC-Kommentar: Auf Skalierbarkeit achten .......................................................................................... 4 Die Herausforderungen: Security und Interoperabilität ...................................................................... 5

PAC-Kommentar: Problemfall Feldverhalten ......................................................................................... 5 Best Practices: Was machen die erfahrenen Nutzer? ......................................................................... 6

PAC-Kommentar: Es gibt wenige, aber wertvolle Erfahrungswerte..................................................... 6 Charakteristika: Erfahrene vs. unerfahrene Nutzer ............................................................................. 7 Methodik ........................................................................................................................................... 8

Methodik der IoT-Testing-Studie .............................................................................................................. 8 Kreuzauswertung für die Spotlight-Analyse ............................................................................................ 9 Über Accenture ...................................................................................................................................... 10 Über PAC ................................................................................................................................................. 11


EINLEITUNG

Bei der Realisierung neuer digitaler Geschäftsmodelle, Services und Produk-te konzentrieren sich die Unternehmen derzeit sehr stark auf die Software-entwicklung. Um die notwendige Schnelligkeit und Beweglichkeit zu ge-währleisten, werden in der Regel agile Methoden wie etwa Scrum oder DevOps im Testing und in der Inbetriebnahme favorisiert. Eines der wichtigs-ten Elemente in der schnellen Entwicklung ist die Testautomation. Sie bewirkt eine enorme Beschleunigung des gesamten Prozesses – soweit es die reine Softwareentwicklung betrifft.

IoT beziehungsweise das Internet der Dinge besteht aber aus einer wesentli-chen physischen Komponente, also etwa Sensoren, Aktoren, Produkte und Anlagen. IoT schlägt demnach eine Brücke zwischen der physischen (oft analogen) und der virtuellen (immer digitalen) Welt. Und an dieser Schnitt-stelle stoßen herkömmliche Testing-Anordnungen oft an ihre Grenzen, weil sie auf die Belange der Softwareentwicklung ausgerichtet sind. Viele IoT-spezifische Fragen können klassische IT-Testing-Ansätze, die in den vergan-genen Jahren in den Unternehmen etabliert wurden, daher nicht beantwor-ten:

• Wie lassen sich Sensoren und Devices unter realen Bedingungen testen?

• Wie lassen sich Aktion und Reaktion in einer Testumgebung realis-tisch herbeiführen?

• Wie kann man das Feldverhalten smarter Produkte simulieren?

• Wie wirken sich Temperaturschwankungen, Erschütterungen oder Vibrationen auf die IoT-Devices aus?

• Wie sind Risiken, die durch den IoT-Einsatz entstehen, abschätzbar und zu bewerten?

• Oder ganz allgemein: Braucht man völlig neue Umgebungen für das Testing von IoT-Lösungen?

Weil das IoT-Testing eine sehr junge Disziplin mit wenigen Erfahrungswerten ist und um etwas genauere Einblicke in die besonderen Herausforderungen, Wünsche und Einschätzungen der Anwender zu bekommen, hat PAC in Kooperation mit Accenture im Sommer 2017 eine Umfrage unter 102 Unter-nehmen durchgeführt. Die vorliegende Spotlight-Analyse wertet die Antwor-ten gezielt unter dem Aspekt des unterschiedlichen Antwortverhaltens von erfahrenen und unerfahrenen Nutzern aus. Ziel war es, aus den Erkenntnissen der erfahrenen Firmen Empfehlungen für Neueinsteiger zu gewinnen. Zu den erfahrenen Nutzern zählen all jene Unternehmen, die mindestens ein IoT-Projekt erfolgreich abgeschlossen haben. Als unerfahren wurden Unterneh-men gewertet, die sich bereits intensiv mit dem IoT-Testing befasst und sich schon eine Meinung gebildet haben, aber noch kein Projekt abschließen konnten (siehe dazu auch das Kapitel „Methodik“).


DIE TESTING-STRATEGIE: FOKUS AUF DIE KERNKOMPETENZ

Oberste Prämisse aller Befragten ist die Fokussierung auf die Kernkompeten-

zen. Das gilt auch dann, wenn in Zeiten zunehmender Betriebsamkeit mit

einem steigenden IoT-Projektvolumen zu rechnen ist. Um die wachsenden

Aufgaben bewältigen zu können, wollen deutlich über 60 Prozent der Be-

fragten die Testautomation ausbauen, um so Ressourcen für anspruchsvolle

Aufgaben freizumachen.

Beide Befragungs-

gruppen wollen zu-

dem ihre interne Or-

ganisation so aufstel-

len, dass bei wach-

senden Arbeitsauf-

kommen eine bessere

Skalierung möglich ist.

Im Klartext bedeutet

dies, dass sich leichter

und schneller externe

Serviceleistungen im

IoT-Testing einbinden

lassen. Bei den weni-

ger erfahrenen Nut-

zern geht es ver-

gleichsweise häufiger darum, zunächst einmal interne Ressource auszubau-

en und manuelle Testing-Ressourcen einzubinden. Die erfahrenen Firmen

haben diesbezüglich weniger Nachholbedarf.

PAC-KOMMENTAR: AUF SKALIERBARKEIT ACHTEN

Neue IoT-Produkte und -Services entstehen heute häufig im Rahmen von

individuellen Entwicklungsprojekten. Das liegt zum einen an der Tatsache,

dass sie oft Kernbereiche des Unternehmens betreffen, zum anderen aber

auch daran, dass es noch keine geeigneten Blaupausen, Produkte und

Standardlösungen gibt. Damit ist aber auch klar, dass enorm viele interne

Ressourcen gebunden sind und eine weitere personelle Aufstockung in Zei-

ten des Fachkräftemangels schwerfallen wird. Die erfahrenen Nutzer haben

daraus offenbar die Lehre gezogen, nicht zwingend die eigene, interne IoT-

Test-Mannschaft aufzustocken. Sie wollen stattdessen die eigene Organisa-

tion so aufstellen, dass bedarfsweise schnell externe Ressourcen eingebun-

den werden können. Kombiniert mit einer weiteren Automatisierung ließen

sich so auch die erwartbaren Mehrarbeiten auffangen. Dieses Vorgehen ist

auch für die unerfahrenen Nutzer ein gangbarer Weg.

56%

61%

58%

72%

52%

36%

64%

48%

64%

44%

Vergrößerung der internen Testing-Organisation

Erweiterter Einsatz von Testautomatisierungs-Tools

Anpassung der internen Testing-Organisationsstruktur zur

Verbesserung der Skalierbarkeit

Konzentration auf die wichtigen Kernkompetenzen

Zusätzlicher Bezug manueller Testing-Ressourcen von

externen Partnern

Wie werden Sie Ihre Testing-Strategie anpassen, wenn die IoT-Projektvolumina steigen?

Erfahrene Unerfahrene

N=102

© P

AC

-a

CX

P G

roup

Com

pany

, 20

17


DIE HERAUSFORDERUNGEN: SECU-RITY UND INTEROPERABILITÄT

Auf die Frage nach den Herausforderungen im IoT-Testing zeigt die Analyse

der Antworten große Übereinstimmungen in vielen Bereichen: Das Security-

Testing, die Sorge um Interoperabilität sowie der Umgang mit unausgereiften

Standards empfinden jeweils Mehrheiten in beiden Gruppen als eine beson-

dere Aufgabe.

Doch in einigen

anderen wesentli-

chen Punkten sind

durchaus markante

Abweichungen er-

kennbar (siehe Gra-

fik). Was die uner-

fahrenen Nutzer

stärker umtreibt als

die erfahrenen Nut-

zer, sind die Themen

„Physisches Testen

von Produkten“ und

„Modellieren des

physischen Verhal-

tens“. Bei allen an-

deren hier dargestellten Themen sind es die erfahrenen Nutzer, die größere

Herausforderungen sehen. Besonders ausgeprägt sind die Unterschiede bei

den Antwortoptionen „Verhalten im Feld“ und „User Experience“, wo die

Abweichungen 14 Prozentpunkte umfassen.

PAC-KOMMENTAR: PROBLEMFALL FELDVERHAL-TEN

Verbucht man das Testing von „User Experience“ ebenfalls unter der Rubrik

„Feldverhalten“, so lässt die Umfrage darauf schließen, dass Testverfahren

für einen späteren Betrieb von IoT-Devices und Lösungen offenbar schwer

umsetzbar sind. Das zeigen die Antworten erfahrener Nutzer, die mehrheit-

lich eben diese Punkte als besondere Herausforderungen klassifiziert haben.

Ganz offensichtlich gibt es für das Testing im Feld noch keine einfachen

Lösungen.

Organisationen, die erst jetzt mit der Umsetzung von IoT-Projekten beginnen,

haben offenbar schon ein gutes Gespür für die Besonderheiten, die das IoT-

Testing mit sich bringt, da sie das Testing physischer Eigenschaften als her-

ausfordernd betrachten. Die Erkenntnisse der erfahrenen Nutzer geben Hin-

weise auf die Schwierigkeiten, die im Verlauf von IoT-Projekten noch auf sie

zukommen werden. Daher sollten Unternehmen rechtzeitig den Test des

Feldverhaltens von IoT-Devices und -Anwendungen im Auge behalten.

24%

41%

30%

38%

48%

48%

15%

31%

42%

50%

62%

62%






Verhalten im Feld

Welche Gebiete des IoT-Testing sehen Sie als die größte Herausforderung?

Erfahrene Unerfahrene

N=102

© P

AC

-a

CX

P G

roup

Com

pany

, 20

17


BEST PRACTICES: WAS MACHEN DIE ERFAHRENEN NUTZER?

Die Erfahrungen von Nutzern mit abgeschlossenen IoT-Testing-Projekten

lassen sich zu einer Art Best Practices für solche Anwenderorganisationen

herausarbeiten, die erst am Anfang ihrer IoT-Projekte und IoT-Testing-

Verfahren stehen.

Demnach haben erfahrene Unternehmen mehrheitlich eine IoT-Testing-

Strategie formuliert und unternehmensweit umgesetzt. Über ihre Einhaltung

wacht in der Regel der CIO. Die IoT-Testing-Budgets sind nicht üppig und

viele Teilnehmer der Umfrage halten sie für zu klein, sie sollen aber steigen.

In technischer Hinsicht erachtet man vor allem die mangelnde Interoperabi-

lität und das Security-Testing als besondere Herausforderung. Erschwerend

kommt der anhaltende Fachkräftemangel hinzu. Bei steigenden Anforde-

rungen will man sich vor allem auf die Kernkompetenzen konzentrieren.

Außerdem soll die Automatisierung intensiviert werden, um den steigenden

Berg an Arbeit zu bewältigen. Aber auch Hilfe von externen Anbietern soll in

Zukunft vermehrt angefragt werden. Sie wird vor allem in der Umsetzung der

IoT-Testing-Aufgaben benötigt und um Qualitätsansprüche zu erfüllen bezie-

hungsweise zu halten. Dazu soll die interne Organisation so angepasst wer-

den, dass sich externe Ressourcen schnell einbinden und managen lassen.

Die bevorzugten Adressaten für Hilfe von außen sind IT-Dienstleister und

Hersteller von Automatisierung-Tools.

PAC-KOMMENTAR: ES GIBT WENIGE, ABER WERT-VOLLE ERFAHRUNGSWERTE

Die Erfahrungen sowie die Datenlage rund um das IoT-Testing sind derzeit

noch dünn. Die Erfahrungen der Nutzer, die sich an der PAC-Umfrage betei-

ligt haben, sind hilfreich und wertvoll, können aber allenfalls Denkanstöße

sein. Zurzeit sind alle IoT-Projekte in höchstem Maße unternehmensspezifisch

– und genauso individuell sind auch die IoT-Testing-Strategien und -Projekte.

Insofern muss jedes Unternehmen seinen eigenen Weg finden.

Dennoch sollte man den kleinen, aber vorhandenen Erfahrungsschatz nicht

ignorieren. Die Erkenntnisse der Unternehmen mit laufenden und abge-

schlossenen IoT-Projekten zeigen, dass das IoT-Testing (neben den Dauer-

brennern Security, mangelnde Interoperabilität und Standardisierung) vor

allem bei den physischen Tests, beim Feldverhalten und beim Testing der

User Experience besondere Herausforderungen bereithält. Gleichzeitig ha-

ben alle Befragten erkannt, dass auf Dauer nur die Automatisierung einen

Beitrag liefern kann, um neue IoT-Lösungen zügig und mit hoher Qualität auf

den Markt bringen zu können. Insofern sind alle Beteiligten gefragt, auch in

den besonderen Disziplinen des IoT-Testings an Verfahren zu arbeiten, die

eine schnelle, automatisierte Prüfung aller Einflussfaktoren auf die Funktions-

fähigkeit und Zuverlässigkeit im späteren Betrieb möglich machen.


CHARAKTERISTIKA: ERFAHRENE VS. UNERFAHRENE NUTZER

Die unterschiedlichen Ergebnisse der Antworten von erfahrenen und uner-

fahrenen Nutzern lassen sich in Sachen IoT-Testing folgendermaßen darstel-

len:

Erfahrene Nutzer Unerfahrene Nutzer

IoT-Strategie Ist formuliert und umge-

setzt

Nicht vorhanden

IoT-Testing-

Budget Tendenziell höher als bei

den unerfahrenen Nutzern,

wachsend

Tendenziell niedriger als bei

den erfahrenen Nutzern,

aber schneller wachsend

Ziele des IoT-

Testings Effizienz und Sicherheit Qualitätsverbesserung,

Sicherheit

Herausfor-

derungen Fachkräftemangel, Securi-

ty-Testing, Interoperabilität

Mangelnde Veränderungs-

bereitschaft, Fachkräfte-

mangel, Interoperabilität,

Security-Testing

Defizite End-to-end-Testing für User

Experience, Feldverhalten,

IoT-Geräte-Testing

Geräte-Sicherung, End-to-

End-Testing für User Experi-

ence, Feldverhalten

Strategie bei

wachsenden

Volumina

Konzentration auf Kern-

kompetenz, Testautomati-

sierung, interne Organisa-

tion an bessere Skalierung

anpassen

Konzentration auf Kernkom-

petenz, Testautomatisie-

rung, interne Organisation

ausbauen und an bessere

Skalierung anpassen

Externer

Support IT-Dienstleister, Anbieter

von Automatisierungs-Tools

Anbieter von IoT-

Plattformen

Gewünschte

externe Un-

terstützung

Bereitstellung von Kapazi-

täten für die Umsetzung

Beratung in der Planungs-

phase, Qualitätsverbesse-

rung


METHODIK

METHODIK DER IOT-TESTING-STUDIE

PAC hat im Auftrag von Accenture 102 telefonische Interviews mit IT-Entscheidern in Unternehmen verschiedener Branchen in der DACH-Region durchgeführt. Alle Teilnehmer sind in verantwortlicher Position entschei-dungsbefugt und haben IoT-Erfahrung wenigstens im Rahmen von Evaluie-rungsprojekten gesammelt. Die Erhebung fand im August und September 2017 statt.

Auftei lung nach Posi tion

Auftei lung nach Branchen

75%

17%

9%

Deutschland

Österreich

Schweiz

51% 49%

250 - 1.000 Mitarbeiter

Mehr als 1.000 Mitarbeiter

6%

12%

43%

5%

11%

8%

16%

Geschäftsführung/ Unternehmensentwicklung

Leiter IoT/Digitalisierung (CDO)

CIO/IT-Leiter

Application/Testing Manager

Leiter Engineering/Produktion

Leiter Forschung & Entwicklung

Andere Position mit IoT-, M2M- oder Testing-Verantwortung

32%

22%

20%

14%

13%

Fertigung/verarbeitendes Gewerbe

Transport

Einzelhandel

Ver- und Entsorgung

Telekommunikation


KREUZAUSWERTUNG FÜR DIE SPOTLIGHT-ANALYSE

Für die vorliegende Spotlight-Analyse wurde das Antwortverhalten der erfahrenen Nutzer dem der unerfahrenen Nutzer gegenübergestellt. Basis für die Eintei lung waren die Angaben zur folgenden Frage:

Welche der folgenden Optionen beschreibt den derzeitigen Status Ihrer IoT-Strategie am besten?

Unternehmen der P lanungs- und Frühphase (siehe untenstehende Grafik) wurden der Gruppe der unerfahrenen Nutzer zugeordnet. Die Gruppe der erfahrenen Nutzer wird von den Unternehmen gebi ldet, die sich der mitt leren und fortgeschri ttenen Phase zugeordnet haben.

11%

16%

38%

35%

Fortgeschrittene Phase: Wir haben bereits eine organisationsweite

IoT-Strategie, basierend auf einer einheitlichen Architektur und

definierten Methoden.

Mittlere Phase: Unsere IoT-Initiativen zeigen erste Geschäftserfolge oder

-veränderungen.

Frühphase: Wir haben schon erste Pilotprojekte umgesetzt.

Planung: Wir befinden uns noch in der Planungs- und

Evaluierungsphase.

N=102

© P

AC

- a

CX

P G

rou

p C

om

pa

ny,

201

7


ÜBER ACCENTURE

Accenture ist ein weltweit führendes Dienstleistungsunternehmen, das ein breites Portfolio von Services und Lösungen in den Bereichen Stra-tegie, Consulting, Digital, Technologie und Operations anbietet. Mit umfassender Erfahrung und spezialis ierten Fähigkeiten über mehr als 40 Branchen und alle Unternehmensfunktionen hinweg – gestützt auf das weltweit größte Delivery-Netzwerk – arbeitet Accenture an der Schnittstelle von Business und Technologie, um Kunden dabei zu un-terstützen, ihre Leistungsfähigkeit zu verbessern und nachhaltigen Wert für ihre Stakeholder zu schaffen. Mit rund 442.000 Mitarbeitern, die für Kunden in über 120 Ländern tätig sind, treibt Accenture Inno-vationen voran, um die Art und Weise, wie die Welt lebt und arbeitet, zu verbessern.







ÜBER PAC

Pierre Audoin Consultants (PAC) wurde 1976 gegründet und gehört seit Juni

2014 zur CXP Group, dem führenden unabhängigen europäischen Markt-

analyse- und Beratungsunternehmen für die Software- und IT-

Dienstleistungsindustrie sowie für Themen rund um die digitale Transformati-

on.

Wir bieten unseren Kunden umfassende Support-Services in der Bewertung,

Auswahl und Optimierung ihrer Softwarelösungen sowie bei der Bewertung

und Auswahl von IT-Dienstleistern und begleiten sie bei der Optimierung ihrer

Sourcing- und Investitionsstrategien. Die CXP Group begleitet IKT-

Entscheidungsträger bei ihrer digitalen Transformation.

Schließlich steht die CXP Group Software- und IT-Dienstleistungsanbietern mit

quantitativen und qualitativen Analysen sowie strategischer und operativer

Beratung bei der Optimierung ihres Go-to-Market-Ansatzes zur Seite. Auch

öffentliche Einrichtungen vertrauen bei der Entwicklung ihrer IT-Richtlinien

auf unsere Studien.

Mit 40 Jahren Markterfahrung, 17 Niederlassungen in weltweit 8 Ländern und

140 Mitarbeitern unterstützt die CXP Group jährlich mehr als 1.500 IKT-

Entscheidungsträger und die operativen Unternehmensbereiche sowohl

großer als auch mittelständischer Unternehmen und deren Provider. Die CXP

Group besteht aus drei Gesellschaften: Le CXP, BARC (Business Application

Research Center) und Pierre Audoin Consultants (PAC).



Folgen Sie uns auf Twitter: @CXPgroup_DE

PAC GmbH Holzst r. 26 80469 München +49 (0)89 23 23 68 0 [email protected] www.pac-onl ine.com





https://www.twitter.com/CXPgroup_DE


PAC Q&A

„Integrales IoT-Testing ist essenziell für nachhaltige Erfolge von IoT-Produkten“

PAC im Gespräch mit Inti Florez-Brandel, Testarchitekt und Berater bei Accenture Technology

Mai 2018

„Int egr ales IoT-Test ing ist es senz iel l für nachhalt ige Erfolge von IoT-Pr odukt en“ 2

Hintergrund

Das Internet of Things (IoT) i st in den Unternehmen angekommen – viel-

leicht noch nicht als konkretes Projekt oder betriebsbereite Lösung,

doch auf jeden Fall a ls eine interessante Technologie für weitere Effi -

z ienzverbesserungen, für neue Kundenservices oder gar für disruptive

Geschäftsmodelle. Die Softwareentwicklung wird dabei als wichtiger

Baustein akzeptiert, denn ohne neue Applikationen, moderne Kunden-

schnittstellen und leistungsstarke Analyseprogramme lässt sich das IoT

kaum gewinnbringend einsetzen. Dementsprechend fließen viele In-

vestitionen und Anstrengungen in die indiv iduelle Entwicklung von Soft-

ware.

Abb. 1: Welche der folgenden Aussagen beschreibt am besten Ihren aktuellen Stand

bzgl. Ihrer IoT-Testing-Strategie?

Dagegen wird das IoT-Testing häufig vernachläss igt. Das geht aus einer

Umfrage hervor, die PAC in Kooperation mit Accenture im vergange-

nen Jahr durchgeführt hat. Nur 12 % von über 100 befragten Unterneh-

men mit IoT-Erfahrungen haben eine unternehmensweite digitale Tes-

t ing-Strategie definiert und umgesetzt. PAC sprach mit Inti F lorez-

Brandel, Testarchitekt und Berater bei Accenture Technology, darüber,

warum Unternehmen das Testing unbedingt in IoT-Vorhaben integrieren

sollten und wie sie dabei vorgehen sollten.

31%

41%

16%

12%

Derzeit haben wir keine Strategie.

Wir entwickeln derzeit eine Strategie,die innerhalb der nächsten 12

Monate etabliert sein wird.

Wir haben eine Strategie etabliert,haben aber noch nicht begonnen,

diese umzusetzen.

Wir haben unsere digitale Testing-Strategie bereits umgesetzt.


Die Umfrage von PAC und Accenture unter deutschen Unternehmen zum

IoT-Testing hat gezeigt, dass der Großteil der Befragten in ihren IoT-Projek-ten, aber vor allem auch beim IoT-Testing noch ganz am Anfang der Ent-wicklung stehen. Hat Sie das Ergebnis überrascht?

Zum Teil ja, es besteht offensichtlich noch eine Lücke zwischen Wunsch

und Realität beim Thema IoT. Auch wenn es einzelne gute Beispiele für IoT-

Anwendungsfälle gibt, ist der große Durchbruch für IoT-Lösungen noch

nicht erfolgt. Da das Testing-Thema traditionell eher nachgelagert be-

trachtet wird, ist klar, dass bei diesem Entwicklungsstand Testing noch kein

Top-Agendapunkt ist. Gleichzeitig wird jedoch verkannt, wie essenziell

wichtig es ist, schon in einer frühen Phase die effiziente Validierung von

Qualitätseigenschaften in der Produktenwicklung zu berücksichtigen.

Was ist das Besondere am IoT-Testing?

Das IoT-Testing unterscheidet sich stark von den

klassischen Testansätzen und dies nicht nur im

Hinblick auf besondere Testherausforderungen,

die mit der technischen Integration der physi-

schen und logischen Welt einhergehen, wie zum

Beispiel bei der Simulation physischer Umge-

bungsparameter. IoT-Testing ist essenziell, da

der Erfolg von IoT-Produkten stark davon ab-

hängt, wie gut die Qualitätsherausforderungen

im Produktdesign adressiert wurden und wie ef-

fizient diese in frühen Entwicklungsphasen an-

gegangen werden können. Schnelle Entwick-

lungs- und Feedbackzyklen sind Voraussetzun-

gen für einen erfolgreichen und nachhaltigen

Marktauftritt. Folglich wird im Zusammenhang

mit dem IoT zumeist von „Quality Engineering“ und nicht vom Testen ge-

sprochen. Ein nachträgliches „Herein-Testen“ von Qualität funktioniert im

IoT-Umfeld nicht, angesichts der besonders hohen Herausforderungen an

Schnelligkeit und Agilität.

Testing-Prozesse sind in jedem Unternehmen, das Produkte und Software entwickelt, anerkannt und etabliert. Dennoch zeigt die Erhebung Unsi-cherheit bei vielen Befragten beim IoT-Testing von Hardware und Software,

insbesondere wenn es um das Verhalten im Feld geht. Haben Sie eine Er-klärung für diese Unsicherheit?

Der Zusammenschluss und die Integration von Information Technology und

Operational Technology und das Design neuer Produkte mit Hilfe neuer

Technologien stellen eine neue Domäne dar, für die es auch im Testing

nur wenig Erfahrung gibt. Viele Karrieren haben ihren Schwerpunkt in der

einen oder anderen Welt, und weniger im Zusammenschluss der beiden

Welten, in deren Wirken häufig nun auch noch neue Anwendungsfälle und

Geschäftsfelder zu erschließen sind. Diese Gemengelage stellt Firmen vor

Inti Florez-Brandel ist Testarchitekt und Berater bei Accenture Technology mit einer langjährigen Expertise in der Realisie-rung und der Umsetzung von anspruchsvollen und innovati-ven Qualitäts- und Testprojekten für komplexe Infrastruktur- und Applikationssysteme. Schwerpunkt seiner Arbeit ist die Adaption und Reorganisa-tion von klassischen Testvorgehensweisen im Kontext großer digitaler Transformationsprojekte, sowie das Aufsetzen und die Realisierung anspruchsvoller Testvorhaben für neue Tech-nologien. Hierzu gehören auch IoT Quality Engineering und die Testadaption für DevOps und Scaled Agile Framework (SAFe) im Enterprise-Umfeld. Seine Testexpertise erlangte Inti Florez-Brandel in mehr als 30 Projekten verschiedener Branchen, in forschungsnahen Projekten, sowie der Anwendung und Umsetzung vielfältiger Methoden und Werkzeuge.


besondere Herausforderungen, und häufig fehlt es hier an Fachwissen für

die eine oder andere Seite. Die Verlagerung vom klassischen Testing zu

Quality Engineering ist ein konkretes Beispiel, welches über die Prozessan-

passung hinausgeht und eine strukturelle und organisatorische Anpassung

im Unternehmensumfeld erforderlich macht, um wirken zu können.

Die Umfrage hat auch ergeben, dass die Budgets im IoT-Testing-Bereich

recht schmal sind. Reflexartig würde wahrscheinlich jeder angesichts der Bedeutung des Themas dazu raten, die Mittel zu erhöhen. Sehen Sie ab-gesehen davon andere Wege, das IoT-Testing in den Unternehmen auf ein

höheres Niveau zu bringen?

Abb. 2: Wie hoch ist der Anteil Ihres IoT-Budgets, den Sie derzeit in Testing und Quali-

tätssicherung investieren?

Das bloße Investment in IoT-Testing als alleinige Maßnahme ist nicht ziel-

führend. Sinnvoller ist es, das Bewusstsein für Qualität tiefer in der Unter-

nehmenskultur zu verankern und den Stellenwert klarer herauszuarbeiten.

Qualität ist hierbei nicht nur im Sinne einer reibungslosen Funktionalität zu

verstehen, sondern als Strategie für das Unternehmen und deren Produkte

beziehungsweise deren Eignung für die IoT-Nutzung, die ja völlig neuen

Gesichtspunkten unterliegt.

Nutzernahe Qualitätseigenschaften sind also nicht nur als Kür, sondern als

Pflicht für einen nachhaltigen Produkterfolg zu verstehen. Wenn es gelingt,

hierfür das erforderliche Bewusstsein im Engineering zu verankern, ist eine

gute Voraussetzung für ein effizienteres Testing geschaffen. Mit dieser Basis

können spezifische Testherausforderungen besser gemeistert werden.

11%

6%

4%

18%

62%


16% und mehr

11%-15%

6%-10%

0-5%


Gibt es bestimmte Methoden, Tools oder Technologien, die Sie beim IoT-

Testing empfehlen würden?

Als Beispiel seien hier gerade die Tools und Technologien erwähnt, die auf

Qualitätsaspekte abzielen, die im nicht-funktionalen Bereich zu finden

sind. Zum Beispiel hat die häufig verminderte Netzgüte in der Interaktion

von „Dingen“ und Systemen einen größeren Einfluss auf Funktionalität und

Qualität als zunächst angenommen. Das Verhalten kann hier mithilfe von

Impairment-Simulatoren unter Einsatz von ungünstigen Netzbedingungen

näher untersucht werden.

Insgesamt kann aber festgehalten werden, dass

es „das“ IoT-Testing als eine Disziplin kaum gibt.

Dafür sind die Vielfalt und Anforderungen der

darunter zu verstehenden Lösungen zu hetero-

gen. Was den Lösungen häufig gemein ist und

wo sich ähnliche Testherausforderungen fest-

stellen lassen, ist das Wechselspiel zwischen dis-

kreter, also logischer, und physischer, kontinuier-

l icher Welt bei gleichzeitiger Offenheit und Fle-

xibilität. Im Idealfall können im gewählten De-

sign- und Testansatz die richtigen Designantwor-

ten bereits frühzeitig im Entwicklungspfad vali-

diert werden. Hierzu ist eine genaue Kenntnis

der spezifischen Anforderungen unabdingbar.

Was sind aus Ihrer Projekterfahrung heraus die größten Schwierigkeiten,

wenn es um die Einführung und die Durchführung von IoT-Testing geht?

Das Fehlen einer abgestimmten Teststrategie und das Aufbauen eines ge-

meinsamen Verständnisses für den Testzweck und die Testinhalte führen

häufig zu vermeidbaren Mehraufwänden und zu einer erhöhten Unzufrie-

denheit beziehungsweise zu einer geringeren Akzeptanz für das Testing.

Gleichzeitig verpasst man ohne abgestimmtes Vorgehen die Chance ei-

ner kontinuierlichen Verbesserung.

Insbesondere im Bereich des IoT-Testing sind lückenhaftes Methodenwis-

sen und fehlende Tool-Kenntnisse besonders ausschlaggebend für eine er-

folgreiche Einführung sowie Durchführung von Testing-Projekten. Aufgrund

der Silo-übergreifenden Anforderungen im IoT-Testing sind oft spezielle

Kenntnisse nicht ad hoc verfügbar, wenn es etwa um den Einfluss physi-

scher Gegebenheiten, um den Einsatz von Simulatoren, um die Hardware-

und Software-Integration, sowie um Netzprotokolle geht. Vielen Testern

fällt es schwer, die richtigen Testansätze zu formulieren, da es übergrei-

fende Kenntnisse für bisher eher abgegrenzte Gebiete erforderlich macht.


Gibt es einen Königsweg oder ein bewährtes Vorgehen, um Schwierigkei-

ten zu lösen? Welche Erfahrungen haben Sie in ihren Kundenprojekten diesbezüglich gemacht?

Das Vorgehen hängt immer von den Gegebenheiten ab beziehungsweise

muss entsprechend adaptiert werden. Am effizientesten ist es häufig, agile

Arbeitsweisen zu adaptieren und gemischte, interdisziplinäre Teams zu bil-

den, um gemeinsam das Bewusstsein für test- und qualitätsbezogene

Probleme zu schärfen und diese kollaborativ zu lösen. Gleichzeitig ist ein

schnelles Lernen erforderlich, da das IoT in vielen Fällen ein eher uner-

forschtes Gebiet ist und Kenntnisse fehlen.

Hilfreich ist es, bekannte Herangehensweisen zu verfolgen, sich auf Kern-

aspekte zu fokussieren und den Nutzerwert herauszustellen, um gezielt,

möglichst nahe am Kundenwunsch die richtigen Schlüsse für das Produkt-

design ziehen zu können. Diese Fokussierung sollte sich auch im Testansatz

manifestieren, indem zum Beispiel alle Produktrisiken, etwa im Bereich Usa-

bility und Security, von Beginn an im Testansatz methodisch mit integriert

und angewendet werden.

Abb. 3: Welche Gebiete des IoT-Testing sehen Sie als die größte Herausforderung?

22%

33%

38%

41%

42%

44%

52%

52%

58%

63%

70%





Interpretation der Ergebnisse bzw. desVerhaltens im Feld

Verfügbarkeit


Verhalten im Feld

Unausgereifte Standards

Interoperabilität

Security Testing


Es ist unstrittig, dass IoT in vielen Branchen und vielen Unternehmen an

Bedeutung gewinnen wird. Welche künftigen Entwicklungen sehen Sie im IoT-Testing, um dem steigenden Bedarf und den wachsenden Anforderun-gen Herr zu werden? Wie wird das IoT-Testing der Zukunft aussehen?

Ganz klar steht die Verlagerung vom klassischen Testing zum Quality Engi-

neering im Fokus der Entwicklungen. Quality Engineering trägt den beson-

deren IoT-Herausforderungen insofern Rechnung, da es als integraler Teil

der gesamten Entwicklungskette sehr frühes Feedback und damit kontinu-

ierliche Verbesserungen gewährleistet. Qualität rückt somit in den Mittel-

punkt. Die hohen IoT-Herausforderungen, etwa

Stabilität, Interoperabilität und Sicherheit, werden

früh im Entwicklungsprozess berücksichtigt.

Gleichzeitig unterstützt Quality Engineering die

Entwicklung der richtigen T-Shaped Skill-Profile,

die gleichermaßen vertikales und horizontales

Fachwissen haben. Diese sind erforderlich, um die

richtigen Sichtweisen und stark konkurrierenden

Anforderungen in Einklang zu bringen.

Ein ebenso wichtiger Teilaspekt ist, dass ein erfolg-

reiches Quality Engineering ohne einen hohen Au-

tomatisierungsgrad beziehungsweise den Einsatz

von integrierten Simulatoren nicht möglich ist. Au-

ßerdem wird die allgegenwärtige Herausforde-

rung des Security-Testings von IoT-Projekten einen

immer größeren Stellenwert einnehmen.


Über Accenture

Accenture ist ein weltweit führendes Dienstleistungsunternehmen, das ein breites Portfolio von Serv ices und Lösungen in den Bereichen Stra-tegie, Consulting, Digital, Technologie und Operations anbietet. Mit umfassender Erfahrung und speziali sierten Fähigkeiten über mehr als 40 Branchen und alle Unternehmensfunktionen hinweg – gestützt auf das weltweit größte Delivery-Netzwerk – arbeitet Accenture an der Schnittstelle von Business und Technologie, um Kunden dabei zu unter-stützen, ihre Leistungsfähigkeit zu verbessern und nachhaltigen Wert für ihre Stakeholder zu schaffen. Mit rund 442.000 Mitarbeitern, die für Kun-den in über 120 Ländern tätig sind, treibt Accenture Innovationen vo-ran, um die Art und Weise, wie die Welt lebt und arbeitet, zu verbes-sern.


19

1 2 3Advisory &

MobilizationAssessment &

TrainingManagementto Execution

SAP Enterprise

System

Custom Development

Systems

Digital/Mobile

Internetof ThingsTesting

Quality Engineering

AgileTesting

Test Automation

Artificial Intelligence

driven systems

Über accenture

Accenture ist ein weltweit führendes Dienstleistungsunternehmen, das ein breites Portfolio von Services und

Lösungen in den Bereichen Strategie, Consulting, Digital, Technologie und Operations anbietet. Mit umfassender

Erfahrung und spezialisierten Fähigkeiten über mehr als 40 Branchen und alle Unternehmensfunktionen hinweg –

gestützt auf das weltweit größte Delivery-Netzwerk – arbeitet Accenture an der Schnittstelle von Business und

Technologie, um Kunden dabei zu unterstützen, ihre Leistungsfähigkeit zu verbessern und nachhaltigen Wert

für ihre Stakeholder zu schaffen. Mit rund 442.000 Mitarbeitern, die für Kunden in über 120 Ländern tätig sind,

treibt Accenture Innovationen voran, um die Art und Weise, wie die Welt lebt und arbeitet, zu verbessern.


Experience New High Quality Testing

THROUGH

FOR

Contact us!

www.accenture.de






Über PAC

Pierre Audoin Consultants (PAC) wurde 1976 gegründet und gehört seit

Juni 2014 zur CXP Group, dem führenden unabhängigen europäischen

Marktanalyse- und Beratungsunternehmen für die Software- und IT-

Dienstleistungsindustrie sowie für Themen rund um die digitale Transfor-

mation.

Wir bieten unseren Kunden umfassende Support-Services in der Bewer-

tung, Auswahl und Optimierung ihrer Softwarelösungen sowie bei der

Bewertung und Auswahl von IT-Dienstleistern und begleiten sie bei der

Optimierung ihrer Sourcing- und Investi tionsstrategien. Die CXP Group

begleitet IKT-Entscheidungsträger bei ihrer digitalen Transformation.

Schließlich steht die CXP Group Software- und IT-Dienstleistungsanbie-

tern mit quanti tativen und quali tativen Analysen sowie strategischer

und operativer Beratung bei der Optimierung ihres Go-to-Market-An-

satzes zur Seite. Auch öffentliche Einr ichtungen vertrauen bei der Ent-

wicklung ihrer IT-Richtlinien auf unsere Studien.

Mit mehr als 40 Jahren Markterfahrung, 17 Niederlassungen in weltweit

8 Ländern und 150 Mitarbeitern unterstützt die CXP Group jährlich mehr

als 1.500 IKT-Entscheidungsträger und die operativen Unternehmens-

bereiche sowohl großer als auch mittelständischer Unternehmen und

deren Provider. Die CXP Group besteht aus drei Gesellschaften: Le

CXP, BARC (Business Application Research Center) und Pierre Audoin

Consultants (PAC).



Folgen Sie uns auf Twitter: @CXPgroup_DE

PAC GmbH Holzstr. 26 80469 München +49 (0)89 23 23 68 0 [email protected] www.pac-online.com





http://www.twitter.com/CXPgroup_DE


Date post:	29-Aug-2019
Category:	Documents
Upload:	others
View:	14 times
Download:	0 times

IoT verändert das Application-Testing · TRENDSTUDIE IoT verändert das Application-Testing Wie...

Documents