A   N o v e l   A p p r o a c h   f o r   Q A   S c r u m   T e a m s   t o   I m p r o v e   T e s t   M a n a g e m e n t   P r o c e s s S Q A   D a y s   # 2 9 ,   M o s c o w ,   R u s s i a   2 9 - 3 0   O c t o b e r , 2 0 2 1 w w w . s i e m e n s . c o m R e s t r i c t e d ©   S i e m e n s   A G   2 0 2 1
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   2 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s T a b l e   o f   C o n t e n t W h o   A r e   W e ? K e y   T a k e a w a y s   f r o m   t h e   T a l k A d v a n t a   D e v e l o p m e n t   a s   S i e m e n s   R & D   C e n t e r M i n d S p h e r e   P r o j e c t A g i l e   T e s t i n g   C h a l l e n g e s   o f   Q A   S c r u m   T e a m s P r o p o s e d   M e t h o d R e s u l t s   a n d   A c h i e v e m e n t s
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   3 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s W h o   A r e   W e ?
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   4 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s D R .   G A Y E   S A Ğ L A M
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   5 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   6 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s K e y   T a k e a w a y s   f r o m   t h e   T a l k
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   7 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s S i e m e n s   w a y o f   e n a b l i n g b e t t e r t e s t   m a n a g e m e n t a p p r o a c h b y   T e s t   O w n e r ( T O ) r o l e e n a b l e m e n t C u l t u r a l c h a n g e i n   q u a l i t y m i n d s e t ; Q u a l i t y s h o u l d b e   l i v e d b y e v e r y o n e i n   S D L C   p r o c e s s ,   n o t   r e a c h e d o r g o v e r n e d j u s t b y s o m e s p e c i f i c g r o u p s s u c h a s   t e s t   t e a m s ! T h e   t a l k   m a i n l y   a b o u t   :
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   8 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s A D V A N T A   D e v e l o p m e n t ( S i e m e n s   A G   G l o b a l   R & D   C e n t e r )
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   9 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s H O L I S T I C   O F F E R I N G S o l u t i o n   ,   P r o d u c t   D e v e l o p m e n t P r o t o t y p i n g   & D e s i g n C o n s u l t i n g D i g i t a l i z a t i o n A u t o m a t i o n E l e c t r i f i c a t i o n S i e m e n s   B u s i n e s s   U n i t s S i e m e n s   A d v a n t a S i e m e n s   A d v a n t a s   M i s s i o n : C o n s u l t i n g ,   S o l u t i o n   &   D e v e l o p m e n t   S i e m e n s   A d v a n t a   C o n s u l t i n g S i e m e n s   A d v a n t a   S o l u t i o n s S i e m e n s   A d v a n t a   D e v e l o p m e n t ~ 5 0 0   ~ 3 0 0   ~ 7 , 5 0 0 E m p l o y e e s P l a t f o r m   S o l u t i o n s D a t a   S e r v i c e s A p p l i c a t i o n   I n n o v a t i o n C i t i e s   S o l u t i o n s S W   P r o f e s s i o n a l   S e r v i c e s I T   S o l u t i o n s S o l u t i o n   E n g i n e e r i n g S t r a t e g y   C o n s u l t i n g D i g i t a l   C o n s u l t i n g O p e r a t i o n s   C o n s u l t i n g
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   1 0 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s 2 0   L o c a t i o n s   f o r   S W   P r o f e s s i o n a l   S e r v i c e s - W e   f o l l o w   a   c l e a r   p o s i t i o n i n g   t o   s t r e n g t h e n   s y n e r g i e s N e a r   s h o r e B r a s o v S W D e v e l o p m e n t   h u b ,   M e c h a n i c a l   E n g i n e e r i n g ,   E l e c t r o n i c s ,   D S P   /   A S I C ,   S i m u l a t i o n ,   A n a l y t i c s ,   P r o j e c t   E n g i n e e r i n g B u d a p e s t E m b e d d e d   D e v e l o p m e n t , D S P   /   A S I C ,   S i m u l a t i o n ,   A n a l y t i c s ,   S y s t e m   T e s t C l u j I T S y s t e m   D e v e l o p m e n t ,   I T   S e r v i c e s P r a g u e C o m p l e t e P r o d u c t   D e v e l o p m e n t ,   M e c h a n i c a l   E n g i n e e r i n g ,   E m b e d d e d ,   E l e c t r o n i c s ,   I n d u s t r i a l   C o m m u n i c a t i o n ,   S i m u l a t i o n I s t a n b u l   /   A n k a r a S W   D e v e l o p m e n t   h u b ,   S y s t e m   T e s t ,   C l o u d ,   A n a l y t i c s , E d g e ,   I n d u s t r i a l   C o m m u n i c a t i o n ,   E m b e d d e d   D e v e l o p m e n t B r a t i s l a v a S W   D e v e l o p m e n t   C e n t e r   a n d   D i g i t a l   D e l i v e r y   C e n t e r   f o r   B u i l d i n g   &   I n f r a s t r u c t u r e   P r o d u c t s   a n d   S o l u t i o n s O f f   s h o r e B a n g a l o r e S W   D e v e l o p m e n t   h u b ,   I T   s y s t e m   d e v e l o p m e n t ,   I T   S e r v i c e s , S y s t e m   T e s t ,   A n a l y t i c s S u z h o u S W D e v e l o p m e n t   h u b ,   C y b e r   D e f e n s e ,   C o n n e c t e d   M o b i l i t y ,   A n a l y t i c s ,   R o b o t i c s O n s i t e N u r e m b e r g P r o d u c t   M a n a g e r s ,   A r c h i t e c t s ,   A u t o m a t i o n   /   I n t e g r a t i o n   e x p e r t s ,     A C P 3 S u z h o u B a n g a l o r e I s t a n b u l N u r e m b e r g P r a g u e B u d a p e s t B r a s o v C l u j B r a t i s l a v a A n k a r a
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   1 1 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s M i n d S p h e r e   P r o j e c t
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   1 2 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s O p e n C l o u d   P l a t f o r m   a s   a   S e r v i c e   ( P a a S ) a n d   I o T O S D e v e l o p ,   r u n a n d m a n a g e c u s t o m e r s S W   A p p s a n d   S e r v i c e s D e l i v e r s O p e n A P I s a n d D e v e l o p m e n t T o o l s B u i l t - i n   I n f r a s t r u c t u r e   S u p p o r t   f o r   c u s t o m e r s C o l l e c t s a n d a n a l y z e s a l l t y p e s   o f   R e a l - t i m e   S e n s o r D a t a C o n n e c t i v i t y   S W   S e r v i c e s   a l l o w s e a s y i n t e g r a t i o n   o f a l l t y p e s o f   a s s e t s ,   p r o t o c o l s a n d c o m m u n i c a t i o n s t a n d a r d . O f f e r s   c l o u d b a s e d c o m p u t i n g a n d a n a l y t i c s p l a t f o r m   f o r   D a t a   A n a l y t i c s A p p s t o   S i e m e n s   A G   a n d   e x t e r n a l   c u s t o m e r s F o r   D e t a i l s   h t t p s : / / s i e m e n s . m i n d s p h e r e . i o / e n M i n d S p h e r e   P r o j e c t
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   1 3 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s M i n d S p h e r e   P r o j e c t
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   1 4 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s A g i l e   T e s t i n g
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   1 5 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s A g i l e   T e a m s   i n   O t h e r   P r o j e c t s   A D V   D   T R
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   1 6 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s A g i l e   T e a m s   i n   M i n d S p h e r e   P r o j e c t   a t   A D V   D   T R I n d e p e n d e n t   E 2 E   t e s t   t e a m   t o u c h e s   a l l   b u n c h e s   o f   d e v e l o p e d   f e a t u r e s   a n d   s e r v i c e s
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   1 7 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s A g i l e   T e s t i n g   S t r a t e g y   i n   M i n d S p h e r e I l l u s t r a t e d   b y   H e l m u t   G o e t z ,   f o r m e r   H e a d   o f   M D S P   g l o b a l   Q A   g r o u p
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   1 8 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s A g i l e   T e s t i n g   S t r a t e g y   i n   M i n d S p h e r e
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   1 9 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s S h i f t   L e f t - C l o s e   c o l l a b o r a t i o n   w i t h   D e v .   T e a m s   ( e . g .   J o i n t   S c r u m   m e e t i n g s ) . - S h a r e d   Q u a l i t y   r e s p o n s i b i l i t y   w i t h   D e v   t e a m s S h i f t   R i g h t - M o n i t o r i n g   :   S e r v i c e / A p p   u s a g e   t r e n d s   c a p t u r e d   f r o m   P r o d   e n v i r o n m e n t . - R e v i s e d   t e s t   p l a n s   a c c .   t o   t r e n d s - C u s t o m e r   e n g a g e m e n t A g i l e   T e s t i n g   S t r a t e g y   i n   M i n d S p h e r e
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   2 0 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s C h a l l e n g e s   o f   Q A   S c r u m   T e a m s
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   2 1 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s P r o d u c t   M a n a g e r s   ( P R M s ) p r o d u c t   s t r a t e g y ,   g l o b a l   m a r k e t i n g   P r o d u c t   O w n e r s   ( P O s ) t e c h n i c a l   b r e a k d o w n   o f   w o r k   a n d   p r o d u c t   l o g   o p t i m i z a t i o n T e s t   P r o d u c t   E x p e r t   ( T - P E s ) P O   c o u n t e r p a r t   i n   Q A ,   t e c h   l e a d e r   O t h e r s   s u c h   a s   S c r u m   M a s t e r s ,   D e v e l o p e r s ,   T e s t   A u t o m a t i o n   E n g i n e e r s ,   T e s t   A r c h i t e c t s ,   T e s t   I n f r a s t r u c t u r e   E n g i n e e r s   e t c O r g a n i z a t i o n a l   S e t u p   i n   M i n d S p h e r e
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   2 2 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s R o l e   B a s e d   C h a l l e n g e s   i n   Q A   S c r u m   T e a m s   ( T e s t - P E ) N o   P R M   l o c a t e d   f o r   Q A   s i d e   A l l   P R M   &   P O   r e s p o n s i b i l i t i e s   o n   T - P E   !   T - P E s   c h a l l e n g e s ;   T i m e c o n s t r a i n t t o f o c u s o n f e a t u r e s f o r t e s t d e s i g n L a c k o f c o l l a b o r a t i o n / c o o r d i n a t i o n w i t h P O s R o l e d i l e m m a w o r k i n g o n b o t h s i d e : e x t e r n a l a s c u s t o m e r & i n t e r n a l a s t e a m l e a d
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   2 3 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s I n d e p e n d e n t Q A   T e a m C h a l l e n g e s   i n   S c r u m   :   S y n c   w i t h   P r o d u c t M a n a g e m e n t a b o u t   u p c o m i n g   f e a t u r e s S y n c w i t h D e v T e a m s ( d i f f e r e n t b a c k l o g s s a m e t a r g e t ) M a i n   C h a l l e n g e s   f o r   Q A   S c r u m   T e a m s Q A   V e r i f i c a t i o n   m u s t !   d e f i n e d   i n   D o D
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   2 4 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s P r o p o s e d   M e t h o d
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   2 5 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s a n e w r o l e a n n o u n c e m e n t : T e s t O w n e r ( T O ) f o r e a c h S W a r e a i n M i n d S p h e r e p r o d u c t . t o f i l l t h e g a p b e t w e e n p r o d u c t m a n a g e m e n t , d e v e l o p m e n t a n d Q A . S o l u t i o n :   T O   E n a b l e m e n t ?
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   2 6 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s g l o b a l r o l e a c t s a s a Q A c o u n t e r p a r t o f P O s a n d / o r P R M s p o s i t i o n e d a s f i r s t c u s t o m e r f o r a n y d e v e l o p e d f e a t u r e c o m m o n u n d e r s t a n d i n g f o r b u s i n e s s n e e d s E 2 E T e s t c a s e d e s i g n f i r s t d e g r e e r e s p o n s i b i l i t y a n d a c c o u n t a b i l i t y f o r r e l e a s e d e c i s i o n s T O   a s   a   R o l e
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   2 7 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s A l i g n m e n t a n d s t r o n g c o l l a b o r a t i o n w i t h P R M s / P o s T r a c k s a n d e n s u r e s t h e r e p o r t i n g o f Q A r e l a t e d K P I s A c t s a s e n t r e p r e n e u r f o r Q A b y O w n e r s h i p o f t h e E 2 E T e s t s c e n a r i o s T a r g e t s t o r e a c h t h e m a x . t e s t c o v e r a g e ( w i t h T - P E ) T O   a s   a   R o l e
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   2 8 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s E n c o u r a g e s t e s t a u t o m a t i o n e n g i n e e r s C l o s e i n t e r w o r k i n g w i t h s c r u m t e a m s ( Q A a n d D e v e l o p m e n t ) R e p r e s e n t s t h e v o i c e o f e n d c u s t o m e r s ! T O   a s   a   R o l e T e s t C o v e r a g e
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   2 9 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s R e o r g a n i z a t i o n   o f   T e a m   S e t u p T O
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   3 0 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s R e s u l t s   a n d   A c h i e v e m e n t s
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   3 1 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s T h e   G l o b a l   Q u a l i t y   A s s u r a n c e r e p r e s e n t a t i o n T e s t   c o v e r a g e   i n c r e a s e   a n d   q u a l i t y   i m p r o v e m e n t T h e   c u s t o m e r - o r i e n t a t i o n i n c r e a s e   S y n c   i m p r o v e m e n t   b e t w e e n   D E V   a n d   Q A   s c r u m   t e a m s B a l a n c e d   w o r k l o a d   d i s t r i b u t i o n   b e t w e e n   T - P E   a n d   T O A c h i e v e m e n t s   b y   P r o p o s e d   M e t h o d  
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   3 2 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s p r o v e d   s u c c e s s   b y   i n c r e a s e d   e f f i c i e n c y   i n   t h e   t e s t   p r o c e s s   a n d   i n c r e a s e d   p r o d u c t i v i t y   i n   t e s t   t e a m . a   b e n c h m a r k   f o r   o t h e r   p r o j e c t s   i n   S i e m e n s . A c h i e v e m e n t s   b y   P r o p o s e d   M e t h o d  
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   3 3 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s C o n t a c t D r .   G a y e   S a ğ l a m G r o u p   M a n a g e r E x p e r t   T e s t   E n g i n e e r g a y e . s a g l a m @ s i e m e n s . c o m T o l g a   A k t a ş G l o b a l   T e s t   M a n a g e r   C o n t i n u o u s   Q u a l i t y   E x p e r t t o l g a . a k t a s @ s i e m e n s . c o m A D V A N T A   D e v e l o p m e n t   E U   T u r k e y S i e m e n s   R & D   C e n t e r ,   K a r t a l / I s t a n b u l s i e m e n s . c o m
R e s t r i c t e d   ©   S i e m e n s   A G   2 0 2 1 2 0 2 1 - 1 0 - 3 0 P a g e   3 4 D r .   G a y e   S a g l a m   &   T o l g a   A k t a s Q u a l i t y   i s   n o t   a n   a c t ;   i t   i s   a   h a b i t .   A r i s t o t l e