overview of the lai whitepaper series on lean product ... · 4. enterprise management 5. program...

28
General rights Copyright and moral rights for the publications made accessible in the public portal are retained by the authors and/or other copyright owners and it is a condition of accessing publications that users recognise and abide by the legal requirements associated with these rights. Users may download and print one copy of any publication from the public portal for the purpose of private study or research. You may not further distribute the material or use it for any profit-making activity or commercial gain You may freely distribute the URL identifying the publication in the public portal If you believe that this document breaches copyright please contact us providing details, and we will remove access to the work immediately and investigate your claim. Downloaded from orbit.dtu.dk on: Aug 31, 2020 Overview of the LAI Whitepaper Series on Lean Product Development Oehmen, Josef Publication date: 2011 Link back to DTU Orbit Citation (APA): Oehmen, J. (Author). (2011). Overview of the LAI Whitepaper Series on Lean Product Development. Sound/Visual production (digital)

Upload: others

Post on 16-Jul-2020

0 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

General rights Copyright and moral rights for the publications made accessible in the public portal are retained by the authors and/or other copyright owners and it is a condition of accessing publications that users recognise and abide by the legal requirements associated with these rights.

Users may download and print one copy of any publication from the public portal for the purpose of private study or research.

You may not further distribute the material or use it for any profit-making activity or commercial gain

You may freely distribute the URL identifying the publication in the public portal If you believe that this document breaches copyright please contact us providing details, and we will remove access to the work immediately and investigate your claim.

Downloaded from orbit.dtu.dk on: Aug 31, 2020

Overview of the LAI Whitepaper Series on Lean Product Development

Oehmen, Josef

Publication date:2011

Link back to DTU Orbit

Citation (APA):Oehmen, J. (Author). (2011). Overview of the LAI Whitepaper Series on Lean Product Development.Sound/Visual production (digital)

Page 2: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

1

Lean Enterprise Product Development: 15 years of Innovation at LAI

- Overview of the Whitepaper Series -

LAI Web Knowledge Exchange Event

Dr. Josef Oehmen Dr. Eric Rebentisch

March 31, 2011

1 Dr. Josef Oehmen - [email protected]

We Share A Common Goal: Enterprise Excellence

Page 3: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

2

Knowledge

Exchange

Events Network - Share - Learn

April 21, 2011

Prof. Earll Murman

and

Jackie Candido, Ph.D

Designing and

Deploying Lean

Healthcare

Curriculum

Knowledge

Exchange

Events Network - Share - Learn

April 14, 2011

Maj. Sean Dorey

Enhancing Cost

Realism Through

Risk-Driven

Contracting

Knowledge

Exchange

Events Network - Share - Learn

May 17, 2011

LESAT Team

Beta Release of

LESAT 2.0

MIT Campus

Cambridge, MA

Upcoming Knowledge Exchange Events

Epoch-Based

Thinking:

Anticipating System

and Enterprise

Strategies for

Dynamic Futures

Donna Rhodes, Ph.D.

Adam Ross, Ph.D.

June 9-10, 2011

Value-Driven

Tradespace

Exploration for

System Design

Future Enterprise

Donna Rhodes, Ph.D

Adam Ross, Ph.D

June 6-8, 2011

Architecting

the Future

Enterprise

June 13-14, 2011

Prof. Debbie Nightingale

Donna Rhodes, Ph.D.

LAI Lean Academies:

Enterprise, Healthcare, and

Product Development

July 18-20 or July 18-22, 2011

Eric Dickson, M.D.

Hugh McManus, Ph.D.

Prof. Earll Murman

PD Track Healthcare Track Enterprise Track

July 18-20 July 18-20 July 21-22

Eric Rebentisch, Ph.D.

Julie Vannerson, M.D.

Prof. Annalisa Weigel

June 20-21, 2011

Principles of

Enterprise

Transformation

Prof. Debbie Nightingale

Jayakanth Srinivasan, Ph.D

New Course

Summertime Enterprise Thinking

Page 4: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

3

Overview

• Introduction to past Lean Enterprise Product Development work at LAI

• Overview of all planned whitepapers • Current whitepapers:

– Risk Management – Waste in Lean Enterprise Product Development – Lean Program Management (beta)

• Next whitepapers: – Product Development Self Assessment Tool – Lean Product Development Practices

Dr. Josef Oehmen - [email protected] 5

Brief look at my CV

• Education and Research – M.Sc.Eng. from Technical University

of Munich – Master thesis at LAI on Risk

Management in PD – MBA at Collège des Ingénieurs in

Paris – PhD at ETH Zurich (Swiss Federal

Institute of Technology) – Research in the areas of Supply

Chain Risk Management

• Today – Research Scientist with LAI and

KFUPM cooperation project – Risk management along the

engineering value chain – Lean program management

• Work experience – Assistant of the CTO of a Swiss

company, projects in technology and innovation management (2005/2006)

– Consultant in different areas of risk management for many years

– Scientific advisor to risk management consultancy

– Member of the supervisory board for a technology and project development company in the field of sustainable technologies for developing countries

Dr. Josef Oehmen - [email protected] 6

Page 5: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

4

RESEARCH ON LEAN PD AT LAI Introduction to the past 15 years

Dr. Josef Oehmen - [email protected] 7

Lean PD Research at LAI

• Overview of 15 years of research in lean product development

• Goal: – Tie together different pieces of research from

different points in time – Present the “bigger picture” of the relationships

within PD and LAIs research – Develop a series of reports for LAI members that

present an integrated view on the main topics of Lean PD

– (Develop publications and / or a book from these reports)

Dr. Josef Oehmen - [email protected] 8

Page 6: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

5

How do you eat an elephant?

Slice by slice! Pre-selection: >500 175 papers

Dr. Josef Oehmen - [email protected] 9

26

10

1

10

49

17

6

6

16

18

1

1

14

-1

0

1

2

3

4

-1 0 1 2 3 4Em

pir

ical

bas

is (0

= n

/a …

3=

Hig

h)

Fit to the field (0=n/a ... 3=High)

Paper Distribution (all categeories, total number: 175)

26

10

1

10

49

17

6

6

16

18

1

1

14

-1

0

1

2

3

4

-1 0 1 2 3 4

Emp

iric

al b

asis

(0=

n/a

… 3

=H

igh

)

Fit to the field (0=n/a ... 3=High)

Paper Distribution (all categeories, total number: 175)

Overview: Empirical basis vs. Fit to field

Dr. Josef Oehmen - [email protected] 10

Base sample: 102 papers

Extended sample:

+73 papers

? Low Medium High

? Lo

w

Me

diu

m

Hig

h

Fit to the field

Emp

iric

al b

asis

Page 7: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

6

How easy / hard is it to fit 15 years of research into a common framework?

• Should be easy. It is all related to Lean product development, is it not?

• Might be hard. They covered a lot of ground.

• I now know that for all practical purposes, it is impossible!

Dr. Josef Oehmen - [email protected] 11

Possible Structure – Alternative 1

Marketing Lean PD Core ActivitiesProduction

& SCM

Dr. Josef Oehmen - [email protected] 2

Lean PD Enterprise Activities

Lean Enterprise Resources & Capabilities

Possible Structure – Alternative 2

Marketing Lean PD Core ActivitiesProduction

& SCM

Dr. Josef Oehmen - [email protected] 3

Lean PD Enterprise Activities

Resources & Capabilities

Change Management

Possible Structure – Alternative 27

Dr. Josef Oehmen - [email protected] 4

Coordinate PD projects and central resources

Lean PD Core Processes

Develop Product Family Architecture

Develop Marketing & Product Strategy

Understanding Customer ValueEnterp

rise Pro

jectlevel

level

Create an

d Su

stain C

ultu

re

Develo

p P

eop

le and

Reso

urces

Plan & Clarify Task

Develop principle solution

Develop & Design

construction structure

Prepare production &

operating instructions

Testing LaunchDiscovery ScopingBusiness

Case

Type of process

Processes for Value-orientation

Processes for Enterprise Integration

Processes for efficient execution

Leve

l of

anal

ysis

Project Portfolio

Single Project

1. Stakeholder needs generation

2. Trade space exploration & decision making

3. Value & waste in core PD activities

4. Enterprise management

5. Program management

6. Multi-project management

7. Performance metrics and measurement

8. Product architecture & commonality management

9. Risk management

10. IT systems in PD

11. HR development & intellectual capital

12. Teams in PD

13. Enterprise process improvement

14. Enabling factors in Lean PD

15. Core PD process principles

Framework for PD Research

Dr. Josef Oehmen - [email protected] 12

Page 8: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

7

Whitepapers we will discuss today

Type of Process

I. Processes for Value-Orientation

II. Processes for Enterprise Integration

III. Processes for Efficient Execution

Leve

l of

An

alys

is

Project Portfolio

Single Project

a) Stakeholder needs generation

b) Trade space exploration & decision making

c) Value & waste in core PD activities

d) Enterprise management

e) Program management

f) Multi-project management

g) Performance metrics and measurement

h) Product architecture & commonality management

i) Risk management

j) IT systems in PD

k) HR development & intellectual capital

l) Teams in PD

m) Enterprise process improvement

n) Enabling factors in Lean PD

o) Core PD process principles

Dr. Josef Oehmen - [email protected] 13

Whitepapers we will discuss today

1. Risk Management in Lean PD

2. Waste in Lean Product Development

3. Lean Program Management (beta)

4. Lean PD Performance Measurement and Self Assessment

5. Lean Product Development Practices

Dr. Josef Oehmen - [email protected] 14

Page 9: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

8

RISK MANAGEMENT IN LEAN PD

Dr. Josef Oehmen - [email protected] 15

Risk Management: A very old topic

“Prudent princes [should] regard not only present troubles, but also future ones, for which they must prepare with every energy, because, when foreseen, it is easy to remedy them.”

- Niccolò Machiavelli The Prince (1513)

© ETH Zurich – Josef Oehmen – [email protected] 16 Dr. Josef Oehmen - [email protected]

Page 10: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

9

Risk Management – Why?

Dr. Josef Oehmen - [email protected] 17

0

1

2

3

4

5

6

7

8

9

10

No risk mitigation Mitigation of all risks

Tota

l Co

st In

de

x

Intensity of Risk Mitigation

Total Cost Cost of Risk Cost of Risk Mitigation

Too little risk mitigation

Too much risk mitigation

The new ISO 31000 Process

• Example of “external” risk management process in PD

• A variety processes exist:

– DoD

– INCOSE

– NASA

– PMI

– PRINCE2

– … Dr. Josef Oehmen - [email protected] 18

Risk assessment

2. Establishing the context

3. Risk identification

4. Risk analysis

5. Risk evaluation

6. Risk treatment

1. C

om

mu

nic

atio

n a

nd

co

nsu

ltat

ion

7. M

on

ito

rin

g an

d r

evi

ew

Page 11: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

10

LAI’s past research

Risk management processes and

methods

Management of uncertainty in PD

Application of real options theory

Portfolio-level PD risk management

Dr. Josef Oehmen - [email protected] 19

The Four Principles of Risk-Driven Design: Integrating “Risk Thinking” into Development Processes to Create Resilience

•Explore and identify knowable uncertainties

•Quantify resulting risks

Principle 1

Creating Transparency Regarding Design Risks

•Resource allocation to retire biggest risks first

•Objective setting associated with risk assessment

•Entrepreneurial decision making based on risk-return analyses

Principle 2

Making Risk-Driven Decisions

•Reduction of external uncertainty

•Reduction of internal uncertainty

Principle 3

Minimizing Uncertainty in Design

•Create agile design system: swiftness, cost efficiency, flexibility and versatility

•Create critical buffers in the design system

Principle 4

Creating Resilience in the Design System

Dr. Josef Oehmen - [email protected]

Page 12: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

11

WASTE IN LEAN PRODUCT DEVELOPMENT

Dr. Josef Oehmen - [email protected] 21

Why is Lean Product Development Important?

Dr. Josef Oehmen - [email protected] 22

Waste (Activity idle) 62%

Necessary waste 11%

Waste 15%

Value added 12%

Activity Executed 38%

Time share of different types of activities in PD

Source: McManus, 2005, Oppenheim, 2004

Page 13: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

12

8 Types of Waste in Lean PD

Dr. Josef Oehmen - [email protected] 23

Waste in Lean Product Development

1. Over production of information

2. Over processing of information

3. Miscommuni-

cation of information

4. Stockpiling of information

5. Generating defective

information

6. Correcting information

7. Waiting of people

8. Unnecessary movement of

people

Relationship of Waste Types

Dr. Josef Oehmen - [email protected] 24

Page 14: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

13

The Vicious Circle of Information in Inventory

Dr. Josef Oehmen - [email protected] 25

Information in Inventory

Information rot (11%/month)

Rework required (54% of initial work for "rotten"

items)

Unplanned rework, firefighting re-allocates

resources to solve problem

PD process is destabilized and out of sync

Tasks are interrupted, more information is stored (and defect rate increased,

increasing rework)

The Impact of Information in Inventory on “Rot” and “Rework”

0%

10%

20%

30%

40%

50%

60%

0 50 100

Engineering Days

Rot and rework of information in inventory

Percentage of information items affected by 'rot'

Amount of required rework (as % of original workin inventory)

• About 0.54% of information in inventory is affected by “information rot”: Obsolescence through changing requirements, rework of related components etc.

• Of the affected information, the average rework ratio is 53%, meaning that about half of the `rotten` information must be reworked

Dr. Josef Oehmen - [email protected] 26

Source: Kato 2005

Page 15: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

14

Example: Time wasted by different types of PD waste

Dr. Josef Oehmen - [email protected] 27

0

200

400

600

800

1000

1200

1400

1600O

verp

rod

uct

ion

Ove

rpro

cess

ing

Mis

-co

mm

un

icat

ion

Gen

erat

ing

defe

ctiv

ein

form

atio

n

Co

rrec

tin

g in

form

atio

n

Wai

tin

g o

f p

eop

le

Un

nec

essa

ry m

ove

men

t

Wasted engineering hours per 50 engineering weeks (average of three projects)

Source: Kato 2005

Example: Rework and Information Inventory

Dr. Josef Oehmen - [email protected] 28

0

5

10

15

20

25

30

35

40

45

50

1-5 6-10 11-15 16-20 21-25 26-30

Project week

Average time wasted on 'correcting information' (engineering hours/period)

0

100

200

300

400

500

600

700

Swit

chin

g to

urg

ent

task

wit

hin

pro

ject

Wai

tin

g fo

r in

form

atio

n f

rom

oth

er t

ask

Swit

chin

g to

urg

ent

task

ou

tsid

e p

roje

ct Oth

er

Average Information Inventory Time (engineering days) by Root Cause

Source: Kato 2005

Page 16: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

15

LEAN PROGRAM MANAGEMENT (BETA)

Dr. Josef Oehmen - [email protected] 29

LAI´s Take on Program Management (under construction)

Dr. Josef Oehmen - [email protected] 30

Scoping, Planning & Contracting

Technology Integration

Product Design

Production, Use, Service,

Decommissioning

Program Organization and Enterprise Management

Program Management

Stakeholder Needs Technology

Processes Skills Manpower Budget Regulations

Op

era

tional

Syste

m

Organization

Competitors

Page 17: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

16

Detail: Program Organization & Enterprise Management

Dr. Josef Oehmen - [email protected] 31

Program Organization and Enterprise Management

• Integrating and leading the program organization

• Stakeholder management

• Progress monitoring and management (EVM)

• Risk management

• Project management

• Multi-project coordination

• Developing Intellectual Capital

• Building the Program Enterprise

• Understanding the Enterprise

• Optimizing the Program Enterprise

• Learning to Learn in the Enterprise

• Improving the Enterprise

Scoping, Planning & Contracting

Technology Integration

Product Design

Production, Use, Service,

Decommissioning

Detail: Planning to Design

Dr. Josef Oehmen - [email protected] 32

Program Organization and Enterprise Management

Scoping, Planning & Contracting

• Needs & requirements definition

• Specification definition

• Trade-offs

• Cost estimation & Life Cycle Costing

• Incentive alignment, contract negotiation & conclusion

Technology Integration

• Technology scouting and selection

• Technology maturation monitoring

• Coordination of Technology Development

• Technology transition management

Product Design

• PD team organization

• Monitoring Systems Engineering Leading Indicators

• Integrated Product and Process Development

• Product architecting

• Value stream optimization

• Testing & prototyping

Production, Use, Service,

Decommissioning

Page 18: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

17

Lean Program Management Community of Practice Project Activities and Time Line

• Build consortium membership (industry, government, professional organizations, academia)

• Develop detailed vision of goals and outline program management knowledge to be collected

• Compile and review preliminary lists (literature-based) on lean enablers and pitfalls (alpha version) 1. Start up phase

• Create group of “experts” to collect program management challenges

• Complete collection of preliminary program management challenges

• Structure program management challenges, e.g. cause-and-effect hierarchy

• Plan review & revision through group feedback

2. Collect program management challenges (beta)

• Prepare online survey to complete and describe program management pitfalls

• Test & revise online survey with CoP members

• Disseminate survey through CoP members to their organizations

• Consolidate results and approve through CoP members

3. Describe & validate program management challenges (gamma)

• Create group of “experts” to collect lean program management enablers

• Complete collection of preliminary lean program management enablers

• Structure lean program management enablers, e.g. six

• Plan review & revision through group feedback

4. Collect lean program management enablers (beta)

• Prepare online survey to describe lean program management enablers

• Test & revise online survey with CoP members

• Disseminate survey through CoP members to their organizations

• Consolidate results and approve through CoP members

5. Describe lean program management enablers (gamma)

• Focus groups: Review mapping of lean enablers to pitfalls in 5-6 focus groups

• Consolidate results, review and approve through CoP members

• Develop method to build business case for improvement from pitfalls / enablers

6. Map lean program management enablers to challenges (delta)

• Collection of illustrative examples (public knowledge high-profile cases or generic examples)

• Consolidate results, review and approve through CoP members 7. Collect illustrating examples

• Compile report on CoP findings

• Review of report through CoP members

8. Codify knowledge and write report

Phase 0: Mar 2011

Phase 1: Apr - Jun 2011

Phase 2: July – Sept 2011 INCOSE Symposium

Phase 3: Oct – Dec 2011

PMI Global Congress

Lean Program Management Enablers Strongly Support Carter Initiative

Program Management

Challenges

(100+)

Corresponding Lean Program Management

Enablers

(100+)

Actionable Program

Management Improvements

Affordability

• Increase affordability by using program management best practices in the areas of

• Program execution

• Enterprise management

• Planning & Contracting

• Technology Integration

• Development & Systems Engineering

Tradecraft

• Improve acquisition tradecraft by improving training for program managers

• Close collaboration with Defense Acquisition University

• Translation of results into improved or new course material

Value

• Utilize power of Lean Management to eliminate waste regarding

• Low-value statutory processes

• Internal reports

• Overhead imposed on industry

Page 19: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

18

Current Members: 40

PRODUCT DEVELOPMENT SELF-ASSESSMENT TOOL

Forthcoming Whitepaper

Dr. Josef Oehmen - [email protected] 36

Page 20: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

19

The $1 Million (or Billion) Question:

What are the 3 most important

things I need to do right to succeed in Product

Development?

Dr. Josef Oehmen - [email protected] 37

The Bad News

Dr. Josef Oehmen - [email protected] 38

Q 001 Q 002 Q 003 Q 004 Q 005 Q 006 Q 007 Q 008 Q 009 Q 010 Q 011 Q 012 Q 013 Q 014 Q 015 Q 016 Q 017 Q 018 Q 019 Q 020 Q 021 Q 022 Q 023 Q 024 Q 025 Q 026 Q 027 Q 028 Q 035 Q 036 Q 037 Q 038 Q 039 Q 040 Q 041 Q 042 Q 043 Q 044 Q 045 Q 046 Q 047 Q 048 Q 049 Q 050 Q 051 Q 052 Q 053 Q 054 Q 055 Q 056 Q 057 Q 058 Q 059 Q 060 Q 061 Q 062 Q 063 Q 064 Q 065 Q 066 Q 067 Q 068 Q 069 Q 070 Q 071 Q 072 Q 073 Q 074 Q 075 Q 076 Q 077 Q 078 Q 079 Q 080 Q 081 Q 082 Q 083 Q 084 Q 085 Q 086 Q 087 Q 088 Q 089 Q 090 Q 091 Q 092 Q 093 Q 094 Q 095 Q 096 Q 097 Q 098 Q 099 Q 100 Q 101 Q 102 Q 103 Q 104 Q 105 Q 106 Q 107 Q 108 Q 109 Q 110 Q 111 Q 112 Q 113 Q 114 Q 115 Q 116 Q 117 Q 118 Q 119 Q 120 Q 121 Q 122 Q 123 Q 124 Q 125 Q 126 Q 127 Q 128 Q 129 Q 130 Q 131 Q 132 Q 133 Q 134 Q 135 Q 136 Q 137 Q 138 Q 139 Q 140 Q 141 Q 142 Q 143

Q 001 1.00

Q 002 0.35 1.00

Q 003 0.26 0.37 1.00

Q 004 -0.05 0.11 0.12 1.00

Q 005 0.09 0.31 0.21 0.13 1.00

Q 006 0.27 0.32 0.25 -0.02 0.17 1.00

Q 007 0.15 0.20 0.17 -0.11 0.05 0.23 1.00

Q 008 0.11 0.40 0.25 0.11 0.34 0.38 0.26 1.00

Q 009 0.10 0.38 0.14 0.05 0.22 0.41 0.31 0.80 1.00

Q 010 0.33 0.36 0.37 0.07 0.18 0.21 0.24 0.38 0.48 1.00

Q 011 0.17 0.13 0.13 0.03 0.20 0.06 0.27 0.01 0.01 0.11 1.00

Q 012 0.04 0.19 0.32 -0.03 0.28 0.22 0.27 0.23 0.21 0.13 0.34 1.00

Q 013 0.14 0.25 0.17 0.16 0.21 0.13 0.09 0.22 0.16 0.15 0.08 0.28 1.00

Q 014 0.21 0.22 0.29 -0.03 0.05 0.24 0.34 0.20 0.33 0.35 0.05 0.36 0.28 1.00

Q 015 0.19 0.43 0.36 0.18 0.33 0.19 0.19 0.36 0.30 0.19 0.35 0.41 0.46 0.28 1.00

Q 016 0.22 0.33 0.44 0.17 0.01 0.30 0.24 0.23 0.31 0.30 0.09 0.44 0.11 0.36 0.27 1.00

Q 017 0.27 0.14 0.24 0.02 0.29 0.30 0.16 0.12 0.07 0.19 0.32 0.12 0.21 0.32 0.41 -0.02 1.00

Q 018 0.14 0.28 0.23 -0.12 0.17 0.31 0.14 0.17 0.22 0.06 0.06 0.21 0.25 0.26 0.23 0.30 0.20 1.00

Q 019 0.24 0.32 0.24 -0.05 0.23 0.27 0.20 0.09 0.17 0.30 0.15 0.16 0.11 0.29 0.31 0.22 0.37 0.58 1.00

Q 020 0.07 0.36 0.21 0.02 0.28 0.19 0.05 0.30 0.30 0.25 -0.13 0.11 0.12 0.25 0.21 0.28 0.17 0.23 0.39 1.00

Q 021 0.03 0.29 -0.01 -0.09 0.32 0.37 0.18 0.13 0.15 0.10 0.30 0.28 0.21 0.17 0.41 0.10 0.47 0.41 0.39 0.11 1.00

Q 022 0.14 0.27 0.14 -0.05 0.24 0.05 0.04 0.30 0.26 0.18 0.09 0.15 0.21 0.29 0.37 0.09 0.50 0.37 0.48 0.41 0.44 1.00

Q 023 0.16 0.21 0.16 0.11 0.40 0.35 0.28 0.22 0.26 0.26 0.24 0.19 0.43 0.29 0.34 0.21 0.44 0.50 0.43 0.23 0.51 0.40 1.00

Q 024 0.17 0.03 0.08 -0.07 0.07 0.10 0.17 -0.05 0.05 0.16 0.13 -0.08 0.27 0.14 0.11 0.07 0.28 0.31 0.36 0.25 0.24 0.27 0.52 1.00

Q 025 0.34 0.41 0.29 0.00 0.18 0.36 0.14 0.31 0.31 0.37 0.27 0.26 0.27 0.27 0.40 0.40 0.40 0.45 0.39 0.13 0.42 0.35 0.26 0.13 1.00

Q 026 0.10 0.16 0.01 -0.03 0.19 0.28 0.24 0.26 0.22 0.11 0.24 0.33 0.30 0.12 0.38 0.10 0.38 0.26 0.20 0.15 0.31 0.32 0.33 0.15 0.31 1.00

Q 027 0.13 0.36 0.22 0.05 0.34 0.21 0.27 0.34 0.32 0.17 0.19 0.19 0.18 0.31 0.38 0.21 0.21 0.11 0.11 0.11 0.20 0.29 0.36 0.21 0.19 0.20 1.00

Q 034 0.09 0.01 0.21 0.04 0.12 0.05 0.03 0.05 0.10 0.20 0.15 0.06 -0.20 -0.04 0.27 0.22 0.14 -0.05 0.08 0.17 -0.01 0.20 0.13 0.36 -0.03 0.07 0.30 0.18

Q 035 0.09 0.34 0.19 0.02 0.24 0.24 0.30 0.25 0.33 0.15 0.30 0.16 0.14 0.31 0.25 0.13 0.27 0.13 0.18 0.08 0.22 0.24 0.27 0.27 0.24 0.23 0.44 0.65 1.00

Q 036 0.16 0.30 0.27 -0.07 0.26 0.34 0.22 0.25 0.34 0.24 0.16 0.30 0.23 0.40 0.37 0.34 0.29 0.09 0.30 0.35 0.18 0.14 0.16 0.27 0.25 0.22 0.33 0.33 0.33 1.00

Q 037 0.13 0.23 0.21 0.11 0.30 0.20 0.24 0.19 0.20 0.19 0.38 0.20 0.19 0.22 0.31 0.21 0.33 0.07 0.26 0.21 0.15 0.23 0.31 0.24 0.20 0.18 0.30 0.38 0.60 0.33 1.00

Q 038 -0.01 0.44 0.27 0.23 0.33 0.18 0.26 0.33 0.36 0.27 0.33 0.34 0.29 0.36 0.48 0.29 0.35 0.13 0.34 0.25 0.32 0.31 0.33 0.27 0.30 0.30 0.33 0.55 0.43 0.38 0.61 1.00

Q 039 -0.16 0.15 0.23 0.07 0.33 0.00 0.10 0.28 0.25 0.08 -0.15 0.09 0.16 0.28 0.11 0.22 0.03 0.24 0.16 0.29 -0.15 0.30 0.20 0.24 -0.04 0.08 0.26 0.36 0.32 0.24 0.38 0.40 1.00

Q 040 0.01 0.19 0.08 0.05 0.16 -0.07 0.21 0.26 0.35 0.07 0.15 0.16 0.11 0.26 0.17 0.13 0.02 0.18 0.07 0.24 -0.03 0.07 0.14 -0.02 0.08 -0.01 0.24 0.16 0.24 0.20 0.18 0.22 0.17 1.00

Q 041 0.10 0.27 0.08 -0.06 0.29 0.02 0.23 0.24 0.29 0.11 0.09 0.06 0.19 0.21 0.23 0.09 0.13 0.10 0.03 0.17 0.05 0.11 0.08 0.21 0.20 0.22 0.32 0.19 0.11 0.32 0.12 0.31 0.23 0.22 1.00

Q 042 0.08 0.18 0.10 0.10 0.30 0.10 0.12 0.17 0.09 0.32 0.34 0.16 0.08 0.02 0.23 0.15 0.19 0.07 0.09 0.12 0.29 0.10 0.33 0.15 0.20 0.14 0.14 0.15 0.11 -0.08 0.27 0.29 -0.11 0.12 0.07 1.00

Q 043 0.13 0.35 0.28 0.09 0.15 0.40 0.30 0.28 0.38 0.30 0.28 0.20 0.13 0.37 0.39 0.27 0.20 0.16 0.27 0.16 0.27 0.16 0.31 0.22 0.28 0.21 0.42 0.37 0.33 0.38 0.25 0.41 0.21 0.14 0.31 0.15 1.00

Q 044 0.14 0.19 0.24 0.09 0.10 0.03 0.15 0.04 0.12 0.22 -0.02 0.13 0.27 0.18 0.24 0.18 0.06 0.32 0.35 0.21 0.02 0.11 0.12 0.30 0.23 0.16 0.08 0.26 0.19 0.21 0.22 0.41 0.28 0.30 0.17 0.01 0.15 1.00

Q 045 0.07 0.26 0.27 0.18 0.07 0.18 0.16 0.09 0.19 0.18 0.28 0.20 0.25 0.06 0.29 0.28 0.18 0.26 0.22 0.09 0.24 0.10 0.21 0.26 0.34 0.29 0.15 0.34 0.21 0.17 0.18 0.25 0.11 0.10 0.22 0.09 0.31 0.40 1.00

Q 046 -0.05 0.23 0.15 -0.02 0.28 0.12 0.25 0.15 0.18 0.12 0.26 0.27 0.19 0.08 0.40 0.17 0.17 0.37 0.23 0.15 0.36 0.28 0.30 0.14 0.35 0.31 0.22 0.21 0.19 0.08 0.23 0.42 0.13 0.14 0.15 0.32 0.19 0.27 0.29 1.00

Q 047 0.14 0.19 0.16 0.06 0.22 0.15 0.09 0.13 0.12 0.12 0.40 0.27 0.05 0.16 0.39 0.18 0.10 0.11 0.12 0.11 0.20 0.13 0.19 -0.07 0.14 0.17 0.19 0.17 0.14 0.09 0.22 0.32 0.06 0.18 -0.02 0.28 0.25 -0.03 0.01 0.25 1.00

Q 048 0.25 0.45 0.34 0.08 0.33 0.26 0.41 0.41 0.43 0.38 0.32 0.28 0.24 0.39 0.55 0.30 0.50 0.22 0.40 0.38 0.32 0.53 0.42 0.26 0.42 0.32 0.53 0.48 0.45 0.40 0.53 0.57 0.30 0.18 0.26 0.29 0.44 0.28 0.27 0.42 0.22 1.00

Q 049 0.24 0.34 0.25 0.09 0.33 0.42 0.33 0.25 0.37 0.28 0.25 0.30 0.40 0.33 0.45 0.29 0.38 0.34 0.28 0.22 0.38 0.28 0.46 0.29 0.50 0.37 0.30 0.34 0.41 0.39 0.41 0.43 0.19 0.19 0.28 0.23 0.50 0.38 0.38 0.33 0.21 0.53 1.00

Q 050 0.26 0.16 0.25 -0.12 0.14 0.19 0.09 0.28 0.29 0.34 0.07 0.19 0.15 0.23 0.23 0.36 0.28 0.20 0.09 0.27 0.16 0.31 0.16 0.16 0.42 0.24 0.21 0.17 0.14 0.25 0.32 0.20 0.11 0.11 0.29 0.31 0.20 0.13 0.30 0.20 0.08 0.43 0.41 1.00

Q 051 0.04 0.33 0.23 -0.05 0.20 0.14 0.26 0.18 0.24 0.26 0.21 0.10 0.19 0.34 0.32 0.12 0.26 0.33 0.38 0.18 0.30 0.30 0.24 0.25 0.37 0.22 0.26 0.42 0.42 0.17 0.31 0.34 0.29 0.18 0.19 0.36 0.31 0.22 0.25 0.40 0.26 0.46 0.34 0.18 1.00

Q 052 -0.02 -0.02 -0.17 -0.05 -0.07 -0.06 0.05 -0.08 -0.14 -0.11 -0.14 -0.04 0.07 0.04 -0.19 0.12 -0.13 -0.07 -0.21 0.04 0.00 -0.03 -0.08 -0.01 -0.02 -0.24 -0.02 -0.10 -0.13 -0.01 -0.15 -0.13 0.01 0.04 -0.04 -0.13 -0.20 0.02 -0.12 -0.14 -0.04 -0.08 -0.09 -0.10 -0.09 1.00

Q 053 0.12 0.33 0.27 0.07 0.22 0.22 0.24 0.19 0.26 0.26 0.34 0.19 0.23 0.14 0.50 0.10 0.29 0.09 0.24 0.04 0.26 0.13 0.28 0.18 0.29 0.31 0.23 0.42 0.39 0.22 0.40 0.49 0.14 0.06 0.17 0.28 0.43 0.25 0.34 0.40 0.25 0.40 0.48 0.15 0.45 -0.44 1.00

Q 054 0.08 0.28 0.22 0.08 0.20 0.24 0.30 0.24 0.33 0.23 0.21 0.07 0.14 0.20 0.33 0.05 0.32 0.23 0.35 0.06 0.31 0.22 0.31 0.12 0.30 0.38 0.25 0.33 0.31 0.16 0.32 0.47 0.17 0.24 0.18 0.20 0.40 0.28 0.38 0.34 0.18 0.34 0.51 0.15 0.45 -0.35 0.71 1.00

Q 055 0.17 0.42 0.33 0.04 0.36 0.19 0.24 0.34 0.32 0.27 0.45 0.26 0.13 0.29 0.44 0.31 0.31 0.23 0.34 0.23 0.32 0.37 0.25 0.06 0.40 0.14 0.35 0.38 0.36 0.31 0.46 0.54 0.23 0.20 0.19 0.33 0.30 0.34 0.33 0.53 0.21 0.55 0.34 0.32 0.46 -0.17 0.44 0.39 1.00

Q 056 0.01 0.17 0.09 0.11 0.22 0.11 0.16 0.36 0.33 0.18 0.20 0.24 -0.09 0.07 0.25 0.20 0.20 0.10 0.04 0.16 0.19 0.19 0.03 -0.12 0.30 0.20 0.29 0.31 0.14 0.12 0.11 0.24 0.06 0.18 0.18 0.14 0.08 0.16 0.22 0.26 0.12 0.29 0.17 0.17 0.31 0.04 0.16 0.17 0.50 1.00

Q 057 -0.02 0.19 0.19 -0.02 0.11 0.03 0.33 0.33 0.30 0.30 0.09 0.30 0.19 0.32 0.24 0.28 0.21 0.25 0.35 0.32 0.12 0.26 0.18 0.21 0.18 0.11 0.23 0.26 0.08 0.30 0.17 0.40 0.35 0.33 0.38 0.14 0.30 0.30 0.17 0.27 -0.01 0.31 0.26 0.33 0.22 -0.02 0.19 0.29 0.41 0.27 1.00

Q 058 0.02 0.24 0.14 0.19 0.03 0.10 0.24 0.37 0.33 0.29 0.02 0.02 0.20 0.24 0.22 0.35 0.10 0.23 0.25 0.30 0.10 0.24 0.21 0.17 0.28 0.00 0.13 0.20 0.12 0.21 0.18 0.37 0.31 0.20 0.34 0.13 0.29 0.26 0.13 0.27 0.02 0.30 0.22 0.35 0.11 0.05 0.14 0.15 0.34 0.14 0.61 1.00

Q 059 0.07 0.22 0.42 0.04 0.18 0.00 0.25 0.14 0.15 0.27 0.31 0.25 0.35 0.29 0.37 0.28 0.31 0.32 0.24 0.19 0.21 0.42 0.29 0.36 0.27 0.25 0.39 0.22 0.26 0.24 0.31 0.38 0.33 -0.01 0.24 0.23 0.23 0.26 0.25 0.52 0.08 0.51 0.28 0.28 0.51 -0.06 0.35 0.28 0.55 0.24 0.38 0.32 1.00

Q 060 0.02 0.19 0.30 0.01 0.11 0.05 0.31 0.29 0.18 0.21 0.32 0.09 0.14 0.32 0.28 0.14 0.17 0.17 0.21 0.23 0.15 0.24 0.19 0.28 0.21 0.11 0.23 0.17 0.20 0.13 0.32 0.37 0.38 0.12 0.40 0.18 0.25 0.14 0.13 0.36 0.13 0.36 0.19 0.14 0.46 -0.18 0.31 0.28 0.46 0.19 0.39 0.40 0.55 1.00

Q 061 0.17 0.12 0.21 -0.16 0.08 0.10 0.25 0.13 0.00 0.18 0.22 0.16 0.06 0.21 0.19 0.27 0.21 0.18 0.17 0.27 0.15 0.24 0.11 0.11 0.29 0.09 0.22 -0.03 0.05 0.15 0.26 0.26 0.19 0.27 0.12 0.19 0.10 0.11 -0.03 0.31 0.21 0.33 0.14 0.37 0.18 0.15 0.17 0.08 0.30 0.17 0.26 0.38 0.47 0.52 1.00

Q 062 0.09 0.20 0.16 0.20 0.01 0.02 0.08 0.23 0.20 0.05 0.01 0.14 0.09 0.03 0.13 0.23 0.01 0.10 -0.06 0.06 -0.01 0.14 0.03 0.04 0.15 0.08 0.35 0.22 0.25 0.20 0.17 0.17 0.21 0.13 0.24 -0.04 0.25 0.24 0.24 0.04 0.03 0.17 0.23 0.20 0.13 0.09 0.08 0.12 0.18 0.31 0.29 0.20 0.29 0.09 0.13 1.00

Q 063 -0.01 0.17 0.22 0.05 0.17 0.20 0.21 0.16 0.16 0.27 0.09 0.09 0.25 0.14 0.12 0.06 0.31 0.20 0.28 0.06 0.13 0.11 0.23 0.18 0.29 0.19 0.08 0.23 0.24 0.14 0.38 0.35 0.29 0.03 0.13 0.08 0.30 0.21 0.30 0.12 -0.15 0.26 0.43 0.22 0.28 -0.26 0.38 0.51 0.24 0.09 0.32 0.21 0.24 0.22 0.15 0.19 1.00

Q 064 -0.11 0.18 0.11 0.10 0.34 0.21 0.33 0.22 0.22 0.16 0.19 0.11 0.11 0.17 0.18 0.16 0.33 0.33 0.23 0.19 0.26 0.15 0.41 0.24 0.38 0.26 0.26 0.22 0.28 0.08 0.29 0.34 0.31 0.15 0.29 0.36 0.28 0.12 0.30 0.42 -0.02 0.37 0.33 0.26 0.42 -0.17 0.31 0.32 0.34 0.27 0.33 0.37 0.39 0.36 0.28 0.08 0.48 1.00

Q 065 -0.02 0.13 0.19 0.01 0.20 0.25 0.34 0.21 0.21 0.10 0.07 0.20 0.33 0.22 0.12 0.19 0.07 0.35 0.23 -0.04 0.20 0.02 0.37 0.21 0.24 0.10 0.15 0.09 0.16 0.13 0.19 0.26 0.29 0.22 0.36 0.07 0.36 0.25 0.21 0.17 -0.07 0.21 0.33 0.18 0.19 -0.08 0.25 0.31 0.23 0.10 0.43 0.44 0.23 0.30 0.25 0.14 0.39 0.46 1.00

Q 066 -0.01 0.06 0.01 0.06 0.21 0.09 0.25 0.12 0.14 0.16 0.14 0.21 0.36 0.22 0.19 0.05 0.19 0.27 0.26 0.19 0.22 0.20 0.40 0.25 0.24 0.26 0.08 0.08 0.04 0.02 0.19 0.30 0.18 0.22 0.21 0.15 0.26 0.32 0.21 0.25 0.06 0.23 0.50 0.19 0.23 -0.05 0.25 0.42 0.23 0.20 0.38 0.29 0.21 0.30 0.19 0.09 0.46 0.37 0.56 1.00

Q 067 0.00 0.10 0.10 -0.04 0.30 0.15 0.16 0.11 0.07 0.07 0.25 0.22 0.24 0.20 0.36 0.04 0.40 0.11 0.12 0.06 0.36 0.29 0.31 0.17 0.29 0.31 0.36 0.30 0.36 0.16 0.41 0.35 0.13 0.15 0.12 0.36 0.20 0.18 0.20 0.38 0.26 0.47 0.40 0.28 0.34 -0.20 0.37 0.43 0.35 0.14 0.17 0.05 0.41 0.23 0.32 0.16 0.30 0.49 0.23 0.34 1.00

Q 068 0.16 0.28 0.15 0.03 0.01 -0.20 0.10 0.08 0.14 0.31 0.08 0.04 0.13 0.10 0.04 0.15 0.02 0.07 0.26 0.14 0.04 0.26 0.02 0.20 0.18 -0.10 0.04 0.22 0.30 0.14 0.31 0.38 0.26 0.33 0.13 0.07 0.13 0.31 0.09 0.20 0.05 0.30 0.13 0.22 0.26 0.03 0.17 0.14 0.32 0.02 0.30 0.28 0.26 0.21 0.21 0.18 0.18 -0.07 0.11 0.11 0.08 1.00

Q 069 0.11 0.24 0.24 0.06 0.19 0.17 0.29 0.08 0.21 0.23 0.19 0.15 0.16 0.29 0.16 0.30 0.23 0.29 0.38 0.30 0.22 0.23 0.34 0.25 0.29 0.18 0.17 0.32 0.38 0.24 0.43 0.41 0.30 0.29 0.12 0.22 0.35 0.40 0.40 0.23 0.10 0.49 0.55 0.32 0.59 -0.05 0.36 0.40 0.43 0.17 0.27 0.19 0.35 0.23 0.25 0.28 0.42 0.46 0.34 0.45 0.34 0.32 1.00

Q 070 0.16 0.27 0.26 0.21 0.12 0.12 0.16 0.18 0.25 0.29 0.05 0.05 0.17 0.17 0.31 0.15 0.26 0.11 0.19 0.16 0.20 0.22 0.25 0.18 0.20 0.17 0.18 0.35 0.41 0.28 0.35 0.26 0.23 0.24 0.17 0.13 0.20 0.21 0.32 0.14 0.12 0.41 0.38 0.28 0.36 0.01 0.24 0.27 0.27 0.33 0.17 0.25 0.28 0.23 0.21 0.28 0.19 0.17 0.29 0.25 0.21 0.24 0.42 1.00

Q 071 -0.06 -0.04 0.07 0.01 0.00 -0.09 0.14 -0.05 0.02 0.14 0.08 0.03 0.07 0.02 0.09 -0.02 0.00 0.11 0.07 0.04 0.10 -0.06 0.07 0.27 -0.03 0.03 -0.03 0.14 0.26 0.07 0.19 0.09 0.01 0.18 0.12 0.09 0.03 0.09 0.13 0.13 0.04 0.12 0.09 -0.02 0.23 -0.11 0.15 -0.02 -0.01 -0.12 0.03 0.06 0.18 0.26 0.07 0.01 0.01 0.08 0.01 0.03 0.11 0.27 0.28 0.30 1.00

Q 072 0.09 0.34 0.24 0.20 0.40 0.01 0.16 0.17 0.18 0.32 0.31 0.34 0.37 0.31 0.40 0.26 0.35 0.32 0.44 0.30 0.26 0.43 0.46 0.25 0.35 0.38 0.33 0.31 0.19 0.27 0.36 0.58 0.32 0.14 0.27 0.30 0.31 0.28 0.25 0.38 0.36 0.42 0.39 0.17 0.41 -0.15 0.40 0.40 0.42 0.20 0.34 0.24 0.54 0.29 0.33 0.21 0.38 0.43 0.30 0.40 0.45 0.26 0.43 0.20 0.01 1.00

Q 073 0.11 0.06 -0.01 0.03 0.12 0.03 0.02 -0.02 0.02 -0.03 0.13 0.03 0.12 0.18 0.15 -0.03 0.17 0.22 0.12 0.05 0.21 0.18 0.26 0.08 0.30 0.05 0.10 0.08 0.22 -0.01 0.17 0.20 -0.04 0.09 -0.04 0.14 0.02 0.14 -0.09 0.31 0.22 0.14 0.29 0.03 0.21 0.00 0.23 0.22 0.20 0.19 -0.03 0.01 0.11 0.13 0.14 0.09 -0.06 0.04 0.03 0.14 0.16 0.07 0.12 0.11 0.05 0.18 1.00

Q 074 -0.02 0.21 0.00 0.15 0.23 0.11 -0.12 0.13 0.10 0.03 -0.09 0.06 0.00 -0.02 0.01 0.03 0.07 0.15 0.12 0.35 0.17 0.11 0.13 0.06 0.05 0.00 -0.02 0.01 0.02 0.09 -0.01 0.13 0.03 0.36 0.11 0.20 0.01 -0.03 -0.06 0.13 0.16 0.02 -0.06 -0.08 0.11 0.03 0.03 0.09 0.08 0.12 0.05 0.06 -0.03 0.01 0.09 -0.04 -0.01 0.05 0.05 -0.12 -0.02 0.13 -0.01 0.12 0.09 0.17 0.17 1.00

Q 075 0.17 0.37 0.25 0.03 0.14 0.23 0.34 0.22 0.21 0.26 0.15 0.12 0.19 0.18 0.32 0.25 0.28 0.29 0.36 0.35 0.25 0.39 0.32 0.34 0.31 0.27 0.19 0.21 0.47 0.16 0.50 0.30 0.27 0.13 0.07 0.25 0.33 0.14 0.28 0.36 0.17 0.48 0.39 0.37 0.37 -0.18 0.32 0.28 0.35 0.07 0.24 0.26 0.35 0.30 0.37 0.26 0.29 0.40 0.29 0.23 0.40 0.28 0.41 0.42 0.23 0.31 0.16 0.11 1.00

Q 076 0.15 0.18 0.22 0.01 0.08 0.08 0.42 0.17 0.10 0.21 0.16 0.07 0.08 0.27 0.16 0.28 0.19 0.31 0.36 0.23 0.04 0.29 0.23 0.18 0.30 0.30 0.12 0.08 0.18 -0.03 0.29 0.34 0.20 0.16 0.13 0.22 0.17 0.24 0.19 0.47 0.26 0.39 0.25 0.20 0.47 -0.09 0.30 0.38 0.41 0.26 0.31 0.25 0.39 0.42 0.35 0.15 0.35 0.46 0.30 0.35 0.26 0.17 0.47 0.17 0.07 0.43 0.15 0.02 0.48 1.00

Q 077 0.20 0.29 0.21 0.07 0.28 0.07 0.36 0.18 0.18 0.25 0.22 0.09 0.17 0.36 0.37 0.16 0.34 0.28 0.35 0.33 0.29 0.39 0.33 0.27 0.34 0.26 0.21 0.21 0.36 0.20 0.43 0.38 0.25 0.21 0.04 0.31 0.29 0.18 0.17 0.39 0.22 0.54 0.43 0.30 0.50 -0.16 0.43 0.45 0.43 0.25 0.26 0.30 0.41 0.34 0.36 0.14 0.36 0.52 0.26 0.34 0.38 0.25 0.49 0.34 0.12 0.37 0.31 0.04 0.60 0.52 1.00

Q 078 -0.04 0.10 0.28 0.08 0.16 0.01 0.07 -0.03 -0.01 0.02 0.13 0.21 0.02 0.24 0.30 0.18 0.13 0.19 0.26 0.16 0.14 0.18 0.11 0.12 0.04 0.04 0.05 0.23 0.29 0.15 0.31 0.27 0.15 0.14 -0.04 0.23 0.09 0.10 0.15 0.17 0.27 0.23 0.05 0.20 0.33 -0.26 0.25 0.12 0.22 0.07 0.03 0.07 0.28 0.21 0.19 0.07 0.05 0.19 0.02 -0.05 0.16 0.12 0.29 0.27 0.30 0.25 0.24 0.15 0.29 0.29 0.38 1.00

Q 079 0.17 0.28 0.35 -0.11 0.26 0.02 0.10 0.12 0.05 0.05 0.34 0.37 0.02 0.30 0.36 0.20 0.24 0.25 0.12 0.22 0.21 0.31 0.08 0.12 0.26 0.12 0.24 0.19 0.30 0.20 0.27 0.27 0.08 0.25 0.18 0.32 0.21 0.02 0.19 0.20 0.35 0.35 0.20 0.33 0.32 -0.25 0.31 0.15 0.31 0.19 0.05 0.01 0.32 0.27 0.38 0.06 0.09 0.21 0.07 0.07 0.38 0.15 0.23 0.16 0.16 0.33 0.24 0.21 0.34 0.23 0.41 0.64 1.00

Q 080 0.22 0.47 0.23 0.09 0.29 0.15 0.34 0.28 0.29 0.28 0.20 0.24 0.19 0.37 0.49 0.30 0.30 0.39 0.45 0.27 0.40 0.49 0.39 0.22 0.51 0.27 0.35 0.39 0.36 0.10 0.40 0.50 0.35 0.20 0.18 0.19 0.46 0.28 0.29 0.35 0.23 0.58 0.48 0.23 0.50 -0.11 0.47 0.45 0.46 0.33 0.31 0.26 0.37 0.36 0.36 0.20 0.37 0.45 0.32 0.31 0.33 0.29 0.53 0.32 0.08 0.53 0.23 0.09 0.52 0.52 0.58 0.29 0.46 1.00

Q 081 0.19 0.30 0.32 0.08 0.33 0.12 0.34 0.32 0.28 0.39 0.20 0.12 0.27 0.21 0.25 0.26 0.28 0.26 0.38 0.28 0.21 0.28 0.44 0.32 0.30 0.10 0.22 0.18 0.32 0.21 0.40 0.34 0.26 0.14 0.07 0.33 0.11 0.14 0.10 0.18 0.18 0.42 0.29 0.12 0.44 -0.08 0.28 0.27 0.33 0.21 0.31 0.34 0.46 0.44 0.33 0.21 0.37 0.48 0.37 0.35 0.39 0.23 0.46 0.35 0.21 0.43 0.13 0.13 0.45 0.44 0.52 0.26 0.24 0.36 1.00

Q 082 0.32 0.30 0.24 -0.02 0.39 0.07 0.13 0.23 0.21 0.35 0.16 0.35 0.03 0.10 0.23 0.17 0.18 0.19 0.30 0.29 0.20 0.39 0.25 0.14 0.25 0.20 0.34 0.20 0.17 0.19 0.16 0.13 -0.01 0.30 0.23 0.25 0.16 0.18 0.22 0.21 0.21 0.41 0.17 0.30 0.18 -0.02 0.07 0.16 0.32 0.36 0.23 0.08 0.22 0.01 0.20 0.20 0.11 0.14 0.11 0.25 0.23 0.29 0.22 0.27 0.05 0.41 0.00 0.29 0.33 0.26 0.28 0.16 0.45 0.37 0.26 1.00

Q 083 0.22 0.39 0.31 0.17 0.19 0.16 0.29 0.34 0.33 0.30 0.33 0.38 0.24 0.19 0.34 0.44 0.27 0.28 0.31 0.33 0.30 0.38 0.30 0.10 0.42 0.21 0.23 0.21 0.12 0.15 0.23 0.44 0.03 0.25 0.31 0.34 0.27 0.18 0.28 0.40 0.21 0.44 0.24 0.29 0.35 -0.03 0.21 0.18 0.52 0.46 0.40 0.39 0.43 0.33 0.35 0.30 0.12 0.33 0.25 0.21 0.19 0.28 0.34 0.16 -0.01 0.50 0.07 0.26 0.36 0.36 0.31 0.20 0.25 0.42 0.44 0.40 1.00

Q 084 0.09 0.33 0.19 0.03 0.23 -0.03 0.20 0.08 0.13 0.38 0.25 0.24 0.30 0.27 0.34 0.18 0.36 0.23 0.37 0.23 0.33 0.33 0.19 0.27 0.45 0.28 0.07 0.34 0.20 0.17 0.30 0.46 0.13 0.02 0.28 0.29 0.21 0.36 0.33 0.39 0.02 0.46 0.39 0.31 0.48 -0.08 0.37 0.33 0.44 0.25 0.30 0.22 0.49 0.39 0.36 0.14 0.53 0.36 0.20 0.33 0.34 0.38 0.46 0.18 0.19 0.57 0.08 0.04 0.36 0.39 0.39 0.17 0.25 0.54 0.41 0.31 0.53 1.00

Q 085 0.26 0.24 0.24 -0.15 0.08 0.18 0.16 0.16 0.20 0.18 0.15 0.10 0.21 0.23 0.25 0.01 0.38 0.14 0.26 0.25 0.23 0.26 0.14 0.16 0.12 0.16 0.05 0.24 0.27 0.24 0.18 0.21 0.11 0.17 0.03 0.05 0.15 0.24 0.22 0.16 -0.06 0.37 0.20 0.24 0.31 -0.15 0.23 0.16 0.42 0.23 0.26 0.18 0.30 0.28 0.30 0.14 0.13 0.06 0.26 0.21 0.23 0.28 0.38 0.34 0.14 0.10 0.10 -0.03 0.38 0.12 0.35 0.16 0.24 0.21 0.34 0.14 0.37 0.34 1.00

Q 086 0.19 0.32 0.22 0.20 0.26 0.04 -0.05 0.09 0.14 0.22 0.14 0.29 0.14 0.14 0.31 0.26 0.10 0.11 0.18 0.32 0.27 0.30 0.23 0.18 0.26 0.07 0.24 0.32 0.31 0.08 0.27 0.23 -0.02 0.12 0.03 0.29 0.09 0.20 0.16 0.27 0.18 0.32 0.18 0.21 0.31 -0.10 0.26 0.11 0.34 0.26 0.02 0.07 0.28 0.07 0.16 0.06 -0.06 0.14 0.01 0.10 0.23 0.25 0.26 0.26 0.03 0.28 0.26 0.17 0.40 0.06 0.38 0.24 0.47 0.35 0.21 0.50 0.37 0.29 0.25 1.00

Q 087 0.12 0.33 0.26 0.16 0.32 0.17 0.25 0.23 0.27 0.23 0.42 0.37 0.40 0.23 0.47 0.32 0.36 0.31 0.21 0.22 0.42 0.29 0.41 0.27 0.42 0.44 0.29 0.34 0.25 0.17 0.25 0.41 0.07 0.23 0.27 0.44 0.30 0.25 0.40 0.47 0.26 0.40 0.39 0.28 0.49 -0.06 0.43 0.31 0.46 0.43 0.26 0.12 0.55 0.32 0.35 0.24 0.21 0.44 0.25 0.27 0.40 0.15 0.41 0.25 0.09 0.57 0.21 0.18 0.42 0.35 0.37 0.22 0.40 0.55 0.36 0.34 0.64 0.63 0.37 0.44 1.00

Q 088 0.22 0.32 0.40 0.07 0.37 0.11 0.21 0.27 0.23 0.28 0.32 0.41 0.28 0.20 0.49 0.32 0.30 0.27 0.30 0.36 0.33 0.43 0.31 0.19 0.40 0.32 0.37 0.29 0.28 0.24 0.31 0.33 0.11 0.14 0.19 0.32 0.19 0.24 0.29 0.31 0.39 0.47 0.32 0.31 0.39 -0.01 0.28 0.25 0.49 0.46 0.28 0.21 0.51 0.30 0.36 0.28 0.13 0.21 0.11 0.27 0.32 0.12 0.26 0.47 0.04 0.50 0.22 0.13 0.35 0.31 0.41 0.35 0.49 0.44 0.40 0.53 0.53 0.35 0.24 0.46 0.58 1.00

Q 089 0.12 0.30 0.23 0.21 0.27 0.25 0.32 0.18 0.18 0.27 0.31 0.38 0.28 0.34 0.32 0.28 0.36 0.35 0.38 0.33 0.42 0.36 0.38 0.28 0.37 0.29 0.17 0.25 0.34 0.18 0.36 0.50 0.18 0.18 0.03 0.35 0.26 0.32 0.31 0.44 0.19 0.47 0.47 0.15 0.45 -0.03 0.31 0.37 0.46 0.32 0.27 0.21 0.54 0.40 0.41 0.21 0.34 0.45 0.27 0.45 0.45 0.32 0.55 0.32 0.13 0.58 0.30 0.22 0.50 0.38 0.52 0.29 0.40 0.51 0.49 0.33 0.55 0.57 0.41 0.38 0.62 0.51 1.00

Q 090 -0.07 0.36 0.24 0.10 0.31 0.17 0.09 0.10 0.12 0.10 0.18 0.36 0.11 0.36 0.33 0.24 0.31 0.21 0.20 0.23 0.43 0.23 0.32 0.09 0.26 0.09 0.29 0.37 0.28 0.23 0.23 0.35 0.16 0.04 0.11 0.12 0.26 0.03 0.28 0.36 0.13 0.38 0.32 0.22 0.32 -0.16 0.30 0.19 0.48 0.26 0.24 0.13 0.35 0.23 0.12 0.00 0.06 0.48 0.22 0.20 0.36 0.10 0.35 0.22 0.08 0.34 0.19 0.12 0.29 0.18 0.29 0.27 0.37 0.39 0.17 0.17 0.19 0.27 0.21 0.36 0.33 0.21 0.39 1.00

Q 091 0.02 0.16 0.15 -0.11 0.15 0.04 0.14 0.05 0.12 -0.01 0.26 0.18 0.10 0.18 0.28 0.09 0.27 0.25 0.04 0.09 0.35 0.23 0.17 0.25 0.21 0.06 0.21 0.24 0.39 0.13 0.20 0.21 0.00 0.10 0.08 0.11 0.22 0.06 0.24 0.38 0.11 0.30 0.24 0.20 0.38 -0.07 0.31 0.19 0.33 0.14 0.05 0.02 0.30 0.14 0.04 0.05 -0.02 0.29 0.10 0.07 0.24 0.08 0.27 0.09 0.26 0.16 0.23 -0.01 0.26 0.22 0.25 0.27 0.41 0.32 0.09 0.15 0.15 0.29 0.19 0.31 0.31 0.16 0.32 0.57 1.00

Q 092 -0.01 0.09 0.14 -0.01 0.13 0.02 0.06 -0.02 0.03 0.05 -0.03 0.09 -0.06 0.08 -0.01 -0.04 0.00 0.18 0.25 0.20 0.02 0.21 0.19 0.15 0.02 0.18 0.04 0.03 0.19 0.02 0.16 0.19 0.12 0.18 -0.07 0.08 0.07 0.23 0.06 0.29 0.09 0.17 0.10 0.06 0.27 -0.14 0.17 0.27 0.18 0.03 0.06 0.09 0.13 0.15 0.10 -0.13 -0.02 0.05 0.05 0.17 0.11 0.16 0.24 0.17 0.07 0.19 0.23 0.19 0.17 0.25 0.20 0.24 0.16 0.11 0.07 0.24 0.05 0.01 0.12 0.26 -0.01 0.17 0.28 0.20 0.18 1.00

Q 093 0.10 0.20 0.07 -0.12 0.24 0.18 0.16 0.31 0.31 0.17 0.29 0.08 0.07 0.14 0.24 0.06 0.40 0.23 0.27 0.23 0.22 0.28 0.20 0.35 0.27 0.20 0.13 0.31 0.31 0.27 0.25 0.21 0.17 0.17 0.19 0.15 0.15 0.13 0.34 0.33 0.02 0.32 0.20 0.24 0.36 -0.04 0.17 0.22 0.40 0.25 0.22 0.18 0.18 0.26 0.05 -0.01 0.22 0.34 -0.11 0.00 0.16 0.18 0.15 0.16 0.11 0.20 0.00 0.09 0.24 0.29 0.23 0.03 0.11 0.15 0.18 0.26 0.18 0.33 0.19 0.13 0.26 0.15 0.15 0.30 0.41 0.11 1.00

Q 094 -0.06 -0.05 -0.02 -0.17 -0.06 0.23 0.09 0.03 0.11 -0.04 -0.07 -0.01 0.03 0.12 0.00 0.06 0.10 0.26 0.12 0.12 0.22 0.16 0.27 0.24 0.04 0.12 -0.09 -0.21 -0.04 0.04 -0.11 0.07 -0.17 0.22 0.00 0.03 -0.04 -0.06 -0.15 0.10 0.10 0.03 0.00 0.10 -0.09 0.11 -0.12 -0.01 -0.11 -0.20 -0.04 0.17 -0.04 0.03 0.23 -0.17 -0.16 -0.02 0.20 0.05 0.05 -0.02 -0.10 0.05 0.09 -0.02 0.17 0.26 0.15 0.12 -0.02 0.10 0.08 -0.06 0.00 0.07 0.08 -0.04 0.14 0.01 0.07 0.05 0.10 0.00 0.18 0.38 0.15 1.00

Q 095 0.04 0.15 0.19 -0.05 0.19 0.16 0.20 0.21 0.21 0.08 0.18 0.22 0.12 0.34 0.14 0.17 0.21 0.21 0.16 0.28 0.32 0.33 0.22 0.19 0.21 0.05 0.15 0.15 0.31 0.03 0.30 0.40 0.11 0.27 -0.13 0.27 0.05 0.07 0.08 0.35 0.20 0.32 0.24 0.20 0.30 -0.01 0.20 0.23 0.44 0.21 0.11 0.11 0.23 0.30 0.30 -0.12 0.04 0.27 0.17 0.28 0.27 0.16 0.39 0.21 0.03 0.16 0.29 0.06 0.33 0.43 0.48 0.21 0.35 0.29 0.27 0.21 0.21 0.12 0.31 0.38 0.26 0.34 0.47 0.43 0.44 0.45 0.29 0.32 1.00

Q 096 0.12 0.10 0.30 0.01 0.32 0.07 0.21 0.14 0.19 0.21 0.34 0.27 0.15 0.33 0.38 0.22 0.31 0.27 0.28 0.24 0.27 0.34 0.30 0.17 0.16 0.13 0.18 0.19 0.26 0.12 0.50 0.47 0.28 0.22 0.13 0.36 0.21 0.20 0.22 0.39 0.30 0.36 0.28 0.33 0.39 -0.20 0.39 0.35 0.56 0.18 0.35 0.18 0.39 0.37 0.32 0.01 0.15 0.26 0.22 0.26 0.31 0.26 0.42 0.15 0.16 0.36 0.15 -0.01 0.36 0.33 0.45 0.35 0.39 0.40 0.32 0.22 0.37 0.43 0.43 0.37 0.49 0.38 0.43 0.36 0.39 0.24 0.25 0.06 0.54 1.00

Q 097 0.13 0.24 0.25 -0.05 0.20 0.12 0.17 0.22 0.32 0.45 0.09 0.05 0.18 0.29 0.14 0.19 0.12 0.30 0.33 0.31 0.13 0.17 0.31 0.24 0.24 0.01 0.07 0.27 0.31 0.18 0.31 0.31 0.25 0.24 0.16 0.38 0.14 0.27 0.12 0.31 0.27 0.34 0.28 0.33 0.47 -0.04 0.29 0.20 0.32 -0.01 0.32 0.35 0.38 0.35 0.25 0.05 0.16 0.31 0.21 0.16 0.20 0.47 0.46 0.30 0.29 0.39 0.10 0.04 0.31 0.34 0.30 0.23 0.21 0.31 0.44 0.21 0.25 0.37 0.28 0.29 0.35 0.25 0.38 0.22 0.25 0.21 0.24 0.14 0.26 0.38 1.00

Q 098 0.13 0.34 0.19 -0.02 0.33 -0.04 0.12 0.17 0.23 0.32 0.23 0.10 0.14 0.13 0.22 0.04 0.15 0.27 0.33 0.21 0.15 0.22 0.24 0.20 0.31 0.16 0.32 0.31 0.34 0.09 0.36 0.34 0.22 0.19 0.25 0.41 0.27 0.32 0.17 0.30 0.15 0.43 0.31 0.19 0.64 -0.08 0.44 0.37 0.45 0.21 0.22 0.12 0.44 0.32 0.21 0.23 0.24 0.35 0.22 0.28 0.37 0.35 0.52 0.22 0.24 0.52 0.22 0.07 0.28 0.34 0.31 0.11 0.25 0.52 0.37 0.30 0.28 0.49 0.22 0.36 0.42 0.28 0.34 0.28 0.31 0.22 0.16 -0.14 0.17 0.36 0.56 1.00

Q 099 0.03 0.14 0.10 0.01 0.40 0.21 0.06 0.10 0.09 0.17 0.09 0.22 0.21 0.26 0.23 0.16 0.19 0.10 0.11 0.38 0.23 0.13 0.26 0.08 0.16 0.28 0.25 0.12 0.11 0.40 0.22 0.18 -0.03 0.28 0.12 0.31 0.15 0.08 0.05 0.30 0.27 0.23 0.23 0.32 0.23 -0.02 0.19 0.02 0.27 0.08 0.10 0.11 0.24 0.14 0.38 0.01 -0.02 0.21 0.07 0.02 0.23 0.09 0.26 0.23 0.12 0.28 0.03 0.33 0.19 0.19 0.24 0.30 0.39 0.27 0.13 0.29 0.23 0.19 0.04 0.30 0.39 0.34 0.25 0.25 0.17 0.18 0.08 0.28 0.26 0.20 0.32 0.21 1.00

Q 100 0.02 0.24 0.15 -0.10 0.15 0.11 0.19 0.11 0.18 0.12 0.40 0.05 0.16 0.10 0.11 0.07 0.14 0.26 0.21 0.06 0.19 0.14 0.32 0.27 0.15 0.09 0.14 0.16 0.27 0.14 0.25 0.34 0.25 0.16 0.11 0.24 0.30 0.08 0.19 0.38 0.21 0.26 0.21 0.19 0.41 -0.09 0.26 0.24 0.39 -0.08 0.21 0.26 0.45 0.46 0.34 -0.09 0.02 0.35 0.20 0.14 0.34 0.38 0.32 0.14 0.25 0.32 0.05 -0.04 0.24 0.20 0.17 0.19 0.18 0.17 0.19 -0.10 0.22 0.17 0.30 0.02 0.25 0.12 0.33 0.35 0.24 0.23 0.28 0.20 0.21 0.22 0.46 0.30 0.14 1.00

Q 101 0.07 0.38 0.34 0.03 0.30 0.21 0.34 0.33 0.45 0.32 0.22 0.27 0.15 0.40 0.43 0.30 0.29 0.15 0.30 0.31 0.22 0.31 0.19 0.10 0.28 0.16 0.42 0.49 0.36 0.42 0.31 0.56 0.27 0.30 0.35 0.23 0.55 0.26 0.24 0.39 0.26 0.57 0.38 0.29 0.47 -0.15 0.44 0.33 0.59 0.33 0.46 0.38 0.44 0.38 0.36 0.20 0.20 0.29 0.27 0.15 0.35 0.21 0.43 0.30 0.15 0.43 0.14 0.14 0.35 0.40 0.29 0.30 0.34 0.50 0.29 0.28 0.51 0.44 0.36 0.20 0.46 0.36 0.36 0.35 0.30 0.23 0.30 0.13 0.30 0.36 0.33 0.41 0.37 0.36 1.00

Q 102 0.01 0.07 0.19 -0.12 0.28 -0.04 0.20 0.11 0.14 0.09 0.24 0.19 0.11 0.06 0.21 0.04 0.14 0.04 0.07 0.05 0.17 0.17 0.09 0.15 0.12 0.10 0.21 0.04 -0.09 0.15 0.11 0.20 0.04 -0.09 0.27 0.07 0.23 -0.01 0.13 0.21 0.01 0.30 0.22 0.31 0.18 -0.16 0.18 0.18 0.23 0.02 0.19 0.23 0.40 0.28 0.28 -0.04 0.19 0.18 0.18 0.26 0.19 0.06 0.25 -0.03 0.01 0.30 -0.03 -0.15 0.11 0.12 0.13 0.08 0.27 0.28 0.09 0.20 0.26 0.34 0.17 0.12 0.26 0.25 0.15 0.23 0.29 0.14 0.11 0.14 0.18 0.29 0.10 0.25 0.26 0.25 0.36 1.00

Q 103 -0.03 0.06 0.10 -0.01 0.08 -0.02 -0.01 -0.01 -0.16 -0.17 -0.10 -0.03 0.08 -0.01 0.03 0.05 0.02 0.25 0.07 0.15 0.03 0.17 0.11 0.19 0.15 0.06 0.04 -0.09 -0.04 0.04 -0.04 -0.05 0.06 0.02 0.03 0.09 -0.04 0.11 -0.07 0.09 0.06 0.06 0.12 0.03 0.08 0.17 -0.01 -0.01 -0.09 -0.07 0.00 -0.11 0.08 -0.04 0.05 0.06 -0.05 -0.02 0.00 0.08 0.12 -0.01 0.00 0.00 -0.03 0.07 0.17 0.16 0.09 0.15 0.10 0.14 0.27 0.16 -0.02 0.09 -0.06 -0.03 -0.23 0.06 0.07 0.07 0.06 -0.03 0.03 0.04 -0.03 0.06 0.02 -0.04 -0.02 0.16 0.19 -0.10 0.06 -0.12 1.00

Q 104 0.01 0.26 0.18 0.02 0.27 0.07 0.29 0.40 0.35 0.18 0.31 0.20 0.14 0.27 0.27 0.06 0.18 0.31 0.35 0.21 0.26 0.40 0.30 0.18 0.28 0.24 0.33 0.31 0.42 0.08 0.28 0.29 0.24 0.25 0.17 0.18 0.20 0.08 0.07 0.33 0.23 0.44 0.23 0.13 0.48 -0.05 0.32 0.39 0.36 0.24 0.28 0.23 0.39 0.48 0.38 0.15 0.25 0.32 0.27 0.20 0.26 0.25 0.35 0.34 0.15 0.43 0.26 0.30 0.41 0.37 0.40 0.25 0.36 0.52 0.44 0.42 0.32 0.38 0.20 0.23 0.43 0.44 0.53 0.20 0.28 0.24 0.22 0.15 0.35 0.32 0.38 0.43 0.27 0.23 0.31 0.22 0.09 1.00

Q 105 -0.07 0.20 0.22 0.06 0.23 0.11 0.19 0.31 0.25 0.25 0.18 0.12 0.19 0.30 0.19 0.06 0.19 0.28 0.32 0.28 0.18 0.39 0.24 0.26 0.23 0.18 0.24 0.36 0.37 0.18 0.28 0.34 0.40 0.25 0.16 0.13 0.25 0.10 0.10 0.32 0.15 0.41 0.27 0.22 0.43 -0.08 0.23 0.34 0.32 0.13 0.31 0.29 0.43 0.52 0.43 0.17 0.31 0.28 0.21 0.14 0.30 0.37 0.39 0.30 0.25 0.39 0.21 0.32 0.42 0.39 0.32 0.32 0.30 0.43 0.43 0.29 0.29 0.43 0.26 0.08 0.33 0.26 0.46 0.19 0.18 0.22 0.23 0.20 0.32 0.26 0.43 0.35 0.28 0.39 0.45 0.21 0.11 0.72 1.00

Q 106 0.18 0.12 0.19 0.10 0.12 0.18 0.20 0.12 0.18 0.32 0.09 -0.05 0.21 0.08 0.14 0.16 0.17 0.15 0.27 0.19 0.11 0.12 0.25 0.34 0.14 0.18 0.11 0.18 0.16 -0.01 0.21 0.19 0.11 0.02 0.19 0.24 0.26 0.10 0.18 0.20 0.01 0.19 0.21 0.19 0.32 -0.24 0.27 0.27 0.18 -0.02 0.31 0.29 0.29 0.23 0.16 0.06 0.39 0.26 0.25 0.23 0.16 0.31 0.36 0.09 0.20 0.30 -0.12 0.10 0.27 0.32 0.24 0.07 0.11 0.33 0.33 0.18 0.31 0.35 0.21 0.16 0.38 0.16 0.26 0.05 0.07 0.02 0.18 -0.01 0.10 0.30 0.38 0.31 0.28 0.17 0.32 0.29 -0.06 0.25 0.30 1.00

Q 107 0.08 0.33 0.21 0.15 0.33 0.30 0.28 0.24 0.30 0.18 0.20 0.30 0.19 0.21 0.32 0.31 0.24 0.41 0.30 0.26 0.36 0.27 0.42 0.16 0.31 0.24 0.22 0.20 0.12 0.19 0.20 0.38 0.26 0.28 0.43 0.38 0.35 0.22 0.31 0.40 0.30 0.35 0.39 0.23 0.37 -0.19 0.31 0.39 0.43 0.15 0.35 0.32 0.38 0.32 0.22 0.30 0.23 0.47 0.32 0.31 0.33 0.19 0.45 0.17 0.10 0.47 0.05 0.27 0.36 0.34 0.28 0.21 0.27 0.41 0.33 0.31 0.52 0.32 0.17 0.20 0.50 0.34 0.51 0.34 0.17 0.11 0.21 0.09 0.24 0.43 0.37 0.33 0.38 0.24 0.40 0.26 0.07 0.37 0.36 0.29 1.00

Q 108 0.01 0.18 0.21 0.05 0.30 0.25 0.17 0.08 0.10 0.06 0.18 0.27 0.24 0.07 0.15 0.04 0.22 0.30 0.25 0.19 0.31 0.18 0.26 0.09 0.26 0.20 0.06 0.07 0.21 0.06 0.36 0.29 0.19 0.19 0.19 0.27 0.34 0.19 0.31 0.18 0.13 0.29 0.45 0.26 0.35 -0.19 0.37 0.38 0.26 0.06 0.13 0.07 0.26 0.13 0.18 0.22 0.44 0.44 0.44 0.39 0.34 0.17 0.54 0.27 0.24 0.27 0.03 0.14 0.32 0.21 0.34 0.15 0.20 0.29 0.27 0.22 0.27 0.30 0.25 0.15 0.31 0.21 0.37 0.23 0.15 0.10 0.06 -0.05 0.26 0.40 0.26 0.41 0.13 0.19 0.23 0.11 0.00 0.30 0.30 0.24 0.46 1.00

Q 109 0.30 0.27 0.37 0.00 0.07 0.32 0.33 0.18 0.31 0.27 0.07 0.13 0.11 0.33 0.21 0.33 0.22 0.19 0.22 0.32 0.03 0.25 0.20 0.19 0.16 0.13 0.17 0.13 0.30 0.27 0.25 0.28 0.36 0.17 0.20 0.06 0.42 0.15 0.21 0.23 0.25 0.40 0.41 0.28 0.28 -0.11 0.29 0.26 0.29 0.02 0.25 0.28 0.32 0.28 0.36 0.15 0.18 0.30 0.22 0.14 0.17 0.26 0.42 0.39 0.12 0.28 0.02 0.09 0.50 0.25 0.31 0.11 0.23 0.34 0.30 0.22 0.36 0.22 0.31 0.20 0.24 0.27 0.40 0.15 0.19 0.21 0.13 0.11 0.25 0.34 0.37 0.18 0.24 0.28 0.42 0.13 -0.06 0.38 0.35 0.27 0.41 0.39 1.00

Q 110 0.24 0.30 0.25 0.02 0.28 0.33 0.32 0.14 0.16 0.24 0.23 0.14 0.08 0.35 0.27 0.19 0.44 0.41 0.47 0.21 0.43 0.36 0.45 0.28 0.39 0.17 0.19 0.25 0.45 0.14 0.39 0.37 0.15 0.10 0.08 0.25 0.33 0.16 0.17 0.36 0.29 0.45 0.36 0.16 0.43 -0.12 0.38 0.37 0.40 0.11 0.19 0.27 0.28 0.25 0.24 0.09 0.19 0.47 0.32 0.12 0.38 0.18 0.36 0.31 0.17 0.34 0.30 0.20 0.52 0.47 0.53 0.31 0.34 0.53 0.43 0.26 0.27 0.27 0.19 0.29 0.30 0.28 0.42 0.47 0.45 0.25 0.33 0.19 0.37 0.33 0.44 0.37 0.22 0.23 0.35 -0.06 0.10 0.44 0.38 0.24 0.39 0.34 0.44 1.00

Q 111 -0.06 0.17 0.18 0.03 0.24 0.12 0.19 0.20 0.18 0.10 0.16 0.19 0.10 0.08 0.20 0.13 0.09 0.10 0.16 0.05 0.15 0.19 0.26 0.17 0.04 -0.01 0.33 0.29 0.25 0.12 0.28 0.32 0.22 0.25 0.24 0.12 0.16 0.14 0.15 0.37 0.01 0.33 0.12 0.10 0.28 -0.07 0.24 0.18 0.46 0.17 0.36 0.22 0.33 0.28 0.19 0.13 0.02 0.28 0.36 0.13 0.15 0.28 0.33 0.20 0.16 0.22 0.05 0.17 0.27 0.36 0.15 0.17 0.11 0.31 0.12 0.27 0.29 0.15 0.18 0.21 0.28 0.18 0.23 0.40 0.31 0.20 0.29 0.16 0.44 0.40 0.21 0.24 0.22 0.25 0.40 0.23 0.02 0.33 0.34 0.24 0.41 0.19 0.19 0.27 1.00

Q 112 -0.19 -0.18 -0.03 -0.03 -0.15 -0.04 0.12 -0.07 -0.04 -0.01 0.00 0.00 -0.09 0.14 -0.10 -0.04 -0.12 -0.16 -0.10 -0.08 0.03 -0.09 -0.02 -0.02 -0.18 -0.04 0.13 0.05 0.06 -0.13 -0.03 -0.08 0.04 -0.11 -0.18 -0.05 -0.05 -0.07 0.07 0.04 -0.23 0.02 -0.02 0.00 0.07 -0.09 0.07 0.06 -0.03 0.03 -0.08 -0.15 0.04 0.13 -0.01 -0.12 0.12 0.10 -0.04 0.02 0.07 -0.09 0.14 -0.15 -0.08 -0.18 0.00 -0.35 -0.03 0.01 0.15 0.06 0.01 0.01 -0.05 -0.23 -0.18 -0.11 0.10 0.09 -0.07 -0.14 0.05 0.13 0.00 0.00 -0.11 -0.26 0.15 0.02 -0.08 -0.05 -0.11 0.03 -0.15 0.07 -0.16 -0.02 -0.07 0.06 -0.14 -0.19 -0.19 -0.16 0.00 1.00

Q 113 0.06 0.19 0.07 -0.08 0.27 0.06 0.25 0.02 0.13 0.18 0.13 0.20 0.32 0.27 0.15 0.12 0.12 0.21 0.26 0.27 0.13 0.21 0.29 0.37 0.22 0.19 0.20 0.28 0.40 0.23 0.38 0.33 0.33 0.23 0.21 0.08 0.08 0.29 0.13 0.19 0.02 0.22 0.22 0.11 0.34 0.00 0.32 0.16 0.27 -0.01 0.21 0.22 0.36 0.24 0.32 -0.01 0.31 0.26 0.15 0.22 0.16 0.29 0.41 0.14 0.30 0.37 0.12 0.19 0.26 0.21 0.31 0.21 0.27 0.42 0.31 0.23 0.21 0.35 0.15 0.32 0.33 0.33 0.32 0.07 0.10 0.11 0.09 -0.04 0.16 0.25 0.22 0.35 0.35 0.15 0.34 0.21 0.06 0.25 0.30 0.33 0.18 0.22 0.19 0.14 0.21 0.00 1.00

Q 114 0.26 0.14 0.17 0.13 0.19 0.09 0.07 0.06 0.08 0.20 0.25 0.19 0.01 0.26 0.22 0.24 0.36 0.20 0.37 0.04 0.16 0.34 0.26 0.02 0.32 0.07 0.25 0.19 0.21 0.20 0.38 0.32 0.24 0.10 0.04 0.02 0.20 0.15 0.05 0.20 0.24 0.42 0.24 0.08 0.23 -0.11 0.20 0.16 0.33 0.06 0.12 0.12 0.24 0.18 0.26 0.14 0.09 0.16 0.10 0.00 0.29 0.26 0.28 0.11 0.06 0.39 0.12 0.01 0.21 0.21 0.20 0.06 0.13 0.35 0.24 0.15 0.26 0.20 0.12 0.20 0.13 0.15 0.21 0.25 0.14 0.02 0.11 -0.12 0.15 0.31 0.22 0.30 0.22 0.15 0.27 0.21 -0.14 0.23 0.22 0.17 0.33 0.22 0.30 0.37 0.24 -0.08 0.06 1.00

Q 115 0.25 0.17 0.24 0.09 0.21 0.15 0.22 0.09 0.12 0.17 0.35 0.18 0.15 0.45 0.30 0.20 0.48 0.28 0.38 0.13 0.33 0.46 0.48 0.21 0.31 0.19 0.18 0.32 0.42 0.18 0.41 0.37 0.27 0.11 -0.02 0.10 0.14 0.15 0.06 0.20 0.25 0.50 0.33 0.03 0.39 -0.09 0.35 0.30 0.41 0.11 0.13 0.16 0.37 0.31 0.24 0.05 0.17 0.23 0.12 0.13 0.34 0.16 0.43 0.27 0.16 0.38 0.34 0.05 0.35 0.37 0.43 0.23 0.29 0.51 0.39 0.12 0.23 0.25 0.28 0.28 0.28 0.32 0.44 0.37 0.34 0.14 0.17 0.07 0.42 0.38 0.30 0.34 0.18 0.21 0.36 0.16 0.09 0.41 0.34 0.17 0.35 0.15 0.30 0.58 0.26 0.06 0.30 0.62 1.00

Q 116 0.25 0.28 0.35 -0.15 0.15 0.16 0.32 0.15 0.23 0.21 0.18 0.06 0.18 0.24 0.13 0.20 0.24 0.41 0.37 0.12 0.18 0.39 0.29 0.29 0.40 0.17 0.16 0.12 0.35 0.04 0.37 0.38 0.37 0.12 0.17 0.09 0.18 0.29 0.20 0.34 0.11 0.42 0.29 0.30 0.43 -0.11 0.32 0.28 0.40 0.07 0.11 0.13 0.42 0.36 0.34 0.11 0.34 0.28 0.32 0.23 0.19 0.38 0.44 0.14 0.10 0.33 0.20 -0.04 0.45 0.50 0.33 0.18 0.27 0.54 0.34 0.18 0.34 0.47 0.32 0.17 0.36 0.24 0.33 0.11 0.35 0.19 0.16 0.17 0.28 0.43 0.40 0.46 0.09 0.35 0.35 0.28 0.07 0.40 0.37 0.26 0.28 0.38 0.44 0.36 0.19 -0.04 0.35 0.30 0.44 1.00

Q 117 0.33 0.41 0.37 -0.02 0.28 0.38 0.21 0.33 0.40 0.37 0.08 0.08 0.18 0.38 0.30 0.20 0.35 0.34 0.38 0.21 0.17 0.32 0.17 0.11 0.49 0.16 0.22 0.35 0.30 0.30 0.35 0.45 0.36 0.18 0.35 0.08 0.40 0.32 0.21 0.18 0.12 0.46 0.47 0.47 0.35 -0.10 0.34 0.36 0.43 0.20 0.34 0.37 0.29 0.31 0.32 0.19 0.43 0.33 0.35 0.25 0.22 0.27 0.43 0.39 0.02 0.31 0.09 0.04 0.32 0.32 0.33 0.07 0.19 0.53 0.26 0.27 0.32 0.39 0.33 0.11 0.30 0.26 0.23 0.16 0.12 0.07 0.31 0.10 0.24 0.30 0.43 0.38 0.21 0.22 0.51 0.24 0.01 0.35 0.41 0.28 0.36 0.49 0.53 0.40 0.22 -0.32 0.25 0.33 0.35 0.60 1.00

Q 118 0.18 0.28 0.29 -0.03 0.11 0.05 0.16 0.09 0.08 0.11 0.24 0.15 0.25 0.29 0.39 0.13 0.26 0.35 0.23 0.16 0.20 0.31 0.19 0.12 0.37 0.21 0.11 0.07 0.23 0.08 0.25 0.19 0.07 0.23 0.26 0.16 0.16 0.15 0.16 0.32 0.22 0.41 0.24 0.42 0.44 -0.05 0.29 0.23 0.32 0.19 0.04 0.26 0.36 0.26 0.34 -0.05 0.13 0.30 0.29 0.32 0.16 0.09 0.28 0.32 0.06 0.26 0.24 0.11 0.35 0.33 0.43 0.35 0.45 0.39 0.19 0.35 0.35 0.36 0.22 0.34 0.37 0.39 0.34 0.25 0.39 0.33 0.17 0.27 0.32 0.39 0.24 0.34 0.20 0.10 0.28 0.27 0.12 0.51 0.24 0.11 0.18 0.34 0.33 0.32 0.14 -0.14 0.27 -0.02 0.23 0.48 0.43 1.00

Q 119 0.27 0.24 0.48 0.00 0.31 0.29 0.24 0.15 0.15 0.15 0.23 0.31 0.31 0.33 0.37 0.36 0.37 0.37 0.23 0.14 0.20 0.29 0.43 0.19 0.37 0.26 0.32 0.24 0.32 0.16 0.35 0.28 0.23 0.11 0.27 0.28 0.21 0.26 0.29 0.42 0.09 0.52 0.37 0.41 0.44 -0.20 0.34 0.22 0.43 0.19 0.14 0.18 0.54 0.36 0.35 0.19 0.31 0.47 0.32 0.23 0.41 0.09 0.42 0.20 0.10 0.43 0.19 -0.04 0.43 0.37 0.38 0.38 0.46 0.43 0.38 0.31 0.48 0.44 0.39 0.33 0.55 0.38 0.54 0.28 0.36 0.15 0.09 0.07 0.23 0.41 0.39 0.34 0.24 0.22 0.42 0.28 0.10 0.39 0.34 0.27 0.44 0.35 0.44 0.38 0.20 0.03 0.27 0.24 0.42 0.55 0.39 0.55 1.00

Q 120 0.21 0.32 0.29 -0.03 0.06 0.08 0.23 0.02 0.04 0.21 0.24 0.17 0.09 0.16 0.26 0.25 0.13 0.17 0.31 0.08 0.24 0.20 0.23 -0.03 0.27 0.05 0.10 0.08 0.14 0.03 0.32 0.34 0.15 0.25 0.09 0.23 0.28 0.27 0.12 0.23 0.27 0.31 0.36 0.19 0.36 -0.01 0.39 0.38 0.43 0.18 0.25 0.28 0.32 0.33 0.47 0.14 0.26 0.10 0.32 0.28 0.20 0.40 0.42 0.36 0.14 0.28 0.20 0.05 0.34 0.40 0.41 0.19 0.26 0.51 0.25 0.19 0.31 0.29 0.32 0.20 0.27 0.30 0.37 0.22 0.02 0.26 -0.04 0.07 0.23 0.34 0.29 0.38 0.10 0.36 0.41 0.15 0.08 0.31 0.27 0.23 0.33 0.44 0.30 0.34 0.28 0.01 0.18 0.28 0.40 0.42 0.36 0.32 0.30 1.00

Q 121 0.03 0.27 0.10 -0.01 0.41 0.21 0.28 0.19 0.20 0.21 0.32 0.18 0.19 0.23 0.22 0.09 0.22 0.19 0.25 0.24 0.34 0.23 0.38 0.19 0.26 0.24 0.25 0.26 0.50 0.31 0.57 0.37 0.23 0.22 0.04 0.29 0.25 0.05 0.15 0.31 0.24 0.42 0.46 0.16 0.41 -0.11 0.33 0.32 0.36 0.13 -0.01 0.03 0.27 0.24 0.24 0.10 0.28 0.40 0.23 0.33 0.51 0.18 0.55 0.35 0.36 0.37 0.23 0.04 0.47 0.26 0.54 0.22 0.22 0.34 0.50 0.21 0.20 0.33 0.26 0.25 0.31 0.27 0.47 0.27 0.24 0.16 0.15 0.00 0.38 0.37 0.31 0.36 0.21 0.29 0.24 0.10 -0.09 0.36 0.40 0.12 0.23 0.54 0.26 0.40 0.15 0.02 0.38 0.27 0.34 0.31 0.26 0.25 0.32 0.25 1.00

Q 122 0.08 0.21 0.12 -0.05 0.39 0.24 0.13 0.20 0.30 0.27 0.29 0.20 -0.02 0.13 0.24 0.10 0.33 0.13 0.27 0.27 0.26 0.26 0.22 0.14 0.18 0.31 0.22 0.31 0.43 0.23 0.54 0.42 0.15 0.20 0.08 0.31 0.25 0.10 0.18 0.25 0.32 0.36 0.33 0.19 0.42 -0.15 0.25 0.31 0.33 0.24 0.12 -0.07 0.26 0.13 0.13 0.09 0.17 0.28 0.02 0.13 0.37 0.17 0.45 0.31 0.32 0.33 0.13 0.14 0.32 0.30 0.30 0.24 0.21 0.30 0.34 0.25 0.15 0.27 0.17 0.21 0.29 0.30 0.30 0.26 0.27 0.20 0.32 -0.03 0.28 0.48 0.32 0.38 0.22 0.29 0.29 0.08 -0.09 0.21 0.29 0.23 0.24 0.39 0.27 0.32 0.28 -0.09 0.23 0.28 0.27 0.30 0.27 0.07 0.12 0.23 0.57 1.00

Q 123 0.07 0.21 0.16 0.06 0.24 0.29 0.28 0.08 0.16 0.19 0.36 0.10 0.05 0.26 0.18 0.07 0.32 0.10 0.24 0.30 0.24 0.24 0.26 0.33 0.16 0.26 0.22 0.30 0.53 0.25 0.52 0.43 0.15 0.06 0.07 0.29 0.26 0.17 0.12 0.31 0.24 0.51 0.38 0.14 0.51 -0.17 0.43 0.37 0.43 0.18 0.07 0.09 0.42 0.38 0.28 0.17 0.25 0.32 0.06 0.07 0.39 0.19 0.50 0.27 0.21 0.34 0.25 0.17 0.48 0.42 0.50 0.32 0.35 0.38 0.35 0.18 0.26 0.34 0.32 0.32 0.38 0.36 0.54 0.28 0.32 0.37 0.18 0.15 0.44 0.37 0.37 0.42 0.40 0.29 0.38 0.21 -0.08 0.50 0.50 0.29 0.39 0.30 0.40 0.55 0.26 0.11 0.30 0.26 0.52 0.36 0.26 0.28 0.40 0.27 0.52 0.44 1.00

Q 124 0.07 0.25 0.01 0.01 0.33 0.15 0.21 0.13 0.21 0.26 0.13 0.26 0.19 0.20 0.30 0.14 0.38 0.31 0.44 0.32 0.39 0.40 0.37 0.22 0.18 0.24 0.26 0.21 0.21 0.28 0.32 0.39 0.12 0.29 0.17 0.21 0.29 0.23 0.02 0.31 0.05 0.43 0.34 0.22 0.22 0.06 0.24 0.32 0.27 0.05 0.45 0.32 0.30 0.03 0.28 0.12 0.38 0.35 0.17 0.25 0.30 0.29 0.32 0.13 0.16 0.47 0.04 0.30 0.31 0.18 0.36 0.08 0.08 0.39 0.21 0.40 0.33 0.43 0.07 0.19 0.29 0.23 0.41 0.21 0.18 0.15 0.33 0.18 0.09 0.27 0.24 0.31 0.28 0.08 0.38 0.19 0.07 0.38 0.33 0.34 0.40 0.29 0.23 0.38 0.30 -0.14 0.33 0.31 0.27 0.13 0.27 0.20 0.21 0.29 0.25 0.34 0.29 1.00

Q 125 0.02 0.20 -0.07 -0.05 0.20 -0.02 0.23 0.16 0.23 0.10 -0.01 0.14 0.19 0.15 0.22 0.17 0.15 0.29 0.19 0.39 0.27 0.32 0.28 0.05 0.15 0.20 0.13 0.07 0.12 0.10 0.12 0.22 0.09 0.34 0.19 0.17 0.04 0.22 -0.02 0.32 0.05 0.24 0.26 0.21 0.09 0.10 0.06 0.21 0.19 0.16 0.41 0.23 0.15 -0.02 0.21 0.18 0.12 0.24 0.11 0.31 0.26 0.18 0.24 0.14 0.03 0.26 0.11 0.20 0.28 0.26 0.34 0.09 0.17 0.35 0.21 0.25 0.34 0.23 0.17 0.25 0.31 0.27 0.24 0.09 0.08 -0.05 0.14 0.10 0.12 0.27 0.22 0.16 0.23 -0.03 0.18 0.03 0.25 0.27 0.15 0.18 0.34 0.17 0.17 0.24 0.12 -0.07 0.20 0.05 0.15 0.18 0.24 0.12 0.11 0.18 0.15 0.16 0.11 0.47 1.00

Q 126 0.14 0.12 0.07 -0.07 0.36 0.32 0.18 0.08 0.10 0.07 0.16 0.14 0.17 0.19 0.24 0.09 0.47 0.14 0.18 0.08 0.40 0.27 0.43 0.20 0.16 0.27 0.37 0.21 0.33 0.26 0.28 0.16 0.02 -0.04 0.13 0.15 0.09 -0.10 0.03 0.15 0.07 0.40 0.27 0.18 0.18 -0.05 0.17 0.19 0.06 -0.01 -0.03 0.01 0.22 0.02 0.13 -0.10 0.13 0.21 -0.06 0.05 0.32 -0.15 0.16 0.17 0.08 0.12 0.05 0.08 0.17 0.02 0.15 0.16 0.26 0.17 0.23 0.24 0.04 0.07 0.13 0.21 0.19 0.25 0.17 0.17 0.22 0.17 0.14 0.21 0.17 0.15 0.10 0.06 0.31 0.09 0.18 0.27 -0.02 0.29 0.20 0.11 0.20 0.09 0.12 0.24 0.05 0.09 0.20 0.18 0.34 0.18 0.16 0.25 0.41 0.08 0.27 0.26 0.35 0.31 0.18 1.00

Q 127 0.15 0.34 0.07 0.00 0.29 0.31 0.10 0.33 0.31 0.15 0.06 0.20 0.07 0.16 0.23 0.29 0.35 0.33 0.34 0.39 0.36 0.45 0.30 0.06 0.38 0.31 0.25 0.23 0.21 0.22 0.28 0.33 0.23 0.38 0.20 0.24 0.19 0.14 0.11 0.21 0.14 0.39 0.30 0.38 0.28 0.04 0.15 0.33 0.26 0.25 0.32 0.29 0.21 0.10 0.36 0.22 0.23 0.42 0.12 0.22 0.34 0.15 0.44 0.20 -0.03 0.37 0.09 0.34 0.36 0.26 0.33 0.19 0.29 0.47 0.32 0.42 0.39 0.32 0.15 0.26 0.37 0.30 0.44 0.15 0.13 0.15 0.22 0.16 0.18 0.26 0.25 0.25 0.30 0.06 0.32 0.08 0.17 0.42 0.38 0.18 0.49 0.32 0.31 0.30 0.21 -0.16 0.33 0.11 0.23 0.30 0.38 0.33 0.38 0.23 0.29 0.38 0.26 0.55 0.47 0.40 1.00

Q 128 0.10 0.11 0.02 0.13 0.23 0.04 0.24 0.14 0.13 0.06 0.16 0.16 0.12 0.00 0.24 0.04 0.20 0.02 0.16 0.13 0.19 0.23 0.09 0.16 0.10 0.17 0.21 0.15 -0.03 0.07 0.16 0.21 0.00 0.10 0.35 0.15 0.12 0.18 0.28 0.27 -0.04 0.24 0.21 0.34 0.10 -0.05 0.24 0.31 0.29 0.30 0.31 0.34 0.30 0.25 0.27 0.33 0.30 0.28 0.18 0.32 0.20 0.12 0.28 0.19 0.02 0.23 -0.04 0.03 0.18 0.24 0.28 0.12 0.11 0.24 0.24 0.28 0.44 0.39 0.20 0.14 0.37 0.25 0.29 0.10 0.07 0.03 0.27 0.00 0.06 0.23 0.12 0.19 0.18 0.03 0.25 0.30 -0.07 0.32 0.25 0.36 0.37 0.31 0.14 0.16 0.18 0.06 0.14 -0.01 0.01 0.14 0.27 0.27 0.27 0.23 0.11 0.07 0.17 0.38 0.25 0.15 0.38 1.00

Q 129 -0.04 0.19 0.17 0.00 0.20 0.12 0.27 0.20 0.16 0.09 0.14 0.18 0.20 0.23 0.11 0.04 0.28 0.29 0.34 0.33 0.20 0.32 0.34 0.34 0.17 0.24 0.20 0.17 0.23 0.08 0.17 0.25 0.31 0.20 0.21 0.02 0.16 0.19 0.18 0.18 0.09 0.34 0.23 0.14 0.26 -0.12 0.19 0.28 0.22 0.17 0.42 0.30 0.35 0.34 0.31 0.12 0.46 0.47 0.33 0.39 0.34 0.24 0.32 0.09 0.04 0.38 -0.05 0.12 0.39 0.37 0.36 0.10 0.27 0.36 0.41 0.37 0.28 0.40 0.31 0.18 0.41 0.27 0.43 0.28 0.12 0.21 0.27 0.15 0.25 0.27 0.34 0.20 0.08 0.20 0.22 0.20 -0.07 0.50 0.51 0.38 0.34 0.40 0.28 0.34 0.19 -0.01 0.27 0.08 0.21 0.36 0.31 0.30 0.32 0.19 0.27 0.16 0.38 0.31 0.29 0.20 0.35 0.31 1.00

Q 130 -0.08 0.20 0.16 0.01 0.27 0.12 0.27 0.29 0.28 0.27 0.35 0.12 0.19 0.32 0.35 0.00 0.31 0.20 0.32 0.14 0.34 0.22 0.34 0.17 0.17 0.15 0.23 0.17 0.15 0.38 0.18 0.47 0.12 0.17 0.30 0.18 0.36 0.15 0.09 0.38 0.21 0.32 0.20 0.01 0.30 -0.28 0.32 0.38 0.49 0.20 0.47 0.43 0.40 0.45 0.23 0.11 0.29 0.32 0.30 0.21 0.37 0.09 0.20 0.16 0.00 0.49 0.01 0.14 0.16 0.28 0.27 0.08 0.14 0.27 0.42 0.13 0.39 0.33 0.31 0.03 0.32 0.27 0.37 0.23 0.11 0.16 0.29 0.16 0.22 0.32 0.32 0.23 0.24 0.31 0.44 0.32 -0.12 0.41 0.40 0.23 0.43 0.15 0.17 0.30 0.25 -0.03 0.15 0.19 0.31 0.13 0.28 0.17 0.22 0.21 0.30 0.16 0.38 0.28 0.27 0.21 0.22 0.27 0.35 1.00

Q 131 0.01 0.31 0.23 0.03 0.18 0.29 0.34 0.14 0.19 0.23 0.18 0.23 0.18 0.35 0.25 0.14 0.27 0.27 0.32 0.24 0.29 0.23 0.41 0.18 0.16 0.26 0.32 0.31 0.43 0.21 0.38 0.41 0.13 0.12 0.02 0.30 0.44 0.21 0.22 0.34 0.28 0.40 0.43 0.16 0.46 -0.17 0.42 0.43 0.38 0.08 0.23 0.25 0.45 0.23 0.31 0.22 0.35 0.44 0.21 0.30 0.46 0.20 0.57 0.35 0.22 0.49 0.13 0.08 0.47 0.37 0.42 0.31 0.31 0.39 0.42 0.23 0.29 0.34 0.25 0.26 0.43 0.36 0.57 0.35 0.24 0.38 0.12 0.13 0.37 0.33 0.48 0.37 0.37 0.44 0.44 0.20 -0.04 0.42 0.50 0.31 0.44 0.41 0.47 0.46 0.28 0.01 0.30 0.21 0.32 0.22 0.29 0.21 0.34 0.31 0.52 0.45 0.58 0.41 0.20 0.32 0.32 0.23 0.46 0.41 1.00

Q 132 0.01 0.20 0.20 0.08 0.25 0.30 0.14 0.18 0.21 0.10 0.14 0.32 0.22 0.18 0.36 0.13 0.31 0.19 0.21 0.15 0.29 0.28 0.27 0.12 0.17 0.39 0.32 0.53 0.48 0.32 0.26 0.29 0.10 0.20 -0.02 0.06 0.21 0.31 0.32 0.32 0.15 0.47 0.42 0.14 0.30 -0.05 0.34 0.25 0.32 0.26 0.10 -0.02 0.21 -0.11 0.01 0.11 0.15 0.13 0.08 0.11 0.29 0.08 0.34 0.26 0.15 0.29 0.14 0.11 0.32 0.18 0.27 0.22 0.22 0.30 0.04 0.40 0.16 0.20 0.26 0.31 0.35 0.37 0.30 0.31 0.31 0.20 0.20 0.09 0.23 0.23 0.13 0.22 0.24 0.05 0.29 0.07 0.02 0.33 0.25 0.01 0.21 0.17 0.19 0.32 0.32 0.05 0.18 0.15 0.34 0.20 0.17 0.23 0.34 0.14 0.33 0.32 0.46 0.34 0.19 0.38 0.22 0.02 0.25 0.08 0.32 1.00

Q 133 0.13 0.25 0.17 0.01 0.18 -0.02 0.24 -0.07 -0.01 0.19 0.45 0.28 0.05 0.28 0.40 0.20 0.33 0.19 0.35 0.18 0.30 0.27 0.36 0.18 0.20 0.26 0.32 0.30 0.29 0.20 0.45 0.44 0.13 0.13 -0.03 0.28 0.22 0.12 0.24 0.41 0.44 0.43 0.24 0.15 0.46 -0.11 0.41 0.33 0.44 0.21 0.21 0.15 0.44 0.27 0.31 0.13 0.13 0.34 -0.01 0.10 0.41 0.23 0.36 0.23 0.22 0.56 0.17 -0.01 0.31 0.38 0.56 0.36 0.33 0.47 0.34 0.22 0.35 0.34 0.19 0.27 0.43 0.47 0.42 0.39 0.25 0.15 0.21 -0.03 0.25 0.44 0.31 0.39 0.29 0.34 0.25 0.20 -0.16 0.30 0.18 0.21 0.29 0.16 0.18 0.46 0.20 0.08 0.30 0.42 0.48 0.18 0.13 0.28 0.27 0.36 0.46 0.36 0.48 0.34 0.19 0.19 0.18 0.22 0.22 0.33 0.45 0.32 1.00

Q 134 0.15 0.41 0.35 0.07 0.31 0.28 0.31 0.33 0.29 0.22 0.12 0.25 0.29 0.25 0.38 0.35 0.26 0.37 0.34 0.35 0.21 0.22 0.26 0.26 0.27 0.18 0.23 0.20 0.13 0.36 0.29 0.44 0.45 0.21 0.33 0.26 0.34 0.35 0.15 0.15 0.15 0.41 0.43 0.12 0.43 0.01 0.35 0.37 0.37 0.26 0.41 0.28 0.35 0.31 0.23 0.26 0.43 0.29 0.36 0.28 0.21 0.14 0.40 0.19 -0.07 0.45 0.05 0.26 0.26 0.32 0.32 0.13 0.19 0.44 0.46 0.19 0.46 0.43 0.25 0.08 0.46 0.34 0.46 0.15 0.08 0.00 0.27 0.02 0.11 0.32 0.24 0.36 0.13 0.08 0.43 0.22 0.19 0.34 0.26 0.25 0.56 0.34 0.32 0.29 0.17 -0.16 0.24 0.18 0.29 0.31 0.39 0.23 0.37 0.38 0.20 0.14 0.29 0.37 0.29 0.11 0.35 0.23 0.27 0.37 0.22 0.17 0.19 1.00

Q 135 0.14 0.41 0.31 0.08 0.32 0.19 0.30 0.23 0.23 0.24 0.20 0.38 0.34 0.30 0.49 0.26 0.33 0.34 0.39 0.27 0.27 0.28 0.37 0.21 0.18 0.39 0.19 0.37 0.25 0.20 0.38 0.53 0.33 0.17 0.14 0.29 0.35 0.37 0.33 0.27 0.38 0.51 0.37 0.16 0.46 -0.17 0.45 0.35 0.39 0.18 0.24 0.19 0.37 0.30 0.21 0.08 0.36 0.39 0.27 0.32 0.36 0.17 0.46 0.30 0.22 0.57 0.05 0.12 0.45 0.49 0.41 0.40 0.37 0.55 0.45 0.30 0.35 0.49 0.27 0.22 0.51 0.43 0.44 0.33 0.20 0.10 0.24 0.03 0.20 0.39 0.37 0.40 0.27 0.28 0.46 0.20 0.00 0.31 0.31 0.23 0.43 0.39 0.34 0.42 0.22 -0.19 0.31 0.25 0.37 0.38 0.36 0.30 0.46 0.32 0.37 0.44 0.41 0.35 0.17 0.16 0.33 0.20 0.38 0.29 0.50 0.39 0.43 0.51 1.00

Q 136 0.00 0.17 0.24 0.19 0.24 0.05 0.19 0.05 0.12 0.15 0.16 0.26 0.28 0.26 0.31 0.41 0.21 0.35 0.27 0.15 0.29 0.22 0.42 0.11 0.26 0.17 0.12 0.23 0.10 0.08 0.18 0.32 0.23 0.10 0.05 0.23 0.18 0.07 0.31 0.32 0.18 0.31 0.21 0.15 0.34 -0.03 0.31 0.29 0.30 0.14 0.28 0.20 0.30 0.11 0.17 0.12 0.26 0.31 0.27 0.13 0.29 0.19 0.41 0.17 0.15 0.42 0.07 0.14 0.26 0.36 0.43 0.27 0.20 0.51 0.31 0.16 0.42 0.41 0.25 0.22 0.50 0.28 0.32 0.29 0.16 -0.04 0.14 0.05 0.21 0.42 0.18 0.25 0.14 0.11 0.37 0.15 0.09 0.19 0.25 0.38 0.35 0.22 0.16 0.36 0.27 0.00 0.29 0.20 0.34 0.17 0.18 0.12 0.33 0.35 0.23 0.13 0.17 0.33 0.33 0.07 0.21 0.14 0.23 0.22 0.23 0.21 0.42 0.41 0.34 1.00

Q 137 0.07 0.08 0.07 0.02 0.12 -0.09 0.16 -0.03 0.03 0.15 0.01 0.19 0.25 0.18 0.11 0.21 0.12 0.27 0.30 0.29 0.05 0.15 0.18 0.07 0.07 0.20 0.05 -0.03 -0.16 0.06 0.12 0.21 0.23 0.27 0.20 0.05 0.09 0.35 0.38 0.20 -0.03 0.20 0.28 0.19 0.11 -0.07 0.10 0.19 0.14 0.08 0.38 0.12 0.21 0.09 0.09 0.21 0.31 0.22 0.15 0.47 0.18 0.22 0.41 0.08 0.00 0.32 -0.10 -0.02 0.10 0.26 0.22 -0.01 -0.02 0.24 0.20 0.16 0.32 0.30 0.21 -0.01 0.24 0.09 0.31 0.10 -0.07 -0.02 0.05 -0.15 0.01 0.19 0.17 0.19 0.10 0.01 0.13 0.09 0.05 0.01 0.05 0.18 0.30 0.36 0.19 0.03 0.09 -0.06 0.14 0.13 0.06 0.15 0.27 0.05 0.23 0.16 0.08 0.05 -0.08 0.25 0.38 -0.07 0.22 0.25 0.24 0.15 0.13 0.00 0.18 0.33 0.26 0.34 1.00

Q 138 -0.06 0.31 0.36 0.17 0.27 0.12 0.17 0.17 0.09 0.23 0.22 0.25 0.25 0.09 0.28 0.27 0.12 0.43 0.30 0.21 0.36 0.17 0.29 0.27 0.27 0.11 0.11 0.22 0.31 0.13 0.37 0.40 0.15 0.10 0.04 0.31 0.15 0.25 0.26 0.48 0.18 0.26 0.24 0.12 0.35 -0.18 0.35 0.25 0.42 0.04 0.18 0.27 0.40 0.38 0.27 -0.03 0.22 0.27 0.18 0.08 0.27 0.31 0.23 0.24 0.35 0.39 0.21 0.29 0.40 0.28 0.32 0.36 0.36 0.34 0.36 0.19 0.34 0.35 0.14 0.37 0.39 0.36 0.46 0.37 0.31 0.27 0.29 0.20 0.30 0.32 0.36 0.31 0.26 0.41 0.31 0.14 0.17 0.35 0.39 0.21 0.31 0.17 0.15 0.45 0.26 -0.02 0.34 0.08 0.26 0.27 0.13 0.28 0.31 0.34 0.31 0.25 0.32 0.32 0.18 0.17 0.14 0.11 0.20 0.36 0.40 0.27 0.33 0.32 0.36 0.38 0.08 1.00

Q 139 0.13 0.30 0.25 0.01 0.09 0.11 0.15 0.15 0.08 0.13 0.24 0.23 0.07 0.27 0.31 0.24 0.11 0.16 0.14 0.20 0.19 0.30 0.06 0.11 0.16 0.11 0.14 0.22 0.38 0.17 0.37 0.26 0.20 0.01 -0.05 0.16 0.13 0.11 0.07 0.20 0.40 0.36 0.09 0.19 0.38 -0.04 0.27 0.00 0.38 0.15 -0.11 0.03 0.34 0.33 0.38 0.09 -0.05 0.01 -0.05 -0.17 0.15 0.21 0.15 0.24 0.20 0.23 0.14 0.16 0.43 0.27 0.37 0.48 0.55 0.38 0.24 0.23 0.24 0.25 0.22 0.38 0.31 0.34 0.35 0.25 0.34 0.19 0.13 0.06 0.27 0.31 0.23 0.20 0.26 0.14 0.31 0.00 0.09 0.32 0.29 0.03 0.18 0.12 0.27 0.36 0.18 0.00 0.32 0.22 0.32 0.33 0.13 0.45 0.34 0.33 0.33 0.27 0.44 0.11 0.01 0.11 0.17 0.00 0.18 0.11 0.30 0.28 0.35 0.19 0.40 0.13 -0.26 0.43 1.00

Q 140 -0.06 0.06 0.18 -0.07 0.31 0.03 0.07 0.06 0.02 -0.04 0.13 0.35 0.33 0.16 0.20 0.06 0.18 0.20 0.18 0.23 0.15 0.15 0.25 0.24 0.05 0.17 0.23 0.15 0.07 0.20 0.18 0.24 0.18 0.21 0.18 0.21 -0.01 0.18 0.04 0.29 0.16 0.26 0.12 0.13 0.21 0.10 0.11 0.11 0.14 -0.07 0.34 0.13 0.29 0.17 0.24 0.06 0.06 0.19 0.07 0.13 0.23 0.09 0.18 -0.10 0.01 0.33 0.12 0.15 0.13 0.19 0.21 0.13 0.19 0.14 0.22 0.27 0.25 0.27 0.14 0.17 0.38 0.33 0.25 0.16 0.12 0.16 0.27 0.21 0.29 0.34 0.30 0.24 0.30 0.05 0.20 0.33 0.14 0.38 0.30 0.27 0.33 0.20 0.07 0.09 0.32 0.01 0.27 0.11 0.14 0.13 0.12 0.23 0.27 0.07 0.11 0.14 0.23 0.42 0.29 0.25 0.28 0.30 0.44 0.24 0.20 0.24 0.22 0.31 0.28 0.27 0.19 0.19 0.07 1.00

Q 141 0.19 0.39 0.33 -0.01 0.25 0.17 0.26 0.16 0.10 0.21 0.19 0.16 0.01 0.20 0.25 0.10 0.14 0.10 0.28 0.15 0.16 0.17 0.19 0.11 0.15 -0.03 0.29 0.36 0.34 0.11 0.33 0.36 0.17 0.13 0.03 0.38 0.39 0.21 0.23 0.29 0.20 0.48 0.28 0.12 0.49 -0.15 0.42 0.38 0.46 0.12 0.17 0.16 0.34 0.30 0.25 0.18 0.26 0.30 0.23 0.14 0.40 0.29 0.45 0.20 0.17 0.34 0.18 0.14 0.41 0.37 0.37 0.31 0.39 0.50 0.33 0.26 0.20 0.27 0.30 0.22 0.27 0.19 0.42 0.40 0.29 0.24 0.10 -0.07 0.21 0.29 0.34 0.55 0.20 0.32 0.46 0.21 0.02 0.34 0.39 0.24 0.42 0.26 0.32 0.51 0.32 0.04 0.18 0.26 0.39 0.34 0.29 0.20 0.38 0.38 0.31 0.32 0.53 0.23 0.01 0.10 0.23 0.14 0.28 0.21 0.53 0.32 0.40 0.32 0.50 0.22 0.05 0.32 0.35 0.10 1.00

Q 142 0.07 0.25 0.26 -0.17 0.15 0.13 0.37 0.11 0.16 0.18 0.13 0.11 0.15 0.17 0.16 0.09 0.10 0.21 0.25 0.21 0.21 0.22 0.27 0.29 0.14 0.07 0.18 0.21 0.38 0.05 0.30 0.27 0.25 0.03 0.10 0.30 0.33 0.10 0.16 0.28 0.08 0.42 0.34 0.11 0.61 -0.09 0.32 0.28 0.26 0.03 0.15 0.17 0.47 0.43 0.29 0.07 0.27 0.38 0.29 0.29 0.28 0.24 0.51 0.28 0.32 0.30 0.19 0.03 0.44 0.32 0.46 0.35 0.33 0.43 0.49 0.16 0.25 0.33 0.33 0.25 0.26 0.28 0.45 0.25 0.31 0.21 0.07 -0.01 0.22 0.29 0.38 0.49 0.09 0.42 0.33 0.28 -0.04 0.39 0.37 0.27 0.30 0.32 0.43 0.41 0.19 0.16 0.34 0.09 0.35 0.44 0.27 0.29 0.41 0.30 0.41 0.32 0.51 0.17 0.11 0.21 0.16 0.06 0.25 0.13 0.48 0.26 0.34 0.29 0.40 0.22 0.07 0.34 0.28 0.05 0.64 1.00

Q 143 0.12 0.22 0.16 -0.14 -0.06 0.23 0.11 0.06 0.26 0.14 -0.07 0.02 0.09 0.05 0.15 0.09 0.08 0.10 0.15 -0.01 0.14 0.10 0.11 -0.01 0.13 0.12 0.12 0.12 0.21 0.10 0.15 0.15 -0.01 -0.09 0.04 -0.15 0.25 0.15 0.26 0.19 -0.08 0.19 0.35 0.16 0.15 -0.27 0.40 0.45 0.20 -0.02 -0.02 0.10 0.16 0.00 0.00 0.02 0.47 0.14 0.16 0.18 0.16 0.10 0.29 0.19 0.04 0.12 -0.03 -0.16 0.13 0.10 0.09 0.02 -0.01 0.18 0.05 -0.07 0.08 0.17 0.14 0.03 0.02 0.06 0.10 0.12 0.17 0.10 0.03 -0.07 0.02 0.11 0.08 0.14 -0.10 0.05 0.18 0.20 -0.12 0.02 0.01 0.18 0.12 0.16 0.30 0.14 0.12 0.22 0.09 0.13 0.14 0.21 0.22 0.08 0.22 0.21 0.07 0.13 0.16 0.24 0.10 0.10 0.05 0.11 -0.04 0.10 0.35 0.18 0.09 0.05 0.15 0.12 0.08 0.11 -0.02 -0.18 0.22 0.32 1.00

Page 21: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

20

The Main Differentiators between Top and Bottom Performers

1. High level of upfront project preparation – Scoping of project

– Staffing of project

– Handling of “Fuzzy Front End”

2. Focus on project team – Emphasize on Project Organization over Line Organization

– Strong project leadership

3. Keep eyes on the ball – Exploration of customer needs at each step of the project

– Close customer integration, constant feedback loops

Dr. Josef Oehmen - [email protected] 39

Where does that leave us?

• There is no silver bullet, but:

• Collection of LAI PD Best Practices

• Have to be part of enterprise transformation process

• Specific recommendations for PD Change Management and how to integrate

Dr. Josef Oehmen - [email protected] 40

Page 22: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

21

Part 2:

PD Self-Assessment Questionnaire

PD best practices

• Based on previous tools (PERFORM, Lean factors, LESAT etc.)

• Based on the literature at LAI/MIT

• Based on the literature on PD practices

Change management best practices

• Based on existing literature on OC

• Based on the experience of industry partners

Part 1:

PD Self-Assessment Process

• What is the role of PD self-assessment in organizational change?

• How to implement the PD Self-Assessment Tool as part of existing company-wide business improvement processes?

• Based on a summary of the literature on organizational change relevant to this topic

41

LAI PD Self-Assessment Tool Goal: Developing a self-assessment tool that covers not only “best PD practices” but

also „best practices“ for achieving sustainable organizational change.

Christoph Knoblinger - [email protected]

PD Self-Assessment Execution Process

42

• Integration into company-wide change management processes

• Alignment with overall business goals

• Change questions (add, delete, rephrase)

• Determine which group has to answer which questions

Define purpose (WHY) and goals (WHAT) of self-assessment

Define organizational integration of SA-tool (WHERE)

Define of roles and responsibility of self assessment (WHO)

Create and customize self-assessment tool (HOW)

Pretest and improve the self-assessment instrument

Prepare the self-assessment implementation

Execute Self-Assessment

Identify and communicate opportunities for improvement

Take Action

1

2

3

4

5

6

7

Christoph Knoblinger - [email protected]

8

• Create a sense of urgency

• Motivate people

• Introductory statement - inform employees about purpose of self-assessment

2

4

6

9

• Select facilitator 3

Page 23: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

22

PD Self-Assessment Questionnaire

PD Competencies (44 metrics) are defined as the firm’s proficiency to combine

different resources in order to successfully create

value by developing products and services.

PD Dynamic Capabilities (24 metrics) are defined as the firm’s ability to match and even

create organizational change, i. e. the capabilities to

build, extend, integrate or reconfigure core PD

competences to address rapidly changing

environments.

PD Project Results (24 metrics) results of the projects from multiple dimensions

Christoph Knoblinger - [email protected]

PD Competencies PD Dynamic Capabilities

PD Project Results

PD Competencies (44 metrics)

Internally oriented • Product Definition and Planning

Competence • Product Concept and Design

Competence • Product Validation Competence • Product Delivery Competence • Schedule Management Competence • Financial Management Competence • Portfolio Management Competence • Risk Management Competence • Project Execution Competence • PD Staff Competence • Data Management Competence • Technology Competence

Externally oriented

• Marketing Competence

• External Requirements Integration Competence

• Supplier Management and Integration Competence

• Customer Focus Compentence

Dr. Josef Oehmen - [email protected] 44

Page 24: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

23

Dynamic Capabilities and Results PD Dynamic Capabilities (24 metrics)

• Communication and diffusion channels

• Vision, strategy & plans

• Corporate culture

• People for change

• Helping, training & education

• Human resources for product development

• Openness to improvements

• Learning

PD Project Results (24 metrics)

• Project Financial and Market Results

• Project Customer Satisfaction and Loyalty Results

• Organizational Effectiveness Results

• Product Results

• Project Benchmarking

Dr. Josef Oehmen - [email protected] 45

LEAN PD PRACTICES Forthcoming Whitepaper

Dr. Josef Oehmen - [email protected] 46

Page 25: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

24

Overview: Lean PD Practices

Dr. Josef Oehmen - [email protected] 47

Process standardization

Rapid prototyping, simulation and testing

Product variety management

Supplier integration

Simultaneous engineering

Specialist career path

Strong project manager

Cross-project knowledge transfer

Responsibility-based planning and control

Workload leveling

Set-based engineering

1

2

3

4

5

6

7

8

9

10

11

Source: Hoppmann 2009

Average Implementation of Lean PD Components

Dr. Josef Oehmen - [email protected] 48

Source: Hoppmann 2009

Page 26: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

25

Benefit vs. Ease of Implementation

1. Simultaneous Engineering

2. Process Standardization

3. Product Variety Management

4. Workload Leveling

5. Cross-project Knowledge Transfer

6. Supplier Integration

7. Strong Project Manager

8. Rapid Prototyping, Testing and Simulation

9. Set-based Engineering

10. Specialist Career Path

11. Responsibility-based Planning and Control

Dr. Josef Oehmen - [email protected] 49

2.2

2.4

2.6

2.8

3

3.2

3.4

3.6

4.2 4.4 4.6 4.8 5 5.2

Ease

of

Imp

lem

enta

tio

n

Benefit of Implementation

1 2

3

4

5

6

7

8

9

10

11

Source: Hoppmann 2009

Lean PD Implementation Stages

Dr. Josef Oehmen - [email protected] 50

Source: Hoppmann 2009

Page 27: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

26

Summary

• 15 years of research • 100+ core publications • Expected total number of whitepapers: About 10 • Published today:

– Risk management – Waste – Program Management (beta)

• In pipeline – PD Self Assessment / Performance measurement – Lean PD practices

Dr. Josef Oehmen - [email protected] 51

Your feedback: Next whitepapers?

Status

• Risk management

• Waste

• Program management

• PD self assessment / performance measurement

• Lean PD practices

Candidate whitepaper

• Stakeholder needs generation

• Trade space exploration & decision making

• Product architecture & commonality management

• IT systems in PD

• HR development & intellectual capital

• Teams in PD

• Core PD process principles

Dr. Josef Oehmen - [email protected] 52

Page 28: Overview of the LAI Whitepaper Series on Lean Product ... · 4. Enterprise management 5. Program management 6. Multi-project Performance metrics and measurement 8. Product architecture

31.03.2011

27

Thank you very much!

Dr. Josef Oehmen - [email protected] 53