multicriteria evaluation of an engineering department (adip conference, aristotle university, 20-21...
DESCRIPTION
This conference presentation analyses and presents the data of the past 8 years evaluation survey of a Greek Engineering Department. The multi-criteria approach is based on four quality dimensions (criteria): courses, teaching, infrastructure and image of the department.TRANSCRIPT
Μια πολυκριτήρια συγκριτική αξιολόγηση ενός Τμήματος Μηχανικών
Ν. Ματσατσίνης, ΚαθηγητήςΕ. Κρασαδάκη, Υποψ. Διδάκτωρ
Ε. Γρηγορούδης, Επίκ. Καθηγητής
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
ΠΟΛΥΤΕΧΝΕΙΟ ΚΡΗΤΗΣΤΜΗΜΑ ΜΗΧΑΝΙΚΩΝ ΠΑΡΑΓΩΓΗΣ & ΔΙΟΙΚΗΣΗΣ
Το Τμήμα Μ.Π.Δ. του Πολυτεχνείου Κρήτης
Το πρώτο Τμήμα του Πολυτεχνείου Κρήτης στα Χανιά.Δέχτηκε τους πρώτους φοιτητές το 1984.Διαθέτει 1000 ενεργούς φοιτητές (προπτυχιακούς-μεταπτυχιακούς).Διαθέτει σύγχρονες εγκαταστάσεις στην Πολυτεχνειούπολη.Στελεχώνεται με 23 μέλη ΔΕΠ, διδάσκοντες ΠΔ 407, 4 ΕΕΔΙΠ, 16 άτομα διοικητικό & τεχνικό προσωπικό.Διαθέτει 3 Τομείς: Οργάνωσης & Διοίκησης, Επιστήμης Αποφάσεων και Συστημάτων Παραγωγής.Διαθέτει 12 Εργαστήρια.Διαθέτει οργανωμένο μεταπτυχιακό πρόγραμμα από το 1986.http://www.dpem.tuc.gr
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Η γενικότερη προσέγγιση της διαδικασίας της αξιολόγησης
Φοιτητές
Απόφοιτοι
Επιχειρήσεις
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Εστίαση παρούσας εργασίας:
Έρευνα Ικανοποίησης Φοιτητών τα έτη 2004 έως 2012
Στόχοι ακαδημαϊκής αξιολόγησης:• Μέτρηση ποιότητας στην
εκπαίδευση• Συνεχής αναβάθμιση &
βελτίωση εκπαιδευτικής διαδικασίας
• Ανταπόκριση στις κοινωνικές ανάγκες
Τα στάδια της διαδικασίας αξιολόγησης
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Καθορισμός των στόχων της αξιολόγησης
Συνεπής οικογένεια κριτηρίων
Καθορισμός της διαδικασίας της
αξιολόγησης
Σχεδιασμός ερωτηματολογίων
Διεξαγωγή ερευνών ικανοποίησης
Έρευνα φοιτητών
Έρευνα αποφοίτων
Έρευνα επιχειρήσεων
Αποτελέσματα Εσωτερικής
Αξιολόγησης
Συλλογή απαραίτητων στοιχείων
Επίσκεψη εξωτερικών εμπειρογνωμόνων στο
Τμήμα
Αξιολόγηση των στοιχείων από τους εμπειρογνώμονες
Καθορισμός των βαρών κριτηρίων
Εκτίμηση της διαδικασίας αξιολόγησης
Αποτελέσματα της αξιολόγησης των
εμπειρογνωμόνων
Εκτίμηση της απόδοσης Τμήματος ΜΠΔ
Προκαταρκτική Ανάλυση
Εσωτερική Αξιολόγηση
Αξιολόγηση Εμπειρογνωμόνων
Στρατηγικές βελτίωσηςΑποτελέσματα
Τα σύστημα αξιολόγησης
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Η Πολυκριτήρια Μέθοδος MUSA (γενικά)
Ολική Ικανοποίηση
Ικανοποίηση από ν-οστό κριτήριο
Ικανοποίηση από 1ο κριτήριο
Ικανοποίηση από 2ο κριτήριο
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Έρευνα με ειδικά σχεδιασμένο
ερωτηματολόγιο
Ανάλυση δεδομένων με πολυκριτήρια μέθοδο MUSA
Εξαγωγή αποτελεσμάτων & συμπερασμάτων
• Συναρτήσεις Ικανοποίησης• Βάρη κριτηρίων• Δείκτες Ικανοποίησης• Δείκτες Απαιτητικότητας• Διαγράμματα Δράσης• Διαγράμματα Βελτίωσης
ΑΠΟΤΕΛΕΣΜΑΤΑ MUSA
Χρήση κλίμακας μέτρησης της ικανοποίησηςΓια παράδειγμα:• Καθόλου ικανοποιημένος • Λίγο Ικανοποιημένος• Ούτε ικανοπ.-Ούτε δυσαρεστημένος • Αρκετά ικανοποιημένος• Απόλυτα ικανοποιημένος
Σύντομη παρουσίαση πολυκριτήριας μεθόδου MUSA
Ολική Ικανοποίηση
Ικανοποίηση από το 1ο κριτήριο
Ικανοποίηση από το 2ο κριτήριο
Ικανοποίηση από το n κριτήριο
Βασική εξίσωση ποιοτικής ανάλυσης παλινδρόμησης
n
iii XbY
1
**~
Τελική μορφή γραμμικού προγράμματος
M,...,2,1j ια γ0 ,0
k,i,m 0w ,0z
100w
100z
M,...,2,1j ια γ0zw
ύςπεριορισμο τους υπό
F[min]
jj
ikm
1a
1kik
n
1i
1
1mm
1t
1mjjm
1t
1kik
n
1
M
1jjj
i
jji
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Ανάλυση ευστάθειας
γ.π. τουριορισμοί όλοι οι πε
FF
ύςπεριορισμοτουςυπό
niwFia
kik
για
*
1
1
' ,...,2,1[max]
Σύντομη παρουσίαση αποτελεσμάτων MUSA
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Α. Συναρτήσεις Ικανοποίησης & Βάρη κριτηρίων
Β. Μ
έσος
Δεί
κτης
Απα
ιτητ
ικότ
ητας
Γ. Μέσος Δείκτης Ικανοποίησης
Δ. Διάγραμμα Δράσης
Ε. Διάγραμμα Βελτίωσης
a
m
mm ypS1
*
100
1
ai
k
ki
kii nixpS
1
* ,...,2,1100
1 για
Στοιχεία έρευνας μέτρησης της Ικανοποίησης από το Μ.Π.Δ.
Συμμετοχή ανά έτος• 2004: 257• 2005: 299• 2006: 300• 2007: 389• 2008: 300• 2009: 115• 2010: δεν πραγματοποιήθηκε• 2011: 309• 2012: 504Σύνολο: 2.473 προπτυχιακοί φοιτητές
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Μαθήματα Διδασκαλία
Εγκαταστάσεις Εικόνα στην Αγορά
Ολική Ικανοποίηση
Η ΙΚΑΝΟΠΟΙΗΣΗ ΣΤΟ Μ.Π.Δ.
Έτη Έρευνας: 2004 - 2012
Τρόποι ανάλυσης: 1. στο σύνολο δείγματος (2.473 άτομα), 2. ανάλυση ανά έτος (8 αναλύσεις)
Συναρτήσεις Ικανοποίησης-ανάλυση στο σύνολο του δείγματος (n=2.473)
Καθόλου Ικανοποιημένος
Λίγο Ικανοποιημένος
Ούτε Ικανοπ.-Ούτε Δυσαρεστ.
Αρκετά Ικανοποιημένος
Απόλυτα Ικανοποιημένος
0
20
40
60
80
100
0
75.73 80.7386.35 100
Ολική Ικανοποίηση από Μ.Π.Δ. (2004-2012)
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Καθόλου Ικ
ανοποιημέν
ος
Λίγο Ικ
ανοποιημέν
ος
Ούτε Ικα
νοπ.-Ο
ύτε Δυσαρεσ
τ.
Αρκετά
Ικανο
ποιημένος
Απόλυτα
Ικανο
ποιημένος
020406080
100
0.0
67.6 77.687.5
100.0Μαθήματα
020406080
100
0.0
73.7 81.8 89.9 100.0
Διδασκαλία
020406080
100
0.0
60.473.6 86.8 100.0
Εγκαταστάσεις
Καθόλου Ικ
ανοποιημέν
ος
Λίγο Ικ
ανοποιημέν
ος
Ούτε Ικα
νοπ.-Ο
ύτε Δυσαρεσ
τ.
Αρκετά
Ικανο
ποιημένος
Απόλυτα
Ικανο
ποιημένος
020406080
100
0
70 80 90 100
Εικόνα στην Αγορά
Χαμηλή απαιτητικότητα στις επιμέρους διαστάσεις & ολικά
Μέσο Βάρος κριτηρίων (2004-2012)-ανάλυση ανά έτος
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Σημαντικότερο κριτήριο
Μαθήματα Διδασκαλία Εγκαταστάσεις Εικόνα Μ.Π.Δ. στην αγορά
0%
5%
10%
15%
20%
25%
30%
29%
21.1%19.9%
30%
Μέση Σημαντικότητα Κριτηρίων (8 έτη)
Μέσος Δείκτης Ικανοποίησης (2004-2012)-ανάλυση ανά έτος
Μαθήματα Διδασκαλία Εγκαταστάσεις Εικόνα Μ.Π.Δ. στην αγορά0%
20%
40%
60%
80%
100%
62.10%
77.30%
52.60%
70.30%
Μέσος Δείκτης Ικανοποίησης (8 έτη)
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Η χαμηλότερη ικανοποίηση από τις εγκαταστάσεις
Η Ολική Ικανοποίηση από το Μ.Π.Δ. με δύο προσεγγίσεις
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Ανάλυση ανά έτος (2004-2012)• Μέσος Δείκτης Ολικής Ικανοποίησης: 68.5%
Ανάλυση στο σύνολο του δείγματος• Δείκτης Ολικής Ικανοποίησης: 79.72%
ΥΨΗΛΟΣ ΔΕΙΚΤΗΣ ΟΛΙΚΗΣ ΙΚΑΝΟΠΟΙΗΣΗΣ ΚΑΙ ΜΕ ΤΙΣ ΔΥΟ ΠΡΟΣΕΓΓΙΣΕΙΣ
Η εξέλιξη του Δείκτη Ολικής Ικανοποίησης ανά έτος & στο σύνολο του δείγματος
2004 2005 2006 2007 2008 2009 2011 20120%
10%20%30%40%50%60%70%80%90%
100%
68.0%80.9% 86.5%
39.4%
84.1%
62.1%
83.8%
43.2%
Εξέλιξη Δείκτη Ολικής Ικανοποίησης από το Μ.Π.Δ. (ανάλυση ανά έτος) Στην ανάλυση ανά έτος: υψηλή
ικανοποίηση τα έτη 2004-2006, 2008 & 2011.
Στην ανάλυση στο σύνολο του δείγματος: υψηλή ικανοποίηση όλα τα έτη.
Η ανάλυση ανά έτος αναδεικνύει: χαμηλή ικανοποίηση (‘απογοήτευση’) των φοιτητών τα έτη 2007, 2009 & 2012, η οποία μπορεί να αιτιολογηθεί από την αλλαγή στο θεσμικό πλαίσιο των ΑΕΙ (περίοδος καταλήψεων) ή/και τις χαμηλές προσδοκίες σε μια δύσκολη οικονομικά περίοδο.
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
2004 2005 2006 2007 2008 2009 2011 20120%
20%
40%
60%
80%
100%80.2% 81.8% 82.5% 80.9% 80.7% 80.8% 81.1% 74.00%
Εξέλιξη Δείκτη Ολικής Ικανοπ. από το Μ.Π.Δ. (ανάλυση στο σύνολο του δείγματος )
Διάγραμμα Δράσης στην ανάλυση ανά έτος
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
-1 0 1
-1
0
1
Εικόνα Μ.Π.Δ. στην αγορά
Εγκαταστάσεις
Διδασκαλία
Μαθήματα
Σχετικό Διάγραμμα Δράσης (εικόνα 8 ετών για ΜΠΔ)
ΣΗΜΑΝΤΙΚΟΤΗΤΑ ΚΡΙΤΗΡΙΩΝ
ΑΠΟΔΟΣΗ ΚΡΙΤΗΡΙΩΝ
Περιοχή ΙσχύοςΠεριοχή Μεταφοράς Πόρων
Περιοχή Ισχύουσας Κατάστασης Περιοχή Δράσης
Συμπεράσματα από Διάγραμμα Δράσης στην ανάλυση ανά έτος
Η Εικόνα του Μηχανικού Παραγωγής & Διοίκησης στην αγορά εργασίας αποτελεί το βασικό συγκριτικό πλεονέκτημα, σύμφωνα με την αντίληψη που διατυπώνουν οι φοιτητές.Η Διδασκαλία φαίνεται να ικανοποιεί αρκετά τους φοιτητές αν και συγκριτικά με τα άλλα κριτήρια δεν συγκεντρώνει υψηλή σημαντικότητα (βάρος: 21.1%).Τα Μαθήματα φαίνεται να μην συγκεντρώνουν υψηλή ικανοποίηση αν και η σημαντικότητά τους είναι υψηλή.Οι Εγκαταστάσεις δεν ικανοποιούν τους φοιτητές αλλά ως κριτήριο δεν είναι σημαντικό συγκρινόμενο με τα άλλα κριτήρια της έρευνας (βάρος: 19.9%)
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Συνοπτικά στοιχεία απασχόλησης απoφοίτων Τμήματος Μ.Π.Δ.
Έρευνα αποφοίτων 2001-2006 που πραγματοποιήθηκε το 2011 (Πηγή: http://www.career.tuc.gr)
• 88.59% εργάζονται• 95.45% πλήρης απασχόληση• 7.38% άνεργοι• 4.03% μη ενεργοί (μεταπτ., φαντάροι,
κλπ)
• 88.33% στον Ιδιωτικό τομέα• 16.67% στον Δημόσιο τομέαΑπό αυτούς στον Ιδιωτικό τομέα:• 49.09% ως μισθωτοί• 25.55% ως αυτό-απασχολούμενοι
Τομείς εργασίας:• 25% στη ‘Διοίκηση / Οργάνωση’• 17.42% στην ΄Παραγωγή’• 11.36% στις ‘Μελέτες’
Χρόνος εύρεσης 1ης εργασίας:• Λιγότερο από 3 μήνες: 36.36%• Από 3 – 6 μήνες: 15.15%• Από 6 – 12 μήνες: 18.18%
Συνέδριο: Διασφάλιση και Διοίκηση Ποιότητας στην Ανώτατη Εκπαίδευση. Διοίκηση και καλές πρακτικές. Θεσσαλονίκη, 20-21 Σεπτεμβρίου 2012
Αμοιβές:• Από 1.200 – 1.500 ευρώ: 30.30%• Από 1.500 – 2.000 ευρώ: 28.03%
Σας ευχαριστώ για την προσοχή σας
Στοιχεία επικοινωνίας:
Νικόλαος Ματσατσίνης, ΚαθηγητήςΔ/νση: Πολυτεχνείο Κρήτης, Πολυτεχνειούπολη, 73100, ΧανιάE-mail: [email protected], τηλ. 28210-37348
Ευαγγελία Κρασαδάκη, υποψήφια διδάκτωρ Δ/νση: Πολυτεχνείο Κρήτης, Πολυτεχνειούπολη, 73100, ΧανιάE-mail: [email protected], τηλ. 28210-37350
Ευάγγελος Γρηγορούδης, Επίκουρος ΚαθηγητήςΔ/νση: Πολυτεχνείο Κρήτης, Πολυτεχνειούπολη, 73100, ΧανιάE-mail: [email protected], τηλ. 28210-37346