repositories - metadata - quality assessment (greek)

Εισαγωγή σε ένα Εργαλείο Διαχείρισης Ηλεκτρονικών

ΑποθετηρίωνΜελέτη περίπτωσης

μιας Κοινότητας Χρηστών & Διασφάλιση Ποιότητας

Μεταδεδομένων

Δομή

• Ορισμός μεταδεδομένων & ψηφιακών αποθετηρίων - ΕΓΙΝΕ

• Παρουσίαση ενός εργαλείου διαχείρισης ψηφιακών εκπαιδευτικών αποθετηρίων

• Παρουσίαση μελέτης περίπτωσης χρήσης του εργαλείου από μια κοινότητα χρηστών

• Τρόποι διασφάλισης ποιότητας των μεταδεδόμένων

Παρουσίαση ενός εργαλείου διαχείρισης ψηφιακών

εκπαιδευτικών αποθετηρίων

CONFOLIO

Στόχος του Εργαλείου

• Διευκόλυνση της πρόσβασης, αποθήκευσης και οργάνωσης ψηφιακού εκπαιδευτικού υλικού σε θέματα Βιολογικής Γεωργίας και Αγροοικολογίας

• Παροχή e-Portfolios για ειδικούς του κλάδου και για κοινότητες χρηστών

• Υποστήριξη της διαδικασίας «δημοσίευσης» υλικού στην πύλη του Organic.Edunet

http://oe.confolio.org

Κεντρική σελίδα

usernamepassword

Είσοδος στο εργαλείο

Υπάρχουσες συλλογές

Δημιουργία φακέλου

Επεξεργασία φακέλου

Επεξεργασία φακέλου

«Ανέβασμα» αρχείου

c:\biodiversity.pdf

Παράδειγμα

c:\biodiversity.pdf

text

Παράδειγμα

text

c:\biodiversity.pdf

application

Παράδειγμα

Biodiversity

c:\biodiversity.pdf

text

application

Παράδειγμα

Biodiversity is the variation of life forms within a given ecosystem, biome, or for the entire Earth. Biodiversity is often used as a measure of the health of biological systems.

c:\biodiversity.pdf

application

text

Biodiversity

Παράδειγμα

c:\biodiversity.pdf

text

application

Biodiversity

Biodiversity is the variation of life forms within a given ecosystem, biome, or for the entire Earth. Biodiversity is often used as a measure of the health of biological systems.

Παράδειγμα

Υποχρεωτικά πεδία

Τίτλος

Γλώσσα (ες)

Περιγραφή

Περιορισμοί στη χρήση

Λέξεις κλειδιά

Δομή

Κόστος

«Ανέβασμα» υπερσυνδέσμου

Παρουσίαση μελέτης περίπτωσης χρήσης του εργαλείου από μια

κοινότητα χρηστών

Εισαγωγή

• Μελετήθηκε η χρήση του εργαλείου που παρουσιάστηκε, σε δύο άξονες:– Στην «αντίληψη» των ειδικών που χρησιμοποιούν το

εργαλείο σχετικά με τη χρήση των μεταδεδομένων με ειδικά διαμορφωμένο ερωτηματολόγιο

– Στην «αλληλεπίδραση» τους με το εργαλείο σε πραγματικές συνθήκες μέσα από ένα μεγάλο χρονικό διάστημα που ακολούθησε το πρώτο πείραμα

Πείραμα πρώτο

Αξιολόγηση των στοιχείων μεταδεδομένων που

χρησιμοποιούνται στο Confolio

Γενικές πληροφορίες

• Συμμετέχοντες: 20– Ειδικοί στη Βιολογική Γεωργία,

Πληροφορική, Εκπαίδευση • Ημερομηνία: Ιανούαριος 2009• Εργαλείο: Ερωτηματολόγιο

– Κλίμακες πέντε σημείων και μια ερώτηση πολλαπλής επιλογής με τρείς πιθανές επιλογές

Ερωτηματολόγιο

Είναι αυτό το στοιχείο εύκολο στην κατανόηση;

Easy to understand

33%

42%

21%4%

0%

Very Easy Fairly Easy MediocreFairly Difficult Very Difficult

• Ευκολονόητα στοιχεία:– General.Keyword – Technical.Format – Technical.Size

• Δυσνόητα στοιχεία:– Classification.Taxon– Relation.Resource– Educational.Semantic Density

Είναι αυτό το στοιχείο εύκολο στην κατανόηση;

Είναι αυτό το στοιχείο χρήσιμο;Useful for your content

14%

41%

33%

12% 0%

Very Useful Fairly Useful Indifferent

Fairly Useless Completely Useless

• Περισσότερο χρήσιμα:– General.Identifier– General.Description – Technical.Format

• Λιγότερο χρήσιμα:– Classification.Taxon– Annotation.Entity – Annotation.Date

Είναι αυτό το στοιχείο χρήσιμο;

Είναι οι τιμές που μπορούν να πάρουν οι κατάλληλες;

Clear Values

9%

50%

37%

4%

0%

Very Clear Fairly Clear Mediocre Fairly Confusing Very Confusing

• Ξεκάθαρες και κατάλληλες τιμές:– General.Description – Rights.Cost – Format.Size

• Λιγότερο ξεκάθαρες ή/και κατάλληλες:– Classification.Taxon– Classification.Purpose – General.Identifier

Είναι οι τιμές που μπορούν να πάρουν οι κατάλληλες;

Χαρακτηρισμός των στοιχείων

Status Mandatory Recommended Optional

Pre-evaluation 19 26 12

Post-evaluation 25 21 11

% +31% -19% -8,3%

Πείραμα δεύτερο

Αξιολόγηση των δεδομένων χρήσης του εργαλείου κατά την διαδικασία

περιγραφής των ψηφιακών εκπαιδευτικών πηγών

Γενικές πληροφορίες

• Συμμετέχοντες: 30– Ειδικοί στη Βιολογική Γεωργία,

Πληροφορική, Εκπαίδευση

• Ημερομηνία: Ιαν 2009 – Μαρ 2009• Εργαλείο: Ανάλυση αρχείων χρήσης

(log files)

Αποτελέσματα

• Στοιχείο: Λέξεις κλειδιά

Πλήθος % % συνόλου

Από 1 ως 3 296 48,4 26,8

Από 4 ως 6 197 32,2 17,8

Από 7 ως 9 97 15,9 8,8

Περισσότερα από 9

21 3,5 1,9

ΣΥΝΟΛΟ 611 100% 55%

Πλήθος % % συνόλου

1 ή 2 237 52,1 21,43 ή 4 99 21,8 95 ή 6 46 10,1 4,2

Περισσότερα από 6 73 16 6,6ΣΥΝΟΛΟ 455 100% 41,2%

Αποτελέσματα

• Στοιχείο: Οντολογία

Πλήθος % % συνόλου

1 ή 2 385 68,1 34,8

3 ή 4 143 25,3 12,9

5 ή 6 37 6,6 3,3

ΣΥΝΟΛΟ 565 100% 51%

Αποτελέσματα

• Στοιχείο: Ρόλος τελικού χρήστη

Υποχρεωτικά στοιχεία

• Δεν χρησιμοποιήθηκαν όλα στον βαθμό που έπρεπε

0%10%20%30%40%50%60%70%80%90%

100%

Resources

Title

Description

Language

Copyright and OtherRestrictions

Rights Cost

Προτεινόμενα στοιχεία

• Ακόμα χειρότερη εικόνα

0,00%

10,00%

20,00%

30,00%

40,00%

50,00%

60,00%

Resources

Keyword

Learning Resource Type

Intended End User Role

Contribute Role

Contribute Date

TaxonPathTaxonId

Contribute Entity

Context

Structure

Rights Description

Typical Age Range

Συμπεράσματα

• Διαφορετική άποψη για τα στοιχεία στο χαρτί, διαφορετική στην οθόνη…

• Με την χρήση αυτή των μεταδεδομένων, πολλοί από τους τρόπους αναζήτησης στην πύλη του Organic.Edunet δεν θα δούλευαν όπως αναμενόταν

• Μεγάλη διαφορά ανάμεσα στην σχεδίαση και στην τελική υλοποίηση

Διασφάλιση Ποιότητας Μεταδεδομένων

Ανάγκη

• Ενός μηχανισμού που θα ενίσχυε την ποιότητα των μεταδεδομένων που οι εταίροι του project ανέβαζαν στο Confolio

• Ανάπτυξης μιας κοινής αντίληψης γύρω από την διαδικασία περιγραφής των ψηφιακών εκπαιδευτικών πηγών με μεταδεδομένα

Διαδικασία

• Παρουσίαση κοινών λαθών σε μεταδεδομένα και συζήτηση

• Ορισμός μιας ομάδας ειδικών που θα αξιολογούσαν τα μεταδεδομένα

• Επιλογή ενός τυχαίου δείγματος μεταδεδομένων προς αξιολόγηση

• Αξιολόγηση και αναθεώρηση μεταδεδομένων

BCE

• Τι λάθη παρατηρούμε εδώ;;;

BMUKK / BMLFUW

EULS

EULS

MOGERT

USAMVB-FA

• CERCETĂRI PRIVIND CARACTERISTICILE BIOLOGICE, MORFOLOGICE ŞI CALITATEA RECOLTEI LA SPECIA FAGOPYRUM ESCULENTUM MOENCH. ÎN CONDIŢIILE DIN PARTEA CENTRALĂ A CÂMPIEI ROMÂNE

• Δεν είναι λίγο μεγάλο για τίτλος;;;

USAMVB-FA

Κύρια προβλήματα

• Λάθος τρόπος εισαγωγής των λέξεων κλειδιά– Πως εισάγουμε πολλαπλά keywords;

• Όροι οντολογίας– Πρέπει να δίνουμε περισσότερους ανά πόρο

• Πνευματικά δικαιώματα– Χρήση των Creative commons

Αξιολόγηση μεταδεδομένων

Πληροφορίες για τους ειδικούς

• 21 ειδικοί που θα αξιολογήσουν

• 125 εγγραφές μεταδεδομένων (105 ολοκληρώθηκαν)

• 5 εγγραφές ανά ειδικό

• Τυχαία δειγματοληψία εγγραφών που όμως βασίστηκε στο μέγεθος των συλλογών με ψηφιακό υλικό που είχαν στο project

Τρόπος ανάθεσης

Αποτελέσματα

Αποτελέσματα

Με μια ματιά

• Πληρότητα 4,2• Ακρίβεια 4,3• Συνέπεια με τα επιλεχθέντα μεταδεδομένα 4,4• Αντικειμενικότητα 4,6• Καταλληλότητα 4,1• Επίπεδο γλώσσας (αγγλικά) 4,6• Συνολικό σκορ 4,2

Συμπεράσματα

• Γενικά, οι εγγραφές των μεταδεδομένων είχαν υψηλό σκορ– Από 82% μέχρι 92%

• Ωστόσο, 29 από τα 105 (30%) απορρίφθηκαν σαν «ακατάλληλα» για την πύλη του Organic.Edunet – Αναφορικά με το επίπεδο των μεταδεδομένων

Αποτέλεσμα

• Όλα τα ακατάλληλα, επέστρεψαν στους ιδιοκτήτες τους για αναθεώρηση

• Συντάχθηκε έγγραφο με «Καλές και κακές πρακτικές για μεταδεδομένα» το οποίο στάλθηκε σε όλους τους εταίρους

• Ένας άνθρωπος ασχολήθηκε με το ψάξιμο και άλλων resources με προβλήματα, τα οποία στάλθηκαν και εκείνα για αναθεώρηση

Ανακεφαλαίωση

• Όσο καλά κι αν σχεδιάσεις ένα εργαλείο, αυτό από μόνο του, δεν εγγυάται την επιτυχία

• Σπάνια οι άνθρωποι κάνουν αυτό που λένε

• Η διαδικασία περιγραφής των ψηφιακών εκπαιδευτικών πηγών με μεταδεδομένα, είναι διαδικασία εν πολλοίς χειρονακτική…

Εργαστήριο

Πρακτική εξάσκηση στην παροχή μεταδεδομένων

Για ψηφιακές εκπαιδευτικές πηγές

Οδηγίες

• Αναζητήστε μέσω Google έναν εκπαιδευτικό πόρο αναφορικά με τη Βιολογική Γεωργία– Ιστότοπο, παρουσίαση, άρθρο, έρευνα, κλπ

• Μπείτε στο http://confolio.vm.grnet.gr

• Προσπαθήστε να τον ανεβάσετε και περιγράψετε με μεταδεδομένα

Tips

• Προσπαθήστε να βρείτε ένα πόρο που να σας παρέχει αρκετές πληροφορίες ώστε να τον περιγράψετε πλήρως

• Δώστε τα μεταδεδομένα για τα οποία είστε σίγουροι 100%

• Χρόνος: 15 λεπτά

Αξιολόγηση

• Μετά από μια πρώτη επαφή με τα μεταδεδομένα, αξιολογείστε τις διαστάσεις που βλέπετε στο χαρτί μπροστά σας

• Χρόνος: 15 λεπτά

Αξιολόγηση των μεταδεδομένων

Οδηγίες

• Μπείτε στο λογαριασμό σας στο Confolio και ανοίξτε τα μεταδεδομένα που δώσατε

• Ανοίξτε και την πηγή που περιγράψατε

• Σηκωθείτε και καθίστε στον υπολογιστή του εκ δεξιών διπλανού σας

Οδηγίες

• Εξετάστε προσεκτικά την πηγή και αξιολογείστε τα μεταδεδομένα που βλέπετε στη οθόνη, χρησιμοποιώντας τη φόρμα

• Χρόνος: 15 λεπτά

Συζήτηση

Σκέψεις για την ποιότητα των μεταδεδομένων

Ερώτηση 1

• Μεταδεδομένα & Confolio: Σχόλια για……την διεπαφή χρήστη…τον αριθμό των στοιχείων που ζητούνται…τις τιμές που μπορούν να πάρουν…την ευκολία κατανόησης τους

Άλλες παρατηρήσεις;

10 λεπτά

Ερώτηση 2

• Ποιότητα μεταδεδομένων: Σχόλια για……το βαθμό που αυτή επηρεάζει την Πύλη…τρόπους βελτίωσης;…αναμενόμενη ποιότητα και πραγματική;…τη σχέση ποιότητας και Confolio

Άλλες παρατηρήσεις;

10 λεπτά