Ένα δοκίμιο για την αξιοπιστία, τη διακυβέρνηση και την ψευδαίσθηση της αξιολόγησης
Όταν η αξιολόγηση αντικαθιστά την πραγματικότητα
Πρόσφατα δημοσιεύτηκε μια κατάταξη Δήμων για τη διαχείριση απορριμμάτων.
Όχι με βάση μετρήσεις.
Όχι με βάση λειτουργικά δεδομένα.
Αλλά με βάση γνώμες.
Ψήφοι πολιτών. Αντιλήψεις. Εντυπώσεις.
Και κάπου εκεί, χωρίς να το καταλάβουμε, έγινε μια σιωπηλή μετατόπιση:
Από την αξιολόγηση της πραγματικότητας,
στην κατασκευή μιας αφήγησης για την πραγματικότητα.
Η διαφορά είναι λεπτή. Αλλά καθοριστική.
Γιατί όταν αρχίζεις να μετράς αντίληψη αντί για δεδομένα,
δεν περιγράφεις τον κόσμο — τον ερμηνεύεις.
Και όταν ερμηνεύεις χωρίς σταθερό σημείο αναφοράς,
η ερμηνεία γίνεται εύκολα αυθαίρετη.
Το θεμελιώδες ερώτημα
Το πρόβλημα δεν είναι ότι δημοσιεύτηκε μια κατάταξη.
Το πρόβλημα είναι ότι δεν μπορούμε να απαντήσουμε με βεβαιότητα σε ένα απλό ερώτημα:
Με βάση ποια δεδομένα;
- Πόσοι τόνοι αποβλήτων παράγονται ανά Δήμο;
- Ποιο ποσοστό οδηγείται σε ανακύκλωση;
- Ποιο ποσοστό σε ταφή;
- Ποια είναι η καθαρότητα των ρευμάτων;
- Ποια είναι η πραγματική απόδοση κάθε συστήματος συλλογής;
Αν αυτά τα ερωτήματα δεν απαντώνται με ακρίβεια,
τότε οποιαδήποτε κατάταξη δεν είναι αξιολόγηση.
Είναι άποψη.
Αντίληψη ≠ Δεδομένα
Η σύγχυση ανάμεσα σε αντίληψη και δεδομένα είναι από τα πιο επικίνδυνα φαινόμενα στη δημόσια διοίκηση.
Οι πολίτες μπορούν να αξιολογήσουν:
- αν ένας δρόμος φαίνεται καθαρός
- αν υπάρχουν κάδοι
- αν η εμπειρία τους είναι θετική ή αρνητική
Αυτό είναι πολύτιμο. Αλλά είναι υποκειμενικό.
Αντίθετα, η διαχείριση αποβλήτων είναι:
- μετρήσιμη
- ποσοτικοποιήσιμη
- ελέγξιμη
Η διαφορά ανάμεσα στα δύο δεν είναι απλώς τεχνική.
Είναι οντολογική.
Η αντίληψη περιγράφει το πώς βιώνεται η πραγματικότητα.
Τα δεδομένα περιγράφουν το πώς είναι.
Και όταν συγχέουμε τα δύο,
δεν απλοποιούμε την εικόνα.
Την αλλοιώνουμε.
Το πρόβλημα δεν είναι οι Δήμοι
Η εύκολη ανάγνωση μιας τέτοιας κατάταξης είναι:
“Αυτός ο Δήμος τα πάει καλά.”
“Αυτός ο Δήμος τα πάει άσχημα.”
Αλλά αυτή η ανάγνωση είναι παραπλανητική.
Γιατί το πρόβλημα δεν είναι απαραίτητα η απόδοση των Δήμων.
Το πρόβλημα είναι ότι δεν υπάρχει ένα αξιόπιστο σύστημα για να μετρηθεί η απόδοση.
Στην πράξη:
- διαφορετικοί Δήμοι καταγράφουν δεδομένα με διαφορετικό τρόπο
- διαφορετικοί φορείς διατηρούν διαφορετικά datasets
- τα στοιχεία δεν είναι ενοποιημένα
- συχνά δεν είναι καν επαληθεύσιμα
Το αποτέλεσμα;
Δεν έχουμε ένα σύστημα.
Έχουμε αποσπασματικές αποτυπώσεις της πραγματικότητας.
Η απουσία ενός Single Source of Truth
Σε ένα σύγχρονο κράτος, τα κρίσιμα domains πρέπει να έχουν ένα κοινό χαρακτηριστικό:
Ένα ενιαίο σημείο αναφοράς δεδομένων.
Στη διαχείριση αποβλήτων, αυτό δεν υπάρχει.
Αντίθετα, έχουμε:
- Δήμους (operational δεδομένα)
- ΦΟΔΣΑ και Περιφέρειες (aggregated δεδομένα)
- Υπουργείο Περιβάλλοντος (πολιτικές και εθνικές αναφορές)
- Υπουργείο Εσωτερικών (διοικητική εποπτεία)
Κάθε επίπεδο:
- συλλέγει διαφορετικά δεδομένα
- με διαφορετικές μεθοδολογίες
- με διαφορετικό βαθμό αξιοπιστίας
Και το πιο κρίσιμο:
χωρίς κοινό μοντέλο δεδομένων
Αυτό σημαίνει ότι δεν υπάρχει πραγματική σύγκριση.
Μόνο προσέγγιση.
Όταν η διακυβέρνηση γίνεται κατακερματισμός
Υπάρχει και ένα δεύτερο επίπεδο προβλήματος.
Θεσμικό.
Η διαχείριση αποβλήτων ανήκει:
στο Υπουργείο Περιβάλλοντος και Ενέργειας
Η διοικητική εποπτεία των Δήμων ανήκει:
στο Υπουργείο Εσωτερικών
Και όμως, εμφανίζεται μια κατάταξη Δήμων για τα απορρίμματα από το δεύτερο.
Το ερώτημα είναι απλό:
Με ποια δεδομένα; Και από ποια πηγή;
Αν τα δεδομένα δεν προέρχονται από το αρμόδιο domain,
τότε η αξιολόγηση δεν είναι απλώς ελλιπής.
Είναι θεσμικά ασαφής.
Οι αντιδράσεις των Δήμων
Οι αντιδράσεις που εκφράστηκαν από Δήμους δεν είναι απλώς αμυντικές.
Είναι, σε μεγάλο βαθμό, δικαιολογημένες.
Όχι επειδή όλοι οι Δήμοι αποδίδουν το ίδιο.
Αλλά επειδή:
- δεν αξιολογήθηκαν με κοινά, μετρήσιμα κριτήρια
- δεν βασίστηκαν σε operational δεδομένα
- δεν υπήρξε διαφάνεια στη μεθοδολογία
Και κυρίως:
δεν υπήρξε κοινή συμφωνία για το τι σημαίνει “καλή απόδοση”
Χωρίς αυτό, κάθε ranking είναι αυθαίρετο.
Η ψευδαίσθηση της μέτρησης
Υπάρχει μια επικίνδυνη ψευδαίσθηση:
Ότι αν βάλουμε κάτι σε λίστα, το έχουμε μετρήσει.
Αλλά η ύπαρξη μιας κατάταξης δεν σημαίνει ότι υπάρχει και μέτρηση.
Μπορεί να σημαίνει το αντίθετο:
Ότι αντικαθιστούμε τη μέτρηση με κάτι πιο εύκολο.
Με αντίληψη.
Με εντυπώσεις.
Με αφηγήσεις.
Και αυτό είναι επικίνδυνο.
Γιατί οι αποφάσεις αρχίζουν να βασίζονται σε αυτά.
Το πραγματικό πρόβλημα της χώρας
Η Ελλάδα δεν έχει απλώς πρόβλημα διαχείρισης αποβλήτων.
Έχει πρόβλημα:
- αξιοπιστίας δεδομένων
- συνέπειας καταγραφής
- ενοποίησης πληροφοριών
- διαφάνειας στη μεθοδολογία
Με άλλα λόγια:
έχει πρόβλημα γνωστικό
Δεν είναι ότι δεν κάνουμε αρκετά.
Είναι ότι δεν ξέρουμε με ακρίβεια τι κάνουμε.
Δεν μπορείς να διαχειριστείς αυτό που δεν μετράς
Η φράση είναι γνωστή.
Αλλά στην ελληνική πραγματικότητα αποκτά άλλη διάσταση:
Δεν είναι ότι δεν μετράμε.
Είναι ότι:
δεν μετράμε τα ίδια πράγματα με τον ίδιο τρόπο
Και όταν αυτό συμβαίνει:
- δεν υπάρχει σύγκριση
- δεν υπάρχει αξιολόγηση
- δεν υπάρχει στρατηγική
Υπάρχει μόνο αποσπασματική εικόνα.
Τι σημαίνει πραγματική αξιολόγηση
Μια πραγματική αξιολόγηση στη διαχείριση αποβλήτων θα έπρεπε να βασίζεται σε:
- standardized data models
- επαληθεύσιμα datasets
- κοινά KPIs
- traceability των δεδομένων
- διαφάνεια στη μεθοδολογία
Και πάνω από όλα:
σε ένα ενιαίο σύστημα καταγραφής
Χωρίς αυτό, δεν υπάρχει αξιολόγηση.
Υπάρχει απλώς σύγκριση εντυπώσεων.
Το κρίσιμο ερώτημα
Το ερώτημα δεν είναι ποιος Δήμος είναι πρώτος ή τελευταίος.
Το ερώτημα είναι:
Ξέρουμε πραγματικά ποιος είναι;
Και αν η απάντηση είναι όχι, τότε το πρόβλημα δεν είναι οι Δήμοι.
Είναι το σύστημα.
Μια διαφορετική αφετηρία
Ίσως η συζήτηση πρέπει να ξεκινήσει από αλλού.
Όχι από rankings.
Αλλά από δεδομένα.
Όχι από συγκρίσεις.
Αλλά από ορισμούς.
Όχι από αντίληψη.
Αλλά από μετρήσιμη πραγματικότητα.
Το συμπέρασμα
Μπορούμε να συνεχίσουμε να δημοσιεύουμε λίστες.
Μπορούμε να συνεχίσουμε να συζητάμε ποιος είναι καλύτερος.
Αλλά μέχρι να απαντήσουμε στο βασικό ερώτημα:
ποια δεδομένα χρησιμοποιούμε;
η συζήτηση θα παραμένει επιφανειακή.
Και οι αποφάσεις θα βασίζονται σε κάτι που μοιάζει με πραγματικότητα —
αλλά δεν είναι.
Η σιωπηλή αλήθεια
Η πιο δύσκολη παραδοχή είναι αυτή:
Δεν έχουμε ακόμα ένα σύστημα που να μας επιτρέπει να γνωρίζουμε.
Και μέχρι να το αποκτήσουμε,
η αξιολόγηση δεν θα είναι εργαλείο βελτίωσης.
Θα είναι εργαλείο αφήγησης.
Μια πρακτική κατεύθυνση
Μέσα από την εμπειρία ανάπτυξης συστημάτων όπως το Wastecloud, το πρόβλημα δεν είναι θεωρητικό. Είναι απολύτως πρακτικό.
Η δημιουργία ενός αξιόπιστου οικοσυστήματος δεδομένων απαιτεί:
- καταγραφή σε επίπεδο συμβάντος (event-level data)
- σαφή μοντελοποίηση των ροών αποβλήτων (producer → transporter → receiver)
- μοναδικά αναγνωριστικά για κάθε κίνηση
- δυνατότητα επαλήθευσης και audit
- χρονική ακεραιότητα των δεδομένων
Δεν αρκεί να συλλέγεις δεδομένα.
Πρέπει να μπορείς να αποδείξεις ότι είναι σωστά.
Από το data collection στο data integrity
Η συζήτηση συχνά μένει στο “πώς θα μαζέψουμε δεδομένα”.
Αλλά το κρίσιμο ερώτημα είναι άλλο:
πώς διασφαλίζουμε την ακεραιότητα των δεδομένων;
Χωρίς μηχανισμούς:
- verification
- immutability
- traceability
τα δεδομένα παραμένουν αμφισβητήσιμα.
Και όταν τα δεδομένα είναι αμφισβητήσιμα,
κάθε ανάλυση πάνω σε αυτά είναι επίσης.
Από την αφήγηση στη λογοδοσία
Ένα πραγματικό σύστημα δεδομένων δεν εξυπηρετεί μόνο reporting.
Εξυπηρετεί:
- διαφάνεια
- λογοδοσία
- συγκρισιμότητα
Δημιουργεί τις συνθήκες ώστε:
- οι Δήμοι να γνωρίζουν την πραγματική τους απόδοση
- οι πολίτες να έχουν αξιόπιστη εικόνα
- το κράτος να σχεδιάζει πολιτικές βασισμένες σε πραγματικά στοιχεία
Χωρίς αυτό, η δημόσια συζήτηση παραμένει εγκλωβισμένη σε εντυπώσεις.
Η μετάβαση που δεν έχει γίνει ακόμα
Η Ελλάδα βρίσκεται σε ένα ενδιάμεσο στάδιο:
- έχει αρχίσει να συλλέγει δεδομένα
- αλλά δεν τα έχει μετατρέψει σε σύστημα
Η μετάβαση από:
κατακερματισμένα δεδομένα
σε
αξιόπιστη υποδομή δεδομένων
είναι το επόμενο κρίσιμο βήμα.
Και είναι πολύ πιο δύσκολο από όσο φαίνεται.
Δεν μπορείς να διαχειριστείς αυτό που δεν μπορείς να μετρήσεις
Αλλά ακόμη πιο σημαντικό:
Δεν μπορείς να μετρήσεις, αν δεν μπορείς να εμπιστευτείς τα δεδομένα σου.
