Ce este recoltarea rezultatelor?
Outcome Harvesting este o metodologie dezvoltată de evaluatorul și consultantul Ricardo Wilson-Grau și colegii săi. Vă poate ajuta să înțelegeți și să verificați dacă s-a produs o schimbare ca urmare a acțiunilor dvs. în situații complexe și pe termen lung în care poate fi dificil să definiți obiective specifice pentru o activitate. Acest lucru s-ar putea întâmpla, de exemplu, atunci când obiectivele sau țintele nu au fost stabilite înainte de începerea activității sau atunci când aceasta a evoluat în timp.
Recoltarea rezultatelor este o metodologie de evaluare în șase etape care poate fi utilizată în situații mai complexe „în care relațiile cauză-efect nu sunt pe deplin înțelese”. Informațiile cu privire la rezultate sunt „recoltate” și analizate în diferite etape:
Harta utilizatorilor rezultatului recoltării și identificarea părților interesate
Definiți întrebarea de cercetare
Harta rezultatelor (revizuirea documentelor, consultarea cu partenerii)
Susțineți rezultatele împreună cu partea (părțile) interesată (interesate)
Interpretați și analizați rezultatele
Utilizați constatările
Care este rezultatul recoltării?
Spre deosebire de rezultatele descriptive simple care identifică schimbări în comportament sau atitudine (de exemplu, probabilitatea crescută de a vizita o expoziție), un rezultat în Recoltarea rezultatelor este bogat și descriptiv. Acesta poate varia de la o propoziție la mai multe paragrafe lungi. Ar trebui să acopere cine, ce, de ce, unde și cum. „Cine” este deosebit de important – cei implicați trebuie să fie identificați pentru a contribui la justificare.
Când ar trebui utilizată recoltarea rezultatelor?
Recoltarea rezultatelor poate fi utilizată atunci când vă concentrați mai mult pe rezultate (eficacitate) decât pe activități (eficiență) și când, de exemplu, activitățile s-ar putea dezvolta organic în timp; când doriți să aflați mai multe despre procesele de schimbare; și atunci când relația dintre cauză și efect este complexă. Puteți afla mai multe pe site-ul BetterEvaluation.
Cum am folosit Outcome Harvesting în Europeana?
În cadrul Europeana, Curtea a considerat că recoltarea rezultatelor a fost o abordare adecvată și interesantă pentru a testa în evaluarea impactului pe care am realizat-o contribuția Europeana și a EuropeanaTechla punerea în aplicare a IIIF (un set de standarde deschise pentru furnizarea de obiecte digitale de înaltă calitate atribuite online la scară largă). „Rezultatul” descriptiv pe care l-am investigat a fost dacă adoptarea IIIF de către Muzeul Național de Artă și Design din Suedia (2016-2017) s-a datorat promovării de către Europeana a instrumentului și sprijinului din partea Europeana în punerea în aplicare.
Întrucât aceasta a fost o metodologie nouă pentru noi, am solicitat consiliere și îndrumare cu privire la metodologie din partea unui expert extern. A fost nevoie de mult timp și ne-am bazat pe participarea partenerilor implicați sau conectați la EuropeanaTech și IIIF.
Curtea a intervievat șapte părți interesate în cadrul unor interviuri cu o durată cuprinsă între o oră și 90 de minute. Interviurile s-au dovedit a fi o modalitate eficientă de a introduce persoanele intervievate în metodologie, deși, interesant, am aflat că recoltarea rezultatelor surprinde cel mai frecvent răspunsurile scrise folosind sondaje sau alte metode.
În cele din urmă, Curtea a constatat că nu a putut justifica acest rezultat în cadrul unui interviu de verificare. Aceasta înseamnă că nu am putut dovedi că muzeul a adoptat IIIF ca urmare a acțiunilor Europeana sau EuropeanaTech.
Ce am învățat?
Deși nu am putut să ne fundamentăm rezultatul, punând alte întrebări cu privire la colectarea de date privind recoltarea rezultatelor, am avut totuși alte învățăminte. De exemplu, am putea vedea într-un studiu de caz aprofundat că schimbarea digitală poate avea loc foarte lent și că poate dura mult timp pentru a adopta noi tehnologii. Curtea a identificat unii dintre numeroșii factori diferiți care influențează transformarea digitală a unei organizații.
Curtea a concluzionat că, fără activitatea comunității EuropeanaTech, pe platforma Europeana nu ar exista date IIIF. EuropeanaTech a sporit impulsul și vizibilitatea IIIF în rândul comunității patrimoniului cultural, a facilitat schimbul între Europeana, instituțiile de patrimoniu cultural și profesioniștii din domeniul tehnologiei și a oferit un spațiu pentru experimentare și progres tehnic. Cu toate acestea, ne lipsesc datele care ne-ar ajuta să investigăm dacă și în ce mod EuropeanaTech a contribuit la o creștere a numărului de date conforme cu IIIF privind Europeana. Lipsa datelor este rezultatul timpului necesar pentru a crea infrastructuri tehnice noi sau pentru a le adapta pe cele existente. Acest interval de timp și complexitatea contextului fac, de asemenea, foarte dificilă atribuirea unui factor sau a unui factor declanșator al schimbării.
Raportul nostru inițial nu a anticipat pe deplin complexitatea domeniului de cercetare. Deși metodologia de recoltare a rezultatelor nu a fost, în cele din urmă, adecvată pentru investigarea schimbărilor în acest context, aceasta ne-a ajutat să identificăm rezultate tangibile și să verificăm dacă acestea au fost obținute împreună cu părțile interesate relevante. Deși recoltarea rezultatelor este concepută pentru situații complexe, am observat că are limitări atunci când este utilizată într-un context complex, cu un ritm lent de schimbare și mulți alți factori de influență. Ar fi necesare cercetări suplimentare și o perspectivă pe termen mai lung pentru a aborda în mod adecvat întrebarea de cercetare pe care am adresat-o.
Aflați mai multe
Puteți citi mai multe detalii despre modul în care am aplicat recoltarea rezultatelor în evaluarea impactului EuropeanaTech. De asemenea, vom publica acest ghid de prezentare în următoarea versiune a etapei a doua a manualului de evaluare a impactului în cursul acestui an. Alătură-te comunității Impact pentru a fi primul care află despre asta!