Metodyka
Test wstępny i test końcowy to ustrukturyzowane kwestionariusze z kilkoma pytaniami wielokrotnego wyboru. Kwestionariusze te są zorganizowane w taki sposób, aby można je było przeprowadzić na początku i na końcu kursu online, tak aby można było ocenić profile osób biorących udział w kursie, co ma na celu sprawdzenie, czy i w jaki sposób kurs przynosi korzyści użytkownikowi. Testy są skonstruowane w oparciu o ramy teoretyczne i obejmują, w pierwszej części pytania rejestracyjne, a w drugiej części pytania wielokrotnego wyboru i pytania oceniające.

Zastosowanie
Test wstępny i test końcowy to dwa kwestionariusze oceniające umiejętności nauczycieli zaangażowanych w projekt CAVE. Pierwszy z nich ma na celu zmierzenie wiedzy i umiejętności cyfrowych nauczycieli przed szkoleniem School Telling (IO1) w celu określenia profilu przyszłych nauczycieli. Drugi został przeprowadzony po tym, jak nauczyciele wzięli udział w kursie szkoleniowym i ma na celu sprawdzenie nabytych przez nich umiejętności, ewentualne wdrożenie umiejętności cyfrowych oraz, pośrednio, ocenę skuteczności proponowanego kursu szkoleniowego.

Testy są dostępne online dla nauczycieli i zawierają 28 pytań. Kwestionariusze te zostały skonstruowane w oparciu o teoretyczne podstawy DigCompEdu (Punie, Redecker, 2017), tj. europejskiego modelu kompetencji cyfrowych dla nauczycieli, który proponuje odczyt i interpretację kompetencji cyfrowych obywateli, stosowanych w formalnym kontekście edukacyjnym. W tym sensie kwestionariusz zawiera, oprócz wstępnej części rejestracyjnej, sześć części odpowiadających sześciu obszarom modelu europejskiego: zaangażowanie zawodowe, zasoby cyfrowe, nauczanie uczenia się, ocenianie, wzmacnianie pozycji ucznia i rozwijanie umiejętności cyfrowych ucznia. Dla każdego z sześciu obszarów określono sześć poziomów kompetencji nauczycieli, które można zidentyfikować na poniższych rysunkach: Nowicjusze, Odkrywcy, Integratorzy, Eksperci, Liderzy, Pionierzy. Po zakończeniu wypełniania kwestionariusza każdy nauczyciel otrzymuje natychmiastową informację zwrotną z systemu na temat poziomów kompetencji cyfrowych według obszarów na wykresie radialnym.

Metodyka
Grupa fokusowa to jakościowa technika badawcza stosowana w naukach społecznych w celu jakościowego zbadania aspektów tematycznych, które nie zawsze są wykrywalne za pomocą ankiety próbnej, która ma charakter ilościowy. Obejmuje maksymalnie 8 osób reprezentujących cel badania, zaangażowanych w dyskusję trwającą około 1,30 godziny i prowadzoną przez moderatora. W szczególności moderatorem jest badacz, ekspert w zakresie tematów poruszanych w grupie fokusowej, który proponuje bodźce do refleksji z pisemnych materiałów i zarządza dynamiką samej dyskusji. Obok osoby moderatora bierze też w niej udział osoba obserwatora, który nigdy nie interweniuje bezpośrednio w grupie fokusowej, ale obserwuje dynamikę zachowań i relacji zaangażowanych osób. Zachowania te, w tym niewerbalne, mogą w rzeczywistości wskazywać na stanowiska i punkty widzenia, pomagając w odczytywaniu i interpretowaniu zebranych danych.
Grupa fokusowa online będzie korzystać z wideokonferencji, która zostanie odpowiednio nagrana. Nagranie fokusu jest wykorzystywane do transkrypcji odpowiedzi wszystkich uczestników w czasie przetwarzania wyników.
Celem grupy fokusowej jest stymulowanie dyskusji i wymiany opinii w małej grupie osób, reprezentatywnej dla grupy docelowej, w odniesieniu do konkretnych tematów badanych w badaniu.

Zastosowanie
W konkretnym przypadku europejskiego projektu CAVE, grupa fokusowa jest wykorzystywana jako narzędzie ewaluacyjne na koniec każdego poziomu szkolenia IO1, School Telling, którego celem jest pogłębienie funkcjonalności i skuteczności języków wizualnych i metodologii nauczania proponowanych w celu poprawy zarządzania zajęciami lekcyjnymi z uczniami. W ramach projektu CAVE grupy fokusowe są zatem wykorzystywane jako narzędzia oceny w toku i są w sumie dwa: pierwszy przeprowadzony na zakończenie podstawowego poziomu szkolenia, a drugi na zakończenie średniozaawansowanego poziomu szkolenia. W europejskim projekcie CAVE organizowane są 2 grupy fokusowe dla każdego partnera, w których uczestniczą nauczyciele z jego kraju, w sumie 10 grup fokusowych, prowadzonych głównie online.

Metodyka
Samoocena jest definiowana jako "zaangażowanie uczących się w dokonywanie osądów na temat swoich osiągnięć i wyników uczenia się" i jest cennym podejściem do wspierania uczenia się uczniów, szczególnie gdy jest stosowana w edukacji i formacji. Samoocena wspiera uczenie się i jest jedną z najważniejszych umiejętności, których uczniowie potrzebują do przyszłego rozwoju zawodowego i uczenia się przez całe życie, ponieważ rozwija ich zdolność do oceny procesu uczenia się.

Samoocena może odgrywać podwójną rolę dla ucznia, zarówno w celu oceny produktu końcowego lub wyników jego nauki (np. jego wiedzy na temat treści kursu, projektu końcowego, eseju itp.), jak i procesu uczenia się (np. jego podejścia, strategii, mocnych stron i obszarów wymagających poprawy itp.)

Zastosowanie
Testy samokształceniowe to narzędzia samooceny udostępniane docelowym odbiorcom, w naszym przypadku nauczycielom zaangażowanym w IO1, w celu zrozumienia poziomu wiedzy i kompetencji osiągniętego pod koniec świadczenia i korzystania z usługi szkoleniowej. W konkretnym przypadku projektu CAVE wykorzystano dwa kwestionariusze samooceny, dostarczone w wersji online, jeden na koniec poziomu podstawowego i jeden na koniec poziomu średniozaawansowanego kursu School Telling.

Testy samooceny mają strukturę online z pytaniami wielokrotnego wyboru: 6 pytań związanych z poziomem podstawowym i 12 pytań związanych z kursem średniozaawansowanym na tematy poruszane podczas szkolenia.

Metodyka
Celem ankiety jako narzędzia ewaluacji po zakończeniu eksperymentu dydaktycznego jest ocena poziomu zadowolenia nauczycieli z doświadczenia eksperymentalnego oraz poziomu postrzeganej skuteczności nauczania. To narzędzie ewaluacyjne jest stosowane dopiero po zakończeniu eksperymentu.

Zastosowanie
W projekcie CAVE ankieta dotycząca zadowolenia nauczycieli z eksperymentu została przeprowadzona online po zakończeniu całego eksperymentu dydaktycznego zaplanowanego w ramach realizacji IO2. Ankieta, dostępna wyłącznie online, składała się z czterech zestawów pytań wielokrotnego wyboru skierowanych do nauczycieli zaangażowanych w eksperymenty projektowe na platformie Agora. Skala ocen przyjęta w ankiecie wynosiła od 1 (najniższa ocena) do 10 (najwyższa ocena).

Metodyka
Tabele ewaluacyjne są narzędziami wykorzystywanymi do opisywania i oceny wyników ewaluatora w odniesieniu do danych wejściowych (zadań i/lub działań), które mają być wykonane w określonym kontekście. Takie narzędzie jest często wykorzystywane do oceny umiejętności, w tym umiejętności cyfrowych, osoby oceniającej na podstawie obserwacji jej zachowań medialnych.

Oprócz wydajności, taki instrument może być wykorzystany do oceny jakości procesu edukacyjnego lub instruktażowego lub jakości produktów medialnych, wytworzonych do celów edukacyjnych. Ocena ta będzie wskaźnikiem wydajności tych, którzy wyprodukowali takie produkty (np. obiekty edukacyjne).
Operacyjnie, rubryka jest reprezentowana tak, jakby była tabelą podwójnego zapisu, w której każdy wiersz odpowiada wymiarowi ocenianej kompetencji (lub deskryptorowi kompetencji), a każda kolumna jest powiązana z określonym wynikiem oceny (min=0 max=3).
Każda wartość skali oceny odpowiada zakładanej wydajności oceniającego opisanej w tej samej komórce.

Zastosowanie
W ramach europejskiego projektu CAVE rubryki ewaluacyjne zostały wykorzystane do oceny obiektów dydaktycznych wykorzystywanych przez nauczycieli podczas planowanych działań eksperymentalnych na platformie mediów społecznościowych. Kompilacja rubryk została wykonana przez nauczycieli, którzy dołączyli do eksperymentu po zakończeniu planowanych zajęć dydaktycznych.

W szczególności, pięć rubryk ewaluacyjnych zostało zaprojektowanych i skonstruowanych w oparciu o obiekty edukacyjne wykorzystywane przez nauczycieli podczas eksperymentów edukacyjnych w ramach europejskiego projektu CAVE.


Aspekty oceniane w rubrykach są następujące:
1 Jakość treści: Prawdziwość, dokładność, zrównoważona prezentacja pomysłów i adekwatność poziomów szczegółowości.

2. Dostosowanie celów nauczania: Dostosowanie celów nauczania, działań, ocen i cech uczniów.

3. Motywacja: Zdolność do motywowania i pobudzania zainteresowania lub ciekawości określonej populacji uczniów.

4. Projektowanie prezentacji: Projektowanie informacji wizualnych i dźwiękowych w celu efektywnego uczenia się i przetwarzania umysłowego.

5. Możliwość ponownego wykorzystania: Zdolność do ponownego wykorzystania tego samego obiektu edukacyjnego w różnych kursach lub kontekstach edukacyjnych bez modyfikacji.


Każda rubryka przedstawia skalę ocen od 0 (minimalna wartość jakości) do 3 (maksymalna wartość jakości). Każda komórka zawiera opis cech obiektu edukacyjnego, odpowiadający przypisanej wartości punktowej.