Umíme hodnotit efekt e-learningu v celoživotním vzdělávání lékařských knihovníků?

Umíme hodnotit efekt e-learningu v
celoživotním vzdělávání lékařských
knihovníků?
Případová studie Národní lékařské knihovny
Eva Lesenková
Adéla Jarolímková
Helena Bouzková
Národní lékařská knihovna, Praha
Jitka Feberová
Karlova univerzita v Praze, Ústav výpočetní techniky
14. 9. 2011
Knihovny současnosti 2011
Zdravotnictví ČR 2010
Zdravotnická zařízení
Státních zařízení
Počet
226
Nestátních zařízení
27 842
Zdravotnických zařízení celkem
28 068
Druhy zdravotnických zařízení (bez zař. lékár. péče a ost.)
Počet
Nemocnice (lůţková a ambulantní část)
189
Odborné léčebné ústavy
157
Lázeňské léčebny
86
Samostatná ambulantní zařízení
Zvláštní zdravotnická zařízení
Orgány ochrany veřejného zdraví
14. 9. 2011
Knihovny současnosti 2011
24 295
391
31
Zdravotnictví ČR 2010
Pracovníci
ve zdravotnictví
Počet
Lékaři
45 650
Nelékaři
107 200
V průměru připadalo v ČR na 1 lékaře 231 obyvatel
Zdroj: Ústav zdravotnických informací a statistiky České republiky. Zdravotnictví České republiky 2010 ve
statistických údajích [online]. Praha : ÚZIS ČR, Srpen 2011 [cit. 2011-08-31]. Dostupné z WWW:
<http://www.uzis.cz/publikace/zdravotnictvi-cr-2010-statistickych-udajich>. ISBN 978-80-7280-943-1.
14. 9. 2011
Knihovny současnosti 2011
Zdravotnické knihovny
v krajích ČR
(stav k 31. 12. 2010)
Celkový počet veřejných knihoven ČR
6430
Zdravotnické knihovny
Druhy zdravotnických zařízení
Knihovny
Knihovníci
Nemocnice
50
52
Ostatní lůžková zařízení
7
20
Odborné léčebné ústavy
10
10
Hygienické stanice
3
14
Střední a vyšší zdravotnické školy
17
11
LF a jiná VŠ vzdělávací zařízení
5
34
Fakultní nemocnice
4
19
Integrated libraries (faculty/hospital)
5
55
Ostatní
4
71
Celkem
107
286
14. 9. 2011
Knihovny současnosti 2011
Zdravotnické knihovny
v krajích ČR
14. 9. 2011
Knihovny současnosti 2011
Národní lékařská knihovna, Praha

specializovaná veřejná knihovna
(Knihovní zákon 257/2001 Sb.)
organizační sloţka státu MZd ČR

součást Veřejných informačních
sluţeb ve zdravotnictví (VISZ)

shromaţďuje tištěné, elektronické
zdroje a poskytuje informační
sluţby pro odbornou zdravotnickou
veřejnost, studenty zdravotnických
oborů a laiky
14. 9. 2011
Knihovny současnosti 2011
Národní lékařská knihovna, Praha
Hlavní aktivity
– získávání, zpracování, uchovávání a šíření české medicínské produkce
–
–
–
–
–
–
vytváření české národní lékařské bibliografie - Bibliografia Medica
Czechoslovaca
překlad terminologického slovníku MeSH
rozvoj a provoz integrovaného knihovnicko-informačního systému
Medvik
pečuje o historické fond Zdravotnického muzea
poskytuje specializované sluţby ze zdrojů Světové zdravotnické
organizace
organizuje a realizuje celoţivotní vzdělávání lékařských knihovníků a
poskytuje podporu pro informační gramotnost informačních
14. 9. 2011
Knihovny současnosti 2011
Celoživotní vzdělávání lékařských
knihovníků ČR

tradice celoţivotního vzdělávání lékařského knihovníka (LK)
sahá do 70. let 20. století

specializované vzdělání není podmínkou k výkonu profese LK

více neţ 30% LK nemá ţádné knihovnické vzdělání (data
z průzkumu 2009)

kurzy a semináře CŢV jsou organizovány NLK ve spolupráci s
ústředními orgány a profesními a vzdělávacími organizacemi
(MKČR/VISK 2, MZČR, SKIP, ZIVI Čls JEP, IPVZ)
14. 9. 2011
Knihovny současnosti 2011
E-kurz „ Moderní knihovnicko-informační
práce v lékařských knihovnách „

Komu byl e-kurz určen?
– lékařským knihovníkům ze sítě VISZ
– pro přehled o současném stavu informačních sluţeb a zdrojů v oblasti
medicíny
– obtíţnost kurzu –mírně pokročilí
– podmínkou účasti v kurzu - registrace knihovny v evidenci veřejných
knihoven MK ČR

Obsah
–
–
–
knihovní systém ČR, legislativa, lékařské knihovny
lékařská terminologie, terminologický slovník MeSH
specializované medicínské informační zdroje
14. 9. 2011
Knihovny současnosti 2011
Cíle kurzu
• Hlavní cíl – „obrození“ knih.-inf. sluţeb
referenční sluţby
– poskytnout a prohloubit znalosti
 v oblasti knihovnicko-informačních systémů ve zdravotnictví
 přístupů ke specializovaným informačním zdrojům
 odborné terminologie
– zvýšit vyuţívání moderních vyhledávacích technologií
– ověřit uplatnění nabytých znalostí a dovedností v praxi
co změnili účastníci ve své praxi?
14. 9. 2011
Knihovny současnosti 2011
Cílové skupiny

skupina 1 – pilotní – listopad-prosinec 2010
– 15 vybraných studentů z regionálních knihoven
– absolvovali všichni

skupina 2 – březen–duben 2011
– 39 studentů (bez rozlišení typu knihovny)
– absolvovalo 36 studentů
● rozdíly mezi skupinami
– ve skupině 1 bylo vyšší procento účastníků s odb. vzděláním –
v poměru 73 % ku 59 %
– ve skupině 1 byla delší průměrná pracovní zkušenost - 25,5 roku
ku 19,8 roku
14. 9. 2011
Knihovny současnosti 2011
Organizační zajištění
• Národní lékařská knihovna ve spolupráci s Ústavem výpočetní
techniky UK
NLK –obsahová stránka kurzu, tutorování
ÚVT –vytvoření kurzu v CMS Moodle, technická podpora
● financováno z programu VISK 2 MKČR
• autoři/tutoři
– PhDr. E. Lesenková, Ph.D.
– PhDr. H. Bouzková (Knihovny)
– Mgr. A. Jarolímková, Ph.D. (Informační zdroje)
– Doc. MUDr. M. Špála, CSc.
– MUDr. J. Feberová (Odborná terminologie)
14. 9. 2011
Knihovny současnosti 2011
Programové vybavení
• CMS (Course Management System) Moodle
• softwarový prostředek určený pro podporu prezenční i
distanční výuky prostřednictvím online kurzů dostupných
na WWW
• umoţňuje či podporuje snadnou publikaci studijních
materiálů, zakládání diskusních fór, sběr a hodnocení
elektronicky odevzdávaných úkolů, tvorbu online testů a
řadu dalších činností slouţících pro podporu výuky
14. 9. 2011
Knihovny současnosti 2011
Metody přípravy kurzu

základní princip přípravy kurzu – konstruktivismus
(Piaget, Vygotsky, Bruner)
– asimilace a adaptace zaloţená na změnách vzorců chování
studentů
– začlenit studenty do interakce, sociální komunikace , vytvoření
vlastních postupů, znalostních struktur a kritického hodnocení
získaných informací
Constructivism as a paradigm for teaching and learning [online]. Educational Broadcasting
Corporation, 2004 [cited 2011 Jun 16]. Available from:
http://www.thirteen.org/edonline/concept2class/constructivism/index.html
Christie, Alice A. Constructivism and its implications for educators [online]. Alice Christie, 2005
[cited 2011 Jun 16]. Available from:
http://alicechristie.com/edtech/learning/constructivism/index.htm
14. 9. 2011
Knihovny současnosti 2011
Metody hodnocení kurzu
podle KIRKPATRICKOVA
ČTYŘÚROVŇOVÉHO MODELU
HODNOCENÍ
KIRKPATRICK, J.; KIRKPATRICK, W. K. Kirckpatrikův
čtyřúrovňový model: nový pohled po 50 letech 1959 – 2009.
Dostupné na:
(http://www.develor.cz/develorcz/develorcz_files/File/kirkpatricko
vy4urovne-novypohledpo50%20letech2.pdf).
14. 9. 2011
Knihovny současnosti 2011
Nástroje hodnocení a posuzování

úroveň 1: Reakce
– hodnotící dotazník na konci kurzu s 10 otázkami
– distribuce prostřednictvím diskusního fóra
– setkání s účastníky na konci kurzu

úroveň 2: Učení
– srovnání výsledků pre- a posttestu (17 otázek ze všech témat kurzu)

úroveň 3: Chování
– po 3 měsících od absolvování kurzu dostali studenti dotazník, který
zjišťoval, zda vzdělávání ovlivnilo chování studentů, a jaké nastaly
změny v poskytovaných sluţbách

úroveň 4: Výsledky
– nebyly měřeny
14. 9. 2011
Knihovny současnosti 2011
Výsledky - úroveň 1
spokojenost s e-learningem
Vyhovuje vám forma e-learningu?
100
100
97
Yes
90
No
80
70
%
60
Zúčastnili byste se dalšího e-learningu?
50
120
40
30
100
100
97
20
0
0
3
Group 1
Group 2
80
%
10
Yes
60
40
20
0
14. 9. 2011
Knihovny současnosti 2011
0
3
Group 1
Group 2
No
Výsledky – úroveň 1
spokojenost s e-learningem
Byli jste spokojeni s kurzem?
100
87
90
80
70
67
%
60
Group 1
50
Group 2
40
33
30
17
20
10
0
0
entirely
14. 9. 2011
partially
Knihovny současnosti 2011
0
not at all
Výsledky – úroveň 1 (reakce)
souhrn

e-learning byl většinou účastníků akceptován

78 % účastníků bylo zcela spokojeno, 22 % částečně

průměrná známka jednotlivých lekcích se pohybovala
od 1 do 1,5

přínos kurzu – prohloubení znalostí o pouţívání
terminologického slovníku MeSH, zvýšení relevance
vyhledávání ve zdrojích NLK

účastníci téměř nevyuţívali diskusního fóra
14. 9. 2011
Knihovny současnosti 2011
Výsledky – úroveň 2
Testy, úkoly
Průměrné výsledky pre- a posttestu.
16,5
16
15,5
15
Group 1
14,5
Group 2
14
13,5
13
12,5
Pretest
14. 9. 2011
Posttest
Knihovny současnosti 2011
Výsledky – úroveň 2 (učení)
souhrn
● průměrné výsledky testů potvrdily prohloubení znalostí v obou
skupinách
– skupina 1 – od 13.7 / 17 bodů (pretest) do 15.3 / 17 bodů
(posttest)
– skupina 2 - od 13.7 / 17 bodů do 15.9 /17 bodů
– 78 % účastníků měli v posttestu lepší výsledky
● v úkolech ze 100 moţných bodů dosahovali účastníci průměrně 9899 bodů, nejniţší dosaţený počet byl 70 bodů
14. 9. 2011
Knihovny současnosti 2011
Výsledky – úroveň 3
přenos získaných znalostí
Provedli jste nějaké změny v knihovních službách své knihovny
na základě znalostí získaných v kurzu?
50%
Yes No
50%
14. 9. 2011
Knihovny současnosti 2011
Výsledky – úroveň 3
přenos získaných znalostí
Ve kterých zdrojích jste rozšířili možnosti přístupu?
70%
57%
60%
50%
43%
40%
30%
21%
21%
21%
20%
10%
0%
Databases
14. 9. 2011
Catalogues
E-journals
EBM resources
Knihovny současnosti 2011
Searching scientific
information via
Internet
Výsledky – úroveň 3
přenos získaných znalostí
Jaký způsob komunikace jste zvolili pro předání nabytých
znalostí pro své uživatele?
100%
93%
90%
80%
70%
60%
50%
43%
40%
30%
20%
21%
7%
14%
10%
0%
Other
14. 9. 2011
Seminar
Library web pages
Knihovny současnosti 2011
E-mail
Personal
communication
Výsledky – úroveň 3 (chování)
souhrn

50 % účastníků skupiny 1 uvedlo změny v knihovních sluţbách
své knihovny
– 36 % zavedlo uţívání terminologického slovníku MeSH při
vyhledávání
– 57 % účastníků rozšířilo moţnosti vyhledávání vědeckých
informací na internetu pro koncové uţivatele o evaluované
volné zdroje a 25 % o zdroje medicíny zaloţené na důkazu
– pro předání nabytých znalostí pro své uţivatele zvolilo 93%
účastníků osobní komunikaci, 43% via e-mail, 21% via
webpage a 14% organizovalo seminář
14. 9. 2011
Knihovny současnosti 2011
Diskuse – Byli jsme úspěšní
při dosažení cílů?
usnadnili jsme přístup k celoţivotnímu vzdělávání lékařských knihovníků – 23
studentů se nikdy nezúčastnilo kurzu NLK (přibliţně 10 % ze všech LK)

„obrození“ knihovnicko-informačních sluţeb
–
–

prohloubení znalostí odborné terminologie
–

36 % zavedlo uţívání MeSH
přístup ke spec. informačním zdrojům
–
–

50 % účastníků skupiny 1 uvedlo změny ve sluţbách
změna přístupu k uţivateli
57 % účastníků rozšířilo moţnosti vyhledávání o evaluované volné zdroje
25 % o zdroje medicíny zaloţené na důkazu
vytvořili jsme unikátní kolekci výukových materiálů
14. 9. 2011
Knihovny současnosti 2011
Diskuse – Co jsme se naučili
o e-learningu?

Z výhod e-learningu
– přenositelnost, variabilita, modularita, dostupnost učiva a nákladová efektivita
– šetří čas cestovní náklady pro účastníky
– počet studentů není limitován studijními místy a pc stanicemi
– posílení profesních sounáleţitosti

Slabá místa e-learningu
– pocit izolace, nedostatek motivace v důsledku absence osobní komunikace
s tutorem
– nedostatek času pro studium knihovníků malých knihoven
– počáteční náklady jsou vyšší neţ u klasického kurzu
– příprava studijních materiálů a tutorování je časově náročnější neţ u klas. kurzu
14. 9. 2011
Knihovny současnosti 2011
Diskuse – Co jsme se naučili o
hodnocení a posuzování?
– testy a úkoly byly pravděpodobně příliš jednoduché
– problémy s škálovým hodnocením
– otázky v dotazníku určeným pro závěrečnou zpětnou vazbu
byly nedostatečně formulovány
14. 9. 2011
Knihovny současnosti 2011
Závěr



e-learning je alternativní formou CŢV
kirkpatrickův model je vhodný
doporučení pro další rozvoj
– obsah kurzu, tutorování
prohloubit znalosti z teorie komunikace a metod přípravy dotazníků
včlenit multimediální aplikace


– nástroje hodnocení a posuzování


náročnější úkoly a testy
pro konstrukci hodnotícího dotazníku podrobnější otazníku
– repozitář výukových materiálů

14. 9. 2011
součástí řešeného projektu IGA MZ ČR Archivace a online
zpřístupnění plných textů vědeckých publikací pro podporu rozvoje
vědy a vzdělávání lékařských a nelékařských oborů 2011-2013
Knihovny současnosti 2011
14. 9. 2011
Knihovny současnosti 2011
Plán vzdělávacích akcí 2011
14. 9. 2011
Knihovny současnosti 2011