GAF Samrating & Statistik Reliabiltet/pålidelighed • Hvorvidt undersøgelsesresultater kan reproduceres: – Over tid (bliver vi faktisk bedre?) – Over sted (Kan vi sammenligne os med.
Download ReportTranscript GAF Samrating & Statistik Reliabiltet/pålidelighed • Hvorvidt undersøgelsesresultater kan reproduceres: – Over tid (bliver vi faktisk bedre?) – Over sted (Kan vi sammenligne os med.
Slide 1
GAF
Samrating & Statistik
Slide 2
Reliabiltet/pålidelighed
• Hvorvidt undersøgelsesresultater kan
reproduceres:
– Over tid (bliver vi faktisk bedre?)
– Over sted (Kan vi sammenligne os med andre
behandlingssteder?)
– Af forskellige personer (Har vi samme
forståelse af skalaen?)
Slide 3
Fejlkilder
Generelt
Almene processer
• Tilfældig afvigelse fra
normen
• Systematisk afvigelse
fra normen
• Haloeffekten
• Centraltendensen
• kontrastfejl
Slide 4
Uddannelse & træning
• Loevdhal & Friis (1996):
• GAF vurderet af utrænede personer er upålidelig
• Generelt uddannelsesniveau har ikke betydning for pålideligheden af
GAF
• Jones et al. (1995):
• Pålidelig GAF vurdering kan opnås ved 30 minutters træning
• Fallmyr et al. (2000):
• Pålidelig GAF vurdering kan ikke opnås ved 1-dags træning
Slide 5
Hvordan man kan gøre
• Find hjemmesiden for det Norske Netværk af
psykoterapeutiske dagafdelinger:
http://personlighetsprosjekt.com/gaf/
– GAF manual
– Kliniske vignetter scoret af eksperter med adgang til
gennemsnitsscore og standardafvigelser
– Lave træningssessioner hvor personalet trænes efter
manualen og scorer vignetterne enkeltvis eller efter
konsensus
Slide 6
• Statistisk
– Opsætning af data i SPSS
target
rater1S rater2S rater3S rater4S rater5S rater6S rater7S
1,00
68,00
56,00
52,00
70,00
61,00
62,00
69,00
2,00
73,00
75,00
62,00
68,00
72,00
65,00
71,00
3,00
15,00
14,00
28,00
21,00
13,00
16,00
21,00
4,00
53,00
65,00
62,00
65,00
65,00
58,00
66,00
Slide 7
Deskriptiv statistik
Deskriptiv statistik for Gaf-symptomer (samrating 2005)
cases
C1
Mean
62,57
Minimum 52,00
Maximum 70,00
StdDev
6,88
C2
C3
C4
C5
69,43
62,00
75,00
4,65
18,29
13,00
28,00
5,35
62,00
53,00
66,00
4,83
42,57
41,00
48,00
2,51
Slide 8
Reliabilitet i SPPS
• Vælg Analyze>Vælg Scale> Vælg
Reliability
• Vælg Statitics > Vælg Items > Vælg
Intraclass correlation coefficient
Slide 9
Valgmuligheder
One-way
random effect
Two-way Random
effect
(tilfældige ratere
vurderer alle men
ingen ved, hvem der
har vurderet hvem).
(tilfældige ratere
vurderer tilfældigt
udvalgte sager men vi
ved, hvem der vurderer
hvem)
Typen af
”enighed”
Absolute
Consistent
(vælges hvis
systematisk variation
hos ratere er
relevant)
(vælges hvis
systematisk variation
hos ratere ikke er
relevant)
Analyseenhed
Single measure
Average measure
(Den individuelle
rating analyseres)
(Gennemsnittet fra
ratings analyseres)
(antal af nødvendige
ratere skal beregnes)
Modeller
Two-way mixed
(alle ratere vurderer
tilfældigt udvalgte)
Slide 10
Output og fortolkning
• ICC ligger mellem 0-1, hvor 1 er perfekt
overensstemmelse
• Konvention: 0.74-1.0 = meget højt, 0.60-0.74 =
højt, 0.40-0.59 = moderat
Intraclass Correlation Coefficient GAF 2005
Intraclass Correlation Coefficient GAF 2006
Intraclass
Correlation
Intraclass
Correlation
Measures
GAF-S (2005)
0.94,
GAF-S
0.48,
GAF-F (2005)
0.92,
GAF-F
0.55,
Slide 11
Vignet og næsten ”real life”
Vignet 2
Det drejer sig om en 37-årig kvinde som henvises fra egen læge pga. angst og depression.
Hun er aktuelt sygemeldt fra sit arbejde som pædagog.
Ved forsamtalen spørger du om hvordan hun har haft det den seneste uge? Hun svarer:
”Det er det samme eller måske lidt dårligere. Jeg har haft det dårligt i mange år…Jeg
havde egentlig håbet på at jeg kunne blive indlagt. Det hjælper mig nogen gange”.
Du spørger: Hvordan er det, at være dig når du har det dårligt?
Hun svarer: ”Jeg ligger bare på sofaen, men jeg kan ligesom ikke finde ro. Jeg tænker
utrolig meget. Det hele flyder. Min kæreste må tage sig af det meste. Nogen gange tror jeg
også, at det bliver for meget for ham og børnene”.
Du spørger: Har du været lidt udenfor den forgangne uge?
Hun svarer: ”jeg har det ikke godt med at møde nogen jeg kender eller naboerne. Der er
en skov i nærheden af hvor vi bor. Der har jeg vist gået tur 1……måske 2-3 gange i denne
her uge.”
Du spørger: Har du fået angst den seneste uge, når du er ude blandt andre?
Hun svarer: Ja, mit hjerte hamrer. Jeg var også nervøs over at skulle tale med dig. Det
hjælper når min kæreste er med.
Du spørger: Er der andet du tænker kunne være vigtigt for at jeg kan forstå, hvordan du
har haft det den seneste uge?
Hun svarer: jeg ved ikke hvorfor du bliver ved med at hænge dig i den seneste uge. Jeg
har jo forklaret dig, at jeg har haft det dårligt længe….[får våde øjne]..hvis ikke i kan
hjælpe mig….jeg tænker nogen gange på, at det ville være lettere……ikke at jeg vil tage
livet af mig. Du forstår godt hvad jeg mener ik?
Slide 12
Sammenligning med Norge
• Hvordan ligger scorerne fra samratingen i
forhold til de norske normer
Statistik: Gennemsnit GAF-SYmptom i forhold til norske normer: Samrating 2005
case1S
N
Valid
Missing
Mean
Minimum
Maximum
case2S
7
0
62,5714a
52,00
70,00
7
0
69,4286b
62,00
75,00
case3S
7
0
18,2857c
13,00
28,00
case4S
7
0
62,0000d
53,00
66,00
a. midt i gennemsnittet (norske normer)
b. - 1 standardafvig else fra gennemsnittet (norske normer)
c. midt i gennemsnittet (norske normer)
d. + 1standardafvig else fra gennemsnittet (norske normer)
e. +2 standardafvig elser fra gennemsnittet (norske normer) (dårligt)
Case5S
7
0
42,5714e
41,00
48,00
Slide 13
Eksempel på anvendelse
GAF
Samrating & Statistik
Slide 2
Reliabiltet/pålidelighed
• Hvorvidt undersøgelsesresultater kan
reproduceres:
– Over tid (bliver vi faktisk bedre?)
– Over sted (Kan vi sammenligne os med andre
behandlingssteder?)
– Af forskellige personer (Har vi samme
forståelse af skalaen?)
Slide 3
Fejlkilder
Generelt
Almene processer
• Tilfældig afvigelse fra
normen
• Systematisk afvigelse
fra normen
• Haloeffekten
• Centraltendensen
• kontrastfejl
Slide 4
Uddannelse & træning
• Loevdhal & Friis (1996):
• GAF vurderet af utrænede personer er upålidelig
• Generelt uddannelsesniveau har ikke betydning for pålideligheden af
GAF
• Jones et al. (1995):
• Pålidelig GAF vurdering kan opnås ved 30 minutters træning
• Fallmyr et al. (2000):
• Pålidelig GAF vurdering kan ikke opnås ved 1-dags træning
Slide 5
Hvordan man kan gøre
• Find hjemmesiden for det Norske Netværk af
psykoterapeutiske dagafdelinger:
http://personlighetsprosjekt.com/gaf/
– GAF manual
– Kliniske vignetter scoret af eksperter med adgang til
gennemsnitsscore og standardafvigelser
– Lave træningssessioner hvor personalet trænes efter
manualen og scorer vignetterne enkeltvis eller efter
konsensus
Slide 6
• Statistisk
– Opsætning af data i SPSS
target
rater1S rater2S rater3S rater4S rater5S rater6S rater7S
1,00
68,00
56,00
52,00
70,00
61,00
62,00
69,00
2,00
73,00
75,00
62,00
68,00
72,00
65,00
71,00
3,00
15,00
14,00
28,00
21,00
13,00
16,00
21,00
4,00
53,00
65,00
62,00
65,00
65,00
58,00
66,00
Slide 7
Deskriptiv statistik
Deskriptiv statistik for Gaf-symptomer (samrating 2005)
cases
C1
Mean
62,57
Minimum 52,00
Maximum 70,00
StdDev
6,88
C2
C3
C4
C5
69,43
62,00
75,00
4,65
18,29
13,00
28,00
5,35
62,00
53,00
66,00
4,83
42,57
41,00
48,00
2,51
Slide 8
Reliabilitet i SPPS
• Vælg Analyze>Vælg Scale> Vælg
Reliability
• Vælg Statitics > Vælg Items > Vælg
Intraclass correlation coefficient
Slide 9
Valgmuligheder
One-way
random effect
Two-way Random
effect
(tilfældige ratere
vurderer alle men
ingen ved, hvem der
har vurderet hvem).
(tilfældige ratere
vurderer tilfældigt
udvalgte sager men vi
ved, hvem der vurderer
hvem)
Typen af
”enighed”
Absolute
Consistent
(vælges hvis
systematisk variation
hos ratere er
relevant)
(vælges hvis
systematisk variation
hos ratere ikke er
relevant)
Analyseenhed
Single measure
Average measure
(Den individuelle
rating analyseres)
(Gennemsnittet fra
ratings analyseres)
(antal af nødvendige
ratere skal beregnes)
Modeller
Two-way mixed
(alle ratere vurderer
tilfældigt udvalgte)
Slide 10
Output og fortolkning
• ICC ligger mellem 0-1, hvor 1 er perfekt
overensstemmelse
• Konvention: 0.74-1.0 = meget højt, 0.60-0.74 =
højt, 0.40-0.59 = moderat
Intraclass Correlation Coefficient GAF 2005
Intraclass Correlation Coefficient GAF 2006
Intraclass
Correlation
Intraclass
Correlation
Measures
GAF-S (2005)
0.94,
GAF-S
0.48,
GAF-F (2005)
0.92,
GAF-F
0.55,
Slide 11
Vignet og næsten ”real life”
Vignet 2
Det drejer sig om en 37-årig kvinde som henvises fra egen læge pga. angst og depression.
Hun er aktuelt sygemeldt fra sit arbejde som pædagog.
Ved forsamtalen spørger du om hvordan hun har haft det den seneste uge? Hun svarer:
”Det er det samme eller måske lidt dårligere. Jeg har haft det dårligt i mange år…Jeg
havde egentlig håbet på at jeg kunne blive indlagt. Det hjælper mig nogen gange”.
Du spørger: Hvordan er det, at være dig når du har det dårligt?
Hun svarer: ”Jeg ligger bare på sofaen, men jeg kan ligesom ikke finde ro. Jeg tænker
utrolig meget. Det hele flyder. Min kæreste må tage sig af det meste. Nogen gange tror jeg
også, at det bliver for meget for ham og børnene”.
Du spørger: Har du været lidt udenfor den forgangne uge?
Hun svarer: ”jeg har det ikke godt med at møde nogen jeg kender eller naboerne. Der er
en skov i nærheden af hvor vi bor. Der har jeg vist gået tur 1……måske 2-3 gange i denne
her uge.”
Du spørger: Har du fået angst den seneste uge, når du er ude blandt andre?
Hun svarer: Ja, mit hjerte hamrer. Jeg var også nervøs over at skulle tale med dig. Det
hjælper når min kæreste er med.
Du spørger: Er der andet du tænker kunne være vigtigt for at jeg kan forstå, hvordan du
har haft det den seneste uge?
Hun svarer: jeg ved ikke hvorfor du bliver ved med at hænge dig i den seneste uge. Jeg
har jo forklaret dig, at jeg har haft det dårligt længe….[får våde øjne]..hvis ikke i kan
hjælpe mig….jeg tænker nogen gange på, at det ville være lettere……ikke at jeg vil tage
livet af mig. Du forstår godt hvad jeg mener ik?
Slide 12
Sammenligning med Norge
• Hvordan ligger scorerne fra samratingen i
forhold til de norske normer
Statistik: Gennemsnit GAF-SYmptom i forhold til norske normer: Samrating 2005
case1S
N
Valid
Missing
Mean
Minimum
Maximum
case2S
7
0
62,5714a
52,00
70,00
7
0
69,4286b
62,00
75,00
case3S
7
0
18,2857c
13,00
28,00
case4S
7
0
62,0000d
53,00
66,00
a. midt i gennemsnittet (norske normer)
b. - 1 standardafvig else fra gennemsnittet (norske normer)
c. midt i gennemsnittet (norske normer)
d. + 1standardafvig else fra gennemsnittet (norske normer)
e. +2 standardafvig elser fra gennemsnittet (norske normer) (dårligt)
Case5S
7
0
42,5714e
41,00
48,00
Slide 13
Eksempel på anvendelse