Citlivosť na zmenu je dôležitou témou v hodnotení kvality meracích nástrojov na identifikáciu psychoterapeutickej zmeny. Štúdia sa snaží zamerať na problém, ako môže túto citlivosť ovplyvniť psychometrický prístup použitý pri hodnotení. Predmetom štúdie je porovnanie klasickej teórie testov (CTT) a teórie odpovede na položku (IRT) v ich citlivosti na zmenu. 166 osobám podstupujúcim psychoterapeutickú a psychiatrickú intervenciu bol administrovaný dotazník CORE-OM (Evans et al., 2000) pred a po intervencii. Na hodnotenie možnej zmeny boli vypočítané tak klasické skóre, ako aj IRT skóre. V oboch prípadoch bol použitý 95% konfidenčný interval štandardnej chyby merania na identifikáciu signifikantnej zmeny. Výsledky ukázali, že IRT prístup identifikoval viac osôb so signifikantnou zmenou než CTT. Ako sa ukázalo, dôvodom bola variabilita štandardnej chyby merania na špecifických úrovniach škály. and Measurement of psychotherapy change: Comparison of classical test score and IRT based score
Objectives. The present study focuses on the problem of sensitivity to change as an important issue in evaluating the quality of measures focusing on psychotherapy change. It deals with the question on the problem how a psychometric approach used in evaluation can influence this sensitivity. The goal of the study is to compare the two psychometric approaches: Classical test theory (CTT) and Item response theory (IRT), in their sensitivity to change.
Subjects and setting. The sample was 166 persons undergoing psychotherapeutic and psychiatric treatments as outpatients and inpatients. Their symptom level was assessed by COREOM, 34-items long questionnaire based on selfrating. It was made specifically for measurement of psychotherapeutic change. Statistical analysis. Both CTT and IRT scores were computed as sources for assessing possible change. For IRT score, Samajima graded response model was used. In both cases, 95% confidence interval of standard error of measurement (SEM) was used to determine the statistically significance of change.
Results. The results showed that IRT approach identified more persons with statistically significant change in comparison to CTT. As it was found, higher sensitivity of IRT was due to variability of SEM in IRT approach, which allows more reliable measurement on specific levels of trait scale. Also, difference in CTT and IRT was found in the estimation of the trait levels, especially at low level.
Study limitation. The generalization of the results depends on item parameters of the considered scales. Concept of clinical changes should be taken into consideration, to analyze whether statistically significant change identified by IRT corresponds with actual changes in client’s functioning.
Tento článek zkoumá způsoby měření politických znalostí. Hlavním předpokladem většiny prací v daném oboru je myšlenka, že politické znalosti jsou charakteristikou, která náleží pouze jedinci. Výzkum, na němž je založen tento text, předpokládá, že politické znalosti jsou charakteristikou jak jedinců, tak způsobů měření těchto znalostí. Analýzy jsou založené na baterii otázek na politické znalosti, jež byla implementována v šetření ISSP Role vlády IV (2006). Tento článek demonstruje, že předpoklad jednodimenzionality politických znalostí nesmí být chápán jako daný a musí být naopak testován. Přítomnost více než jedné dimenze politických znalostí je teoreticky důležitá, neboť implikuje, že někteří občané se zajímají pouze o specifické aspekty politiky. To má významné důsledky pro naše chápání a hodnocení demokratického systému vládnutí., Pat Lyons., 7 tabulek, and Obsahuje bibliografii
a1_Cíle. Cílem této studie bylo: a) ověření diagnostické kvality jednotlivých položek Edinburgh Handedness Inventory (EHI) a b) určení vhodného počtu kategorií preference ruky v dětské populaci. Soubor. Celkem 366 účastníků (178 chlapců a 188 dívek) náhodně vybraných ze základních škol v Praze participovalo na této studii. Věk dětí se pohyboval od 8 do 12 roků a žádný z účastníků nevykazoval intelektové ani jazykové nedostatky. Statistická analýza. Rating scale model byl použit pro hodnocení diagnostické kvality jednotlivých položek v inventáři. Příslušný počet kategorií preference ruky na základě výsledků EHI byl stanoven pomocí analýzy latentních tříd. Chi-kvadrát testy a vnitrotřídní korelační koeficient byly použity pro další vyhodnocení získané kategorizace preference ruky., a2_Výsledky. Byly identifikovány dvě položky (zametání koštětem a otevírání krabice), které porušují Raschovy vlastnosti Rating scale modelu. Dále byly zjištěny dvě skupiny dětí, které jsou charakteristické konzistentním použitím buď pravé, nebo levé ruky (praváci a leváci) a skupina s nekonzistentní preferencí (nevyhranění). Výsledky studie naznačují, že hodnoty laterálního kvocientu LQ = 0 ± 60 a LQ = 0 ± 70 lze doporučit pro zařazení jedince do skupiny nevyhraněných. Omezení studie. Ve studii nebylo hodnoceno, zdali preference indikovaná v dotazníku odpovídá preferenci při reálně prováděných činnostech. Použití formátu odpovědí se třemi kategoriemi by mohlo být považováno za další omezení, jelikož původně navrhovaný nástroj využívá pět kategorií., b1_Objectives. The aim of this study was: a) to verify the diagnostic quality of the Edinburgh Handedness Inventory (EHI) items and b) to determine an appropriate number of hand preference categories in a children population. Sample and setting. A total of 366 participants (178 boys and 188 girls) randomly selected from elementary schools in Prague, Czech Republic participated in this study. Children’s age ranged from 8 to 12 years and none of the participants has reported any intellectual or language deficiencies. Statistical analysis. Polytomous item response theory model (Rating scale model) was used to evaluate the diagnostic quality of particular items in the inventory. Appropriate number of handedness categories based on the EHI results was determined using latent class analysis. Chisquare tests and intra-class correlation coefficient were used for further evaluation of the obtained handedness categorization., b2_Results. Two items (using a broom and opening a box) that violated the Rasch properties of the Rating scale model were identified. Two classes that were characterized by the predominant use of either right or left hand (right-handers and left-handers) and a class with inconsistent hand-preference (mixed-handers) were stated. Results of the study suggest that values of laterality quotient LQ=0±60 and LQ=0±70 could be recommended for assigning individuals into the mixed-handedness class. Study limitation. It was not assessed whether self-reported hand preference is in accordance with the real hand preference for the EHI items/ activities. Using a response format with three categories could be seen as another limitation since the originally proposed instrument utilized five categories., Martin Komarc, Ivana Harbichová, Jiří Tichý., and Obsahuje seznam literatury