Principes méthodologiques et techniques des enquêtes internationales

in Mesure et Evaluation en Education [=MEE] (2011), 34(2), 25-55

A generalized logistic regression procedure to detect differential item functioning among multiple groups

in International Journal of Testing (2011), 11

We present an extension of the logistic regression procedure to identify dichotomous differential item functioning (DIF) in the presence of more than two groups of respondents. Starting from the usual ... [more ▼]

We present an extension of the logistic regression procedure to identify dichotomous differential item functioning (DIF) in the presence of more than two groups of respondents. Starting from the usual framework of a single focal group, we propose a general approach to estimate the item response functions in each group and to test for the presence of uniform DIF, non uniform DIF, or both. This generalized procedure is compared to other existing DIF methods for multiple groups with a real data set on language skill assessment. Emphasis is put on the flexibility, completeness and computational easiness of the generalized method. [less ▲]

Des mécanismes pour assurer la validité de l’interprétation de la mesure en éducation. Tome 2: l'évaluation.

Book published by Presses de l'Université du Québec (2011)

Comparaison empirique des méthodes classiques de détection du fonctionnement différentiel d’items en psychométrie

in Raîche, Gilles; Paquette-Côté, Karine; Magis, David (Eds.) Des mécanismes pour assurer la validité de l’interprétation de la mesure en éducation. Tome 1 : la mesure. (2011)

Étude du fonctionnement différentiel d'item dans le cadre du test de classement en anglais-langue seconde (TCALS-II)

in Blais, Jean-Guy; Gilles, Jean-Luc (Eds.) Evaluation des apprentissages et technologies de l'information et de la communication : Le futur est à notre porte (2011)

A test-length correction to the estimation of extreme proficiency levels

in Applied Psychological Measurement (2011), 35

In this paper, the estimation of extremely large or extremely small proficiency levels, given the item parameters of a logistic item response model, is investigated. On the one hand, the estimation of ... [more ▼]

In this paper, the estimation of extremely large or extremely small proficiency levels, given the item parameters of a logistic item response model, is investigated. On the one hand, the estimation of proficiency levels by maximum likelihood (ML), despite being asymptotically unbiased, may yield infinite estimates. On the other hand, with an appropriate prior distribution, the Bayesian approach of maximum a posteriori (MAP) yields finite estimates, but it suffers from severe estimation bias at the extremes of the proficiency scale. In a first step, we propose a simple correction to the MAP estimator in order to reduce this estimation bias. The correction factor is determined through a simulation study and depends only on the length of the test. In a second step, some additional simulations highlight that the corrected estimator behaves like the ML estimator and outperforms the standard MAP method for extremely small or extremely large abilities. Although based on the Rasch model, the method could be adapted to other logistic item response models. [less ▲]

Des modèles psychométriques pour corriger les résultats dans des enquêtes malgré les tentatives de fraude

Conference (2010, November)

Dans le contextes des enquêtes, il arrive fréquemment que les répondants ne fournissent pas nécessairement des réponses appropriées. C'est le cas notamment en ce qui a trait aux cas de fraudes dans les ... [more ▼]

Dans le contextes des enquêtes, il arrive fréquemment que les répondants ne fournissent pas nécessairement des réponses appropriées. C'est le cas notamment en ce qui a trait aux cas de fraudes dans les épreuves d'évaluation des habiletés disciplinaires. À cette fin, des modèles psychométriques ont été proposés pour corriger le résultat d'un étudiant malgré ses tentatives de fraudes. Ces modèles reposent toutefois uniquement sur des réponses de type dichotomique ou seulement une bonne ou une mauvaise réponse est considérée. Ces comportements de fraude sont également présents à l'intérieur des enquêtes d'opinion qui s'intéressent aux perceptions des répondants. La plupart du temps les réponses à ces enquêtes présentent plus d'un choix de réponses et sont alors dits polytomiques. Récemment, de nouvelles modélisations appropriées pour ce type de réponses ont été proposées. Elles seront présentées et accompagnées d'exemples d'application. [less ▲]

Using Snijders’ approach to standardize some parametric person fit indexes with estimated ability levels: a simulation study

Conference (2010, July)

Several authors (Molenaar & Hoijtink, 1990; Meijer & Sijtsma, 2001) have shown that several person-fit statistics present some important limitations. One issue is that the distribution of some parametric ... [more ▼]

Several authors (Molenaar & Hoijtink, 1990; Meijer & Sijtsma, 2001) have shown that several person-fit statistics present some important limitations. One issue is that the distribution of some parametric person-fit statistics is unknown. Another important issue is that the distribution of person-fit indexes is most often derived under the true ability level. In this situation, replacing the true ability by some estimate can seriously affect the distribution of these indexes. Snijders (2001) proposed a method to correct the mean and the variance of many parametric person-fit statistics to be approximately standard normally distributed, and derived the corrected version of the lz index. The purpose of this paper is to apply this correction to other well-known parametric indexes, and to compare them with their classical versions. The simulation results indicate that the standardized indexes have empirical type I errors close to the nominal significance level, and that the corrected indexes outperform their classical versions in this regard. [less ▲]

Comparaisons des méthodes heuristiques de détermination du nombre de composantes ou de facteurs à retenir dans une analyse en composantes principales ou une analyse factorielle

Conference (2010, May)

Comparaison des méthodes de Lord et de la régression logistique pour la détection du fonctionnement différentiel des items

Conference (2010, May)