Différences de base dans l'ECR: quelles variables (le cas échéant) devraient être incluses comme covariables?

J'ai récemment terminé une étude par laquelle j'ai assigné au hasard des participants à l'un des deux groupes de traitement. J'ai testé les participants au départ, immédiatement après l'intervention, 1 mois et 4 mois sur un assez grand nombre de variables de résultats. Je prévoyais d'exécuter plusieurs ANOVA mixtes pour examiner les interactions groupe x temps. Certaines des comparaisons seront des comparaisons 2 (groupe) x 2 (temps: ligne de base et post-intervention) et certaines seront des comparaisons 2 (groupe) x 3 (temps: ligne de base, 1 mois, 4 mois).

Avant de commencer mes analyses, j'ai comparé les deux groupes de traitement sur toutes les variables de base. J'ai trouvé que les groupes diffèrent sur 4 variables de base si j'utilise un niveau alpha de 0,05 ou 2 variables de base si j'utilise un niveau alpha de 0,01 pour comparer les groupes.

J'ai deux questions à ce sujet:

1. Quel niveau alpha dois-je utiliser pour comparer les groupes au départ? Je pensais à un niveau alpha de 0,01 parce que je compare les deux groupes sur 24 caractéristiques de base et je pensais que je devrais choisir un niveau alpha plus strict que 0,05 pour réduire le taux d'erreur familial car un grand nombre de tests sont en cours effectué, mais d'après mes lectures, il semble que la plupart des gens utilisent 0,05. Que recommandez-vous?

2. Que dois-je faire à propos de ces différences? Je pourrais inclure ces variables en tant que covariables, mais la taille de mon échantillon est assez petite et l'utilisation de 4 covariables ne semble pas appropriée (ce qui explique également en partie pourquoi je préfère n'accepter les différences que si elles sont significatives au niveau 0,05)

Toute aide à ce sujet serait très appréciée!

Comme l'a écrit Stephen Senn, il n'est pas approprié de comparer les distributions de base dans une étude randomisée. La façon dont j'aime en parler est de poser la question "où vous arrêtez-vous?", C'est-à-dire combien d'autres covariables de référence devriez-vous revenir en arrière et essayer de récupérer? Vous trouverez des covariables de contrepoids si vous regardez bien.

Le choix d'un modèle ne repose pas sur des différences post-hoc, mais plutôt sur une connaissance du sujet a priori sur les variables susceptibles d'être d'importants prédicteurs de la variable de réponse. La version de base de la variable de réponse est certainement un prédicteur dominant mais il y en a d'autres qui sont susceptibles d'être importantes. L'objectif est d'expliquer l'hétérogénéité explicable du résultat pour maximiser la précision et la puissance. Il n'y a presque aucun rôle pour les tests de signification statistique dans la formulation du modèle.

Un modèle prédéfini prendra en compte les différences de chance sur les variables importantes - celles qui prédisent le résultat.

Normalement, ce à quoi vous devez vous soucier lorsque vous comparez les deux groupes au départ n'est pas tant la signification statistique des différences que la taille des différences: l'une de ces différences est-elle suffisamment importante pour avoir une importance pour l'étude? Assez grand pour affecter les comparaisons de groupes et les relations variables qui sont au centre de la recherche? Assez grand pour qu'il soit nécessaire de l'ajuster (en l'utilisant comme covariable)?

Maintenant, votre cas est un peu intéressant en ce que, même avec une affectation aléatoire, vous avez 4 des 24 variables montrant des différences significatives au niveau 0,05 (17% au lieu des 5% attendus). Cela peut sembler préoccupant pour votre processus de randomisation ou tout autre aspect de l'étude. Mais théoriquement, si la randomisation était effectuée sans problème et qu'il n'y avait pas d'attrition dans l'un ou l'autre groupe par la suite, un résultat aussi extrême ou plus devrait se produire 2,4% du temps, basé sur 24! / (4! (24-4)!) ( .05 ^ 4) (.95 ^ (24-4)). Ce n'est pas vraiment un événement si rare après tout. Ce que vous avez pourrait bien être un ensemble de différences aléatoires. Je m'en tiendrai à un jugement basé sur l'ampleur des différences.

+1 à @FrankHarrell. Je pourrais ajouter un petit point. Si vous avez affecté au hasard vos participants aux groupes, toute différence «significative» dans les valeurs de covariable avant l'intervention est nécessairement une erreur de type I.