Question sur le risque alpha

Posté par beamino beamino

Bonjour,
je voudrais savoir si j'ai le droit de choisir pour significatif un p<0.01 alors que dans la majorité des études portant sur le même sujet les auteurs choisissent un p<0.05. il s'agit d'une étude observationnelle et je n'avais malheureusement pasfait de calcul d'effectif avant... Est ce qu'on peut ensuite me reprocher mon p dans la discussion de mes résultats ?
merci de votre aide !

Posté par stokastik stokastik

Plus tu veux être "prudent", plut tu prends un  alpha  petit... la alpha=0.05  est une convention usuelle.

Mais c'est quoi cette histoire avec ton calcul d'effectif ?

Posté par beamino beamino

Bon je suis médecin, donc mes connaissances en stat sont pauvres et un peu particulières... On nous dit qu'avant de faire une étude il faut faire un calcul d'effectif, à partir de la différence qu'on pense observer entre les groupes. moi j'ai fait l'inverse, j'ai pris le groupe le plus grand que je pouvais obtenir pendant la période dont je disposais (14 + 14 patients) et je les compare 2 à 2. Du coup quand je trouve des trucs non significatifs, je ne sais pas si c'est parce que je manque de puissance. Moi mon problème, c'est que je trouve des trucs significatifs auxquels je ne m'attendais pas en prenant un p<005, raison pour laquelle je me proposais de prendre un p<0.01. On me rétorque qu'on risque de me le reprocher, je ne sais pas si c'est vrai ?
Merci de ton aide.

Posté par stokastik stokastik


Hhmmm.... d'abord ton questionnement à propos de si on peut te le reprocher n'est huère une question de statistique mathématique, ça dépend à quelles personnes tu fais allusion qui pourraient te le reprocher ? Des collègues ? Des autorités ?


Sinon pour les stats-maths il faudrait que tu m'en dises plus sur ce que sont tes données exactement, et sur quel test tu fais ? Avec un max de détails...

Posté par beamino beamino

Ceux qui pourraient me le reprocher, c'est éventuellement des reviewer si j'essayais de publier, mais surtout avant tout c'est mon jury de mémoire...(ceci dit c'est des médecins comme moi, mais bon je veux faire un travail propre).
Pour les stat, c'est une étude en crossover, chaque individu reçoit 2 séances de traitement successives, les 7 premiers le A puis le B, les 7 suivants le B puis le A. Soit 14 séances de A et 14 séances de B à comparer. Je regarde ce qui se passe à 4 temps différents de chaque séance (T1, T2, T3, T4). Je compare A et B à chaque temps par un test de chi2 pour le variables nominales, et de Mann Withney pour les variables continues. Je voulais aussi savoir si certains paramètres variaient significativement entre T1 et T4 dans chaque groupe et si oui, si cette augmentation ou diminution était plus importante dans l'un des 2 groupes (ex : est ce que le taux de globules rouges baisse au cours du traitement et si oui, est ce qu'il baisse plus vite dans le groupe A ue dans le groupe B ?) : j'ai donc utilisé le test non paramétrique de Friemann pour mesures répétées dans chaque groupe et s'il était positif, j'ai comparé chaque temps 2 à 2 (T1 versus T2, T2 versus T3 etc) par le test non paramétrique de Wilconcox. Comme dans mes résultats, quand la variation est significative dans un groupe elle ne l'est pas dans l'autre, je n'ai pas eu besoin de me demander comment comparer les 2 groupes.

Posté par stokastik stokastik

Hhmmm je ne saisis pas à 100% mais c'est pas grave. Tout est là dans ton interrogation:



En stats comme ailleurs tu as de la liberté de faire ce que tu veux, du moment que c'est justifié. Si tu prends  p<0.01  et que tu dis pas pourquoi, comme si de rien n'était, c'est clair que ça va pas passer.

Ce type de justification n'est pas valable :



Là tu dis que la raison c'est parce que tu ne t'y attendais pas. Il faut creuser! Pourquoi tu ne t'y attendais pas ? En quoi ceci te permet de baisser le p ?

Posté par beamino beamino

Oui c'est vrai, je vais revoir tout ça. Merci beaucoup de ton aide en tout cas.

Posté par stokastik stokastik

Tiens-moi au courant. Dis-moi, est-ce que tu ne t'attendais pas à ces résultats parce qu'il y a déjà eu des tests auparavant sur ces traitements, et tes résultats ne sont pas en accord avec les tests précédents ?

Posté par beamino beamino

Même pas. Simplement parce que je trouve des différences qui n'ont aucune raison d'être, et que je testais juste pour montrer que ma population est cohérente et mon traitement bien conduit.

Posté par stokastik stokastik

Bizarre quand même car comme tu as peu de puissance tu n'as pas beaucoup de chance de rejeter.

Quand tu regardes tes données, à l'oeil, tu comprends pourquoi les tests statistiques rejettent ton hypothèse ?

Posté par beamino beamino

Oui. Disons que par ex. dans mes 2 groupes j'ai une valeur qui est stable sur toute la durée de la séance. ça confirme les données de la littérature, c'est normal parce que c'est le but de chaque traitement.Et logiquement le type de traitement n'influence pas cette valeur, elle doit donc être la même dans les 2 groupes. Mais si je compare mes valeurs entre les 2 groupes aux 4 temps de traitement, à T1 il y a une différence significatice (p=0,02) et pas à T2 ni T3 ni T4. Je pense que j'ai 1 valeur qui foire un peu (peut-être à cause de recueil incomplet des éléments biologiques, peut-être à cause de l'imprecision de la technique de laboratoire, que sais-je) et du coup comme je n'ai que 14 patients ça prend de l'importance et le test est significatif ?
Mais bon je vais m'en sortir, après tout c'est ça la médecine, une science non exacte (ou sont-ce les stat ?...), et heureusement il faut beaucoup d'études souvent contradictoires avant de tirer des conclusions définitives.

Posté par beamino beamino

par contre je relis ton post : si je comprends bien, si j'augmentais ma population (ce qui pour moi veut dire la puissance, mais si j'ai une idée de ce qu'est la puissance au sens statistique du terme, j'en ignore la définition exacte) le risque beta augmenterait ? (mais peut être que la puissance, c'est justement beta ?) Excuse mon ignorance...