練習效應驗證方法討論

審稿者對FDT論文之意見：驗證練習效應之方法，審稿者建議先做repeated measures ANOVA (p value訂在0.01)，當F檢定有顯著，再做事後檢定 (二二比較)。當事後檢定有顯著時，才分析effect size和RCI。

審稿者建議p value訂於0.01之意見為本研究做多次之F檢定。因為有5個指標，做了5次F檢定。

討論議題

一、練習效應驗證方法

結論：參照審稿者意見，先做repeated measures ANOVA，但p value訂於0.05。因為每個指標為獨立指標，且每個指標只做一次F檢定，因此p value訂於0.05。當F檢定有顯著，再做事後檢定 (二二比較)。當事後檢定有顯著時，才分析effect size。有練習效應的指標，才探討練習效應的趨勢，與是否達到plateau。

二、練習效應是否有累積特性?

結論：從F檢定達到顯著之三個指標來看，selective attention在Time 1-3、Time 1-4之事後檢定有顯著，alternating attention在Time 1-4之事後檢定有顯著，且此三個有顯著之事後檢定，其Cohen’s d大於0.20。測量越多次，會有明顯之練習效應 (特別是在Time 4)，且練習效應越大。因此練習效應有累積特性。

三、如何判斷練習效應已經達到plateau?

結論：練習效應達到plateau之判斷標準有二：(一)、有二個連續之穩定Cohen’s d值，二個Cohen’s d值小於或等於前一Cohen’s d值。即是d of Time 2-3 ≤ d of Time 1-2, d of Time 3-4 ≤ d of Time 2-3。(二)、Time 2-4之事後檢定為不顯著，即在Time 2達到plateau。

從Table 1來看，只有basic measures of attention and processing speed指標符合plateau之判斷標準。在Time 2時達到plateau。

總結：回覆審稿者意見之寫法為，先做repeated measures ANOVA，但p value訂於0.05，使用F檢定方法確定是否有練習效應。當F檢定有顯著，再做事後檢定。當事後檢定有顯著時，才分析effect size。F檢定結果顯著之指標，計算前後二次測量之RCIp (Time1-2、Time 2-3、Time 3-4)，取此三次RCIp之最大和最小值。有練習效應的指標，才探討練習效應的趨勢，與是否達到plateau。

Index	ANOVA (4 assessments)		Cohen’s d (post hoc p value)
	F3, 75	p value	Time 1-2	Time 2-3	Time 3-4	Time 1-3	Time 2-4	Time 1-4
Basic measures of attention and processing speed	4.5	0.023*	0.08 (0.055)	0.04 (0.279)	0.04 (0.189)	- (0.046)	- (0.064)	- (0.018)
Selective attention	5.9	0.001*	0.08 (0.269)	0.16 (0.049)	0.06 (0.488)	0.25 (0.007)**	- (0.031)	0.30 (0.001)**
Alternating attention	3.2	0.046*	0.09 (0.575)	0.09 (0.409)	0.23 (0.112)	- (0.294)	- (0.042)	0.45 (0.000)**
Ability of inhibition	2.2	0.093	-	-	-	-	-	-
Ability of switching	2.1	0.129	-	-	-	-	-	-

*p value <0.05

**p value <0.008 (0.05/6)