Question

在看实验心理学时，对于实验设计的评价总是从成熟，选择和历史等方面着手，请问这个“选择”指的是什么？

Answer 1

在实验设计中，由于没有随机化地选择被试，从而造成了在实验组和对照组被试之间的差异。
即：由于没有随机化地选择和分配被试，造成了在实验处理前，被试的组与组之间在很多方面存在不相等或者有偏向性。参见朱滢《实验心理学》第二版第12页。
在评价实验设计时，我们始终需要把握两点：实验设计是否合理，即是否能够得到我们想要的东西，我们控制的变量与我们最初设想的是否一致；其次，控制额外变量。
你所说的那几点应当都是额外变量的控制问题。

Answer 2

前面哥们说的pilot study 是预实验，是正式实验前的预试，与前实验、准实验无关。
前实验设计也可以成为非试验设计，对变量不加或很少控制。
准实验设计是对变量加以部分控制，介于前实验和实验之间。
两者之间的区别在于对变量的控制程度不同
（教课书上怎么定义忘了，很久不看了。一般的实验心理学和心理学研究方法上教材都有，说法不同，大意如此）
例如测试一个新的教学方法对学生成绩的影响，简单来说
前实验是应用新教法 测量学生成绩，
准实验要设对照组，比较应用和没有应用新教法两者之间的差异
实验法的话还要加一个前测，比较两组之间后测-前测的差异。
实验法的最核心的就是控制无关变量，控制的程度是一个实验成功与否的关键

，因为我生怕我庸俗不堪的回复会玷污了这网上少有的帖子。