博文
旧文重贴：小测验：“你漂亮吗”与“你跳了吗”
|||
【按语】利用分区，利用SCI，利用同行评议等来评价科研，被来回讨论，但不像有停下来的趋势，所以我们不得不再次回顾定量评价的一些常识。
(1)你漂亮吗？
问题：以下图片中是否是美女？
答案 ：
第二张，是日本战国时代第一智将毛利元就的造型，男性；第三张、猫；第四张，出自百度“花样美男”图片，是“帅”锅。所以只有第一和第五张是美女。
点评：
看照片而选美女，结果出了岔子。学术化点讲，就是看照片这种方式，对选美女而言，效度太差。
所谓效度，是指测量工具确能测出其所要测量特质的程度。从数学上说，是指实际测量的集合和欲测量的集合的重合程度。若严格论美女，就必须将伪娘啊，猫啊，狗啊排除在外，否则就会闹出“按图索骥”的笑话。
进而言之，你必须清楚地定义啥是美女。若论心里美，凤姐并不一定输给第一张之美人。
所以量化评价，必须清楚定义目标对象，准确定义关键指标，而测量方法上要时刻提防伪娘混入。
参考文献：
(2)你跳了吗？
问题：这个帅哥为啥搞错了？
答案：
这个帅哥没有搞清测量的效度与信度问题。
所谓测量的信度，就是指测量结果是否真实。测量的真实性是通过一致性、稳定性及可靠性来体现的。所谓一致性，就是指换测量人、换方式来量，其结果一致；而稳定性主要是指多次测量结果稳定。如果结果稳定了，一致了，一般也就可靠了。
这个帅哥可以用手去摸一下冰面或者水面（换换方式），问问别人（换人测量），多看一下水动不动（多次测量），就不会砸冰面上了。
点评：
谈测量的信度，是谈效度的前提。这就好比，你带了副哈哈眼镜，看啥都变了形，还谈什么你能区分胖子瘦子，当然也分不清葛优和陈佩斯了。所以要讨论效度，必先讨论信度。
其实大量的国家基金评审问题，同行评议问题，人才引进问题。在中国，本质上就是个信度问题。
试想，各利益方端坐一堂，争成一团，那得势的，难免不把猪八戒评成潘金莲。测量标准和方式的问题，测不测得真，已经不是关键，而是要被大家扔到桌子下面的东西。
参考文献
https://blog.sciencenet.cn/blog-731678-653133.html
上一篇：报账，报账
下一篇：对SCI的比喻-兼和许培扬老师讨论
扫一扫，分享此博文