管理培训搜索
010-68317936
 
培训园地raining
培训园地 首页 > 培训园地 >

评标委员会评分修正方法研究

最后更新:2020-04-03 

评标委员会评分修正方法研究

吉林油田招标中心 陈国强 马丽娟 罗斌

 

摘要 评分修正可以使评分回归相对合理范围,对保证评标结果公平公正有重要意义。本文通过构建数学模型,对两种评分修正方法的修正过程进行模拟, 并实际对比两种评分修正方法的修正效果,创新性提出了设置合理评分区间的公式,构建了新的评分修正模型。

 

一、前言

评委作为独立的个体存在,主观性评分时难免会受到自身因素的限制和形形色色的干扰而做出不尽合理的评分。此时,进行评分修正是非常必要的。通过评分修正可以对个体的差异进行纠偏,最大限度使评分回归科学理性范围,清除其它各种因素对评审结果的干扰,确保评标结果公平公正。本文将重点研究评分修正的过程、评分修正的效果对比、以及评分修正和评分区间设置的关系。

二、评分修正的方法

现行的评分修正方法主要有两种,第一种是出自 2008 年商务部发布的《机电产品国际招标综合评价法实施规范(试行)》第十三条,具体修正方式为评标委员会成员对同一投标人的商务、技术、服务及其他评价内容的分项评分结果出现差距时,应遵循以下调整原则:评标委员会成员的分项评分偏离超过评标委员会全体成员的评分均值±20%,该成员的该项分值将被剔除,以其他未超出偏离范围的评标委员会成员的评分均值(称为“评分修正值”)替代;评标委员会成员的分项评分偏离均超过评标委员会全体成员的评分均值±20%,则以评标委员会全体成员的评分均值作为该投标人的分项得分,下文简称此法为机电修正法。第二种是切尾均值法,该方法的核心是消除极端值对评分结果的影响。最早应用于文艺体育或各类比赛中,其修正方式为将所有评委评标分值进行排序后,按照一定比例去掉最两端的分值,只使用中部的数据来求算术平均值作为评分结果。

三、评分修正的过程

下面笔者从实践角度对两种方法进行模拟比较,鉴于一般项目评委会的人数人,故模拟组评标数据。机电修正法按照三种条件进行模拟,切尾均值选择去掉一个最高分和一个最低分求平均值。


第一组数据 4 个评委的 3 分都在 2.56(均值 3.20 的-20%)和 3.84(均值

3.20 +20%)之间,只有评委分偏离出均值的±20%范围,按照机电修正法的原则,将评委的打分剔除,用其他未偏离评委的均值也就是代替,所以组评分结果就是 3;按照切尾均值计算,去掉一个最高分评委 5)和一个最低分因为四个评委都是分,故去掉任一),剩下三个评分取平均值得分,故切尾均值法修正后得分是分。如果不修正的话评标结果是 3.2 分;

第二组数据评分在之间,都在 3.68(均值 4.60 -20%) 5.52(均

4.60 +20%)之间,无须修正,评标结果是 4.60。按照切尾均值计算,去掉一个最高分任意一个和一个最低分任意一个),剩下三

个评分取平均值得 4.67 分。

第三组数据评分分别是 5,没有一个数据在 3.04(均值 3.80 -20%) 4.56(均值 3.80 +20%)之间,都不在均值 3.80 ±20%范围内,按照第二条修正原则,评标委员会成员的分项评分偏离均超过评标委员会全体成员的评分均值±20%。评分结果取全体评委均值 3.80。按照切尾均值计算,去掉一个最高任意一个和一个最低分任意一个),剩下三个评分取

平均值得 3.67 分。

通过对比可以看出机电修正方式可以分为三种情形,第一是个别数据偏离均±20%范围,可以用未超出偏离范围的数据平均数代替。第二是所有数据偏离都在均值的±20%范围内,此时不需要修正;第三是全部数据均偏离超过均值± 20%,此时处理的方式是通过求平均数作为结果;而切尾均值法三种情形都进行了修正。

四、修正效果分析

通过数据穷举法,设个评委,评标因素分值-5 分之间 18 组数据(见附表 2),分值-5 分之间的 73 组数据对比见附表 3),机电修正法的修正值较均值大,一般是正偏离,平均偏离幅度达到 1.4%;而切尾均值法的修正值较均值小,一般是负偏离,平均偏离幅度-0.93%,两者偏离百分比的绝对值分别是 1.8% 2.86%。因此,在选择修正方法时候应当注意这一点,避免因为修正方法选择不当影响整个项目招标策略。

五、评分区间设置与修正的关系


为了能更直接的说明问题,在这里引入一个评分区间比的概念,设因素评分区间中最高分为 H,最低分为 L(L≠0),最高分与最低分的比值称为评分区间比。评分区间比=H/L 。设评分区间是 1-10 分,依然是个评委,且模拟一个评委受到外界因素干扰而做出异常评分,其他评委评分一致。设高分值为 H,低分值为 L,以此为模型研究评分区间设置和修正的关系。分两种情况,一是异常评委抬高某投标人评分,形成四低一高的评分情况(见附表 4), H/L<1.25 时, 按照机电修正法修正,所有评分都在均值的±20%范围内,无须修正。当 1.25≤ H/L≤2.22 时,个低分都在均值±20%范围内,故属于修正区间,高分都被修正后的低分代替,修正可以起到清除干扰的作用;当 H/L>2.22 时,所有的评分均超出均值的±20%范围,故按照修正原则取所有评分的平均数作为结果,无法通过修正消除极端值的影响。

二是异常评委压低某投标人的评分,形成四高一低的评分情况(见附表 5)。当H/L>6 时,按照机电修正法修正,所有的评分均超出均值的±20%范围,故按照修正原则取所有评分的平均数作为结果,无法通过修正消除极端值的影响。当1.32<H/L≤6 的时候个高分都在均值±20%范围内,故属于修正区间,低分都被修正后的高分代替,修正可以起到清除干扰的作用;当 H/L≤1.32 时,所有评分都在均值的±20%范围内,无须修正。而切尾均值对所有数据在任何情况都进行修正,对于消除个别极值评分比较有效;对于评分设置区间比 H/L>6 时, 单个评委的倾向性可能会对评审结果干扰较大,故评分设置时应当充分考虑其影响。

通过上述两个模拟评分修正可以得出下面的结论,对于机电修正法,评分区 L-H 之间的关系,当 H/L≤2.22 时,对个别评委出现打分异常对评标结果的影响均在可修正范围内,基本可控(见附表 6)。当 H/L≤6 时,只在四高一低情况可控。而切尾均值法在评分中出现极端值时,消除其影响的作用很明显,但是当评分数据互相偏离不大时也进行了修正,并不利于体现评委的合理评审意见。所以在设置修正方法时,可以分两种情况考虑,当 H/L≤2.22 时,可选择机电修正法,当 H/L(评分区间比)>2.22 时,可选择切尾均值法。在区间评分设置时, 也应当尽量控制评分区间比在 2.22 范围内。评分区间比最大不宜超过 6。

六、新修正方法设想

通过前文所述,可以发现评分修正的两种方法各有利弊。笔者认为可以对两种评分修正方法进行整合,探索一种新的修正模式--即评标委员会成员的分项评


分偏离超过评标委员会全体成员的评分均值±20%,该成员的该项分值将被剔除, 以其他未超出偏离范围的评标委员会成员的评分均值(称为“评分修正值”) 代;评标委员会成员的分项评分偏离均超过评标委员会全体成员的评分均值± 20%,则以切尾均值法进行修正。这种修正方法兼顾了前述两种修正法的优点, 更具有现实指导意义。

七、结束语

鉴于目前的招标现状,很多工程和和服务项目的技术评审还不能杜绝主观性评审,评分修正作为一种有效的纠偏手段能够解决大部分评标过程中的不正确履职现象,有长期存在和不断完善的必要。评分是评标过程中的关键环节和核心内, 是招投标过程中的最后收获阶段,因此通过评分修正保证评分的公正性、合理性和科学性是值得招投标领域研究的长期课题。

 

附表 1 修正过程明细表

评委

P1

P2

P3

P4

P5

D

0.8*D

1.2*D

JD

QW

1 组

3

3

3

3

4

3.20

2.56

3.84

3.00

3.00

2 组

4

4

5

5

5

4.60

3.68

5.52

4.60

4.67

3 组

3

3

3

5

5

3.80

3.04

4.56

3.80

3.67

P-评委,D-平均数,JD-机电修正法,QW-切尾均值法附表 2:评审因素 3-5 分模拟数据修正统计表


4

4

4

4

5

4.20

4.20

0.00%

4.00

-4.76%

3

5

5

5

5

4.60

5.00

8.70%

5.00

8.70%

3

3

5

5

5

4.20

5.00

19.05%

4.33

3.17%

3

3

3

5

5

3.80

3.80

0.00%

3.67

-3.51%

3

3

3

3

5

3.40

3.00

-11.76%

3.00

-11.76%

3

4

4

4

5

4.00

4.00

0.00%

4.00

0.00%

3

5

5

5

4

4.40

4.75

7.95%

4.67

6.06%

4

3

3

3

5

3.60

3.25

-9.72%

3.33

-7.41%

3

3

4

4

5

3.80

4.00

5.26%

3.67

-3.51%

3

3

5

5

4

4.00

4.00

0.00%

4.00

0.00%

3

4

4

5

5

4.20

4.50

7.14%

4.33

3.17%

修正对比平均数偏

离度

1.42%

 

-0.38%

P-评委,D-平均数,JD-机电修正法,QW-切尾均值法

 

附表 3 评审因素 1-5 分模拟数据修正统计表

P1

P2

P3

P4

P5

D

JD

偏离

QW

偏离

1

1

1

1

2

1.20

1.00

-16.67%

1.00

-16.67%

1

1

1

2

2

1.40

1.40

0.00%

1.33

-4.76%

1

1

2

2

2

1.60

1.60

0.00%

1.67

4.17%

1

2

2

2

2

1.80

2.00

11.11%

2.00

11.11%

1

1

1

1

3

1.40

1.40

0.00%

1.00

-28.57%

1

1

1

3

3

1.80

1.80

0.00%

1.67

-7.41%

1

1

3

3

3

2.20

2.20

0.00%

2.33

6.06%

1

3

3

3

3

2.60

3.00

15.38%

3.00

15.38%

1

1

1

1

4

1.60

1.60

0.00%

1.00

-37.50%

1

1

1

4

4

2.20

2.20

0.00%

2.00

-9.09%


1

1

4

4

4

2.80

2.80

0.00%

3.00

7.14%

1

4

4

4

4

3.40

4.00

17.65%

4.00

17.65%

1

1

1

1

5

1.80

1.80

0.00%

1.00

-44.44%

1

1

1

5

5

2.60

2.60

0.00%

2.33

-10.26%

1

1

5

5

5

3.40

3.40

0.00%

3.67

7.84%

1

5

5

5

5

4.20

5.00

19.05%

5.00

19.05%

2

2

2

2

3

2.20

2.00

-9.09%

2.00

-9.09%

2

2

2

3

3

2.40

2.00

-16.67%

2.33

-2.78%

2

2

3

3

3

2.60

3.00

15.38%

2.67

2.56%

2

3

3

3

3

2.80

3.00

7.14%

3.00

7.14%

2

2

2

2

4

2.40

2.00

-16.67%

2.00

-16.67%

2

2

2

4

4

2.80

2.80

0.00%

2.67

-4.76%

2

2

4

4

4

3.20

3.20

0.00%

3.33

4.17%

2

4

4

4

4

3.60

4.00

11.11%

4.00

11.11%

2

2

2

2

5

2.60

2.60

0.00%

2.00

-23.08%

2

2

2

5

5

3.20

3.20

0.00%

3.00

-6.25%

2

2

5

5

5

3.80

3.80

0.00%

4.00

5.26%

2

5

5

5

5

4.40

5.00

13.64%

5.00

13.64%

3

3

3

3

4

3.20

3.00

-6.25%

3.00

-6.25%

3

3

3

4

4

3.40

3.40

0.00%

3.33

-1.96%

3

3

4

4

4

3.60

3.60

0.00%

3.67

1.85%

3

4

4

4

4

3.80

4.00

5.26%

4.00

5.26%

3

3

3

3

5

3.40

3.00

-11.76%

3.00

-11.76%

3

3

3

5

5

3.80

3.80

0.00%

3.67

-3.51%

3

3

5

5

5

4.20

5.00

19.05%

4.33

3.17%

3

5

5

5

5

4.60

5.00

8.70%

5.00

8.70%

4

4

4

4

5

4.20

4.20

0.00%

4.00

-4.76%

 


4

4

4

5

5

4.40

4.40

0.00%

4.33

-1.52%

4

4

5

5

5

4.60

4.60

0.00%

4.67

1.45%

4

5

5

5

5

4.80

4.80

0.00%

5.00

4.17%

1

1

2

2

3

1.80

2.00

11.11%

1.67

-7.41%

1

1

3

3

2

2.00

2.00

0.00%

2.00

0.00%

3

3

2

2

1

2.20

2.00

-9.09%

2.33

6.06%

1

1

2

2

4

2.00

2.00

0.00%

1.67

-16.67%

1

1

4

4

2

2.40

2.00

-16.67%

2.33

-2.78%

2

2

4

4

1

2.60

2.60

0.00%

2.67

2.56%

1

1

2

2

5

2.20

2.00

-9.09%

1.67

-24.24%

1

1

5

5

2

2.80

2.80

0.00%

2.67

-4.76%

2

2

5

5

1

3.00

3.00

0.00%

3.00

0.00%

1

1

3

3

4

2.40

2.40

0.00%

2.33

-2.78%

1

1

4

4

3

2.60

3.00

15.38%

2.67

2.56%

3

3

4

4

1

3.00

3.00

0.00%

3.33

11.11%

1

1

4

4

5

3.00

3.00

0.00%

3.00

0.00%

1

1

5

5

4

3.20

3.20

0.00%

3.33

4.17%

4

4

5

5

1

3.80

4.00

5.26%

4.33

14.04%

2

2

3

3

4

2.80

3.00

7.14%

2.67

-4.76%

2

2

4

4

3

3.00

3.00

0.00%

3.00

0.00%

3

3

4

4

2

3.20

3.00

-6.25%

3.33

4.17%

2

2

4

4

5

3.40

4.00

17.65%

3.33

-1.96%

2

2

5

5

4

3.60

4.00

11.11%

3.67

1.85%

4

4

5

5

2

4.00

4.00

0.00%

4.33

8.33%

3

3

4

4

5

3.80

4.00

5.26%

3.67

-3.51%

3

3

5

5

4

4.00

4.00

0.00%

4.00

0.00%

4

4

5

5

3

4.20

4.50

7.14%

4.33

3.17%

 


1

1

2

3

4

2.20

2.00

-9.09%

2.00

-9.09%

1

2

2

3

4

2.40

2.00

-16.67%

2.33

-2.78%

1

2

3

3

4

2.60

3.00

15.38%

2.67

2.56%

1

2

3

4

4

2.80

3.00

7.14%

3.00

7.14%

2

2

3

4

5

3.20

3.00

-6.25%

3.00

-6.25%

2

3

3

4

5

3.40

3.33

-2.06%

3.33

-1.96%

2

3

4

4

5

3.60

3.67

1.94%

3.67

1.85%

2

3

4

5

5

3.80

4.00

5.26%

4.00

5.26%

1

2

3

4

5

3.00

3.00

0.00%

3.00

0.00%

对比算术平均数平均偏离度

1.38%

 

-1.48%

P-评委,D-平均数,JD-机电修正法,QW-切尾均值法

 

4 高极端值评分修正统计表

P1

P2

P3

P4

P5

D

0.8

1.2D

JD

偏离

QW

偏离

1

1

1

1

10

2.8

2.240

3.36

2.80

0.00%

1.00

-64.29%

2

2

2

2

10

3.6

2.880

4.32

3.60

0.00%

2.00

-44.44%

3

3

3

3

10

4.4

3.520

5.28

4.40

0.00%

3.00

-31.82%

4

4

4

4

10

5.2

4.160

6.24

5.20

0.00%

4.00

-23.08%

4.4

4.4

4.4

4.4

10

5.52

4.416

6.62

5.52

0.00%

4.40

-20.29%

4.5

4.5

4.5

4.5

10

5.6

4.480

6.72

4.50

-19.64

%

4.50

-19.64%

5

5

5

5

10

6

4.800

7.20

5.00

-16.67

%

5.00

-16.67%

6

6

6

6

10

6.8

5.440

8.16

6.00

-11.76

%

6.00

-11.76%

7

7

7

7

10

7.6

6.080

9.12

7.00

-7.89%

7.00

-7.89%

8

8

8

8

10

8.4

6.720

10.08

8.40

0.00%

8.00

-4.76%


9

9

9

9

10

9.2

7.360

11.04

9.20

0.00%

9.00

-2.17%

9.5

9.5

9.5

9.5

10

9.6

7.680

11.52

9.60

0.00%

9.50

-1.04%

P-评委,D-平均数,JD-机电修正法,QW-切尾均值法

 

5 低极端值评分修正统计表

P1

P2

P3

P4

P5

D

0.8D

1.2D

JD

偏离

QW

偏离

1

10

10

10

10

8.20

6.56

9.84

8.20

0.00%

10.00

21.95%

1

9

9

9

9

7.40

5.92

8.88

7.40

0.00%

9.00

21.62%

1

8

8

8

8

6.60

5.28

7.92

6.60

0.00%

8.00

21.21%

1

7

7

7

7

5.80

4.64

6.96

5.80

0.00%

7.00

20.69%

1

6

6

6

6

5.00

4.00

6.00

6.00

20.00%

6.00

20.00%

1

6.1

6.1

6.1

6.1

5.08

4.06

6.09

5.08

0.00%

6.10

20.08%

1

5.9

5.9

5.9

5.9

4.92

3.94

5.90

5.90

19.92%

5.90

19.92%

1

5

5

5

5

4.20

3.36

5.04

5.00

19.05%

5.00

19.05%

1

4

4

4

4

3.40

2.72

4.08

4.00

17.65%

4.00

17.65%

1

3

3

3

3

2.60

2.08

3.12

3.00

15.38%

3.00

15.38%

1

2

2

2

2

1.80

1.44

2.16

2.00

11.11%

2.00

11.11%

1

1.35

1.35

1.35

1.35

1.28

1.02

1.54

1.35

5.47%

1.35

5.47%

1

1.34

1.34

1.34

1.34

1.27

1.02

1.53

1.34

5.35%

1.34

5.35%

1

1.32

1.32

1.32

1.32

1.26

1.00

1.51

1.32

5.10%

1.32

5.10%

1

1.31

1.31

1.31

1.31

1.25

1.00

1.50

1.25

0.00%

1.31

4.97%

1

1.3

1.3

1.3

1.3

1.24

0.99

1.49

1.24

0.00%

1.30

4.84%

1

1.2

1.2

1.2

1.2

1.16

0.93

1.39

1.16

0.00%

1.20

3.45%

1

1.1

1.1

1.1

1.1

1.08

0.86

1.30

1.08

0.00%

1.10

1.85%

P-评委,D-平均数,JD-机电修正法,QW-切尾均值法

 

6 评分区间比 2.22 时修正情况统计表

P1

P2

P3

P4

P5

D

1.2D

0.8D

JD

偏离

QW

偏离


1

2.2

2.2

2.2

2.2

1.96

2.352

1.568

2.20

9.80%

12.24%

2.20

2.2

1

1

1

1

1.24

1.488

0.992

1.00

-15.48%

-19.35%

1.00

1

2.3

2.3

2.3

2.3

2.04

2.448

1.632

2.30

10.20%

12.75%

2.30

2.3

1

1

1

1

1.26

1.512

1.008

1.26

0.00%

-20.63%

1.00

P-评委,D-平均数,JD-机电修正法,QW-切尾均值法


互联网学习平台“招标采购大讲堂”




北京弘业百成管理咨询有限公司版权所有 京ICP备19041218号

官方微信
010-68317936
010-68317936
在线QQ
返回首页
返回顶部