評(píng)審專家評(píng)分異常的判定方法有哪些？

# 標(biāo)書制作 2021-12-11 14:27 來源：

評(píng)分異常是對(duì)投標(biāo)文件中的主觀性評(píng)審內(nèi)容而言，因?yàn)榭陀^性評(píng)審內(nèi)容（比如供應(yīng)商的資質(zhì)、項(xiàng)目負(fù)責(zé)人的執(zhí)業(yè)資格、職稱專業(yè)核定等）實(shí)際上不應(yīng)當(dāng)存在偏差，所有評(píng)審專家的結(jié)論應(yīng)當(dāng)一致。

對(duì)于政府采購(gòu)主觀內(nèi)容的評(píng)審是允許存在個(gè)體評(píng)審差異的，這種差異在合理范圍（區(qū)間）之內(nèi)，被看作為“偏差”。當(dāng)然不能簡(jiǎn)單地將“偏差”與“異?！被鞛橐徽?。關(guān)于異常評(píng)分的判定標(biāo)準(zhǔn)，一直以來眾口不一，尤其是要從定量的角度去刻畫難度更大，但可以明確的是，偏差達(dá)到極限就是異常。盡管不同的偏差類型判斷的標(biāo)準(zhǔn)有所不同，但超出合理偏差范圍的評(píng)分就是異常評(píng)分。因此，要結(jié)合偏差的類型具體分析并建立合理的偏差模型。

評(píng)分偏差類型可以分為兩類，一類是橫向偏差，另一類是縱向偏差。

所謂橫向偏差，主要是指專家個(gè)人與同時(shí)參與同一個(gè)項(xiàng)目評(píng)審的其他專家相比，評(píng)分出現(xiàn)偏離，也就是“自己和別人比”有偏差，這種偏差容易甄別。中南大學(xué)的唐光杰在《科技評(píng)審中評(píng)分偏差模型的研究與應(yīng)用》一文中提出，此種偏差可采用基于統(tǒng)計(jì)、距離、密度的異常檢測(cè)方法；河南大學(xué)的焦易于等人在《基于異常評(píng)分行為分析的虛假評(píng)論商品識(shí)別方法》一文中則提出，此種偏差可采用正態(tài)分布擬合和時(shí)序數(shù)據(jù)突變點(diǎn)的檢測(cè)方法。不管采用何種方法，只要構(gòu)建相對(duì)科學(xué)、合理的數(shù)理模型，都可以比較直接地檢測(cè)出專家的評(píng)分偏離，有沒有接近或超過極限值，從而判定其是否為異常評(píng)分。

橫向偏差大致可細(xì)分為四種情況。第一，個(gè)性偏差。例如，不以招標(biāo)文件規(guī)定的評(píng)標(biāo)辦法為依據(jù)，而是根據(jù)個(gè)人喜好隨意給出評(píng)標(biāo)結(jié)論。這類偏差有的出于有意（受利益驅(qū)使），有的出于無意（工作態(tài)度敷衍塞責(zé)）?？傊?，這類偏差屬于純粹的主觀臆斷，是主觀惡意最大的偏差。第二，學(xué)識(shí)偏差。因評(píng)審專家的專業(yè)技術(shù)水平或者實(shí)踐經(jīng)驗(yàn)達(dá)不到評(píng)標(biāo)所需的標(biāo)準(zhǔn)而出現(xiàn)的非主觀層面的偏差。例如，待評(píng)審項(xiàng)目的專業(yè)要求與專家自身從事或者熟悉的專業(yè)大相徑庭，甚至有些專家完全不了解所評(píng)項(xiàng)目的專業(yè)特點(diǎn)，這屬于專家能力不足導(dǎo)致的一種偏差類型。第三，認(rèn)知偏差。認(rèn)知偏差是專家基于自身的認(rèn)知程度，對(duì)同一份投標(biāo)文件的同一個(gè)評(píng)分項(xiàng)存在不同理解的情形，這也會(huì)導(dǎo)致評(píng)標(biāo)結(jié)論存在較大差異。例如，對(duì)于“最近三年來無重大質(zhì)量安全事故”的時(shí)限起算點(diǎn)的爭(zhēng)議，專家A認(rèn)為，應(yīng)從行為發(fā)生之日起算。專家B則認(rèn)為，應(yīng)從認(rèn)定存在重大質(zhì)量安全問題法律文書的生效之日起計(jì)算。導(dǎo)致這類偏差產(chǎn)生的原因主要是招標(biāo)文件的評(píng)標(biāo)標(biāo)準(zhǔn)設(shè)計(jì)不嚴(yán)謹(jǐn)，使專家在評(píng)審過程中產(chǎn)生理解上的分歧、認(rèn)識(shí)上的偏差。第四，隨機(jī)偏差。隨機(jī)偏差是專家出于非主觀原因?qū)е碌囊环N無意識(shí)的偶然偏差。例如，對(duì)于夜間施工噪聲，兩個(gè)投標(biāo)文件提供了不同的控制方案，一種安裝了聲屏障，另一種則砌筑了降噪棚，但是兩者都將噪聲控制在招標(biāo)文件規(guī)定的55分貝之內(nèi)。專家出于無心過失給出了不同的分值。

橫向偏差判定（Determination of lateral deviation，LAD）。在橫向偏差判定時(shí)應(yīng)關(guān)注兩個(gè)指標(biāo)：一是在同一項(xiàng)目中，對(duì)同一投標(biāo)單位所有評(píng)標(biāo)專家評(píng)分的平均值與各個(gè)專家評(píng)分對(duì)平均值的偏離程度；二是在同一項(xiàng)目中，以單個(gè)評(píng)標(biāo)專家為對(duì)象分別計(jì)算其對(duì)所有投標(biāo)單位打分的平均值偏離程度。至于偏離的置信區(qū)間可預(yù)先設(shè)定一個(gè)區(qū)域（如±10%—20%），根據(jù)評(píng)標(biāo)項(xiàng)目不同屬性分別設(shè)置。如勘察設(shè)計(jì)、監(jiān)理等技術(shù)服務(wù)類項(xiàng)目主觀評(píng)審因素影響較大的，可以適當(dāng)放寬區(qū)域上下限。

通常，設(shè)定專家評(píng)審得分為Pi，對(duì)于同一個(gè)投標(biāo)單位的其他專家的評(píng)審平均分為P，預(yù)設(shè)的橫向偏離區(qū)間為Δ，則合理橫向偏離幅度應(yīng)當(dāng)滿足公式①。

所謂縱向偏差主要是專家個(gè)人在評(píng)審類似項(xiàng)目時(shí)出現(xiàn)的評(píng)分偏離，也就是專家“自己和自己比”有偏差。這種偏差類型目前國(guó)內(nèi)研究者尚無人關(guān)注也未有人提及，但其實(shí)是十分關(guān)鍵的偏差來源之一。其理論依據(jù)是，在評(píng)審過程中，如果有兩個(gè)項(xiàng)目供應(yīng)商提交的投標(biāo)文件在資格條件、響應(yīng)程度、履約能力等各方面都高度一致（或相同），同一個(gè)專家對(duì)于這兩個(gè)項(xiàng)目應(yīng)該給出相近或者相同的評(píng)分。否則，就存在偏差傾向。當(dāng)然，這兩個(gè)項(xiàng)目可能不在同一時(shí)期出現(xiàn)，因此甄別起來就比較困難，沒有數(shù)據(jù)庫(kù)的積累和大數(shù)據(jù)分析工具的支持，很難捕捉到其中的差別，而這點(diǎn)正是大多數(shù)人容易忽略的情形，有時(shí)甚至連專家本人都無法解釋為何出現(xiàn)評(píng)分偏差。

縱向偏差判定（Determination of longitudinal deviation，LOD）。專家的縱向偏差判定比較困難，因?yàn)樾枰凶銐虻臉颖竞痛髷?shù)據(jù)工具的支持。從相對(duì)簡(jiǎn)化角度來看，可按照以下步驟處理：首先，要判斷待評(píng)審項(xiàng)目與以往已評(píng)審過的歷史項(xiàng)目，在項(xiàng)目特征、采購(gòu)需求和投標(biāo)供應(yīng)商的響應(yīng)程度方面是否高度相似；其次，要分析待評(píng)審的投標(biāo)供應(yīng)商與以往投標(biāo)項(xiàng)目過程的基本情況有無明顯變化（如資質(zhì)、資格、產(chǎn)品規(guī)模等）；再其次，選擇同一個(gè)供應(yīng)商時(shí)在時(shí)間跨度上不宜太大，否則會(huì)受政策環(huán)境、評(píng)標(biāo)標(biāo)準(zhǔn)變化等因素影響；最后，滿足前三個(gè)基本條件的，可以對(duì)專家的評(píng)分進(jìn)行縱向抽樣比較。如發(fā)現(xiàn)專家對(duì)同一個(gè)企業(yè)的評(píng)分存在明顯偏離的，就有理由懷疑其存在異常評(píng)分行為。

設(shè)專家本次評(píng)分結(jié)果為Qi，歷史上專家對(duì)于該企業(yè)的評(píng)分為Q，預(yù)設(shè)的縱向偏離區(qū)間為▽，則合理縱向偏離幅度應(yīng)當(dāng)滿足公式②。

評(píng)審時(shí)長(zhǎng)判定（Determination of bid evaluation duration，EVD）是橫向偏差判定和縱向偏差判定以外的一個(gè)重要且簡(jiǎn)捷有效的補(bǔ)充判定方法。理論依據(jù)簡(jiǎn)單，即沒有足夠的評(píng)審時(shí)長(zhǎng)保障，專家不可能作出合理的評(píng)審結(jié)論。由于我國(guó)的政府采購(gòu)一般都是通過計(jì)算機(jī)評(píng)審系統(tǒng)對(duì)電子投標(biāo)文件進(jìn)行評(píng)審，因此，專家在瀏覽電子文檔的駐留時(shí)間很容易被計(jì)算機(jī)自動(dòng)記錄下來（一般利用Ajax輪詢技術(shù)就可調(diào)用專家瀏覽投標(biāo)文件的后臺(tái)日志），如此容易判斷專家能否給出公正的評(píng)審結(jié)論。這個(gè)時(shí)間維度的指標(biāo)可以從多個(gè)角度來定義或者計(jì)算，比如，可以計(jì)算單頁(yè)駐留時(shí)長(zhǎng)、全文本頁(yè)面平均駐留時(shí)長(zhǎng)、頁(yè)面停留極端時(shí)長(zhǎng)（即單頁(yè)最長(zhǎng)或者最短駐留時(shí)長(zhǎng)）等。

當(dāng)然要構(gòu)建合理的標(biāo)書文件駐留時(shí)長(zhǎng)模型不易，因?yàn)闀r(shí)長(zhǎng)模型涉及的參數(shù)眾多，要充分考慮投標(biāo)文件字體的大小、文字內(nèi)容的難易程度、信息密集程度，以及專家的閱讀習(xí)慣、專業(yè)水平等。有時(shí)為了方便起見，也可以采用縱橫比較的方法來作一些粗略的判斷，比如評(píng)標(biāo)時(shí)長(zhǎng)不到其他專家平均時(shí)長(zhǎng)的1/5，那就需要重點(diǎn)關(guān)注該評(píng)委有沒有存在草率評(píng)標(biāo)的情形。另外，專家對(duì)于不同的投標(biāo)文件存在明顯的瀏覽時(shí)間差異也是一個(gè)應(yīng)當(dāng)引起重視的現(xiàn)象，因?yàn)?，很難想象，專家對(duì)于不同的投標(biāo)文件在嚴(yán)重不對(duì)等的時(shí)長(zhǎng)分配下能給出令人信服的結(jié)論。