《核電廠無損檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)評(píng)價(jià)方法第1部分：射線》編制說明一、工作簡(jiǎn)況1、任務(wù)來源隨著人工智能技術(shù)的快速發(fā)展，基于深度卷積網(wǎng)絡(luò)的圖像識(shí)別技術(shù)近年來取得了突破性的進(jìn)展，并在核電站設(shè)備射線無損檢測(cè)的圖像識(shí)別與評(píng)價(jià)中逐步開始應(yīng)用。未來可能會(huì)進(jìn)一步作為核電站設(shè)備無損檢測(cè)人員的輔助工具甚至替代性工具。但是目前為止，該項(xiàng)技術(shù)的提供方、應(yīng)用方對(duì)于該類工具的具體實(shí)現(xiàn)過程、能力評(píng)價(jià)并不統(tǒng)一，可能會(huì)給核電站設(shè)備射線檢測(cè)結(jié)果的質(zhì)量和可靠性帶來較大的風(fēng)險(xiǎn)。因此對(duì)于該類自動(dòng)缺陷識(shí)別與評(píng)價(jià)技術(shù)需要進(jìn)行評(píng)價(jià)，并提供統(tǒng)一的標(biāo)準(zhǔn)。為了有效衡量該技術(shù)在核電廠射線檢測(cè)缺陷評(píng)定中使用的可靠性，建立規(guī)范化、標(biāo)準(zhǔn)化的評(píng)價(jià)方法，由大亞灣核電運(yùn)營(yíng)管理有限責(zé)任公司和北京理工大學(xué)重慶創(chuàng)新中心提出，中國(guó)核能行業(yè)協(xié)會(huì)組織實(shí)施《核電廠無損檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)評(píng)價(jià)方法第1部分：射線》團(tuán)體標(biāo)準(zhǔn)的立項(xiàng)工作。本標(biāo)準(zhǔn)項(xiàng)目于2023年12月30日向中國(guó)核能行業(yè)協(xié)會(huì)提交團(tuán)體標(biāo)準(zhǔn)項(xiàng)目申報(bào)書，并于2024年4月2日經(jīng)中國(guó)核能行業(yè)協(xié)會(huì)組織專家審議通過，由申請(qǐng)單位大亞灣核電運(yùn)營(yíng)管理有限責(zé)任公司和北京理工大學(xué)重慶創(chuàng)新中心籌備標(biāo)準(zhǔn)的編寫，項(xiàng)目正式啟動(dòng)。（一）標(biāo)準(zhǔn)的起草單位及起草人本標(biāo)準(zhǔn)負(fù)責(zé)起草單位：大亞灣核電運(yùn)營(yíng)管理有限責(zé)任公司、北京理工大學(xué)重慶創(chuàng)新中心。本標(biāo)準(zhǔn)參加起草單位：XXX。本標(biāo)準(zhǔn)主要起草人：XXX。2、主要工作過程（一）項(xiàng)目籌備2023年10月，北京理工大學(xué)重慶創(chuàng)新中心與大亞灣核電運(yùn)營(yíng)管理有限責(zé)任公司開始籌備起草組，編制了《核電廠無損檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)評(píng)價(jià)方法第1部分：射線》團(tuán)體標(biāo)準(zhǔn)制定工作方案，明確了團(tuán)標(biāo)編制工作計(jì)劃，向核電廠運(yùn)營(yíng)公司、工程公司、檢測(cè)公司、設(shè)計(jì)公司等核電廠相關(guān)專業(yè)無損檢測(cè)技術(shù)機(jī)構(gòu)發(fā)出編制邀請(qǐng)，最終7家單位企業(yè)接受邀請(qǐng)參加團(tuán)體標(biāo)準(zhǔn)的編制工作，于2023年12月10日確定參與編制單位及人員，項(xiàng)目籌備完成，正式啟動(dòng)。（二）項(xiàng)目起草組成立及第一次工作會(huì)議標(biāo)準(zhǔn)起草及參與編制單位于2024年4月10日組織召開本標(biāo)準(zhǔn)起草組成立暨第一次工作會(huì)議，正式啟動(dòng)標(biāo)準(zhǔn)編寫工作。會(huì)議就起草組的組建及標(biāo)準(zhǔn)制定的相關(guān)問題進(jìn)行了協(xié)商與研究，對(duì)標(biāo)準(zhǔn)草案框架進(jìn)行了認(rèn)真談?wù)摚ㄟ^了《核電廠無損檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)評(píng)價(jià)方法第1部分：射線》團(tuán)體標(biāo)準(zhǔn)制定工作方案。（1）會(huì)議對(duì)《核電廠無損檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)評(píng)價(jià)方法第1部分：射線》團(tuán)體標(biāo)準(zhǔn)的題目、框架、內(nèi)容進(jìn)行了認(rèn)真討論，通過了《核電廠無損檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)評(píng)價(jià)方法第1部分：射線》團(tuán)體標(biāo)準(zhǔn)制定工作方案。（2）會(huì)議確定，本標(biāo)準(zhǔn)的框架為:1、范圍；2、規(guī)范性引用文件；3、術(shù)語(yǔ)和定義；4、人員要求；5、基本要求；6、評(píng)價(jià)流程；7、標(biāo)準(zhǔn)測(cè)試集；8、性能測(cè)試；9、評(píng)價(jià)指標(biāo)；10、評(píng)價(jià)結(jié)果；附錄：評(píng)價(jià)報(bào)告模板。（3）會(huì)議確定，本標(biāo)準(zhǔn)的適用范圍是：核電廠金屬熔化焊焊接接頭射線底片缺陷自動(dòng)識(shí)別系統(tǒng)的應(yīng)用評(píng)價(jià)，適用的射線檢測(cè)圖像來源為通過X或伽馬射線檢測(cè)獲得的物理底片經(jīng)底片數(shù)字化設(shè)備掃描后的圖像。通過X射線數(shù)字成像（DR）檢測(cè)直接獲取的圖像和通過X射線計(jì)算機(jī)輔助成像（CR）檢測(cè)拍攝并掃描的圖像可參照使用。（4）會(huì)議確定了編制計(jì)劃，明確了各部分內(nèi)容的編制單位及完成時(shí)間，確定了團(tuán)體標(biāo)準(zhǔn)編制工作各環(huán)節(jié)的時(shí)間節(jié)點(diǎn)。（5）會(huì)議確定：由北京理工大學(xué)重慶創(chuàng)新中心負(fù)責(zé)團(tuán)標(biāo)草案的撰寫及地標(biāo)方法的理論和技術(shù)支持，由大亞灣核電運(yùn)營(yíng)管理有限責(zé)任公司等8家單位協(xié)助團(tuán)標(biāo)草案的撰寫，配合標(biāo)準(zhǔn)方法驗(yàn)證相關(guān)的技術(shù)支持，配合標(biāo)準(zhǔn)方法驗(yàn)證的應(yīng)用平臺(tái)及技術(shù)支持，配合標(biāo)準(zhǔn)底片的提供。（6）會(huì)議確定：由各參編單位提供的標(biāo)準(zhǔn)缺陷底片的數(shù)量、缺陷類型及要求。（三）項(xiàng)目起草組第二次工作會(huì)議標(biāo)準(zhǔn)起草組于2024年9月26日在線上組織召開了第二次工作會(huì)議，對(duì)團(tuán)體標(biāo)準(zhǔn)初稿的內(nèi)容進(jìn)行了討論和研究。由標(biāo)準(zhǔn)執(zhí)筆人李琰介紹了標(biāo)準(zhǔn)初稿的起草情況及征求起草組成員意見后的修訂情況，并進(jìn)行了討論。（1）會(huì)議對(duì)標(biāo)準(zhǔn)草案的內(nèi)容和格式進(jìn)行了全面的梳理。（2）會(huì)議確定，團(tuán)標(biāo)中部分內(nèi)容需進(jìn)行修訂，并明確了修訂部分的具體分工。（3）會(huì)議確定，團(tuán)標(biāo)修訂完成后，再次舉行工作會(huì)議，對(duì)修訂部分的內(nèi)容進(jìn)討論。（四）項(xiàng)目起草組第三次工作會(huì)議標(biāo)準(zhǔn)起草組于2024年12月12日組織舉行了第三次工作會(huì)議，本次會(huì)議就第二次會(huì)議提出的修訂部分進(jìn)行了討論和研究，由標(biāo)準(zhǔn)執(zhí)筆人李琰介紹了第二次會(huì)議提出的修訂部分的修訂情況，并對(duì)修訂內(nèi)容進(jìn)行了逐條討論。通過討論，會(huì)議確定：團(tuán)體標(biāo)準(zhǔn)編制內(nèi)容已初步符合要求，已完成編制目標(biāo)，可作為征求意見稿進(jìn)行上報(bào)。二、標(biāo)準(zhǔn)編制原則和主要內(nèi)容1、標(biāo)準(zhǔn)編制原則（一）標(biāo)準(zhǔn)編制原則本標(biāo)準(zhǔn)按照GB/T1.1-2020《標(biāo)準(zhǔn)化工作導(dǎo)則第1部分：標(biāo)準(zhǔn)化文件的結(jié)構(gòu)和起草規(guī)則進(jìn)行編寫，力求依據(jù)科學(xué)、定義準(zhǔn)確、表述明確、適宜操作。本標(biāo)準(zhǔn)的編寫符合核電行業(yè)設(shè)備可靠性評(píng)價(jià)方法發(fā)展的原則，本著先進(jìn)性、科學(xué)性、合理性和可操作性的原則以及標(biāo)準(zhǔn)的目標(biāo)、統(tǒng)一性、協(xié)調(diào)性、實(shí)用性、一致性和規(guī)范性原則來進(jìn)行本標(biāo)準(zhǔn)的制定工作。（1）先進(jìn)性原則本標(biāo)準(zhǔn)對(duì)核電廠射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)評(píng)價(jià)方法進(jìn)行了大量實(shí)測(cè)數(shù)據(jù)驗(yàn)證，并參考了國(guó)際先進(jìn)標(biāo)準(zhǔn)ASTME3327/E3327M-21《StandardGuidefortheQualificationandControloftheAssistedDefectRecognitionofDigitalRadiographicTestData》對(duì)于缺陷自動(dòng)識(shí)別系統(tǒng)的定義及劃分，標(biāo)準(zhǔn)更具有先進(jìn)性。（2）適用性原則本標(biāo)準(zhǔn)規(guī)定了核電廠射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)評(píng)價(jià)工作的全過程，包括評(píng)價(jià)前人員要求和基本要求，評(píng)價(jià)時(shí)對(duì)于標(biāo)準(zhǔn)測(cè)試集、標(biāo)準(zhǔn)底片及標(biāo)注樣本的加工過程、性能測(cè)試方法、評(píng)價(jià)指標(biāo)、評(píng)價(jià)后系統(tǒng)分級(jí)和潛在使用風(fēng)險(xiǎn)分析、評(píng)價(jià)報(bào)告編制等環(huán)節(jié)建立規(guī)范，以統(tǒng)一核電廠射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)評(píng)價(jià)方法，使其向科學(xué)化、合理化方向邁進(jìn)，減少核電廠射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)評(píng)價(jià)的主觀性、隨意性，增加科學(xué)性、客觀性，從而達(dá)到提高核電廠行業(yè)檢測(cè)評(píng)價(jià)設(shè)備可靠性的目的。（3）統(tǒng)一性原則本標(biāo)準(zhǔn)制定中充分考慮了核電廠對(duì)于射線檢測(cè)底片缺陷識(shí)別的要求與性能，參考了NB/T47013.2《承壓設(shè)備無損檢測(cè)第2部分：射線檢測(cè)》、RCCM《MC3000射線照相檢驗(yàn)RCCM中文版法國(guó)民用核電標(biāo)準(zhǔn)》、ASME三部分標(biāo)準(zhǔn)中對(duì)射線檢測(cè)缺陷評(píng)定的要求及檢出缺陷類型的要求，標(biāo)準(zhǔn)測(cè)試集中的重點(diǎn)關(guān)注缺陷范圍與缺陷類型要求與以上標(biāo)準(zhǔn)統(tǒng)一，達(dá)到統(tǒng)一性原則，方便標(biāo)準(zhǔn)的具體實(shí)施。2、標(biāo)準(zhǔn)主要內(nèi)容的依據(jù)1、范圍本章規(guī)定了本標(biāo)準(zhǔn)的使用范圍。介紹了本標(biāo)準(zhǔn)適用于核電廠無損檢測(cè)（射線）缺陷自動(dòng)識(shí)別系統(tǒng)的評(píng)價(jià)方法。規(guī)定本文件適用于核電廠金屬熔化焊焊接接頭射線底片缺陷自動(dòng)識(shí)別系統(tǒng)的應(yīng)用評(píng)價(jià)，適用的射線檢測(cè)圖像來源為通過X或伽馬射線檢測(cè)獲得的物理底片經(jīng)底片數(shù)字化設(shè)備掃描后的圖像。通過X射線數(shù)字成像（DR）檢測(cè)直接獲取的圖像和通過X射線計(jì)算機(jī)輔助成像（CR）檢測(cè)拍攝并掃描的圖像可參照使用。X或伽馬射線檢測(cè)仍是核電廠設(shè)備焊縫做最主要的射線檢測(cè)手段，因此本標(biāo)準(zhǔn)的技術(shù)及應(yīng)用范圍也主要圍繞這兩種檢測(cè)手段。2、規(guī)范性引用文件本章規(guī)定了本標(biāo)準(zhǔn)需要引用的、必不可少的文件。本章的引用文件主要分類四類：一是人員標(biāo)準(zhǔn)（規(guī)定了評(píng)價(jià)人員的要求）；二是軟件及設(shè)備標(biāo)準(zhǔn)（規(guī)定了軟件及底片掃描儀的質(zhì)量要求）；三是無損檢測(cè)標(biāo)準(zhǔn)（規(guī)定了缺陷的識(shí)別范圍及評(píng)級(jí)要求）；四是缺陷智能識(shí)別系統(tǒng)標(biāo)準(zhǔn)。3、術(shù)語(yǔ)和定義本章參考相關(guān)標(biāo)準(zhǔn)、規(guī)范及行業(yè)慣例，對(duì)適用于本標(biāo)準(zhǔn)表述的“缺陷自動(dòng)識(shí)別系統(tǒng)”、“自動(dòng)評(píng)片”、“輔助評(píng)片”、“正檢”、“誤檢”、“漏檢”、“誤判”、“位置準(zhǔn)確率”、“尺寸準(zhǔn)確率”等做了名詞定義。由于本標(biāo)準(zhǔn)屬于首次發(fā)布，標(biāo)準(zhǔn)對(duì)應(yīng)的技術(shù)也屬于新技術(shù)范疇，為了標(biāo)準(zhǔn)的理解及推廣，本章規(guī)定了必要的相關(guān)術(shù)語(yǔ)。4、人員要求本章規(guī)定了核電廠射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)評(píng)人員資質(zhì)要求及技能要求。人員要求主要參考中華人民共和國(guó)生態(tài)環(huán)境部令第6號(hào)《民用核安全設(shè)備無損檢驗(yàn)人員資格管理規(guī)定》對(duì)于人員的規(guī)定。5、基本要求本章規(guī)定了核電廠射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)的基本要求，包括識(shí)別效率、軟件功能、運(yùn)行環(huán)境、系統(tǒng)可靠性、系統(tǒng)安全性及系統(tǒng)升級(jí)的要求。射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)的載體是一套軟件，本章是在應(yīng)用實(shí)踐的基礎(chǔ)上總結(jié)了軟件的具體要求。6、評(píng)價(jià)流程本章規(guī)定了核電廠射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)性能評(píng)價(jià)的流程步驟，包括標(biāo)準(zhǔn)測(cè)試集、性能測(cè)試、評(píng)價(jià)指標(biāo)及評(píng)價(jià)結(jié)果四個(gè)步驟。本標(biāo)準(zhǔn)的核心內(nèi)容是對(duì)缺陷自動(dòng)識(shí)別性能的測(cè)試及評(píng)價(jià)，因此建立一套客觀完善的標(biāo)準(zhǔn)化評(píng)價(jià)流程至關(guān)重要。本章通過流程圖的形式描述了缺陷自動(dòng)識(shí)別系統(tǒng)性能的評(píng)價(jià)流程，為接下來的第7章、第8章、第9章及第10章內(nèi)容奠定基礎(chǔ)。7、標(biāo)準(zhǔn)測(cè)試集本章規(guī)定了用于評(píng)價(jià)系統(tǒng)性能的標(biāo)準(zhǔn)測(cè)試集的要求，包括標(biāo)準(zhǔn)底片的質(zhì)量要求、缺陷類型要求、測(cè)試集構(gòu)建要求及標(biāo)注樣本的加工過程。8、性能測(cè)試本章規(guī)定了自動(dòng)識(shí)別結(jié)果的性能測(cè)試過程，包括生成預(yù)測(cè)樣本、樣本偏離程序及生成混淆矩陣三部分。評(píng)價(jià)指標(biāo)本章規(guī)定了使用8節(jié)中的性能測(cè)試結(jié)果計(jì)算缺陷自動(dòng)識(shí)別系統(tǒng)的評(píng)價(jià)精度指標(biāo)，包括缺陷識(shí)別精度和質(zhì)量判級(jí)精度。評(píng)價(jià)結(jié)果本章規(guī)定了基于評(píng)價(jià)指標(biāo)對(duì)缺陷自動(dòng)識(shí)別系統(tǒng)的分級(jí)結(jié)果、使用潛在使用風(fēng)險(xiǎn)分析及評(píng)價(jià)報(bào)告內(nèi)容。附錄本章為資料性附錄，規(guī)定了評(píng)價(jià)報(bào)告的模板。3、解決的主要問題在制造業(yè)數(shù)字化與智能化轉(zhuǎn)型中，無損檢測(cè)技術(shù)也開始數(shù)字化、智能化建設(shè)落地實(shí)踐。目前，在核電站設(shè)備在役檢查中主要依靠人工評(píng)片的方式來確保產(chǎn)品品質(zhì)，但面對(duì)大量的檢測(cè)樣本，無損檢測(cè)檢驗(yàn)人員單純依靠觀片燈等方式進(jìn)行缺陷檢定，在長(zhǎng)期高亮度環(huán)境下，難免出現(xiàn)缺陷的誤判，同時(shí)也受檢驗(yàn)人員技能限制或者主觀因素影響，限制了檢測(cè)水平的提升。目前，數(shù)量巨大的檢測(cè)圖片由檢驗(yàn)人員逐一完成，檢測(cè)效率低且存在一定的漏檢，影響核電站設(shè)備在役檢查的進(jìn)度及質(zhì)量。隨著人工智能技術(shù)的快速發(fā)展，基于深度卷積網(wǎng)絡(luò)的圖像識(shí)別技術(shù)近年來取得了突破性的進(jìn)展，并在核電站設(shè)備射線無損檢測(cè)的圖像識(shí)別與評(píng)價(jià)中逐步開始應(yīng)用。未來可能會(huì)進(jìn)一步作為核電站設(shè)備無損檢測(cè)人員的輔助工具甚至替代性工具。但是目前為止，該項(xiàng)技術(shù)的提供方、應(yīng)用方對(duì)于該類工具的具體實(shí)現(xiàn)過程、能力評(píng)價(jià)并不統(tǒng)一，可能會(huì)給核電站設(shè)備射線檢測(cè)結(jié)果的質(zhì)量和可靠性帶來較大的風(fēng)險(xiǎn)。因此對(duì)于該類自動(dòng)缺陷識(shí)別與評(píng)價(jià)技術(shù)需要進(jìn)行評(píng)價(jià)，并提供統(tǒng)一的標(biāo)準(zhǔn)。目前該技術(shù)已完成技術(shù)性的突破，智能評(píng)片系統(tǒng)已經(jīng)在多個(gè)核電廠上線使用，具有出臺(tái)標(biāo)準(zhǔn)的基礎(chǔ)。但欠缺規(guī)范化、標(biāo)準(zhǔn)化約束，導(dǎo)致不同技術(shù)方、應(yīng)用方難以衡量該技術(shù)在射線檢測(cè)中使用的可靠性，因此迫切需要標(biāo)準(zhǔn)化工作的引領(lǐng)、指導(dǎo)、規(guī)范和約束。本標(biāo)準(zhǔn)從系統(tǒng)缺陷識(shí)別算法性能、系統(tǒng)軟件功能、運(yùn)行效率、可靠性及安全性等幾個(gè)角度出發(fā)，規(guī)定了缺陷識(shí)別精度和質(zhì)量判級(jí)精度2套評(píng)價(jià)性能指標(biāo)，并建立了一套完整的評(píng)價(jià)方法流程，基于識(shí)別性能對(duì)系統(tǒng)進(jìn)行了分類分級(jí)，適用于核電廠設(shè)備焊接接頭射線底片缺陷自動(dòng)識(shí)別系統(tǒng)的應(yīng)用評(píng)價(jià)。三、主要試驗(yàn)（或驗(yàn)證）情況本標(biāo)準(zhǔn)主要研究基于深度學(xué)習(xí)技術(shù)的射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)的評(píng)價(jià)方法，主要實(shí)驗(yàn)內(nèi)容涉及研究標(biāo)準(zhǔn)測(cè)試集、性能測(cè)試方法及評(píng)價(jià)指標(biāo)，開展的專題研究及實(shí)驗(yàn)主要圍繞這三方面展開。針對(duì)核電廠行業(yè)標(biāo)準(zhǔn)測(cè)試集的研究實(shí)驗(yàn)標(biāo)準(zhǔn)測(cè)試集是指一套測(cè)試射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)性能的標(biāo)準(zhǔn)數(shù)據(jù)集，該數(shù)據(jù)集包括缺陷測(cè)試集和評(píng)級(jí)測(cè)試集，而數(shù)據(jù)集的質(zhì)量要求、數(shù)量要求、焊縫類型、缺陷類別要求都是需要經(jīng)過大量測(cè)試專題實(shí)驗(yàn)研究得到，這是保障測(cè)試準(zhǔn)確性、客觀性及全面性的基礎(chǔ)。在焊接接頭射線檢測(cè)中，包括對(duì)缺陷的識(shí)別和焊接接頭的質(zhì)量評(píng)級(jí)。因此我們?cè)谥贫?biāo)準(zhǔn)測(cè)試測(cè)集時(shí)也分為缺陷測(cè)試集和評(píng)級(jí)測(cè)試集。缺陷測(cè)試集用于測(cè)試系統(tǒng)對(duì)缺陷識(shí)別的精度，評(píng)級(jí)測(cè)試集用于測(cè)試系統(tǒng)對(duì)焊接接頭質(zhì)量評(píng)級(jí)的精度。缺陷識(shí)別是質(zhì)量評(píng)級(jí)的基礎(chǔ)，質(zhì)量評(píng)級(jí)是缺陷自動(dòng)識(shí)別系統(tǒng)性能的綜合表現(xiàn)，這兩部分測(cè)試對(duì)于缺陷自動(dòng)識(shí)別系統(tǒng)的性能各有側(cè)重。在標(biāo)準(zhǔn)研制過程中，起草組聯(lián)合整理2套標(biāo)準(zhǔn)測(cè)試集，包括1套承壓設(shè)備熔化焊焊接接頭測(cè)試集與1套承壓設(shè)備管子及壓力管道熔化焊環(huán)向焊接接頭測(cè)試集。（2）性能測(cè)試方法的研究實(shí)驗(yàn)性能測(cè)試方法是研究如何表征預(yù)測(cè)樣本（缺陷自動(dòng)識(shí)別系統(tǒng)預(yù)測(cè)缺陷結(jié)果）對(duì)于標(biāo)注樣本（人工標(biāo)注缺陷的標(biāo)準(zhǔn)答案）的偏離程度，以驗(yàn)證測(cè)試樣本的準(zhǔn)確率。本標(biāo)準(zhǔn)經(jīng)過大量實(shí)驗(yàn)驗(yàn)證，引入IOU（交并比）的計(jì)算方法以表征預(yù)測(cè)樣本對(duì)于標(biāo)注樣本的偏離程度，并經(jīng)過實(shí)驗(yàn)驗(yàn)證得到了IOU的閾值范圍，同時(shí)引入正檢、誤檢、漏檢、誤判等四種表示偏離程度的判據(jù)。（3）評(píng)價(jià)指標(biāo)的研究實(shí)驗(yàn)計(jì)算機(jī)機(jī)器學(xué)習(xí)領(lǐng)域有召回率、準(zhǔn)確率、MAP等指標(biāo)來評(píng)價(jià)模型的性能，但是對(duì)于核電廠行業(yè)無損檢測(cè)人員來說這些指標(biāo)很難理解，而且不能直觀反映模型性能對(duì)使用的影響。因此有必要站在核電廠行業(yè)無損檢測(cè)人員的角度對(duì)計(jì)算機(jī)機(jī)器學(xué)習(xí)領(lǐng)域提出的召回率、準(zhǔn)確率、MAP等指標(biāo)進(jìn)行轉(zhuǎn)化，并提出適用于實(shí)用性評(píng)價(jià)的漏檢率、誤報(bào)率、危害性缺漏率等指標(biāo)，且給出其計(jì)算方法。本標(biāo)準(zhǔn)根據(jù)實(shí)驗(yàn)情況，提出了4個(gè)單類別缺陷識(shí)別精度指標(biāo)和4個(gè)綜合缺陷識(shí)別精度指標(biāo)。四、標(biāo)準(zhǔn)中涉及專利的情況本標(biāo)準(zhǔn)不涉及專利問題。五、預(yù)期達(dá)到的社會(huì)效益、對(duì)產(chǎn)業(yè)發(fā)展的作用等情況隨著勞動(dòng)力成本上升，人口紅利拐點(diǎn)來臨，降本增效及智能化轉(zhuǎn)型的需求，推動(dòng)國(guó)內(nèi)基于Al人工智能的質(zhì)量檢測(cè)技術(shù)發(fā)展進(jìn)入快速通道，應(yīng)用領(lǐng)域隨之逐步擴(kuò)大，由電子制造業(yè)和半導(dǎo)體生產(chǎn)企業(yè)，逐步發(fā)展到核電廠無損檢測(cè)領(lǐng)域，基于人工智能的射線檢測(cè)缺陷的識(shí)別與評(píng)定在核電廠設(shè)備逐步開始應(yīng)用。射線檢測(cè)領(lǐng)域，無損檢測(cè)技術(shù)逐步向智能化及數(shù)字化轉(zhuǎn)型，因此需使用標(biāo)準(zhǔn)對(duì)技術(shù)進(jìn)行約束、指導(dǎo)，當(dāng)前該領(lǐng)域目前國(guó)內(nèi)外仍未形成相關(guān)的標(biāo)準(zhǔn)，而本標(biāo)準(zhǔn)的制定可彌補(bǔ)空白。核電廠射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)主要應(yīng)用在核電廠焊接質(zhì)量無損檢測(cè)場(chǎng)景中，此類設(shè)備往往具有運(yùn)行工況要求高、使用時(shí)間長(zhǎng)、質(zhì)量風(fēng)險(xiǎn)大、事故危害大等特點(diǎn)，直接影響到社會(huì)的安全生產(chǎn)，而確保風(fēng)險(xiǎn)降低的關(guān)鍵則在于質(zhì)量檢測(cè)的可靠性。使用自動(dòng)缺陷識(shí)別系統(tǒng)可實(shí)現(xiàn)射線檢測(cè)由人為主觀評(píng)定缺陷升級(jí)為計(jì)算機(jī)系統(tǒng)自動(dòng)識(shí)別質(zhì)量缺陷，在實(shí)現(xiàn)檢測(cè)速度大幅度提升的基礎(chǔ)上，發(fā)揮計(jì)算機(jī)客觀、高精度的檢測(cè)優(yōu)勢(shì)，提升核電廠質(zhì)量檢測(cè)水平，強(qiáng)化核電廠質(zhì)量管控，為社會(huì)安全生產(chǎn)提供一定程度的保障。而本標(biāo)準(zhǔn)的建立、可以對(duì)該技術(shù)進(jìn)行規(guī)范化、標(biāo)準(zhǔn)化約束，解決不同技術(shù)方、應(yīng)用方難以衡量該技術(shù)在射線檢測(cè)中使用的可靠性的問題，加速這項(xiàng)技術(shù)的產(chǎn)業(yè)化應(yīng)用。六、與國(guó)際、國(guó)外對(duì)比情況（一）采用國(guó)際標(biāo)準(zhǔn)、國(guó)外先進(jìn)標(biāo)準(zhǔn)情況無（二）本標(biāo)準(zhǔn)查閱參照采用的相關(guān)國(guó)家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)本標(biāo)準(zhǔn)制定時(shí)參考了以下依據(jù)：GB/T25000.51《系統(tǒng)與軟件工程系統(tǒng)與軟件質(zhì)量要求和評(píng)價(jià)（SQuaRE）第51部分：就緒可用軟件產(chǎn)品（RUSP）的質(zhì)量要求和測(cè)試細(xì)則》GB/T28452《信息安全技術(shù)應(yīng)用軟件系統(tǒng)通用安全技術(shù)要求》NB/T2709《核電廠射線照相底片數(shù)字化技術(shù)規(guī)范》NB/T47013《承壓設(shè)備無損檢測(cè)第2部分：射線檢測(cè)》發(fā)展趨勢(shì)標(biāo)準(zhǔn)化的工作是伴隨著技術(shù)的成熟度逐步開展的，前一技術(shù)階段的標(biāo)準(zhǔn)為下一階段的技術(shù)應(yīng)用及標(biāo)準(zhǔn)工作奠定了基礎(chǔ)。射線檢測(cè)缺陷自動(dòng)識(shí)別系統(tǒng)技術(shù)是隨著射線檢測(cè)數(shù)字化技術(shù)的應(yīng)用逐步發(fā)展并應(yīng)用的。目前我國(guó)射線檢測(cè)數(shù)字化的標(biāo)準(zhǔn)分為兩大類：一類是數(shù)字射線檢測(cè)技術(shù)，包括DR及CR等技術(shù)；一類是射線檢測(cè)底片數(shù)字化技術(shù)，主要指底片掃描技術(shù)。核電廠射線檢測(cè)目前主要使用的仍是以膠片為主的傳統(tǒng)射線檢測(cè)技術(shù)，其數(shù)字化應(yīng)用重點(diǎn)在膠片成像后的底片掃描技術(shù)。圍繞底片數(shù)字化及智能缺陷識(shí)別技術(shù)，底片掃描儀標(biāo)準(zhǔn)及底片數(shù)字化技術(shù)標(biāo)準(zhǔn)目前已經(jīng)發(fā)布了相關(guān)國(guó)家、行業(yè)及團(tuán)體標(biāo)準(zhǔn)，智能缺陷識(shí)別技術(shù)（主要指AI技術(shù)）應(yīng)用仍在起步階段，因此與其相關(guān)的標(biāo)準(zhǔn)目前在國(guó)內(nèi)仍是空白。下一階段隨著智能缺陷識(shí)別技術(shù)在核電廠設(shè)備檢