日韩激情无码免费毛片-日韩经典视频-日韩经典一区-日韩经典在线-精品国产91久久久久-精品国产91久久久久久久

醫療器械法規、注冊、臨床、體系認證、信息系統一站式服務
24×7服務熱線:0571-86198618 簡體中文 ENGLISH
當前位置:網站首頁>新聞動態 >影像超聲人工智能軟件(流程優化類功能)技術審評要點(2023年第23號)
影像超聲人工智能軟件(流程優化類功能)技術審評要點(2023年第23號)
發布日期:2023-07-10 00:00瀏覽次數:1830次
《影像超聲人工智能軟件(流程優化類功能)技術審評要點》旨在指導注冊申請人對影像超聲產品中流程優化類人工智能軟件功能注冊申報資料的準備及撰寫,同時也為技術審評部門審評注冊申報資料提供參考。是對影像超聲產品中流程優化類人工智能軟件功能的一般要求,醫療器械注冊申請人應依據產品的具體特性確定其中內容是否適用,若不適用,需具體闡述理由及相應的科學依據,并依據產品的具體特性對注冊申報資料的內容進行充實和細化。

影像超聲人工智能軟件(流程優化類功能)技術審評要點

本審評要點旨在指導注冊申請人對影像超聲產品中流程優化類人工智能軟件功能注冊申報資料的準備及撰寫,同時也為技術審評部門審評注冊申報資料提供參考。

本審評要點是對影像超聲產品中流程優化類人工智能軟件功能的一般要求,醫療器械注冊申請人應依據產品的具體特性確定其中內容是否適用,若不適用,需具體闡述理由及相應的科學依據,并依據產品的具體特性對注冊申報資料的內容進行充實和細化。本審評要點不包括臨床評價的要求。

一、適用范圍

本審評要點適用于影像超聲產品中流程優化類人工智能軟件功能(以下簡稱“超聲流程優化AI功能”)的注冊。上述功能應由有相應超聲診斷資質和能力的醫生使用。上述功能通常集成于影像超聲設備中,其產品分類依從于影像超聲設備,按現行《醫療器械分類目錄》,該類產品分類編碼為06-07,管理類別為II類或III類;上述功能若集成于獨立軟件,分類編碼為21-02,基于《人工智能醫療器械分類界定指導原則》,作為流程優化功能,管理類別為II類。

輔助診斷類超聲AI功能由于尚無產品批準,缺乏審評經驗,暫不納入本審評要點,可參考適應的內容。

影像超聲人工智能軟件注冊.jpg

二、產品簡介

超聲流程優化AI功能主要實現定位標準切面、生理結構識別與分割、自動測量、診斷流程自動化等功能,進而起到減少醫生重復勞動、提高效率的作用,目前多見于婦產科胎兒、心臟的超聲檢查和頻譜多普勒檢查,也見于實質器官、肌骨、神經的檢查,少見于彩色多普勒檢查。以上提到的結構分割,僅限于分割正常組織結構(包括先天畸形或后天發育失常或受傷導致的正常組織結構發生異于常人的變化,如先天性心臟病),不用于分割疑似病灶組織結構,如甲狀腺結節、乳腺結節,否則屬于輔助診斷功能,不屬于流程優化功能。對疑似病灶進行輔助識別和輔助診斷是超聲診斷中的常見任務,該任務中病灶輔助識別不屬于本要點討論的流程優化功能。

不同于放射科影像設備的固定位置、標準參數的采集方式,影像超聲需要超聲醫師自行尋找所需切面同時進行診斷,或為了觀察到特定結構、病灶需要從多個角度不同切面進行觀察,超聲診斷標準化是一個重要問題。影像超聲的診斷流程經常要求采集標準切面,在切面中找到指定生理結構或標志點,進行測量,通過與標準圖譜或標準數據庫對比作出診斷。有些診療流程規定須觀察到的切面、結構、標志點、特征多普勒頻譜以及相關測量非常多,如產科排畸檢查、超聲心動圖檢查,工作量大而重復,亟需自動化工具。相應的流程優化功能不但可以減少醫生重復勞動提高效率,還有利于實現超聲診斷標準化提高診斷質量。

不同于放射影像通常在醫生已經對疾病有所懷疑時才進行檢查,超聲診斷的應用場景更廣,在體檢、定期檢查、診斷、手術中均有應用。診療流程越靠前的檢查,檢查量越大,部分檢查目的側重于確認正常,并同時發現異常或定期觀察進展。需求量越大、診斷流程越復雜的超聲檢查,流程優化功能的價值就越大。部分超聲流程優化AI功能的臨床風險相對較低,但其中的高風險因素必須予以重視。

三、參考文件

[1] 國家食品藥品監督管理局.醫療器械說明書和標簽管理規定:國家食品藥品監督管理總局令第6號[Z].

[2] 國家藥品監督管理局.醫療器械安全和性能的基本原則:國家藥品監督管理總局公告2020年第18號 [Z]

[3] 國家藥品監督管理局.醫療器械通用名稱命名規則:國家藥品監督管理總局令第19號[Z].

[4] 國家藥品監督管理局.醫用軟件通用名稱命名指導原則: 國家藥品監督管理總局通告2021年第48號[Z]

[5] 國家食品藥品監督管理局.醫療器械分類目錄:國家食品藥品監督管理總局公告2017年第104號[Z].

[6] 國家藥品監督管理局. 人工智能醫用軟件產品分類界定指導原則: 國家藥監局器審中心通告2021年第47號[Z]

[7] 國家藥品監督管理局.醫療器械產品技術要求編寫指導原則:國家藥監局通告2022年第8號[Z].

[8] 國家藥品監督管理局醫療器械審評中心.醫療器械軟件注冊審查指導原則(2022年修訂版):國家藥監局器審中心通告2022年第9號[Z].

[9] 國家藥品監督管理局醫療器械審評中心.醫療器械網絡安全注冊審查指導原則(2022年修訂版):國家藥監局器審中心通告2022年第7號[Z].

[10] 國家藥品監督管理局醫療器械審評中心.人工智能醫療器械注冊審查指導原則:國家藥監局器審中心通告2022年第8號[Z].

四、審評主要關注點

在參照的法規、規章、指導原則、標準的情況前提下,結合下列關注點開展技術審評。

(一)綜述資料

1.產品名稱

此類功能一般集成于影像超聲主機或超聲圖像處理軟件中,產品名稱依從于所集成產品。功能名稱可以包含英文,應保持同一功能的規范名稱在產品資料中保持一致。功能名稱相似的,應明確實質差異,如同名的不同代際功能,可以通過名稱或版本號予以區別。

2.結構組成

集成于影像超聲主機時,結構功能無需體現。集成于處理超聲影像的獨立軟件時,結構組成應體現出包括AI的功能模塊。

其他按照《人工智能醫療器械注冊審查指導原則》在算法研究報告中提供算法基本信息,結合本產品特點應注意和細化的要求詳見下文算法研究資料的算法基本信息。

(二)非臨床資料

1.產品技術要求及檢測報告

1.1規格信息

應給出軟件發布版本和版本命名規則。軟件版本命名規則原則上應涵蓋算法驅動型更新和數據驅動型更新,明確并區分重大軟件更新和輕微軟件更新,其中重大軟件更新列舉常見典型情況。AI功能若是軟件模塊,若有單獨的版本、版本命名規則均需說明。

明確AI功能可處理的超聲影像輸入,如超聲機型、探頭、成像參數、檢查方式、檢查部位、影像形式。超聲機型和探頭應明確制造商和型號,且應為國內上市的產品。成像參數應考慮頻率、增益、深度、動態范圍、焦點、幀頻、諧波成像、多波束成像等,若是某探頭用于某部位的默認參數,可以簡化描述。影像形式明確單幀或序列圖像,對全圖處理還是需要先分割出特定區域,是否包括種子點、采樣窗、患者病歷(如年齡、性別、地域、主訴、病史等)等其他信息。相應內容應已通過算法影響因素分析論證。

若預期操作者包括超聲醫師之外的用戶,應在此處予以明確。

1.2性能指標

以AI功能為單位(而不是算法)描述臨床功能、使用限制、運行環境(若適用)、性能效率(若適用)。臨床功能應簡要描述輸入輸出,并在附錄中提供典型界面圖片,明確采用深度學習AI算法的部分;實現分類、分割功能和生成自然語言描述的枚舉可給出的所有情況;明確AI輸出的哪些內容可由醫生修改。使用限制考慮從流行病學分布、預期應用場景、成像質量不佳或范圍不夠、易混淆圖像、有影響的身體狀態或疾病、植入物、先天或后天身體結構異常等方面簡要描述。運行環境(含云計算)明確典型配置,包括硬件配置、外部軟件環境、網絡條件,僅運行在所申報超聲主機上的AI功能,運行環境可不適用。性能效率明確軟件在典型運行環境下完成典型核心功能的時間特性。

2.軟件研究

申請人應依據《醫療器械軟件技術審查指導原則(2022年修訂版)》、《醫療器械網絡安全技術審查指導原則(2022年修訂版)》、《移動醫療器械注冊技術審查指導原則》、《人工智能醫療器械注冊審查指導原則》等指導原則,提交相應注冊申報資料。

3.算法研究資料

應基于《人工智能醫療器械審查指導原則》第四章生存周期過程、第五章技術考量、第六章算法研究資料的所有相關要求提供算法研究報告或算法更新研究報告,認為不適用的應詳述理由。不同功能應分別提供算法研究報告,一個功能中包括多個相對獨立AI算法的建議分別提供算法研究報告,有工作流銜接關系的算法、功能應說明其關系,宜合并算法研究報告中相同相似內容,但驗證與確認應分別進行。根據此類功能特點需要細化之處如下。以下要求主要針對基于深度學習等新一代人工智能算法的功能,采用傳統模式識別算法的可供參考。

3.1算法基本信息

AI功能及其核心的AI算法穿插于檢查流程中,在某些環節發揮作用。AI功能控制AI算法模塊(可能不只1個)的啟動、運行、停止、結果顯示,以及與其他功能模塊的配合。申請人應對功能和算法分別進行描述,由于超聲檢查流程的復雜性,應重視功能描述。

3.1.1功能描述

應從臨床角度在說明常規診斷流程的基礎上,明確常規流程的哪些環節被AI功能替代或是改變,從技術角度配合流程圖詳細說明功能如何控制各核心AI算法及相關模塊完成功能。簡述功能帶來的臨床價值,用于提高效率的功能,宜給出量化指標。

按照國家藥監局發布的注冊申報資料要求提供產品的適用范圍、預期使用環境、適用人群、禁忌證,需與申報產品的性能、功能相符,并需與臨床評價資料結論一致。使用環境明確預期使用的醫療機構類型、級別、科室及應用場景,如超聲室常規檢查、穿刺引導、麻醉引導、手術中等,適用人群應明確醫生的專業(超聲科、其他科室)、資質、能力水平(年資、培訓),患者的年齡、性別、生理疾病狀態(懷孕的明確孕齡范圍)。

明確產品的設計依據,給出切面、結構、標志點、多普勒頻譜等特征識別功能和測量功能所依據的醫學圖譜、診療指南等的名稱和具體內容,并說明其權威性以及在我國的接受情況和使用情況。

涉及定位標準切面的,應明確針對實時掃查、存儲的圖像序列還是后處理重建圖像,輸出是否可為重建切面(即掃查自然生成切面之外的切面)。處理實時超聲掃查的,明確掃查的幀率和圖像穩定性要求,明確掃查過快圖像不穩定時,功能如何處理和顯示。

涉及多普勒頻譜的,應明確取樣窗放置要求(如位置、角度)。

涉及識別生理結構的,應明確可檢出結構的最小、最大尺寸;是否需要先定位切面再識別結構,還是在掃查中直接識別結構;是否需要從不同角度切面觀察同一結構,關注點有何差異。

涉及測量的,應明確測量的規則,宜展示各參數測量的起止點或區域,并可由醫生調整。

明確算法輸出的展示形式。以圖像區域增強形式展示的,明確圖像增強的方式,給出典型影像表現圖像增強前后的圖片。以提示框、分割區域勾畫展示的,給出典型影像表現的圖片,明確框畫的規則,明確一幀中出現多個同樣結構時分立或融合的規則。以成像區域外示意圖或體標展示的,明確是否有提示醫生注意或確認醫生已注意到的方式,如閃爍、抖動、發聲、點擊確認等,明確是否僅在當前幀檢出目標切面、結構時顯示,還是出現后會延時顯示,是否會自動記錄檢出目標的幀等。若有AI算法輸出但并不進行展示的應進行說明,如作為默認項或作為中間結果參與后續處理再展示的。

涉及多個功能或算法串聯的,明確各功能或算法啟動、展示結果和退出的條件,例如滿足條件后自動啟動,或需點擊按鈕等啟動后續功能。明確AI分析功能的激活時段,如僅在所選幀激活,在采集一段圖像序列時激活,在患者一次檢查的全程激活。

圖像質量問題,如由于機器故障、掃查參數設置不合適、耦合不佳等原因造成圖像模糊、過明過暗、結構失真、偽影等,以及存在治療痕跡、測量/注釋標記等圖像問題,明確算法是否對存在上述情況的圖像進行AI計算并給出結果。是否有圖像質控模塊,還是由醫生評價圖像質量以決定是否啟動核心功能的AI算法。對于在圖像質量不佳時仍運行AI算法的,宜有相關提示,并對結果可靠性可能降低給出提示。

明確在同一幀中切面或結構無法完整顯示時如何處理,如不進行AI計算,或結合相鄰幀,或無需出現完整目標也可識別。由于聲窗和患者身材的限制,有時難以找到包括所有特征的完整切面,但由于超聲檢查的實時,小范圍移動探頭即可覆蓋整個關注區域,檢查到所有結構。如果功能設計為必須先找到完整切面,再啟動找結構的算法,上述情況會導致功能無法正常運行,但只要考慮前后幀這一問題即可解決。

3.1.2算法描述

按照《人工智能醫療器械注冊審查指導原則》明確每個核心AI算法的名稱、類型、結構、輸入輸出、流程圖、算法框架、運行環境等基本信息以及算法選用依據。

算法的輸入應考慮但不限于機型、探頭、成像參數、檢查方式、掃查角度/切面/深淺、成像質量不佳或范圍不足、流行病學分布、預期應用場景、易混淆圖像、有影響的身體狀態或疾病、植入物、先天或后天身體結構異常等。對于不同功能/算法,可能無需考慮上述所有方面,但應給出合理分析。機型考慮波束形成器、發射/接收通道數、成像算法等。探頭考慮陣元數、頻率、孔徑、曲率半徑、寬度、成像范圍等。成像參數考慮頻率、增益、深度、動態范圍、焦點、幀頻、諧波成像、多波束成像等。檢查方式考慮體表、術中、腔內、超聲內窺鏡等。流行病學分布對不同功能可能差異很大,需要深入分析以保證算法設計滿足臨床實際,如某些生理結構、癥狀診斷需考慮性別、年齡、地域、疾病進展期等差異。預期應用場景考慮預期使用的醫院級別、科室(如超聲科、急診科、麻醉科、手術室等),醫生的資質、能力等。易混淆圖像,如與預期圖像相似或相關的圖像,如同一切面或器官上的易混淆圖像,其他器官與之類似的圖像。有影響的身體狀態或疾?。喝绠a科胎齡,肺氣腫對心臟檢查的影響。其他因素已在本文其他部分有所描述。

算法輸入應明確處理單幀還是序列圖像(關聯多幀共同輸出結果,不是雖輸入序列但僅處理單幀),對全圖處理還是需要先分割出特定區域,是否包括種子點、采樣窗、患者病歷(如年齡、性別、地域、主訴、病史等)等其他信息。

應結合功能的特點,對以上因素進行性能影響因素分析,對于處理相應輸入不能得出滿足預期性能要求或未經驗證的因素應考慮作為使用限制。

3.2算法風險管理

明確產品的軟件安全性級別(輕微、中等、嚴重)并詳述判定理由,提供算法風險管理資料。軟件安全性級別可基于產品的預期用途、使用場景、核心功能進行綜合判定,其中預期用途主要考慮用途類型、重要程度、緊迫程度等因素,使用場景主要考慮使用場合、疾病特征、適用人群、目標用戶等因素。核心功能主要考慮功能類型、核心算法、輸入輸出、接口等因素。對于超聲流程優化AI功能,還應考慮所優化流程的復雜程度、使用廣泛程度,功能對現有流程的影響程度,算法的成熟度、性能、泛化能力,以及出現錯誤結果是否能夠被醫生識別糾正等。算法研究資料應與算法的軟件安全性級別相適應。

3.3算法需求規范

提供算法需求規范文檔,若無單獨文檔可提供軟件需求規范,并注明算法需求所在位置。

明確算法訓練數據集需求。樣本量需考慮樣本規模的充分性,明確樣本總量及其確定依據。樣本分布需考慮樣本的科學性和合理性,應考慮機型、探頭、成像參數、檢查方式、掃查角度/切面/深淺、成像質量不佳或范圍不足、流行病學分布、預期應用場景、易混淆圖像、有影響的身體狀態或疾病、植入物、先天或后天身體結構異常等。認為無需考慮的因素給出合理理由,應考慮但不計劃考慮的因素應作為使用限制。訓練數據宜納入一定比例的易混淆樣本和陰性樣本,明確是預期圖像掃查中臨近區域易出現的樣本,還是完全無關的樣本。

明確各算法性能設計目標。結合算法特點、核心功能選擇合理的評價指標,給出性能指標的限值要求及其設定依據。同一功能對于不同應用場景具有不同性能要求的,應分別規定。分類問題可考慮敏感性、特異性、陽性預測值、陰性預測值、準確率、一致率(如kappa)、F-measure、ROC-AUC等。多分類問題不能僅給出總體一致率,應對每一類給出敏感性、特異性等指標。多標簽問題,應明確標簽排序規則(如適用)。識別問題可考慮敏感性、特異性、ROC-AUC等,應明確識別正確的判定標準,如IoU、dice的閾值,并結合臨床給出其合理性。分割問題可考慮交并比IoU、dice系數等,并給出識別準確性方面的指標,參考分類問題。不同算法即使有關聯性,也應分別規定,重點關注最終輸出結果的性能。

3.4數據質控

參考《人工智能醫療器械注冊審查指導原則》四(二)數據收集、六(一)4.數據質控的要求提供相關資料。并注意:

3.4.1數據收集

明確采集數據樣本的機型、探頭、成像參數、采集時長(圖像序列適用),以及來源機構、采集和被采集人員情況、采集時間,比較與算法訓練數據需求的差異。流程優化功能的驗證需要盡可能模擬使用過程,可能需要采集比AI診斷圖像或序列更長的掃查序列,而不僅是訓練核心算法的單幀圖像。若存在這種情況,應在采集過程中予以說明。

3.4.2數據整理

明確經數據清洗棄用數據的原因和數量。數據預處理環節應采用典型圖片/圖像序列和流程圖說明處理過程和每一步處理的結果。原始數據庫的預處理過程若與產品中算法運行的預處理過程存在差異,應比較說明。

3.4.3數據標注

應列表給出標注、審核、仲裁人員的基本信息,如科室/專業、職稱、工作年限、所在機構、培訓考核情況、標注量,若有外國人員則需明確其資質要求。

標注規則應明確所依據的醫學圖譜、診療指南等的名稱和具體內容,并說明其權威性以及在我國的接受情況和使用情況。若有存在爭議的,或需要醫生基于經驗判斷的,應分析其對標注一致性的影響。預期結構不能完整顯示的,明確滿足什么條件時進行標注,如何標注。

宜采用流程圖介紹單張圖片/單段序列的標注、審核、仲裁過程。若標注較復雜宜采用典型圖片/序列加流程圖說明每一步的標注內容以及特殊情況處理。圖像序列明確逐幀標注,還是自動標注方式,若采用自動標注應予以詳述。區域分割的標注,多人標注勢必不完全一致,應配合圖片說明如何融合多人的標注結果及其影響。簡述全部圖片標注的管理過程、時間周期,特別是標注周期內的質量評估。若用于不同功能做標注的數據集與數據量有所區別,應明確具體情況。

3.4.4數據集構建

對于標注前的基礎數據庫,標注后劃分的訓練集、調優集、測試集,應給出樣本量和分布情況及其確定依據,以及集合劃分的方法、依據。考慮“患者-結構-切面-圖像/圖像序列”層級(即某一人的某一結構,有不同切面的圖像或圖像序列),三個數據集原則上應在患者級兩兩無交,至少到結構級兩兩無交。若降低無交集的范圍,應給出合理的理由。提供查重驗證結果,以證實訓練集、調優集、測試集的樣本兩兩無交集。

樣本分布應考慮機型、探頭、成像參數、檢查方式、掃查角度/切面/深淺、成像質量不佳或范圍不足、流行病學分布、預期應用場景、易混淆圖像、有影響的身體狀態或疾病、植入物、先天或后天身體結構異常等因素。

可按照《人工智能醫療器械注冊審查指導原則》的要求進行數據擴增,重點說明擴增方法和實現方式,分析擴增樣本與真實樣本的相似性,分析對算法的影響。采用生成對抗網絡(GAN)數據擴增的,提供算法基本信息以及算法選用依據。

用于算法驗證需采集掃查過程序列圖像的,應參考以上要求另行說明序列圖像特點、樣本量、樣本分布。

3.5算法訓練

明確算法訓練所用的評估指標、訓練方式、訓練目標、調優方式(若有),說明損失函數、主要超參數的確定思路,提供訓練數據量-評估指標曲線等證據以證實算法訓練的充分性和有效性。若使用遷移學習,應滿足AI導則的要求。

3.6算法驗證與確認

3.6.1算法性能評估

基于測試集提供設計需求要驗證的算法性能指標、重復性與再現性、魯棒性/健壯性等算法性能評估結果,以證明算法性能滿足設計目標。亦可基于第三方數據庫開展算法性能評估??蛇\行于不同的運行環境的功能,若運行環境不具有兼容性,應分別進行軟件驗證、性能評估和實時性驗證。

用于提高效率的功能應開展效率提高的定量驗證,建議采用多閱片者多病例(MRMC)研究的方式進行驗證。

對實時超聲圖像進行處理的,準確性可通過離線方式驗證,實時性須通過在線方式驗證,可提前通過離線驗證了解處理單一樣本的時間,再通過在線實時驗證確認軟件集成后可以達到預期效率并保證超聲采集和診斷流程的穩定性可滿足正常使用。

分類問題和多標簽問題,若可識別的種類較多,應給出完整的混淆矩陣,對在表格對應的行列給出每類的敏感性、特異性、陽性預測值、陰性預測值、準確性、一致率,分析各類出現假陽性、假陰性的情況(如集中在某一特定類型則說明該類是目標類的易混淆類),制定相關注意事項。

若在訓練過程中使用數據擴增,應在調優集上比較使用與不使用數據擴增對算法性能的影響。

算法輸出展示形式的臨床使用效果驗證。以圖像增強、提示框、分割區域勾畫形式展示的,應評價是否影響正常的超聲診斷,如圖像畫質的改變,標記對超聲圖像的遮擋、干擾等。以圖像區域外給出示意圖或體標展示的,應評價是否可確保已引起醫生注意。

3.6.2算法性能影響因素評估

應進行算法性能影響因素分析以提升算法可解釋性,詳述影響算法性能的主要因素及其影響程度,基于分析結果明確產品使用限制和必要警示提示信息。

性能影響因素應考慮機型、探頭、成像參數、檢查方式、掃查角度/切面/深淺、成像質量不佳或范圍不足、流行病學分布、預期應用場景、易混淆圖像、有影響的身體狀態或疾病、植入物、先天或后天身體結構異常等。認為無需考慮的因素給出合理理由,應考慮但不計劃考慮的因素應作為使用限制。

對于某一影響因素,可建立多個包含單一因素的子集和一個包含所有子集的合集(必要時)分別進行性能測試,統計分析各集合性能差異,評價影響程度。對于預期對性能有顯著影響且存在相互關聯的不同影響因素,也可建立包含多因素的子集進行分析。各集合應保證具有足夠的樣本量,性能評估結果應給出中心值和95%置信區間。各子集宜以產品研發時標注數據庫中的測試集為主,當某一待評價因素的樣本量較少或沒有時,可補充其他數據集的樣本,如臨床試驗、真實世界數據、第三方測試等的樣本,但合并在一個子集的數據其標注規則應基本一致。簡述各子集的構建情況,如數據來源、標注過程、標準規則、樣本分布等。

3.6.3算法性能綜合評價

結合算法訓練、算法性能評估、臨床評價等結果開展算法性能綜合評價,針對訓練樣本量和測試樣本量過少、測試結果明顯低于算法設計目標、算法性能變異度過大等情況,對產品的適用范圍、使用場景、核心功能進行必要限制。

4.用戶培訓

對于軟件安全性級別為嚴重級別、在基層醫療機構使用的產品,原則上需單獨提供一份用戶培訓方案,包括用戶培訓的計劃、材料、方式、師資等。由于超聲流程優化AI功能的使用者一般具備按照常規流程進行超聲診斷的能力,因此培訓重點宜放在AI功能與常規功能流程和操作的差異上,以及功能的使用限制和注意事項,如無法正常運行算法或算法性能下降的情形。

培訓考核應納入適當的醫生數量和測試樣本數量,被考核醫生應與功能的預期使用者在培訓前具有等同能力,以驗證培訓方案的可行性。

(三)說明書注意事項

根據算法性能綜合評價結果,對產品的適用范圍、使用場景、核心功能進行必要限制,并在說明書中明確產品使用限制和必要警示提示信息。必要時,可給出數據采集設備和數據采集過程相關要求,算法訓練驗證情況的總結。

標簽:影像超聲人工智能軟件注冊


Copyright © 2018 醫療器械注冊技術咨詢 浙ICP備18025678號 技術支持:熙和網絡

主站蜘蛛池模板: 97xxxxx| 国产精品4huwww | 狠狠躁夜夜躁人人躁婷婷视频 | 成人禁片又硬又粗太爽了 | 久久深夜视频 | 午夜精品久久久久久久99黑人 | 国产一级做a爰片在线看免费 | 国产999精品成人网站 | 特级aaaaaaaaa毛片免费视频 | 色综合天天综合网国产成人网 | 美女18禁一区二区三区视频 | 免费在线观看日韩 | 亚洲免费成人在线 | 天天摸天天做天天爽 | 天天躁日日躁mmmmxxxx | 国产日产久久久久久 | 玖草视频在线 | 美女久久久久久久久久 | 在线日韩一区 | 午夜影吧 | 亚洲精品久久久蜜夜影视 | www在线视频 | 国产大陆亚洲精品国产 | 毛片毛片女人毛片毛片 | 一区二区三区视频在线播放 | 999一个人免费看ww | 麻花传媒在线观看免费 | 看黄色小视频 | 亚洲精品久久久久中文第一幕 | 亚洲视频1区 | 99热在线观看 | 一区视频在线 | 痞帅大猛xnxx精品打桩 | 国产好大好紧好爽好湿视频唱戏 | 少妇激情一区二区三区视频小说 | 久久亚洲精品国产 | 永久免费的av在线电影网无码 | 欧美在线观看视频 | 国产精品国产三级国产播12软件 | 岛国av在线免费 | 一个人看的视频www在线 | 哈利波特3在线观看免费版英文版 | www.在线视频 | 精品一区二区三区波多野结衣 | 婷婷深爱 | 草草浮力影院 | 成人手机在线播放 | 91精品无人区麻豆乱码1区2区介绍 | 成年性羞羞视频免费观看无限 | 青青草97国产精品免费观看 | 91激情网 | 婷婷网址 | 一区二区播放 | 麻豆av在线| 3344永久在线观看视频免费 | 日韩视频一区二区三区在线播放免费观看 | 日韩在线综合 | 久久精品99国产精品日本 | 亚洲日本国产精品 | 久久影视大全 | 东北老头嫖妓猛对白精彩 | 东方av在线播放 | h片在线观看视频 | 国产又粗又猛又黄又爽性视频 | 日本大片免a费观看视频三区 | 男女人xx视频 | 夜色影院在线观看 | 一及黄色大片 | 国户精品久久久久久久久久久不卡 | 少妇做爰免费视频网站裸体艺术 | 91精品国产高清一区二区三密臀 | 一本色道久久爱88av | 激情国产 | 成年人在线网站 | 国产精品日日做人人爱 | 日韩av网站在线播放 | 色吊丝av中文字幕 | 精品午夜视频 | 中文欧美日韩 | 少妇特黄一区二区三区 | 亚洲视频三区 | 亚洲免费在线播放 | 亚洲精品ww| 丝袜情趣国产精品 | 99爱在线观看 | 人人妻人人爽人人做夜欢视频九色 | 娇小激情hdxxxx学生住处 | 日产韩产麻豆h | 亚洲成人另类 | 国产吞精囗交免费视频网站 | 国偷自产中文字幕亚洲手机在线 | 人妻熟女αⅴ一区二区三区 | 午夜精品久久久久久不卡8050 | 欧美视频网址 | 美女一区| 青青草原亚洲 | 三级av在线播放 | 人妻丰满熟妇aⅴ无码 | 亚洲精品久久久久中文字幕二区 | 一极黄色大片 | 亚洲第一网站在线观看 | 日韩一级黄色大片 | 免费无遮挡无码视频在线观看 | 久草视频这里只有精品 | 蜜臀久久99精品久久久 | 伊人成人久久 | 女人精69xxx免费观 | a级黄色小说 | 早川濑里奈av在线播放 | 国产日产欧产精品浪潮安卓版特色 | 久久久久久国产精品免费免费男同 | 久久久网站 | 久久夜色网 | 国产无套白浆一区二区 | 日韩成人无码中文字幕 | 国产精品自在拍在线拍 | 日本一区二区三区免费视频 | 欧美午夜精品一区二区蜜桃 | 欧美成在线 | 国产一区日本 | 黄色片一区 | 国产又黄又爽刺激片 | 欧美精品二区三区四区免费看视频 | ww国产内射精品后入国产 | 丰满少妇乱子伦精品看片 | 黑人巨大猛交丰满少妇 | 阿拉伯性视频xxxx | 狠狠操天天操 | xxxxx亚洲| 国产视频导航 | 国产精品99 | 欧美福利视频在线 | 探花视频免费观看高清视频 | 日本一级大黄毛片基地 | 石原莉奈一区二区三区在线观看 | 欧美性猛交99久久久久99按摩 | 在线成人精品国产区免费 | 亚洲人成小说网站色在线 | av在线免费不卡 | 国产情侣作爱视频免费观看 | 国产日韩一级片 | 欧美一级艳片视频免费观看 | 少妇一级淫片免费放播放 | 大胸美女被吃奶爽死视频 | 免费一级男女裸片 | 中文字幕亚洲乱码熟女在线萌芽 | 日本公与丰满熄理论在线播放 | 日韩美女国产精品 | 俺也去综合 | 欧美深性狂猛ⅹxxx深喉 | 日韩一卡二卡三卡 | 99国产精品白浆在线观看免费 | 国产乱码av | 中文字幕美女 | 一区二区三区中文字幕 | 日韩av一区在线 | 国产69精品一区二区亚洲孕妇 | 日本中文不卡视频 | 欧美人与动物xxxx | 国产精品自在在线午夜免费 | 色诱久久av | 亚洲日本视频在线观看 | 亚洲精品.www | 日出白浆视频 | 久久四色| jizz日本视频 | 精品国产一二三区 | 亚洲精品视频一区二区 | 国色天香一区二区 | 国产精品亚洲欧美在线播放 | xxnn成人免费视频 | 成人在线视频免费观看 | 国产特级毛片aaaaaa高清 | 国产伦理一区二区三区 | 韩国和日本免费不卡在线v 婷婷俺也去俺也去官网 | 国产乱肥老妇国产一区二 | 在线观看一区二区三区视频 | 日一本二本三本在线2021 | 国产精品久久久久久久久齐齐 | 国产精品黄在线观看免费软件 | 日产一二三四五六七区麻豆 | 亚洲精品日韩精品 | 99国内精品久久久久久久 | 18精品爽国产白嫩精品 | 亚洲福利网站 | 一夲道无码人妻精品一区二区 | 午夜精品久久久久久久久久久久久蜜桃 | 日本毛片在线 | 超乳hitomi在线播放痴汉 | 国产无在线观看软件 | 久久久国产一区二区三区四区小说 | 成年人看的黄色 | 国产老女人乱淫免费可以 | 四虎影视在线影院在线观看免费视频 | 两个女人互相吃奶摸下面 | 亚洲乱码国产乱码精品精在线网站 | 国产公共场合大胆露出 | 国产美女被遭强高潮免费网站 | 久久精品国产精品亚洲 | av片在线看 | 91人人看| 美国一级大黄一片免费的网站 | 在线观看成人免费视频 | 亚洲色偷偷男人的天堂 | 国产人成视频在线观看 | 久久免费片 | 在线观看免费av网址 | 99久久久久久久久久久 | 中文字幕丝袜精品久久 | 综合图区亚洲欧美另类图片 | 国产精品亚洲一区二区在线观看 | 欧美在线看片a免费观看 | 催眠调教后宫乱淫校园 | 久久精品一区二区三区不卡牛牛 | 一本到加勒比系列在线 | 国产男小鲜肉同志免费 | gogo西西人体大尺度大胆伊人 | 久久男人的天堂 | 国产又黄又猛又粗又爽的a片动漫 | 国产一级黄色 | 东北女人啪啪对白 | 日本中文字幕在线视频 | 超碰人人国产 | 日韩伦理一区二区 | 大伊人久久 | 国产日韩欧美另类 | 天堂在线www中文 | 91玉足脚交白嫩脚丫在线播放 | 狠狠躁日日躁夜夜躁 | 在线观看成人免费 | 91精品国自产在线观看 | 肉版如懿传高h | 夜夜夜夜操 | 夜夜爽日日澡人人添蜜臀 | 女厕偷窥一区二区三区 | 国产精品夜间视频香蕉 | 黄色成人av在线 | 亚洲欧美国产双大乳头 | 大尺度舌吻呻吟声 | 色中色成人导航 | 爆乳熟妇一区二区三区霸乳 | 国产精品一区二区麻豆 | 欧美性色黄大片人与善 | eeuss鲁片一区二区三区69 | 欧美aaaaaaaaaa| 色综合久久精品亚洲国产 | 天天综合91 | 国产精品影音先锋 | 五月天堂av91久久久 | 午夜福利影院私人爽爽 | 色一情一乱一乱一区99av白浆 | 人妻av综合天堂一区 | 国产女 | 四虎视频国产精品免费入口 | 四虎影视成人永久免费观看亚洲欧美 | 白天躁晚上躁麻豆视频 | 亚洲阿v天堂在线 | 中文字幕亚洲天堂 | 午夜精品一区二区三区aa毛片 | 69久久久成人看片免费一区二 | 国产人人草 | 日韩欧美视频二区 | 久久99精品国产麻豆蜜芽 | 巨肉黄暴辣文高h文帐中香 巨乳动漫美女 | 日韩avxxx | 四虎精品一区二区免费 | 中文字幕123| 在线天堂新版资源www在线 | 国产中文字幕一区 | 国产chinese| 欧美午夜性 | 五月的婷婷 | 91视频在线免费观看 | 性生活一级大片 | 亚洲天堂资源网 | 手机看片日韩国产 | 又黄又爽又刺激久久久久亚洲精品 | 久久夜色精品国产噜噜麻豆 | 国内精品久久久久久99蜜桃 | 好吊视频一区二区三区四区 | 欧美大荫蒂毛茸茸视频 | 性久久久久久久 | 波多野结衣乱码中文字幕 | 小伙和少妇干柴烈火 | 色偷偷亚洲男人的天堂 | 337p粉嫩大胆噜噜噜噜69影视 | 国产精品成人av片免费看最爱 | 少妇精品 | 自拍偷拍另类 | 97视频在线观看播放 | 在线看片国产 | 成人性生交大片免费网站 | 精品国产一区二区三区忘忧草 | 男人的天堂久久 | 免费看三级毛片 | 三级无码在钱av无码在钱 | 91亚洲成a人片在线观看www | 自拍视频一区二区三区 | 国产精品69毛片高清亚洲 | 九色丨蝌蚪丨成人 | 天天爱天天色 | 成人午夜高潮a∨猛片 | 国产成人免费观看久久久 | 国产又黄又粗的视频 | 51久久国产露脸精品国产 | 亚洲乱码国产乱码精品精乡村 | 久久成年视频 | 国产a一区二区 | 天天爽网站 | 高清视频一区二区三区 | 久久精品欧美一区 | 国产精品yy| 一二三四在线观看免费视频 | av在线播放网站 | 尤物网站在线 | 在线免费观看不卡av | 国内偷自拍性夫妇 | 蜜臀av人妻国产精品建身房 | 欧美一级视频一区 | 中文字幕播放 | 亚洲高清视频一区二区三区 | 亚洲阿v天堂在线 | 日韩精品久久中文字幕 | 日本高清裸体私密写真集 | 亚洲乱色| 成人无码一区二区三区网站 | 欧美日韩不卡在线视频 | 国产精品厕所 | 色婷婷av一区二区三区丝袜美腿 | 亚洲欧美另类在线观看 | 无码人妻丰满熟妇片毛片 | 日韩成人自拍 | 超碰青草 | 久久天堂av | 91高跟黑色丝袜呻吟在线观看 | 国产一二三四在线视频 | 免费网站在线高清观看 | 少妇的激情 | 中文字幕在线观看网站 | 国产精品野外户外 | 亚洲精品美女久久久久网站 | 久草女人| 国产一区二区三区在线观看 | 亚洲成人激情在线 | 色94色欧美sute亚洲线路二 | 伊在线视频| 欧美日韩在线成人 | 久久女人天堂 | 精品国产www | 国产精品毛片大码女人 | 中文字幕日韩欧美一区二区三区 | 麻豆精品久久久久久久99蜜桃 | 国产三级av在线播放 | 玖玖精品国产 | 精品乱码久久久久久中文字幕 | 在线视频观看免费视频18 | 超碰在线资源 | 日日摸日日添日日碰9学生露脸 | 国产精品伦一区二区三级视频 | 91tv国产成人福利 | 成人中文字幕+乱码+中文字幕 | 国产精品一区二区三区免费 | 亚洲综合色一区 | 中国 免费 av| 国产三级精品三级男人的天堂 | 四虎国产精品成人永久免费影视 | 亚洲国产精品成人综合久久久 | 国产日韩视频在线 | 国产婷婷在线观看 | 好男人www社区在线视频夜恋 | 国产丝袜在线 | 中文在线国产 | 亚洲国产精品成人久久蜜臀 | 国产一级免费不卡 | 少妇一区二区视频 | 亚洲丁香五月天缴情综合 | 手机av免费观看 | 暖暖日本在线观看免费 | 麻豆网神马久久人鬼片 | 精品久久国产视频 | 日韩中文字幕一区 | 国产97在线 | 日韩 | 午夜日韩av | 美女裸奶100%无遮挡免费网站 | 国语av在线| 久草在线手机视频 | 香蕉视频啪啪 | 色综合久久网 | 久夜精品 | 中国a毛片 | 日本一级淫片免费啪啪3 | 师生出轨h灌满了1v1 | 亚洲成人在线观看视频 | 特级大胆西西4444人体 | 国偷自产一区二区三区在线观看 | 日韩欧美四区 | 91禁在线观看 | 成人性午夜免费网站蜜蜂 | 暖暖在线日本免费高清最新版 | 红桃成人少妇网站 | 一区二区三区四区精品视频 | 三级毛片av | 亚洲免费不卡视频 | 久久久久久自慰出白浆 | 亚洲婷婷在线观看 | 亚洲的天堂av无码 | 毛片免| 国内精品久久久久久久果冻传媒 | 97一区二区国产好的精华液 | 亚洲色无码播放 | 久久精品中文字幕免费 | 特极黄色片 | 亚洲国产精品色拍网站 | 久久91精品国产 | 男人久久天堂 | 亚洲a在线播放 | 国产性生活视频 | 免费手机av | 看黄色大片 | 午夜久久久久久久久久一区二区 | 日本黄色大片免费 | 四虎影视成人永久免费观看视频 | 成人av在线资源 | 成人精品aaaa网站 | 三级网站免费观看 | 天堂中文网在线 | 国产午夜亚洲精品不卡下载 | 韩国19禁无遮挡啪啪无码网站 | 日韩三级大片 | 国产精品成人免费视频 | 国产一级免费片 | 国产国产小嫩模无套内谢 | 网色网站 | 开元在线观看视频国语 | 久久精品一本到东京热 | 免费看一区二区三区四区 | 99成人在线视频 | 九一亚洲精品 | 特黄特色网站 | 国产农村1级毛片 | 欧美日韩视频一区二区 | 免费成人高清视频 | 黄色一级毛片 | 人人妻久久人人澡人人爽人人精品 | 国产美女mm131爽爽爽免费 | 国内a∨免费播放 | 成人在线激情视频 | 日本成人在线视频网站 | 在线观看91视频 | 一级片免费在线 | 天干天干天啪啪夜爽爽av | 热99在线视频 | 五月av综合av国产av | 伊人色综合久久天天五月婷 | 日本中文字幕在线免费观看 | 98婷婷狠狠成人免费视频 | 人妻妺妺窝人体色www聚色窝 | 国产98在线 | 欧美 | 99久久精品国产免费看不卡 | 久久色视频 | 少妇一级淫免费放 | 亚洲国产欧美在线人成 | 制服中文字幕 | 少妇伦子伦精品无吗在线观看 | 国产福利久久久 | 亚洲精品av久久久久久久影院 | 亚洲激情免费视频 | 18禁美女裸体无遮挡网站 | 中文幕无线码中文字夫妻 | 天天操天天射天天爱 | 久精品视频 | 北条麻妃99精品青青久久 | 69堂免费视频 | 日本不卡一区二区三区 | 久久久久久国产 | 337p日本欧洲亚洲大胆艺术图 | 日韩成人动漫在线观看 | 91制片厂麻花 | 国产成人精品一区二三区 | 欧美日韩1234 | 在线蜜桃 | 国产精品久久久久久久一区二区 | 古装做爰无遮挡三级聊斋艳谭 | 国产日韩在线免费观看 | √天堂资源地址在线官网 | 不卡国产视频 | 精品无码中文视频在线观看 | 一呦二呦三呦精品网站 | 色妞色视频一区二区三区四区 | 天堂网手机版 | 色99在线观看 | 黄色片在线网站 | 免费成人在线观看 | 午夜免费观看视频 | 欧美色就是色 | 亚洲乱码一区av黑人高潮 | 99这里只有精品 | 日本久久不卡 | 中文字幕麻豆 | 欧美日韩aa| 2019最新中文字幕 | 国产成人av无码精品 | 亚洲熟女少妇一区二区 | 国产在线精品一区二区三区直播 | 久久人人爽人人爽人人片av高请 | 裸体女人高潮毛片 | 少妇被粗大猛进进出出 | 亚洲码欧美码一区二区三区 | 99福利在线观看 | 精品欧美一区二区三区在线观看 | 五月天婷婷缴情五月免费观看 | 亚洲丁香网| 人人狠狠综合久久亚洲婷婷 | 日本少妇久久 | 午夜爱| 久久久久亚洲精品男人的天堂 | 日本少妇做爰免费视频软件 | 狠狠综合久久久久综合网址 | 亚洲精品一区二区三区99 | 尤物综合网 | 99成人 | 无套内射蜜桃小视频 | 国产又色又爽又黄的免费软件 | 精产国品一二三产品99麻豆 | 久久精品视频在线看15 | yjizz视频| 国产在线不卡视频 | 欧美xxxxx高潮喷水 | 91精品国产综合久久香蕉最新版 | 四十如虎的丰满熟妇啪啪 | 日日噜噜夜夜狠狠视频 | 久久久久成人精品 | 亚洲男人av | 人人看人人舔 | 中文字幕亚洲视频 | 精品人妻二区中文字幕 | 亚洲福利专区 | 久人久人久人久久久久人 | 欧美一区二区三区视频在线观看 | 在线观看视频亚洲 | 国产一级黄色av | 老司机午夜精品视频资源 | 国产福利姬喷水福利在线观看 | 亚洲 小说 欧美 激情 另类 | 久久99精品久久久秒播软件优势 | 国内自拍在线观看 | 精品久久在线 | 性色av一区二区咪爱 | 人妻无码一区二区三区免费 | 黄色片在线免费观看视频 | 加勒比一区二区 | 久久久亚洲精华液精华液精华液 | 中文字幕58页 | 国产卡一卡二卡三无线乱码新区 | 欧美性第一页 | 欧美乱淫 | 亚洲日韩国产成网在线观看 | 麻豆三级视频 | 日韩中文字 | 一级做a爱片性色毛片www | 国产 精品 日韩 | 亚洲天堂中文字幕 | 色版视频在线观看 | 熟妇人妻中文字幕 | 亚洲 自拍 另类 欧美 综合 | 中文亚洲成a人片在线观看 99久久婷婷国产综合精品青草免费 | 国产91精品看黄网站在线观看动漫 | 伊人超碰 | 欧美日韩精品在线 | 免费国产区| 西西人体大胆午夜视频 | 一本一道波多野结衣中文av字幕 | 午夜精品久久久久久久男人的天堂 | 成人免费网站在线观看 | 精品国模一区二区三区 | 美女大逼 | 色片在线免费观看 | 国产农村老太xxxxhdxx | 欧美播放 | 成人羞羞视频在线观看 | 最新无码a∨在线观看 | 国外成人免费视频 | 香港三级日本三级妇三级 | 天干天干天干夜夜爽av | 精品国产一区二区三区久久狼5月 | 看毛片的网站 | 国产精品爽爽久久久久久 | 很很射影院 | 国产一区二区免费播放 | 狠狠人妻久久久久久综合 | 69视频污| 亚洲精品日韩av | 欧洲熟妇色xxxx欧美老妇多毛 | 国产精品自在线拍国产手机版 | 国产做a爱片久久毛片a片 | 韩国三级做爰楼梯在线 | 2021国产精品一卡2卡三卡4卡 | 欧美三级午夜理伦三级小说 | 九色丨porny丨自拍视频 | 亚洲电影在线观看 | 99热这里只有精品1 99热这里只有精品2 | 国产精品久久久久aaaa九色 | 日韩永久免费视频 | 色无极亚洲 | 国产激情久久 | 国产精品久久久久久久免费观看 | 把女邻居弄到潮喷的性经历 | 一本久道久久 | 全部免费毛片在线播放一个 | 在线播放精品 | 久久无码中文字幕久久无码app | 国产成人精品免费视频大全 | 日韩av自拍| 精品无码国产自产拍在线观看蜜 | 7777久久久国产精品 |