導讀

      每次接到四級評估申請，都對申請評估企業有些擔憂，不是因為企業能力可能達不到，而是擔心企業沒有做好評估準備，沒能根據標準條款要求把企業智能化建設成果與實施成效展示出來，評估組不能完整、清晰的掌握企業實際情況，提出的改進建議和提升方向無法適配企業，達不到以評促建的目的。本篇就談一下CMMM評估，特別是四級評估需要進行哪些準備，如何更好的實現以評促建。

評估目的

      時常有企業咨詢，想申請四級評估，但是了解了評估流程后，認為評估時間較長，準備內容多，而企業自身比較大，不好調動各職能部門人員，詢問評估過程能否簡化，比如只進行正式評估，不進行預評估，或者正式評估能否2天評完等等。CMMM評估遵循統一的評估過程管理規范，因此，這個答案是否定的。

      由此引發思考，企業是否正確理解和認識CMMM評估目的？很多企業只當評估是“認定”作用，以此作為申請政策獎勵，或彰顯智能化水平的榮譽，而忽視了CMMM評估過程對企業智能化建設引導的價值和作用。

      CMMM評估更像是一次企業智能化管理咨詢，一方面是“評估”驗證企業的能力水平，一方面是“建設”，針對存在弱項的改進提升。企業經過多年的智能化建設，應取得了很多成果，可將評估過程作為審視自己能力水平，爭取下階段更大提升的契機。從企業長遠發展看，知道能力不足并明確前進道路和方向要比其他面上的榮譽更重要。

申請準備

      根據《CMMM標準符合性評估管理規范》規定，對于首次申請CMMM評估的企業，最高等級建議為三級，針對獲得過省部級及以上智能制造榮譽的企業，依情況可申請四級。這里建議，所有想評估四級的企業，可以先進行一次三級評估，一方面是了解評估流程和評估難度（三級評估也有相當難度），另一方面，三級評估里涉及的二級、三級條款，有很多是智能制造的基礎關鍵環節，值得企業關注建設，為后續建設打下堅實基礎。

      曾經有企業在四級評估前，進行了一次三級評估，就是為了檢驗企業當前智能化建設是否有所遺漏，針對四級建設的基礎環境是否扎實，并且在繼續四級建設時，能夠持續獲得人力和資金投入，得到高層領導的支持。當企業三級評估完成，總分超過2.95分（滿分3分），說明能力弱項較少，就可以著手四級評估，否則建議先補充三級能力短板，再進行四級建設和評估。

      企業確定申請四級評估后，可以向任意一家CMMM Ⅰ類評估服務機構提交《評估申請表》，并簽訂評估合同。由于四級企業可能涉及的產品類型較多，評估時需選擇其中一種產品，即按照《GB/T 4754—2017 國民經濟行業分類》中的小類，4位代碼，其中一個小類下的產品；并結合企業涉及的業務范圍，至少評估15個能力子域，即必評的14個能力子域，至少加1個可選能力子域。

      此外，《評估申請表》內容應著重體現企業四級能力建設情況，有些企業在申請表中羅列了很多常規的信息系統，這其實是二級要求，未把企業四級亮點展現出來。

人員準備

      對于CMMM四級評估，人員準備非常關鍵。很多企業想申請四級評估，并不了解四級標準的難度，或者對標準理解有偏差。最好的方式，先不要著急確定申請等級，企業先選派人員參加為期3天的國家標準系統性學習，并考試通過獲得結業證書，然后再確定企業申請評估等級。同時，三級、四級評估也要求企業在正式評估階段，至少配備1名獲得結業證書的企業學員，作為“企業內部評估師”加入評估組。

      建議企業四級評估最好準備2名學員參加培訓，一位來自IT部門，對企業整體智能化情況較為了解，作為評估組的內部評估師；由于內部評估師在答辯問詢中不能回答問題，因此，還需再補充一位來自制造部門學員，對企業生產工藝、設備比較了解，作為聯絡人，對接評估組和企業職能部門。同時，2名經過培訓的學員可以形成互補，對企業內部關鍵人員進行標準宣貫培訓，準確解讀標準條款要求，做好評估舉證準備。還有企業在四級評估前，組織企業全體中層以上員工，完整學習成熟度模型國家標準，后續將CMMM模型在全集團內貫徹應用。

      除了內部評估師準備，更關鍵的是各能力子域的答辯人員確定，因為大部分人不了解標準條款涉及哪些內容，這也是比較難的一步。都說CMMM評估是開卷考試，國家標準也是公開的，評估的就是這些條款，但關鍵看企業人員能否舉出證據，證明這些條款實現了。企業經常感覺，這個條款我們應該實現了，但是怎么也找不到舉證的案例，這種情況多半是沒有找對人，未能把相應職能的人召集對、召集全。

      然而，申請四級的企業，內部業務職能分工有時很細，每個人只負責其中一塊職能，加之評估范圍廣，考核點較細，甚至部門主管都無法清晰回答所有問題。比如說“工藝設計”能力子域的工藝仿真舉證，有企業就涉及機加工仿真、焊接仿真、裝配仿真，不同工藝類型，不同專業化仿真軟件，舉證時就需要多個工藝專業的仿真人員，才能分別把仿真過程、仿真模型、仿真目標、仿真方案、仿真結果說清楚。

      曾經有企業咨詢，能否IT人員全程代為所有能力子域答辯？這個答案是否定的。首先IT人員應用系統的能力，不代表業務部門實際應用系統的能力，部分軟件可能未完全導入，業務部門人員用不起來或者不想用；其次，在評估中發現，三級及以下條款，IT人員通常可以清晰回答，但是四級條款涉及很多數據分析模型，IT人員更多了解軟件技術架構、運行方式，并不能把分析模型的機理和應用效果講清楚，而平時功能應用最多的相應業務部門人員，能把模型的機理、輸入、輸出數據，約束條件配置，以及功能如何操作講的清晰。

      據統計，部分職能分工較細的企業，四級評估要涉及60~80人，平均每個條款1~2個人。由于CMMM四級涉及的業務人員眾多，建議最開始，按能力子域對應的業務職能部門分工，部門的主管和技術骨干作為初期選定人員，在舉證材料準備時，再結合條款要求，按每個條款分配參與答辯人員。企業在人員組織上做好心理準備，組織協調能力要強，這時評估發起人的選定起到比較重要的作用，由于評估涉及企業幾乎所有業務部門，高管有時只負責部分業務條線，因此，評估發起人的選擇就很重要，必要時評估發起人需要企業一把手擔當。

舉證材料準備

      舉證材料準備是評估準備的重要工作，四級評估重點關注如下幾方面。

• 有效證據

      提及“舉證”材料準備，涉及到一個問題，什么是真正有效的舉證？一些初步了解過成熟度評估的企業，可能認為是準備每個能力子域答辯PPT。其實，對于CMMM評估并沒有強制要求做PPT，只是PPT形式方便圖文并茂的介紹企業智能化實施成效，每頁主題鮮明的對應每個標準條款，羅列好每個條款舉證哪些證據，重點的功能、特性、數據等要點描述清晰，也方便評估組記錄。當然企業為了簡便，也可以用Excel電子表格。這會造成一種誤解，以為準備好PPT就是準備好答辯材料了。特別在預評估階段，評估組沒有較多時間查證每個系統功能，企業會誤以為正式評估采集“證據”也是匯報PPT，把PPT講明白就能通過。

      CMMM評估所要求的證據，是舉證企業實際推進智能化建設的應用成果，既包括一些文件化信息，如智能制造規劃、異構系統集成規范、統一的數據編碼規范等，也包括信息系統功能的操作演示，特別是四級要求的信息系統內數據分析模型應用。文件化信息需要提供原始的文檔材料，而不是文件的截圖；同樣，系統演示是登錄系統正式環境，演示功能操作和功能歷史數據。從這點來看，PPT作用是有，但沒那么重要，特別在正式評估階段，PPT只相當于一個舉證清單、提綱，是信息展示的工具，是讓評估組先行了解，接下來要展示這些文件，演示這些功能，把重點內容列出來，防止展示時有所遺漏或表達不清晰。有些企業即使PPT做的很好，但真實系統功能還沒有實現，這也不能作為評估的有效證據。

      建議企業評估準備時，可將文件化的舉證材料復制到網絡共享服務器，以備評估查驗。同時，將需要演示的信息系統，提前安裝好客戶端，訪問地址保存在收藏夾，準備好演示登錄賬戶（賬戶權限訪問功能不同），并準備好演示的記錄數據項ID；比如，想展示哪份采購訂單由企業下推至供應商管理系統，將采購訂單編號準備好。建議每個條款至少準備2個案例，一是為了保證評估驗證的充分性，二是當其中一個案例舉證不具效力時，還有其他案例，不至于臨時準備倉促。

• 業務背景介紹

      有些企業認識到舉證較為關鍵，答辯上來就開始介紹每個條款的證據，但缺少整體業務背景介紹，這樣也會影響答辯效果，可能導致評估老師無法理解舉證的案例，未明白采用此種智能化解決方案、數據分析模型的作用和意義，甚至難以判斷系統功能實現的正確性。例如，企業的生產模式，是按成品庫存生產，是按客戶訂單生產，還是兩者都有，這會影響生產計劃自動生成的邏輯、輸入數據的判斷，可能還會影響物料需求計劃、銷售發貨等環節評估。再比如，生產線是24小時連續生產，還是只有白班生產，會影響生產調度方式、設備運維管理等。

      建議企業在評估首次會，企業整體智能化介紹時，先將企業的主營產品系列、關鍵工序、產線布局、生產模式、核心優勢講解清楚。在每個能力子域答辯，介紹本部門或本業務涉及的業務背景，包括不限于：

      業務管理概況，如【裝備】企業關鍵工序是哪些，【能源管理】企業能耗種類和高能耗設備屆定標準。

      完整的業務流程，如【計劃與調度】計劃編制完整流程（從主計劃到各級計劃編制），【采購】物料采購完整流程（從物料需求計算到物料入庫）；

      組織分工，如【產品設計】產品設計分成哪些專業，或哪些功能模塊進行任務分工；

      業務管控要點與難點，如【倉儲配送】物料拉動與配送方式，【生產作業】生產現場關鍵工藝控制指標等。

      業務背景介紹會對后續舉證有代入感，但介紹內容也不宜過多，盡可能圍繞條款涉及的業務背景，畢竟評估答辯時間有限。

• 舉證案例描述

      四級條款涉及的系統功能要求相對復雜，而且每家企業的智能化應用實現又不盡相同，很多數據分析優化模型又有很強的業務邏輯，因此，企業在舉證描述時應抓住重點、邏輯清晰。

      不少企業對于系統內的數據分析模型不知道怎么介紹，或是只簡單介紹系統的功能操作“點下按鈕就自動生成了”。具體分析模型應用到哪些生產環節，優化了哪些目標也沒有介紹。

      這里建議模型應用從如下方面介紹：

      1.模型應用解決什么問題，預期效果是什么；

      2.模型相關的數據指標是如何發現、確定的；

      3.模型的輸入數據包括哪些，數據的來源于哪些系統、設備，數據更新頻率，實時還是歷史；

      4.模型的運算邏輯或公式，以及需要提前配置的參考變量、約束條件、判別邊界條件；

      5.模型的執行邏輯是手動觸發，還是定時自動觸發，或是依靠何種邏輯觸發；

      6.模型輸出結果是什么，以何種形式展現，比如是單次還是連續，是數據列表或是趨勢曲線；

      7.以上功能如何在信息系統中操作實現。

      特別注意最后一點，有很多企業理解了條款要求，業務原理講的也很清晰，技術方案也行得通，但評估要求的是已實現的成果，最終還是要落實到軟件系統中實現，而不是紙上談兵的方案。

• 建設成果有效性

      相比于其他等級，四級有些智能化項目是從研究出發，開創性、嘗試性的，其結果可能未必發揮出效果，還需要反復迭代驗證，企業有必要對已取得的應用效果做介紹。

      曾經有家企業實施設備故障預測性維護，根據預測曲線，判斷設備將在半年后出現故障，即很長一段時間內設備都是正常工作的；如按此邏輯，設備故障的頻率不高、故障影響也不大，那么企業構建預測模型的投入和意義在哪里？然而，實際在設備管理系統查看此類型設備的歷史故障記錄，卻發現每月設備故障率確實較高，因此判定模型考慮的影響因素缺失，判別精度不夠，預測的準確性有待提升。

      當然，還是鼓勵企業做這種嘗試，模型還需要迭代驗證過程，當前可能還未成功應用或是效果不佳，評估組在打分上會有所權衡。

      綜上，企業準備舉證材料需要付出一定精力，從另一個角度看，這也是企業一次很好的階段性總結，很多企業通過評估準備的梳理，恍然發現原來自己有這么多優勢能力，增強了企業智能化建設信心，這也是CMMM評估的另一種意義。

預評估后整改

      預評估結束后，企業會有一段時間整改，為正式評估做好準備。部分企業認為預評估過程比較順利，正式評估也不會出大問題，但實際從評估查證的細致、嚴謹程度來講，正式評估需要準備的東西更多。

      預評估階段，企業大致了解評估組是否認可PPT描述的案例作為有效證據，以及可能的弱項在哪些方面。針對這些問題，不是簡單的修改PPT就完事了。正式評估不是查證PPT，而是PPT介紹背后對應的實現成果。

      因此，建議將PPT提到的智能化應用，模擬操作演示一遍。有些信息系統功能如果需要完善，還需要一定開發建設，如果企業不具備開發能力，還要盡快得到解決方案供應商的技術支持，因為整改時間有限，需要明確功能完善的優先級。還有些PPT里提到的文件材料截圖是臨時從其他材料摘抄過來，應找到原始文件，以備正式評估查驗。

      最后，企業通過四級評估不是終點，已通過四級的企業也有弱項需要持續改進。通過現場評估，我們也發現了很多優秀的CMMM服務商，為企業提供智能制造咨詢以及軟件、裝備、系統解決方案。下一步，CMMM評估工作組秘書處將發揮評估優勢，提煉一批具有成功實踐經驗的CMMM服務商資源庫，供企業精準選擇適配。

      CMMM評估是企業智能化建設的其中一面鏡子，鏡子只照到有限的一面，企業還有更多的目標去攻關。希望企業用好CMMM，在智能制造建設過程中不斷創新，腳踏實地，也希望有更多的企業通過CMMM四級評估。