浅谈CMMM四级评估(三)以评促建
时间:2023-01-31 14:57:29 | 来源:江苏赫玛信息科技有限公司 | 作者:杨卓峰 | 点击次数:544

导读

      每次接到四级评估申请,都对申请评估企业有些担忧,不是因为企业能力可能达不到,而是担心企业没有做好评估准备,没能根据标准条款要求把企业智能化建设成果与实施成效展示出来,评估组不能完整、清晰的掌握企业实际情况,提出的改进建议和提升方向无法适配企业,达不到以评促建的目的。本篇就谈一下CMMM评估,特别是四级评估需要进行哪些准备,如何更好的实现以评促建。


评估目的

      时常有企业咨询,想申请四级评估,但是了解了评估流程后,认为评估时间较长,准备内容多,而企业自身比较大,不好调动各职能部门人员,询问评估过程能否简化,比如只进行正式评估,不进行预评估,或者正式评估能否2天评完等等。CMMM评估遵循统一的评估过程管理规范,因此,这个答案是否定的。

      由此引发思考,企业是否正确理解和认识CMMM评估目的?很多企业只当评估是“认定”作用,以此作为申请政策奖励,或彰显智能化水平的荣誉,而忽视了CMMM评估过程对企业智能化建设引导的价值和作用。

      CMMM评估更像是一次企业智能化管理咨询,一方面是“评估”验证企业的能力水平,一方面是“建设”,针对存在弱项的改进提升。企业经过多年的智能化建设,应取得了很多成果,可将评估过程作为审视自己能力水平,争取下阶段更大提升的契机。从企业长远发展看,知道能力不足并明确前进道路和方向要比其他面上的荣誉更重要。


申请准备

      根据《CMMM标准符合性评估管理规范》规定,对于首次申请CMMM评估的企业,最高等级建议为三级,针对获得过省部级及以上智能制造荣誉的企业,依情况可申请四级。这里建议,所有想评估四级的企业,可以先进行一次三级评估,一方面是了解评估流程和评估难度(三级评估也有相当难度),另一方面,三级评估里涉及的二级、三级条款,有很多是智能制造的基础关键环节,值得企业关注建设,为后续建设打下坚实基础。

      曾经有企业在四级评估前,进行了一次三级评估,就是为了检验企业当前智能化建设是否有所遗漏,针对四级建设的基础环境是否扎实,并且在继续四级建设时,能够持续获得人力和资金投入,得到高层领导的支持。当企业三级评估完成,总分超过2.95分(满分3分),说明能力弱项较少,就可以着手四级评估,否则建议先补充三级能力短板,再进行四级建设和评估。

      企业确定申请四级评估后,可以向任意一家CMMM Ⅰ类评估服务机构提交《评估申请表》,并签订评估合同。由于四级企业可能涉及的产品类型较多,评估时需选择其中一种产品,即按照《GB/T 4754—2017 国民经济行业分类》中的小类,4位代码,其中一个小类下的产品;并结合企业涉及的业务范围,至少评估15个能力子域,即必评的14个能力子域,至少加1个可选能力子域。

      此外,《评估申请表》内容应着重体现企业四级能力建设情况,有些企业在申请表中罗列了很多常规的信息系统,这其实是二级要求,未把企业四级亮点展现出来。


人员准备

      对于CMMM四级评估,人员准备非常关键。很多企业想申请四级评估,并不了解四级标准的难度,或者对标准理解有偏差。最好的方式,先不要着急确定申请等级,企业先选派人员参加为期3天的国家标准系统性学习,并考试通过获得结业证书,然后再确定企业申请评估等级。同时,三级、四级评估也要求企业在正式评估阶段,至少配备1名获得结业证书的企业学员,作为“企业内部评估师”加入评估组。

      建议企业四级评估最好准备2名学员参加培训,一位来自IT部门,对企业整体智能化情况较为了解,作为评估组的内部评估师;由于内部评估师在答辩问询中不能回答问题,因此,还需再补充一位来自制造部门学员,对企业生产工艺、设备比较了解,作为联络人,对接评估组和企业职能部门。同时,2名经过培训的学员可以形成互补,对企业内部关键人员进行标准宣贯培训,准确解读标准条款要求,做好评估举证准备。还有企业在四级评估前,组织企业全体中层以上员工,完整学习成熟度模型国家标准,后续将CMMM模型在全集团内贯彻应用。

      除了内部评估师准备,更关键的是各能力子域的答辩人员确定,因为大部分人不了解标准条款涉及哪些内容,这也是比较难的一步。都说CMMM评估是开卷考试,国家标准也是公开的,评估的就是这些条款,但关键看企业人员能否举出证据,证明这些条款实现了。企业经常感觉,这个条款我们应该实现了,但是怎么也找不到举证的案例,这种情况多半是没有找对人,未能把相应职能的人召集对、召集全。

      然而,申请四级的企业,内部业务职能分工有时很细,每个人只负责其中一块职能,加之评估范围广,考核点较细,甚至部门主管都无法清晰回答所有问题。比如说“工艺设计”能力子域的工艺仿真举证,有企业就涉及机加工仿真、焊接仿真、装配仿真,不同工艺类型,不同专业化仿真软件,举证时就需要多个工艺专业的仿真人员,才能分别把仿真过程、仿真模型、仿真目标、仿真方案、仿真结果说清楚。

      曾经有企业咨询,能否IT人员全程代为所有能力子域答辩?这个答案是否定的。首先IT人员应用系统的能力,不代表业务部门实际应用系统的能力,部分软件可能未完全导入,业务部门人员用不起来或者不想用;其次,在评估中发现,三级及以下条款,IT人员通常可以清晰回答,但是四级条款涉及很多数据分析模型,IT人员更多了解软件技术架构、运行方式,并不能把分析模型的机理和应用效果讲清楚,而平时功能应用最多的相应业务部门人员,能把模型的机理、输入、输出数据,约束条件配置,以及功能如何操作讲的清晰。

      据统计,部分职能分工较细的企业,四级评估要涉及60~80人,平均每个条款1~2个人。由于CMMM四级涉及的业务人员众多,建议最开始,按能力子域对应的业务职能部门分工,部门的主管和技术骨干作为初期选定人员,在举证材料准备时,再结合条款要求,按每个条款分配参与答辩人员。企业在人员组织上做好心理准备,组织协调能力要强,这时评估发起人的选定起到比较重要的作用,由于评估涉及企业几乎所有业务部门,高管有时只负责部分业务条线,因此,评估发起人的选择就很重要,必要时评估发起人需要企业一把手担当。


举证材料准备

      举证材料准备是评估准备的重要工作,四级评估重点关注如下几方面。

      提及“举证”材料准备,涉及到一个问题,什么是真正有效的举证?一些初步了解过成熟度评估的企业,可能认为是准备每个能力子域答辩PPT。其实,对于CMMM评估并没有强制要求做PPT,只是PPT形式方便图文并茂的介绍企业智能化实施成效,每页主题鲜明的对应每个标准条款,罗列好每个条款举证哪些证据,重点的功能、特性、数据等要点描述清晰,也方便评估组记录。当然企业为了简便,也可以用Excel电子表格。这会造成一种误解,以为准备好PPT就是准备好答辩材料了。特别在预评估阶段,评估组没有较多时间查证每个系统功能,企业会误以为正式评估采集“证据”也是汇报PPT,把PPT讲明白就能通过。

      CMMM评估所要求的证据,是举证企业实际推进智能化建设的应用成果,既包括一些文件化信息,如智能制造规划、异构系统集成规范、统一的数据编码规范等,也包括信息系统功能的操作演示,特别是四级要求的信息系统内数据分析模型应用。文件化信息需要提供原始的文档材料,而不是文件的截图;同样,系统演示是登录系统正式环境,演示功能操作和功能历史数据。从这点来看,PPT作用是有,但没那么重要,特别在正式评估阶段,PPT只相当于一个举证清单、提纲,是信息展示的工具,是让评估组先行了解,接下来要展示这些文件,演示这些功能,把重点内容列出来,防止展示时有所遗漏或表达不清晰。有些企业即使PPT做的很好,但真实系统功能还没有实现,这也不能作为评估的有效证据。

      建议企业评估准备时,可将文件化的举证材料复制到网络共享服务器,以备评估查验。同时,将需要演示的信息系统,提前安装好客户端,访问地址保存在收藏夹,准备好演示登录账户(账户权限访问功能不同),并准备好演示的记录数据项ID;比如,想展示哪份采购订单由企业下推至供应商管理系统,将采购订单编号准备好。建议每个条款至少准备2个案例,一是为了保证评估验证的充分性,二是当其中一个案例举证不具效力时,还有其他案例,不至于临时准备仓促。

      有些企业认识到举证较为关键,答辩上来就开始介绍每个条款的证据,但缺少整体业务背景介绍,这样也会影响答辩效果,可能导致评估老师无法理解举证的案例,未明白采用此种智能化解决方案、数据分析模型的作用和意义,甚至难以判断系统功能实现的正确性。例如,企业的生产模式,是按成品库存生产,是按客户订单生产,还是两者都有,这会影响生产计划自动生成的逻辑、输入数据的判断,可能还会影响物料需求计划、销售发货等环节评估。再比如,生产线是24小时连续生产,还是只有白班生产,会影响生产调度方式、设备运维管理等。

      建议企业在评估首次会,企业整体智能化介绍时,先将企业的主营产品系列、关键工序、产线布局、生产模式、核心优势讲解清楚。在每个能力子域答辩,介绍本部门或本业务涉及的业务背景,包括不限于:

      业务管理概况,如【装备】企业关键工序是哪些,【能源管理】企业能耗种类和高能耗设备届定标准。

      完整的业务流程,如【计划与调度】计划编制完整流程(从主计划到各级计划编制),【采购】物料采购完整流程(从物料需求计算到物料入库);

      组织分工,如【产品设计】产品设计分成哪些专业,或哪些功能模块进行任务分工;

      业务管控要点与难点,如【仓储配送】物料拉动与配送方式,【生产作业】生产现场关键工艺控制指标等。

      业务背景介绍会对后续举证有代入感,但介绍内容也不宜过多,尽可能围绕条款涉及的业务背景,毕竟评估答辩时间有限。

      四级条款涉及的系统功能要求相对复杂,而且每家企业的智能化应用实现又不尽相同,很多数据分析优化模型又有很强的业务逻辑,因此,企业在举证描述时应抓住重点、逻辑清晰。

      不少企业对于系统内的数据分析模型不知道怎么介绍,或是只简单介绍系统的功能操作“点下按钮就自动生成了”。具体分析模型应用到哪些生产环节,优化了哪些目标也没有介绍。

      这里建议模型应用从如下方面介绍

      1.模型应用解决什么问题,预期效果是什么;

      2.模型相关的数据指标是如何发现、确定的;

      3.模型的输入数据包括哪些,数据的来源于哪些系统、设备,数据更新频率,实时还是历史;

      4.模型的运算逻辑或公式,以及需要提前配置的参考变量、约束条件、判别边界条件;

      5.模型的执行逻辑是手动触发,还是定时自动触发,或是依靠何种逻辑触发;

      6.模型输出结果是什么,以何种形式展现,比如是单次还是连续,是数据列表或是趋势曲线;

      7.以上功能如何在信息系统中操作实现。

      特别注意最后一点,有很多企业理解了条款要求,业务原理讲的也很清晰,技术方案也行得通,但评估要求的是已实现的成果,最终还是要落实到软件系统中实现,而不是纸上谈兵的方案。

      相比于其他等级,四级有些智能化项目是从研究出发,开创性、尝试性的,其结果可能未必发挥出效果,还需要反复迭代验证,企业有必要对已取得的应用效果做介绍。

      曾经有家企业实施设备故障预测性维护,根据预测曲线,判断设备将在半年后出现故障,即很长一段时间内设备都是正常工作的;如按此逻辑,设备故障的频率不高、故障影响也不大,那么企业构建预测模型的投入和意义在哪里?然而,实际在设备管理系统查看此类型设备的历史故障记录,却发现每月设备故障率确实较高,因此判定模型考虑的影响因素缺失,判别精度不够,预测的准确性有待提升。

      当然,还是鼓励企业做这种尝试,模型还需要迭代验证过程,当前可能还未成功应用或是效果不佳,评估组在打分上会有所权衡。

      综上,企业准备举证材料需要付出一定精力,从另一个角度看,这也是企业一次很好的阶段性总结,很多企业通过评估准备的梳理,恍然发现原来自己有这么多优势能力,增强了企业智能化建设信心,这也是CMMM评估的另一种意义。


预评估后整改

      预评估结束后,企业会有一段时间整改,为正式评估做好准备。部分企业认为预评估过程比较顺利,正式评估也不会出大问题,但实际从评估查证的细致、严谨程度来讲,正式评估需要准备的东西更多。

      预评估阶段,企业大致了解评估组是否认可PPT描述的案例作为有效证据,以及可能的弱项在哪些方面。针对这些问题,不是简单的修改PPT就完事了。正式评估不是查证PPT,而是PPT介绍背后对应的实现成果。

      因此,建议将PPT提到的智能化应用,模拟操作演示一遍。有些信息系统功能如果需要完善,还需要一定开发建设,如果企业不具备开发能力,还要尽快得到解决方案供应商的技术支持,因为整改时间有限,需要明确功能完善的优先级。还有些PPT里提到的文件材料截图是临时从其他材料摘抄过来,应找到原始文件,以备正式评估查验。

      最后,企业通过四级评估不是终点,已通过四级的企业也有弱项需要持续改进。通过现场评估,我们也发现了很多优秀的CMMM服务商,为企业提供智能制造咨询以及软件、装备、系统解决方案。下一步,CMMM评估工作组秘书处将发挥评估优势,提炼一批具有成功实践经验的CMMM服务商资源库,供企业精准选择适配。

      CMMM评估是企业智能化建设的其中一面镜子,镜子只照到有限的一面,企业还有更多的目标去攻关。希望企业用好CMMM,在智能制造建设过程中不断创新,脚踏实地,也希望有更多的企业通过CMMM四级评估。