(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211078811.4 (22)申请日 2022.09.05 (71)申请人 湖北鲲鹏芯科技有限公司 地址 441000 湖北省襄阳市樊城区米公街 道建设路21号21幢创意园5号楼401室 (72)发明人 涂晓帆　谢颖基　张雷　胡晓宇　 周伟　 (74)专利代理 机构 襄阳蒲公英知识产权代理事 务所(普通 合伙) 42306 专利代理师 张勇 (51)Int.Cl. G06V 20/40(2022.01) G06V 40/20(2022.01) G06V 10/74(2022.01) G06V 10/40(2022.01) (54)发明名称 基于图像识别的食堂人员行为管控方法 (57)摘要 本发明公开了基于图像识别的食堂人员行 为管控方法， 具体涉及食堂人员管理技术领域， 本发明通过对获取的视频数据进行处理， 将食堂 人员的动作行为图像数据与预设的违反管理要 求的动作特征进行比对， 判断员工是否存在类似 情况， 出现类似情况时对采用积分制的员工进行 扣分， 最终对合格分值之下的人员进行处罚， 对 超过合格分值且排名前三的员工进行物质奖励， 使员工的管理操作更为直观， 且激发员工积极 性， 保证工作效率的同时保证食品安全， 特征提 取算法对图像进行特征提取， 针对 标准的人员违 规操作特征提取以获取标准的违规特征， 降低因 外在因素影 响造成的识别失误几率， 针对各种违 规情况的特征对比， 更易直观清楚的识别各种违 规情况。 权利要求书2页 说明书7页 CN 115272942 A 2022.11.01 CN 115272942 A 1.基于图像识别的食堂人员行为管控方法， 其特 征在于， 包括以下步骤： S1、 获取标准的人员违规操作图像， 对违规操作图像进行特征提取， 并建立违规操作图 像特征数据库； S2、 建立违规操作的项目扣分表； S2、 获取食堂操作间的视频图像数据， 并对图像进行 预处理； S3、 对图像数据进行特征提取， 将实时图像数据提取的特征与标准的违规操作特征进 行比对， 判断是否存在违规； S4、 出现人员违规操作后， 结合违规操作的项目扣分表进行累积扣分， 并给 出提示； S5、 展示人员的扣分操作和阶段内积分情况， 作出 奖惩。 2.根据权利要求1所述的基于图像识别的食堂人员行为管控方法， 其特征在于， 所述违 规操作的项目扣分表建立过程包括以下步骤： 列举食堂人员违规操作的项目； 判断得出不同项目的重要程度； 根据违规操作的重要程度进行分类； 不同类别的违规操作对应相应的扣分， 最终形成违规操作的项目扣分表。 3.根据权利要求1所述的基于图像识别的食堂人员行为管控方法， 其特征在于： 所述违 规操作包括卫生违规、 服务违规和饭菜质量违规， 卫生违规包括工作服装、 鞋、 帽未穿戴， 随 意吃、 拿食 材， 随地吐痰， 擅离工作岗位， 垃圾未及时清理， 食材、 调料随意混合摆放， 地面杂 乱有垃圾， 工位设备处油烟明显， 服务违规包括被投诉、 与用餐人员发生冲突、 就餐时间延 误， 饭菜质量违规包括， 餐食剩余 严重、 餐食口味不佳、 餐食夹生； 所述违规操作的项目按照重要程度分为： 严重违规、 中度违规和轻微违规； 所述扣分情 况对应严重违规、 中度违规和轻微违规分别 扣3分、 扣2分和扣1分。 4.根据权利要求1所述的基于图像识别的食堂人员行为管控方法， 其特征在于： 所述工 作人员积分采用扣分制， 初始分值 为100分， 合格分值 为80分； 所述奖惩实现具体包括以下步骤： 获取工作人员阶段内积分情况， 判断人员是否合格； 不合格人员， 进行惩罚并将其违规操作部分进行展示； 合格人员中取积分前三的人员进行物质奖励。 5.根据权利要求1所述的基于图像识别的食堂人员行为管控方法， 其特征在于： 所述标 准的违规操作图像和获取的操作间食品图像数据的特征提取处理均采用特征提取算法进 行； 特征提取： 对一幅尺寸为M ×N的图像进行二值化处理， 得到二值化后的图像， 在进行边缘化检测 得到边缘检测后的 图像f(x,y)， f(x,y)∈(0,1)， x∈(0,1, …,M)， y∈(0,1, …,N)， 计算该目 标的质心O＝(Ox,Oy)： 权　利　要　求　书 1/2 页 2 CN 115272942 A 2定义一个大小为3 ×128的矩阵HD， 从边缘图像质心开始对形状的边缘进行扫描， 取某一 径向RK,将该方向上属于 目标的线段长度提取出来作为矩阵的列向量， 得到一个3 ×128的 矢量矩阵HD； 归一化 对距离适 量矩阵HD进行归一 化计算， 得到归一 化的距离 矢量矩阵： 其中， Maximum， Minimum分别是矩阵HG中的最大元素值和最小元素值， 如果Maximum ‑ Minimum＝0， 则该 形状轮廓为圆， 归一 化的距离 矢量矩阵对图像具有平 移和缩放 不变形； 将距离矢量矩阵HG的三行矢量合并成一维矢量， 得到归一化的一维距离矢量 快速傅里叶变换得到的系数 具有复共轭对称性， 对新的距离矢量做3次FFT， 最终得 到一个包 含48个元 素的特征矢量B＝(b0 b1  …  b47)； 小波变换 对于离散信号f(k)， 离 散小波变换的定义如下： 其中m,n∈Z， ψm,n×(k)为离散小波函数， 满足： 其中 ψ(k)满足小 波变换约束条件的小 波基函数， a0为尺度参数， b0为平移参数。权　利　要　求　书 2/2 页 3 CN 115272942 A 3