单元四

第16课 图像识别-物体识别

任务场景:图像识别-物体识别
任务场景:图像识别-物体识别

一、任务目标

给画面做物体识别,识别到后屏上出现类别名称。

二、我们要学什么

  • 学习要点:物体识别|对上词典就把中文写到彩屏
  • 本课过关:能完成:说出物体识别就是给画面一个类别名;载入编程体验,指出循环里对画面做识别,同步预览摄像头;再运行完整程序,指出用词典把 laptop、screen、apple 对成「电脑」「屏幕」「菜单」,对上才把中文居中写到彩屏。
  • 示例对齐:编程体验对应 「4-4-1 图像识别-物体识别」;完整程序对应 「4-4-2 图像识别-物体翻译」。

三、本节要点

本课要利用图像识别认识物体识别:模型给出类别名,完整程序再用词典翻译后显示。重难点是分清两套——编程体验只识别并预览;完整程序不同步预览,对上词典才在彩屏上写出中文。要点对齐「物体识别|对上词典就把中文写到彩屏」。

1读场景镜头对着物品,屏上出现它是哪一类
2对要点物体识别|对上词典就把中文写到彩屏
3载入运行十学期兴趣课程积木/代码

四、解题思路

任务:利用图像识别,用两套程序认识物体识别——给画面一个类别名。编程体验同步预览;完整程序对上词典才显示「电脑」「屏幕」「菜单」。请对照彩屏。

本课主要用到:摄像头;完整程序还有彩屏 TFT。

  1. 1利用图像识别,完整程序对上词典后,屏上有没有出现中文。
  2. 2创建摄像头和物体识别模型。
  3. 3编程体验循环识别并同步预览画面。
  4. 4完整程序准备词典:laptop→电脑,screen→屏幕,apple→菜单。对上词典才把中文写到彩屏。对照屏上的字。
  5. 5完成补全与从头编写,并对照现象。

流程示意

创建物体识别模型体验循环识别并预览完整准备中文词典对上才显示中文完成补全与从头编写并对照现象

五、图形块功能讲解

下面只列出本课首次出现的 Mixly 图形块(真积木截图)。已在前面课讲过的不再重复;先认新块,再点「载入」对照拖搭。

图形块分类作用本课用法
图像识别结果
板载智能读取通用图像识别输出。取出当前画面的类别名。体验同步预览;完整把这个名字拿去查词典。
创建字典
字典用若干键值对组成字典。完整程序把 laptop、screen、apple 对应到「电脑」「屏幕」「菜单」。
取字典值(默认)
字典键不存在时返回默认值。完整用 get 查询当前类别:对上才得到中文,对不上得到 0,不显示。
取字典值
字典按键读取值。对上之后按类别名取出中文,居中写到彩屏。

六、知识点讲解

物体识别给当前画面一个类别名。完整程序再用词典把英文类别翻成中文,对得上才显示到彩屏。

先弄清:体验只识别预览;完整对上词典才显示中文。再进编程练习对照彩屏。

七、编程练习

点「载入」打开 MixVM(board=sant_design)。默认图形化积木;起步程序与积木均来自 MixGo SANT 十学期兴趣课程/学期5。若题目带外设 design,载入时会自动导入接线。在 Mixly 工具栏点「运行 / 停止」,「检查」做关键字核对。请先读本页「四、解题思路」与「五、图形块功能讲解」,再点载入。

十学期兴趣课程:4-4-1 图像识别-物体识别.mix。载入后运行。

八、课堂练习

先完成两道正误判断,再做其余题目;选出后点「检查」。

  1. 判断:编程体验会把「电脑」「屏幕」「菜单」写到彩屏上。

  2. 判断:完整程序只要识别到任意类别,都会把原文写到彩屏。

  3. 本课说的「物体识别」指的是?

  4. 编程体验和完整程序的主要差别是?

  5. 运行完整程序,类别名是 laptop 时应看到?

九、本节小结

本课认识物体识别:给画面一个类别名。编程体验只识别并预览;完整程序对上词典后,把「电脑」「屏幕」「菜单」写到彩屏。