第17课　物体翻译——多模态拼图

单元五

第17课　物体翻译——多模态拼图

一、任务目标

物体翻译多模态：认出物体后给出名称或翻译，核对「看见→理解→输出」是否一致。

二、我们要学什么

学习要点：综合｜负责任使用
本课过关：能说清本课的感知与输出，并在仿真/真机中跑通官方示例。
示例对齐：体验题对应「十学期兴趣课程/学期5/4-4-2 图像识别-物体翻译」；完整代码对应「十学期兴趣课程/学期5/4-4-1 图像识别-物体识别」。

三、本节要点

抓住感知—决策—执行：先确认麦克风/摄像头提供什么，再决定识别或比对规则，最后用灯、屏、语音给出可观察输出。同时想想隐私边界。

1读场景明确真实任务

2对要点综合｜负责任使用

3载入运行官方积木/代码

四、解题思路

任务：物体翻译多模态：认出物体后给出名称或翻译，核对「看见→理解→输出」是否一致。知识点侧重「物体翻译；多模态；综合」。请先分清：什么是输入（摄像头/AI），什么是输出（彩屏 TFT），运行后应看到什么变化。

本课主要用到：彩屏 TFT、摄像头/AI。

1明确任务「物体翻译——多模态拼图」：要观察的输入/输出主要是彩屏 TFT、摄像头/AI。
2用「重复执行」搭出主循环，让程序一直运行，而不是只执行一次就结束。
3用「如果」判断传感或变量是否达到阈值，再决定点亮、显示或发声。
4在彩屏上显示文字或表情图案，作为本课可观察的输出。
5载入后先运行，对照「彩屏 TFT」；再只改一处参数看差异。

流程示意（可对照左侧文字）

五、图形块功能讲解

下面只列出本课首次出现的 Mixly 图形块（真积木截图）。已在前面课讲过的不再重复；先认新块，再点「载入」对照拖搭。

分类	作用	本课用法
字典	用若干键值对组成字典。	本课编程练习中首次使用，载入后可在工具箱对照。
字典	键不存在时返回默认值。	本课编程练习中首次使用，载入后可在工具箱对照。
字典	按键读取值。	本课编程练习中首次使用，载入后可在工具箱对照。

六、知识点讲解

翻译／写作助手能起草与改写，但可能漏译、生造或不合语境。把它当草稿工具：你定意图与审核，机器出力加速。

先弄清本课输入与输出，再进编程练习对照现象。

七、编程练习

点「载入」打开 MixVM（board=sant_design）。默认图形化积木；起步程序与积木优先来自 MixGo Sant「十学期兴趣课程/学期5」。语音/视觉在仿真中可能需真机或按键近似；在 Mixly 工具栏点「运行 / 停止」。请先读本页「四、解题思路」与「五、图形块功能讲解」，再点载入。

选择题目

官方示例：4-4-2 图像识别-物体翻译.mix。载入后运行。

九、本节小结

记住：综合｜负责任使用。