借助XEduHub快速开发人工智能体验作品.pdfVIP

新技能NewSkills

［人工智能普及教育］

借助XEduHub快速开发人工智能体验作品

文_邱奕盛/华东师范大学教育信息技术学系，上海数字化教育装备工程技术研究中心 谢作如/温州科技高级中学

keypoints,img_keypoints=body.inference(data=data/body.

问题提出jpg,img_type=pil)

学习人工智能要从体验开始，青少年只有体验过人工在使用XEduHub处理较为复杂的问题时，通常需要

智能，才可能产生兴趣。为此，学校人工智能学习空间（实多个模型联动，工作流可以视为不同模型之间的数据流动。

验室、功能教室等）的展示区域或科普走廊，应部署一些比如，当画面中有多个人像时，应先进行多人的目标检测，

有趣的人工智能体验产品，不仅让学习空间充满人工智能以确定每个人所在的位置，然后将检测到的数据传入关键

味，也让学生在交互中感受人工智能的魅丽。有条件的学点识别模型，对每个人像进行关键点识别，最终得到每个

校还可选择采购和订制企业开发的人工智能体验作品，以人的关键点坐标数据。

追求更好的展示效果。XEduHub就像一个装满人工智能玩具的箱子，里面

中小学生能否与教师一起设计这类交互性强的人工智有很多已经集成好的人工智能模型，可以直接被用于完成

能体验作品呢？设计作品的过程就是学习的过程，也是解不同的任务，或根据自身需求，组建属于自己的人工智能

决真实问题的过程。仔细观察企业开发的人工智能体验作体验作品。

品，会发现背后的技术并不复杂，一般都是输入的信息经

项目设计：经典人工智能体验作品的组成

过模型推理，再通过屏幕输出。常见的人工智能技术，比

如目标检测、物体分类、关键点检测等，学生也能做到。经典的人工智能体验作品，都会有交互效果的呈现。

这类作品往往会实时采集现场数据，经过人工智能推理后，

工具推荐：XEduHub再输出呈现在终端上。作品的组成可以分为感知输入、人

XEduHub是上海人工智能实验室浦育团队开发的一工智能推理、输出呈现3部分。感知输入的常用设备包括

个通用人工智能模型推理工具，既是XEdu项目的核心鼠标、键盘、摄像头、麦克风、雷达扫描仪，以及各类传感器，

组成部分，又是一个可以独立安装的Python库（库名为人工智能推理可以用XEduHub实现，而输出呈现可以借

XEdu-python）。XEduHub不仅支持XEdu系列工具训助显示器、扬声器等实现，还可以用开源硬件的LED、蜂

练得到的模型，还内置了常见的人工智能模型，比如人体鸣器、舵机等执行器实现。

关键点检查、80种物体目标检测、文字识别（OCR）等，本项目以摄像头作为数据采集设备，大屏幕显示器作

只要选择某一任务，即可自动从云端下载相应的模型。为输出设备，展示一个经典人工智能体验作品“马赛克风

XEduHub设计了“工作流”（Workflow）的方式实格的世界”的设计和实现。当人站在一个大屏幕前，即可

现模型推理。每一次应用人工智能模型推理，数据都经历看到变化（马赛克）后的画面（图1）。

了输入模型—预测推理—输出结果3个阶段，就像物料（数

据）经过生产流水线加工后产出半成品一样。在XEduHub

中，一次推理流只需要2行代码，第1行代码通过指定

task名称确定使用哪种模型构建工作流，第2行代码为输

入数据并得到推理结果输出。如果要处理多组数