苹果第九届移动应用创新赛颁奖:无障碍项目受关注 新增赛道为开发者提供商业机会

三名来自北京联合大学听障学生组成的团队开发的,利用 AI 技术进行手语动作教学的 app《妙手》获得了最具创新奖和社会责任奖

凤凰网科技讯(作者/卡尔)近日,由苹果和浙江大学联合举办的第九届“移动应用创新赛” 年度决赛在浙江大学紫金港校区落下帷幕。九年来,这项赛事已吸引来自大中华区各省市 962 所高校的学生参赛,为超过 36,000 名学生提供了学习和实现编程梦想的机会。而今年的赛制也有了些许变化,在已有创意赛道(“启明”赛道)和创新赛道(“启迪”赛道)基础上,新增“启航”赛道,面向毕业不超过五年、已有 app 上架或提交了 TestFlight 的开发者提供商业孵化机会。

妙手团队成员(左)和苹果公司副总裁、大中华区董事总经理葛越(右)

妙手团队成员(左)和苹果公司副总裁、大中华区董事总经理葛越(右)

在本次大赛中,由三名来自北京联合大学听障学生组成的团队开发的,利用 AI 技术进行手语动作教学的 app《妙手》获得了最具创新奖和社会责任奖。“启航”赛道的一等奖则由三位毕业于电子科技大学学生开发的,以打造空间化学实验室 visionOS app《炼金术师》摘得。凤凰网评测也受邀采访到了此次大赛获奖的部分选手,苹果公司副总裁、大中华区董事总经理葛越等人,了解了关于此次大赛,以及各个参赛作品背后的故事。

《妙手》这款app的灵感来源于一个名叫“胡胡”的手语老师,他是一位对手语充满热情的大四学生,同时在北京的各大高校教授了数百名学生,随着毕业临近,他担心自己没有时间继续教授手语,因此希望能够有一款AI手语教学应用来减轻他的负担。

妙手团队也认为因为手语本身并不难学,而是缺乏双向互动和对学习者手语表现的即时反馈。所以这款app旨在帮助非手语使用者学习一些简单的手语词汇,以便能更容易地与听障人士沟通。“你可以学习一些简单的词汇也不用很多,大概 100 个左右就可以实现,跟听障人员最基本地交流了”妙手团队表示。

作品《妙手》

作品《妙手》

而在项目的进行中,也并不是一帆风顺“这个app主要的难度就是这个词汇模型的训练,因为像我们一个词汇表达,需要100—200条视频才能把它训练出来。”他们说道。而且妙手团队也表示,他们是今年三月份开始接触Swift编程,并在AppleDeveloper网站和开源教程上进行了长时间的学习才有了今天的成绩。

对于项目的未来,他们计划完成手语词汇的易懂性,以便用户能够快速理解。同时,收集更多的视频数据来提高模型的准确率。而通过本次的比赛,他们也认识到苹果的技术潜力,并非所有问题都需要依赖传统编程语言来解决,也计划尝试更多新技术,探索是否能够为手语计算带来新的突破。

作品《X face》

作品《X face》

此外,本届比赛中也有不少帮助残障人士的作品产生。比如自上海交通大学的两个团队:X face团队,他们通过iPhone的前置摄像头,帮助面瘫患者进行数字化的康复训练,同样获得社会责任奖;以及O-O Lens团队,制作了一款协助盲人拍摄视频的软件,通过iPhone辅助功能,利用语音播报和震动的方式,协助盲人构图拍摄。可以看到苹果的技术融入很多学生的研究和作品中,他们正在开发既对残障人士有益,又对健全人有价值的创新产品。

另外,我们也发现,即便没有任何开发经验的同学,在本次赛事中也能取得很好的成绩。比如这款获得一等奖的app叫《AtomVenture元素探险家》,它的作者是来自浙江工业大学的三位纯设计背景的女生。灵感来源于组员的弟弟,他很多时候会问一些日常但是比较抽象的问题,但姐姐又没办法向他说明类似于苹果氧化的概念。

于是,这激发她们的思考,在这种看不见的化学元素作用下的日常现象,是否能通过小游戏结合IP精灵的方式来呈现?为了不辜负小朋友的“十万个为什么”的期待,由此而诞生了这个作品。

作品《元素探险家》

作品《元素探险家》

作品中,他们为所有118个元素设计了独特的IP的形象,结合日常生活中的25个日常元素和15个日常物质设,计了22个关卡,她们还计划加入AR和AI技术,让设计的元素精灵来到现实世界,让使用者可以实时互动和做一些常见物的合成,还想通过AI的方式,拍照识别实现中常见物,以便连接我们设计的关卡和精灵中。

“从专业上来说,我们组三个成员都是作为设计背景的学生,跨出到Swift开发的第一步确实很难”元素探险家团队说道:“但是当我们学习了,走出来这第一步,发现苹果提供了很好的学习平台,Swift Playgrounds对我们初学者来说刚刚好。”最终,她们通过团队两个组员自学开发,呈现了相对完整的逻辑及两关游戏的开发。

“在今年的参赛者中有50%的同学是没有任何编程背景的。”苹果公司副总裁、大中华区董事总经理葛越介绍道:“今年的启明赛道,就是希望没有编程背景的同学可以参加这个赛事。苹果也会不停地创造这种机会,通过导师的带领、学习,以及同学之间的互动,帮助这些没有编程背景的人,让他们找到伙伴一起参赛。”

作品《筑梦》

作品《筑梦》

此外,今年的基于AR的参赛作品也越发的出色。比如来自山东大学的参赛作品《筑梦》,以AR Cube为核心,针对4-9岁儿童,选择了更直观的图形指令方块,通过折叠纸质立方体,将每个立方体设置为不同指令,按照地图进行摆放后,生成的火柴人可与立方体进行一系列交互。他们希望通过让儿童使用这款软件,帮助他们更早地以一种简单有趣的方式理解编程的相关思想,在使用过程中炼动手能力和辑思维能力,让他们意识到编程也可以是一件非常有意思的事情。

作品《绘游戏》

作品《绘游戏》

同样来自山东大学的《绘游戏》团队,它通过拍照的方式,将绘图变为一个立体场景,放到一个“小世界”中,并且通过视觉模型的分析,生成一个个小故事,还可以根据故事情节进行演绎,也可以和“世界”中的绘画元素进行互动。整体app相对复杂,包括绘图识别,物体识别,物体分割,人物动效的骨骼绑定等等,整体的效果已经非常完整和成熟。

据悉,苹果今年把近 300 所大学里建立的 iOS 俱乐部进行升级,推出新版 Swift Coding Club 学习资源,帮助学生准备 Swift Student Challenge,并为未来发展提升技能,连接志同道合的伙伴。

最后,我们也看到,每年的移动应用创新赛,都带来了不同的看点。例如第六届的AR赛道,第七届的创意赛道,第八届引入社区概念,以及本届新增的启航赛道。苹果一直在用自己的方式,为年轻人的开发者提供学习、交流,以及展示的机会和平台。而更值得一提的是,每年的赛事都在激发年轻人,对编程的理解和兴趣。让更多人向往成为一名软件开发者、创造者,而他们也可以利用自己的知识和技能帮助他人,让生活充满价值。

打开APP阅读更多精彩内容