谷歌Creatability项目利用AI帮助残疾人更容易地访问网络
2018年10月26日 由 浅浅 发表
547784
0
根据美国人口普查局的数据,美国有超过5600万人残疾人,残疾人和非残疾人使用网络的人数差距越来越大,残疾人避免上网的可能性大约是正常人的三倍,拥有电脑,智能手机或平板电脑的可能性降低20%。此外,只有40%的残疾人表示他们对使用互联网的能力充满信心。
为了促进网络更易于访问,谷歌和纽约大学的能力项目今天推出了Creatability,这是一组实验,探索AI如何能够帮助这个群体。
它们可以在Creatability网站上找到,谷歌开源了代码。它正在征求开发人员的新实验,他们可以提交他们的作品以获得特色。
这些实验包括一个音乐创作工具,可以让你通过将你的脸转移到数字画布来创建音乐,将数字和声音转化为草图,以及模仿联觉效果的音乐可视化工具。
大多数人利用Posenet,一种由谷歌的TensorFlow机器学习框架驱动的机器学习模型,用于图像和视频中的身体联合检测。使用任何现成的网络摄像头,您可以用你的脸画或用鼻子敲出一个曲调。它在Javascript中运行,图像在设备上和浏览器中处理。
谷歌表示,它与无障碍社区的创作者合作建立了可创造性,包括作曲家Jay Alan Zimmerman,他是聋人;盲人科学家和设计师Josh Miele;Chancey Fleet,盲人技术教育者;Open Up Music的创始人Barry Farrimond和Doug Bott,他们与年轻的残疾音乐家合作建立包容性的管弦乐队。
纽约大学能力项目的设计师兼研究员Claire Kearney-Volpe在一篇博客文章中写道:“我们希望这些实验能激发他人释放内心艺术家的能力。艺术使我们有能力超越口头或书面语言,团结我们,愉悦和满足。如果做得好,这个过程可以通过技术得到增强,扩展我们的能力和发挥潜力。”