首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >一触知万物,AI用抓手判别物体 | 一周AI新闻

一触知万物,AI用抓手判别物体 | 一周AI新闻

作者头像
代码医生工作室
发布于 2019-07-05 10:32:42
发布于 2019-07-05 10:32:42
6310
举报
文章被收录于专栏:相约机器人相约机器人

“摩登周末,要有腔调。”

用抓手 “尝” 东西

软体机器人可用触觉判断物体

「 进步源于模仿 」

加州大学戴维斯分校的研究人员和卡内基梅隆大学的研究人员合作开发了一种方法,让一款实验性的软体机器人抓手也拥有了 “品尝” 能力,他们使用了经过基因工程改造的细菌,可以对特定的化学物质进行检测。

这款机器人装备了一个 “生物传感模块”,该模块使用经过基因工程改造的大肠杆菌制造,可以通过产生一种蛋白质对名为 IPTG(异丙基-β-D-硫代半乳糖苷)的化学物质进行检测。如果真有蛋白质产生,机器人专门用于检测光线的电路就会被触发,继而机器人将判定水浴槽中是否有 IPTG 的存在。一旦这种化学物质完全消失不见,机器人就会安全地把一个物件(在这里是一个球)放入水中。

一旦构建出可以持久存在、保持规模和构成稳定的微生物群落,则可以有更大的发挥空间。比如可以为机器人提供检测化学物质的方法,而且还可以通过制造聚合物来让机器人进行自我修复,甚至是生成生物能来帮助机器人实现能源独立。

? 原文链接:

https://techcrunch.cn/2019/06/27/this-new-experimental-robot-gripping-arm-can-taste-what-it-touches/

? 论文地址:

https://robotics.sciencemag.org/content/4/31/eaax0765

AI 神“脑补”!

只要一段话就能判断说话手势

「 休想瞒过我的耳朵? 」

UC 伯克利大学等机构的新研究发现,只需要输入一段语音,就可以预测出说话人的手势,基本没有什么违和感。

手势,是人们在说话过程中自发发出的行为,用于补充语音信息,来帮助更好地传递说话人的想法。通常情况下,说话的时候,手势与话语都是有关联的。研究人员建立了一个由10名说话人组成的144个小时的大型个人视频数据集,利用一种时间跨模态翻译的方法,采用端到端的方式将语音转换成手势,并使用了范围非常大的时间背景来进行预测。

以坐着的脱口秀主持人为测试对象,说话的时候,主持人肩膀什么角度、手指如何挥动预测得一清二楚。同时,他们的研究也覆盖了其他各种场景,比如预测老师上课时使用的手势。

? 原文链接:

《神“脑补”!只要一段话,就知道你的说话手势 | UC 伯克利》

? 论文地址:

http://people.eecs.berkeley.edu/~shiry/speech2gesture/

麻省理工学院开发 AI 模型

可提前5年预测乳腺癌

「 人类的健康卫士 」

麻省理工学院计算科学和人工智能实验室(MIT CSAIL)与美国马萨诸塞州综合医院(MGH)发布了一个全新的人工智能系统,该系统可以从乳房 X 光造影检查中预测患者是否会在未来五年内患上乳腺癌。

这一模型学习了6万余名患者的乳房 X 线照片和已知结果,以了解乳腺组织中潜在恶性肿瘤的特征。

不同于以往针对白人群体开发的模型,这款人工智能模型对白人和黑人女性同样准确,两个种族均为0.71,据了解,黑人女性因乳腺癌而死亡的比率高出42%。该系统也可以为患者定制个性化的筛查方案,减少诊断延误的情况。

? 原文链接:

https://techcrunch.com/2019/06/26/mit-ai-tool-can-predict-breast-cancer-up-to-5-years-early-works-equally-well-for-white-and-black-patients/

向多才多艺进化

斯坦福研究员教 AI 编写俳句

「 AI 诗人上线 」

人工智能越来越全面发展了,不仅可以绘画、作曲、下棋,如今写诗的水平也大大提升。

最近 Arxiv.org 上发表的一篇新论文中,来自斯坦福大学的学生使用递归神经网络训练 AI 模型,教 AI 写诗,即在给出第一行后生成最后两行俳句。

▲由 AI 系统生成的俳句

在8000组俳句集合的训练下,该模型可延续传统俳句“五-七-五”,共十七字音的结构,生成完整作品。诗歌作为一个创造性作品,AI 这位诗人的创作或许会带来不同的意境。

? 原文链接:

https://venturebeat.com/2019/06/21/researchers-teach-ai-to-write-haikus/

? 论文地址:

https://arxiv.org/pdf/1906.08733v1.pdf

日本推自动行走送货机器人实用化

望缓解人手不足

「 越来越近的智能帮手 」

▲图片来自中新网

据日本共同社报道,日本官民协议会在经济产业省展出了5种可以自动送货的机器人,并致力于将其投入使用,以缓解日本运输行业人手不足的问题。

这些机器人可利用附带摄像头拍摄的图像和全球卫星定位系统自动移动。其中,一款机器人身上有 30 个包裹存放箱,抵达配送地后用户可从箱中取出包裹,另一款机器人还具备追随送货员行走的功能。

据悉,日本官民协议会由日本经产省、国土交通省、警察厅等政府部门以及多家民间企业组成,致力于实现自动行走送货机器人的实用化,并确保其安全性和完善相关法律制度。

? 原文链接:

https://news.sina.com.cn/w/2019-06-25/doc-ihytcerk9169421.shtml

AI 生成宇宙三维模拟

准确率和速度远超预期

「 渺小和宏大,都在 AI 的视野下 」

▲新旧两种模型的对比

天体物理学家第一次使用人工智能技术来生成复杂的宇宙三维模拟。结果可以在几毫秒内完成这些模拟,远快于需要既往几分钟的模拟。

该项目基于深度密度位移模型,简称 D3M,模拟重力对宇宙外形的塑造。

同时,该模型还可以随着参数的调整,准确地模拟宇宙的外观。例如宇宙中有多少是暗物质,即使模型从未接收到任何那些参数变化的训练数据。相对于现存的快速模型的9.3%误差,D3M 的相对误差为2.8%,表现出色。

? 原文链接:

https://phys.org/news/2019-06-ai-universe-sim-fast-accurateand.html

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2019-06-30,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 相约机器人 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
Android平台实现Camera2数据推送到RTMP服务器
在Google 推出Android 5.0的时候, Android Camera API 版本升级到了API2(android.hardware.camera2), 之前使用的API1(android.hardware.camera)就被标为 Deprecated 了。
音视频牛哥
2021/03/02
1.5K0
如何实现Android平台GB28181设备对接Camera2数据
在写如何实现Android平台GB28181设备对接Camera2数据说明之前,我在前两年的blog就有针对camera2的RTMP直播推送模块做过技术分享:
音视频牛哥
2022/09/27
7650
如何实现Android平台GB28181设备对接Camera2数据
Android Camera2 与 Camera API技术探究和RAW数据采集
Android Camera2 是 Android 系统中用于相机操作的一套高级应用程序接口(API),它取代了之前的 Camera API。以下是关于 Android Camera2 的一些主要信息:
音视频牛哥
2024/10/01
1K0
Android摄像头采集选Camera1还是Camera2?
好多开发者纠结,Android平台采集摄像头,到底是用Camera1还是Camera2?实际上,Camera1和Camera2分别对应相机API1和相机API2。Android 5.0开始,已经弃用了Camera API1,新平台重点开发Camera API2,Camera API1 会逐渐被淘汰。Camera API2 框架为应用提供更接近底层的相机控件,包括高效的零复制连拍/视频流以及曝光、增益、白平衡增益、颜色转换、去噪、锐化等方面的每帧控件。
音视频牛哥
2024/08/08
5680
Android摄像头采集选Camera1还是Camera2?
Android平台如何采集摄像头数据并实现低延迟RTMP推送
2015年,我们发布了第一版的Android平台RTMP摄像头|屏幕直播推送模块,几经迭代,功能强大、性能优异,在前些年几乎已经是业内延迟体验和口碑最好的RTMP模块了(毫秒级延迟,低延迟模式下100多毫秒)。鉴于我们侧重于传统行业音视频直播方案,我们从以下几个维度,介绍下Android平台RTMP摄像头采集推送模块的使用场景。
音视频牛哥
2024/11/20
6290
Android平台GB28181设备接入模块摄像头采集方向不对怎么办?
我们在做Android平台GB28181设备接入模块的时候,有开发者提到这样的诉求:他们的智能头盔、执法记录仪等设备,采集到的图像,是旋转了90、180甚至270°的,设备本身无法针对图像做翻转或者旋转操作,问我们这种情况下需要如何处理?
音视频牛哥
2022/12/17
5680
Android平台GB28181设备接入模块摄像头采集方向不对怎么办?
Android平台GB28181设备接入模块如何实现实时视频和本地录像双码流编码
我们在做Android平台GB28181设备接入模块的时候,遇到这样的场景,比如执法记录仪或智慧工地等场景下,由于GB28181设备接入模块,注册到国标平台后,平时只是心跳保持,或还有实时位置订阅,查看视频的时候,是按需看,而且有时候,网络环境并不是太好,所以,催生了这样一个诉求:部分开发者希望能本地录像的时候,录制高分辨率(比如1920*1080),国标平台侧发起实时视频查看请求的时候,上传低分辨率(如1280*720)数据,有点类似于IPC的主码流和子码流。
音视频牛哥
2023/05/23
5660
Android平台GB28181设备接入模块如何实现实时视频和本地录像双码流编码
Android平台RTMP推送模块如何对接NV21、YV12、RGB、YUV等编码前数据
我们在对接Android平台摄像头或者屏幕采集、编码打包推送场景的时候,随着采集设备的不同,出来的数据也是多样化的,比如NV21、YV12、RGB、YUV等,更有图像数据甚至是翻转或者倒置的,如果上层处理,效率低下,本篇文章主要介绍下常用的编码前数据接口。相关资料或版本测试,也可联系大牛直播SDK(官方)
音视频牛哥
2021/11/12
6940
Android平台GB28181设备接入模块如何对接NV21、YV12、RGB、YUV等外部数据
我们在对接Android平台GB28181设备接入模块的开发者时,遇到这样的场景,除了Android设备(如执法记录仪、智能安全帽等)自带的camera或camera2前后摄像头数据外,还有些场景是需要外部编码前或编码后数据,比如对接OTG类似的外置数据源,如NV12、NV21、YV12、RGB或YUV等格式,这里做个简单的汇总。
音视频牛哥
2023/05/25
3710
Android平台GB28181设备接入模块如何对接NV21、YV12、RGB、YUV等外部数据
Android平台RTMP推流或轻量级RTSP服务(同屏或摄像头)编码前数据接入类型总结
很多开发者在做Android平台RTMP推流或轻量级RTSP服务(摄像头或同屏)时,总感觉接口不够用,以大牛直播SDK为例 (Github) 我们来总结下,我们常规需要支持的编码前音视频数据有哪些类型:
音视频牛哥
2020/10/13
8840
Android平台GB28181设备接入模块之按需编码和双码流编码
我们在做执法记录仪或指挥系统的时候,会遇到这样的情况,大多场景下,我们是不需要把设备端的数据,实时传给国标平台端的,默认只需要本地录像留底,如果指挥中心需要查看前端设备实时数据的时候,发起视频播放请求,设备侧再推送数据到平台侧,如需语音广播,只要发起语音广播(broadcast),GB28181设备接入侧响应,然后发送INVITE请求等,完成语音广播和语音对讲。此外,考虑到设备侧的上行带宽瓶颈,一般来说,本地录像需要尽可能清晰(比如1920*1080分辨率),上传视频数据,传输1280*720分辨率,也就是我们传统意义提到的双码流编码。
音视频牛哥
2023/07/25
5030
Android平台GB28181设备接入模块之按需编码和双码流编码
Android Camera开发序列:Camera2 API 的简单描述和调用(预览、拍照、录像
Android 5.1 以后,添加了Camera2 的API,能够满足更多操纵camera的场景。当然,相对应camera1的调用,也变的复杂一点。
小驰行动派
2021/04/19
2.2K0
TRTCSDK自定义采集YUV视频通话
摄像头通话功能,是TRTCSDK对系统摄像头进行了封装,采集摄像头数据,编码传输通话。
ppchao
2020/11/13
2.9K0
TRTCSDK自定义采集YUV视频通话
Android native层实现MediaCodec编码H264/HEVC
Android平台在上层实现mediacodec的编码,资料泛滥,已经不再是难事,今天给大家介绍下,如何在Android native层实现MediaCodec编码H264/HEVC,网上千篇一律的接口说明,这里不再赘述,本文主要介绍下,一些需要注意的点,权当抛砖引玉,相关设计界面如下:
音视频牛哥
2022/08/29
1.4K0
TRTCSDK自定义采集YUV视频通话
摄像头通话功能,是TRTCSDK对系统摄像头进行了封装,采集摄像头数据,编码传输通话。
ppchao
2020/12/02
3.3K0
TRTCSDK自定义采集YUV视频通话
Android多媒体之Camera2的相关操作
零、前言 Android 5.0+ (API 21) Camera过时.png ---->[源码里让我们用camera2] * @deprecated We recommend using t
张风捷特烈
2019/02/25
3.1K0
Android多媒体之Camera2的相关操作
关于Camera性能优化的一些建议
上一篇文章主要介绍Camera的基本功能,我们在做相机应用的时候,除了相机的基本功能,还有一个非常重要的点,就是性能不能查,有几个方面:预览不能卡顿、拍照速度要快、录制视频不能卡。
马上就说
2022/05/25
2.8K0
关于Camera性能优化的一些建议
2016级android在线测试15-图像 camera2
1. ImageView类用于显示各种图像,例如:图标、图片,下面对于ImageView类加载图片方法的描述错误的是()
达达前端
2022/04/29
6620
Android Camera2详解
Camera API2是Google从Android5.0开始推出的配合HAL3使用的一套新架构,相比于API1,对应用层开发者而言开放了更多的自主控制权,主要特性包括:
雪月清
2020/06/23
2.9K0
Android Camera2
从 Android 5.0 开始,Google 引入了一套全新的相机框架 Camera2(android.hardware.camera2)并且废弃了旧的相机框架 Camera1(android.hardware.Camera)。作为一个专门从事相机应用开发的开发者来说,这一刻我等了太久了,Camera1 那寥寥无几的 API 和极差的灵活性早已不能满足日益复杂的相机功能开发。Camera2 的出现给相机应用程序带来了巨大的变革,因为它的目的是为了给应用层提供更多的相机控制权限,从而构建出更高质量的相机应用程序。本文是 Camera2 教程的开篇作,本章将介绍以下几个内容:
ppchao
2020/12/01
2.5K0
Android Camera2
推荐阅读
相关推荐
Android平台实现Camera2数据推送到RTMP服务器
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档