“深度学习之父”大谈AI:寒冬不会出现,论文评审机制有损创新

640?wx_fmt=jpeg

来源: AI科技大本营

整理:琥珀


近日《连线》杂志发表了一篇文章,记录了与“深度学习之父” Geoffrey Hinton 围绕人工智能伦理、技术、学术等领域的采访实录。当被问到如今人工智能是否将走进寒冬时,Hinton 的回答非常坚决:“不会有‘人工智能寒冬’。因为 AI 已经渗透到你的生活中了。在之前的寒冬中,AI 还不是你生活的一部分。但现在它是了。”


在 20 世纪 70 年代早期,一位名叫 Geoffrey Hinton(杰弗里·辛顿)的英国研究生开始构建简单的数学模型,以说明人类大脑中的神经元是如何在视觉上理解世界的。“人工神经网络”,正如其名,几十年来仍被视为一种不切实际的技术。但在 2012 年,Hinton 和他在多伦多大学的两名研究生 Alex Krizhevsky、Ilya Sutskever 通过人工神经网络来提高计算机识别照片中物体的准确性,他们设计的深层卷积神经网络 AlexNet,也一举夺得了当年 ImageNet LSVRC 的冠军。仅仅半年后,Google 公司收购了这三位研究人员创立的创业公司。至此,卷积神经网络(CNN)也由此将深度学习推进了新的历史阶段。


在此之前,人工智能不为多数人知晓,而今却已是硅谷炙手可热的话题。


在上周蒙特利尔举办的 G7 人工智能会议上,《连线》杂志采访了 Hinton,此次会议的主要参讲嘉宾来自世界领先的工业化经济体,他们共同讨论了鼓励人工智能发展的益处,以及如何减少失业和偏见学习算法的缺陷问题。


以下采访经过编辑整理如下:


Wired:加拿大总理 Justin Trudeau 在七国集团会议上表示,人工智能带来的道德挑战问题需要更好的得到解决。对此您怎么看?


Geoffery Hinton:我一直担心致命的自主武器可能会被滥用。我认为应该像《日内瓦公约》禁止化学武器那样禁止它们。即使不是每个人都签署这项协议,但它实际上扮演着的是一种道德象征。你会注意到谁没有签署。


Wired:据了解,有 4500 多名 Google 的员工签署了一封抗议五角大楼合约的信件,其中涉及了将机器学习应用于无人机图像。Google 声称这并非用于攻击性用途。您当时签署了这封信吗?


Geoffery Hinton:作为一名 Google 高管,我不认为这是我能公开投诉的地方,所以我私下会抱怨这个问题。我没有签署这封信,但我与 Google 的联合创始人谢尔盖·布林谈过。他说他对此也有点不太高兴,他们也不会追求这样的事情。


Wired:Google 的领导者决定完成但不续签合同。他们发布了一些有关使用人工智能的指导方针,其中包括不使用该技术制造武器的承诺。


Geoffery Hinton:我认为 Google 做出了正确的决定。会有各种各样的问题需要云计算解决,所以很难能划分出一个比较清晰的界限,从某种意义上这也是随机的。看到 Google 最后制定的底线我还是尤为高兴的。这种原则对我来说很有意义。


Wired:人工智能也可以在日常情况下出现道德问题。例如,当软件在用于社会服务或医疗保健中给出判断时,我们应该注意些什么?


Geoffery Hinton:我是一名试图将技术发挥作用的专家,不是社会政策方面的专家。在这方面,从我技术的角度来看,监管机构应该决定是否坚持:你可以解释你的 AI 系统是如何工作的。我认为这是一场彻底的灾难。


对于自己所做的大多事情,人们根本是无法解释的。当你聘请某人,你将取决于各种可以量化的事情进行判断,然后才是你的直觉。人们不清楚自己是如何完成这个决策的。如果你非要他们解释这个原因,那你就是在强迫他们编造一个故事。


神经网络同样也有类似的问题。当你训练神经网络时,它将学习十亿个数字,这些数字代表着它从训练数据中提取的知识。如果你输入一张图片,做出正确的判断如“这是一个行人”。但如果你问“为什么会这么想?”如果有任何简单的规则来判断图像是否包含行人,那么这个问题早就被解决了。


Wired:那我们怎么能知道何时能信任这些系统呢?


Geoffery Hinton:你应该根据系统的表现进行规范,即运行几组实验看看这个系统是否存在偏差。对于自动驾驶汽车,我想现在人们开始接受了这一概念。即使你不太了解自动驾驶汽车是如何做到这一点的,但如果事故发生的次数远远少于人类驾驶汽车的次数,那这是一件好事。我认为我们必须像对待人们那样去做:你只看到它们的表现,如果反复出现问题,那就说明它们不那么好了。


Wired:您之前提到,思考大脑的工作方式可以激发你对人工神经网络的研究。我们的大脑通过感觉器官突触连接的神经元网络获取信息;人工神经网络则通过数学神经元网络提供数据,并通过“权重”进行连接。在此前发表的一篇论文中,您和几位共同作者认为应该做更多的工作来解释大脑工作的学习算法。为什么?


链接:https://arxiv.org/abs/1807.04587


Geoffery Hinton:这套算法解决的问题与我们大多数神经网络有很大不同。人脑大约有 100 万亿个突触。人工神经网络拥有的数量通常至少小 1 万倍。人脑使用大量的突触从而尽可能多地从几个片段中学习。深度学习擅长在神经元之间使用更少的“连接”进行学习。我认为大脑并不关心将大量知识压缩到几个“连接”中,它关注的是通过大量“连接”快速提取知识。


Wired:我们如何构建功能更强大的机器学习系统?


Geoffery Hinton:我认为我们需要转向另一种计算。幸运的是,我这里就有一个。(这是一款来自英国初创公司 Graphcore 的原型芯片,用于加速机器学习、深度学习算法实现。)


几乎我们运行神经网络模型的所有计算机系统,甚至包括 Google 的特殊硬件,都使用 RAM 存储。从 RAM 中获取神经网络的权重需要耗费大量的计算资源,所以处理器可以帮忙解决。一旦每个系统都确保获得了权重,处理器就会不断计算。这是一项巨大的成本,也就是说你根本无法改变你为每个训练样本耗费的资源。


在 Graphcore 的芯片上,权重存储在处理器中的高速缓存中,而不是存储在 RAM 中,也不需要移动,因此,事情就变得比较简单了。可能我们会得到一个系统,比如一万亿个权重。这更像是人脑的规模。


Wired:最近人工智能和机器学习的兴趣和投资热潮意味着研究资金比以往任何时候都多。该领域的快速增长也是否带来了新的挑战?


Geoffery Hinton:社区面临的一个巨大挑战是,如果你想发表一篇机器学习的论文,那么论文中就一定要有划分了不同数据集的数据表格做支撑,还要有不同的方法,且方法必须看起来最优。如果不是这样的话,那么这篇论文有可能很难发表。我不认为这种方式鼓励了人们可以大胆思考。


如果你有一篇全新观点的论文,那么就不一定能有机会评审通过。因为一些年轻的评审员并不理解这篇论文观点。再或者,放在资深评审员面前,他又会因为评审了太多论文,一时意识不到这篇论文究竟是不是无稽之谈。任何有悖于大脑(常理)的事情都不会被接受。所以,我认为这非常糟糕。


我们应该做的,特别是在基础科学会议上,是诞生一个全新的想法。因为从长远来看,我们知道一个全新的想法会比一个细微的改进更有影响力。我认为现在出现这一本末倒置的原因,就是因为有了一大批年轻人和一小部分资深人士构成的评审队伍。


Wired:那么这会损害该领域的进展吗?


Geoffery Hinton:只需要等几年,这种不平衡将自行纠正。这也是暂时的。企业正忙着教育用户,大学正忙着教育学生,大学将最终聘请该领域更多的学者教授,一切将走向正规。


Wired:一些学者警告说,目前的炒作可能会像 20 世纪 80 年代那样进入“人工智能寒冬”,当时是用于研究进展不符合预期,而人们对 AI 的兴趣以及资金支持枯竭了。


Geoffery Hinton:不,不会有“人工智能寒冬”。因为 AI 已经渗透到你的生活中了。在之前的寒冬中,AI 还不是你生活的一部分。但现在它是了。


参考链接:https://www.wired.com/story/googles-ai-guru-computers-think-more-like-brains/


未来智能实验室是人工智能学家与科学院相关机构联合成立的人工智能,互联网和脑科学交叉研究机构。


未来智能实验室的主要工作包括:建立AI智能系统智商评测体系,开展世界人工智能智商评测;开展互联网(城市)云脑研究计划,构建互联网(城市)云脑技术和企业图谱,为提升企业,行业与城市的智能水平服务。


  如果您对实验室的研究感兴趣,欢迎加入未来智能实验室线上平台。扫描以下二维码或点击本文左下角“阅读原文”


640?wx_fmt=jpeg

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/493261.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

GDataXML解析XML文档

一、GDataXMLNode说明GDataXMLNode是Google提供的用于XML数据处理的类集。该类集对libxml2--DOM处理方式进行了封装,能对较小或中等的xml文档进行读写操作且支持XPath语法。 使用方法:1、获取GDataXMLNode.h/m文件,将GDataXMLNode.h/m文件添加…

RetinaNet+focal loss

one stage 精度不高,一个主要原因是正负样本的不平衡,以YOLO为例,每个grid cell有5个预测,本来正负样本的数量就有差距,再相当于进行5倍放大后,这种数量上的差异更会被放大。 文中提出新的分类损失函数Foca…

真实用户首次披露Waymo无人车服务体验: 为避开左转, 故意绕路

来源 :Ars Technica编译 :机器之能 高璇外国网友炸了:「就像看了一部大导演导的烂片一样。」在过去的 18 个月里,Waymo 的汽车一直在凤凰城的东南角运送乘客。该公司在合同中明确规定禁止乘客讨论用户体验,对项目信息进…

“横平竖直”进行连线+将相邻框进行合并

一.横平竖直”进行连线 解法1.将一些坐标点按照x相等,y相等连起来 解法1.根据 x或y总有一个相等的,用np.sum来找出和为1的点,然后在连起来,存在重复连线的问题. import numpy as npcoord np.array([[10, 60],[10, 20],[20, 20],[40, 40],[40, 60],[20, 40]])img np.zeros(…

一文看透汽车芯片!巨头布局技术路线全解密【附下载】| 智东西内参

来源:智东西摘要:一文看透汽车芯片!巨头布局技术路线全解密智能驾驶涉及人机交互、视觉处理、智能决策等,核心是 AI 算法和芯片。伴随汽车电子化提速,汽车半导体加速成长,2017 年全球市场规模 288 亿美元&a…

详细介绍软件架构设计的三个维度

如果你对项目管理、系统架构有兴趣,请加微信订阅号“softjg”,加入这个PM、架构师的大家庭 架构设计是一个非常大的话题,不管写几篇文章,接触到的始终只是冰山一角,更多的是实践中去体会。这篇文章主要介绍面向对象OO、…

中国智能语音行业研究

报告来源:中信证券作者:刘雯蜀 杨泽原 张若海智能语音作为人机交互的新型方式,有望大规模推广,中国市场是更适合语音交互的市场。2017年中国人工智能市场规模达约220亿元,智能语音占中国人工智能市场份额的22%&#…

SQL2012 附加数据库提示5120错误解决方法

在win8.1 x64系统上使用sql2012进行附加数据库(包括在x86系统正在使用的数据库文件,直接拷贝附加在X64系统中)时,提示无法打开文件,5120错误。 这个错误是因为没有操作权限,所以附加的时候出错,…

pytorch利用rnn通过sin预测cos 利用lstm预测手写数字

一.利用rnn通过sin预测cos 1.首先可视化一下数据 import numpy as np from matplotlib import pyplot as plt def show(sin_np,cos_np):plt.figure()plt.title(Sin and Cos, fontsize18)plt.plot(steps, sin_np, r-, labelsin)plt.plot(steps, cos_np, b-, labelcos)plt.lege…

高德纳咨询公司(Gartner)预测:2019年七大人工智能科技趋势

来源:创新研究摘要:人工智能技术对我们的工作环境、工作种类等等正在产生日益深刻的影响,其结果或好或坏都有可能。为应对这种改变,特别是负面的变化,高德纳咨询公司(Gartner)于2018年12月13日发…

美爆!《自然》公布2018年19张最震撼的科学图片

来源:前瞻网 摘要:2018年注定将载入科学史册:气候上,从加利福尼亚烧到开普敦的致命野火和极端干旱、历史罕见;医学上,克隆和成像技术的进步既带来希望,也产生了争议;生物上,一系列事件让人们意识…

python实现Trie 树+朴素匹配字符串+RK算法匹配字符串+kmp算法匹配字符串

一.trie树应用: 相应leetcode 常用于搜索提示,如当输入一个网址,可以自动搜索出可能的选择。当没有完全匹配的搜索结果,可以返回前缀最相似的可能。 例如三个单词app, apple, add,我们按照以下规则创建了一颗Trie树.对于从树的根…

天才也勤奋!DeepMind哈萨比斯自述:领导400名博士向前,每天工作至凌晨4点

来源:量子位你见过凌晨4点的伦敦吗?哈萨比斯天天见。这位DeepMind创始人、AlphaGo之父,一直是全球赞颂的当世天才,但每天要到凌晨4点,才能睡下。这是哈萨比斯最新采访中透露的作息时间,他告诉《星期日泰晤士…

RNN知识+LSTM知识+encoder-decoder+ctc+基于pytorch的crnn网络结构

一.基础知识: 下图是一个循环神经网络实现语言模型的示例,可以看出其是基于当前的输入与过去的输入序列,预测序列的下一个字符. 序列特点就是某一步的输出不仅依赖于这一步的输入,还依赖于其他步的输入或输…

利用flask写的接口(base64, 二进制, 上传视频流)+异步+gunicorn部署Flask服务+多gpu卡部署

一.flask写的接口 1.1 manage.py启动服务(发送图片base64版) 这里要注意的是用docker的话,记得端口映射 #coding:utf-8 import base64 import io import logging import picklefrom flask import Flask, jsonify, request from PIL import Image from sklearn import metric…

2018中国自动驾驶市场专题分析

来源:智车科技未来智能实验室是人工智能学家与科学院相关机构联合成立的人工智能,互联网和脑科学交叉研究机构。未来智能实验室的主要工作包括:建立AI智能系统智商评测体系,开展世界人工智能智商评测;开展互联网&#…

python写日志

需要再加入按照日期生成日志 #coding:utf-8 import logging import logging.handlers class Logger:logFile def __init__(self, logFile):self.logFile logFileself.logger logging.getLogger(mylogger)self.logger.setLevel(logging.INFO)rf_handler logging.handlers.…

MIT科学家Dimitri P. Bertsekas最新2019出版《强化学习与最优控制》(附书稿PDF讲义)...

来源:专知摘要:MIT科学家Dimitri P. Bertsekas今日发布了一份2019即将出版的《强化学习与最优控制》书稿及讲义,该专著目的在于探索这人工智能与最优控制的共同边界,形成一个可以在任一领域具有背景的人员都可以访问的桥梁。REINF…

yolov3 anchors用kmeans聚类出先验框+anchor宽高比分析

一.yolov v3聚类出框 # -*- coding: utf-8 -*- import numpy as np import random import argparse import os# # 参数名称 # parser argparse.ArgumentParser(description使用该脚本生成YOLO-V3的anchor boxes\n) # parser.add_argument(--input_annotation_txt…

Geoff Hinton:全新的想法将比微小的改进更有影响力

来源:AI科技评论摘要:日前,WIRED 对 Hinton 进行了一次专访,在访谈中,WIRED 针对人工智能带来的道德挑战和面临的挑战等问题进行了提问,以下为谈话内容。“作为一名谷歌高管,我认为在公开场合抱…