阅读更多
【编者按】深度学习,作为人工智能研究中一个新的领域,其动机在于建立可以模拟人脑进行去分析学习,模仿人脑的逻辑去解释数据的神经网络。为了帮助大家能够更加系统化的学习该门课程,知识库特邀请了CSDN社区专家、知识库特邀编辑孙佰贵精心绘制了深度学习知识图谱。

点击进入深度学习知识库

与此同时,我们还采访了孙佰贵(博客地址:http://blog.csdn.net/sunbaigui)老师,分享他是如何与深度学习结缘以及技术层面的理解与思考。



孙佰贵

CSDN:请先简单地介绍一下自己。

孙佰贵:我叫孙佰贵,本科毕业于宁波大学,本科期间曾参加ACM编程竞赛取得最好成绩是省赛银奖,地区赛铜奖。
硕士毕业于浙大CAD&CG国家重点实验室,硕士期间主要研究方向是计算机视觉(图像分割、视频分割、视频2D转3D)。
硕士毕业后来到阿里巴巴工作至今,主要研究和应用方向为深度学习,包括图像分类、图像搜索、广告点击率预测,曾发表一篇ACMMM长文,论文地址http://arxiv.org/abs/1609.06018。在本科大一做ACM编程竞赛开始就坚持着写博客,在csdn上已经陆续写了7、8年。

CSDN:能否分享一下,你是如何与深度学习结缘,并从事这个领域的。

孙佰贵:在本科大三的时候接触到人工智能课程,对里面的手写数字识别尤其感兴趣,当时手写数字识别是用BP(深度学习的基石)网络去做,感觉非常酷。于是打算考研进修,因为觉得人机交互是人工智能普及的必经之路,所以读研期间选择了计算机视觉。

刚入职阿里巴巴工作时也找了图像方向的岗位,当时进到组里的时候,我对组里的各个业务方向还有技术方向都详细研究了下,由于我对人工智能一直有强烈的兴趣所以就选择了当时组里比较新的深度学习方向,然后我当时就成了阿里第二批做深度学习的人,第一批做的人很少,大概就几个,我师兄就是其中一个。

CSDN:在深度学习领域,目前有很多开源的工具和库,开发者该如何选择适合他们的深度学习框架?

孙佰贵:通常一聊到开源,大家首先会看这个开源代码写的性能是否足够好,代码风格是否足够好,支持的特性是否特别前沿。但是往往以上几点都有可能成为误区,一个真正好的开源是要有足够大的开发者人气的,并且它必须是易扩展的,然后还要是易移植的,其实只要有前两点,那这个开源库是一定会不停的更新,这点非常重要,很多开源一时热,但没有开发者基础,往往很容易就冷掉了。

好的开源也要是易移植的,因为工业上用开源的话,一般都会用到线上,这就要求这个开源必须是非常容易移植的,caffe在工业界比较受欢迎。

以上都是基于工业上的需求去选的,一般做学术的话可能会更加要求少量编程,所以一般theano,torch在学术界很受欢迎。

CSDN:如何利用高性能计算加速深度学习算法?

孙佰贵:现在深度学习的加速也是一个非常火热的研究方向,在硬件方面一般采用FPGA或者GPU进行加速,在算法方面一般采用并行计算去加速。

CSDN:目前Intel和Nvidia两家都砸重金押注深度学习,并在处理器、软件栈、生态建设等展开全方位布局,您对此有何评价?

孙佰贵:从商业上来讲,当前这两家在处理器、软件栈、生态建设等方面的布局其实可以看做是一个问题,那就是要卖处理器。早前,Intel专注于CPU,Nvidia专注于GPU分工比较明确,最早Intel在GPU领域有集成显卡,一般情况下也能满足个人的需求,所以导致Nvidia的市场份额一直都不大。近几年工业界在深度学习方面的突飞猛进式的研究与业务拓展,迎来了GPU的高需求期,Nvidia凭借其在GPU独立显卡领域的优势迅速提升了其销售额,也使得Nvidia的市值在最近提升了很多。

从深度学习生态上来讲,Intel在深度学习上的发力,使得工业界之后有更多的选择,也能加速深度学习硬件层面上的突破式创新,对于开发者来讲多了一种选择,这无疑是一种福音。

CSDN:从工程应用角度,您认为一个深度学习平台的易用性和效率哪方面更重要?

孙佰贵:这两者缺一不可,线上的性能效率往往直接决定了该应用能不能上线;然而易用性往往决定了迭代速度;在互联网里,应用的迭代速度与效率都非常重要。

CSDN:目前Google,微软,Facebook,百度分别开源了自己的深度学习平台,形成百花齐放,百家争鸣的局面,您认为哪个更适合初学者,哪个更适合生产部署?

孙佰贵:这三家公司开源的深度学习平台,都带有一些局限性,有些门槛太高,有些专注于某个特定领域,我认为最适合初学者的还是非商业公司的开源,比如caffe,torch等。

从易部署角度来讲,Google的TF比较好。

CSDN:阿里哪些典型业务使用了深度学习,其有效性体现在哪些方面?

孙佰贵:阿里有很多语音,图像,视频相关的都使用了深度学习,有效性在于深度学习在这些方向上的效果都远高于传统算法,这些方向能放大深度学习擅长特征表达学习的优势,因为原先在这些方向上特征的抽取往往都是人工制定的,人工制定的特征存在一个问题,那就是它并不是适用于所有的数据场景的,深度学习可以在任一一个数据场景中学习出专属于这个数据集的特征描述,这是深度学习的优势所在。

CSDN:深度学习理论方面有哪些由于当前技术水平限制还不能用于工程实现?

孙佰贵:由于深度学习强依赖于硬件、集群、大数据,这使得深度学习是少数的工业界成果不输于学术界成果的领域。深度学习是一个重实践的领域,一般情况下,深度学习理论都是在实验上验证过而沉淀下来的,所以往往是先由工程后有理论。

CSDN:技术路线方面,对于DL的入门和进阶,您有什么建议?我们上线了知识库系统化学习的方法,您会怎样应用?

孙佰贵:DL入门的话一般挑一些权威的survey或者书籍,如下作者写的一些资料比较权威:Yoshua Bengio、Geoffrey Hinton、Yann LeCun、Andrew Ng,然后挑一个开源跟着教程去跑例子,比较推荐torch、theano、caffe。

DL进阶的话一定要选择一个开源去做详细的代码解读,比较推荐caffe,然后再去了解各种深度学习相关的领域以及竞赛,再就是一定要去arxiv网站上定期查看DL的相关文章,了解DL最新研究状况与动态。

技术学习一般都是由点及面,上线的知识库可能会很大,除了了解该技术全面的知识点外,还需要挑这里面的某个细分领域去做仔细的研究与学习=>>进入深度学习知识库

推荐阅读:


更多内容请关注CSDN知识库。该产品汇集了领域专家们精心绘制的各重点技术领域的知识图谱,及由特邀编辑(领域专家)从海量数据中层层筛选出的精华内容和资源(学习视频、实践Demo、图书)。知识图谱可以帮助开发者全局把控该技术领域,而精选内容更能让开发者从技术细节加深了解该领域的每个核心技术点。扫描以下二维码,获取更多CSDN知识库内容。



个人知识图谱已上线,快来订制你的专属知识库吧=>>你的个人图谱上线了,快来领取!
  • 大小: 36.4 KB
  • 大小: 51.6 KB
1
0
评论 共 0 条 请登录后发表评论

发表评论

您还没有登录,请您登录后再发表评论

相关推荐

  • VSCode vs Visual Studio:.NET网站开发的终极对决

    如果你正在开发小型项目或进行脚本编写,VSCode是你的最佳选择。它启动速度快,占用资源少,通过丰富的插件生态系统可以实现强大的功能。通过本文的详细讲解和实战演练,相信你已经对VSCode和Visual Studio有了更深入的了解。无论你是.NET新手还是资深开发者,选择合适的工具将大大提高你的开发效率。希望这篇教程对你有所帮助,期待你在.NET开发领域取得更大的成就!🌟✨如果你有任何问题或建议,欢迎在评论区留言交流!希望这篇教程对你有所帮助,期待你在.NET开发领域取得更大的成就!😊✨😊✨。

  • C#编译工具 SnippetCompiler 轻型IDE开发环境 媲美VS2010

    C#编译工具 SnippetCompiler 轻型IDE开发环境 媲美VS2010 京华志&精华志出品 希望大家互相学习,互相进步 支持CSDN 支持微软 主要包括C# ASP.NET SQLDBA 源码 毕业设计 开题报告 答辩PPT等

  • .NET 程序员必备工具

    地址http://publish.itpub.net/msoft/2008-06-19/200806192333598.shtml 1、Snippet Compiler Snippet Compiler 是一个基于 Windows 的小型应用程序你可以通过它来编写、编译和运行代码。如果你具有较小的代码段并且你不想创建完整的 Visual Studio...

  • 轻量级开发工具 Snippet Compiler 和 SharpDevelop

    Snippet Compiler 官方主页:http://www.sliver.com/dotnet/SnippetCompiler/ 如果你具有较小的代码段,并且你不想创建完整的 Visual Studio项目以及该项目附带的所有文件,此时就是Snippet Compiler的用武之处。假如我们要用记事本编写该代码段,不仅没有智能提示功能,容易出错,编写完成后还需要使用命令行进行编译,是一件...

  • Snippet Compiler 3.0.2 老朽痴拙汉化版(代码段编译器)

    Snippet Compiler3.0.2 老朽痴拙汉化版是一个免费的 .NET 编译和开发工具基于Windows 的小型应用程序,你可以通过它来编写、编译和运行代码。在下载Snippet Compiler后,无需进行安装,直接运行可执行文件即可。在第一个运行时,它会提示你如何创建快捷方式,运行后默认的语言是c#,可以直接在RunSnippet()方法中编写你的代码片段。 主要的特色有: 支援 Intellisense 功能,在撰写的时候会自动提示各方法的参数与型别 若程式码有错误,将会不支援 Intellisense 功能 程式码自动缩排,包括 #region 收合的功能也有支援支援许多 Visual Studio 中既有的快速键 可选用 C# 或 VB.NET 编译器 编译错误的时候支援 Errors 视窗

  • 小白开发微信小程序21--网络API(asp.net core版)

    在一个网站里面发起https请求是很常见的,但是,由于微信小程序是腾讯内部的产品,不能直接打开一个外部的链接,例如,您在微信小程序里面无法直接打开网站,但是,在做小程序开发的时候,如果想调用这个网站的一个接口,这时,如何使用?因为,微信小程序里面不能直接使用浏览器,所以,只有使用腾讯给我们封装好的API wx.request(object)。

  • SnippetCompiler

    一个小巧强悍的.net代码编绎工具。有时想测试一些简单的方法时,不用再vs里创建一个工程了。

  • .Net + 微信小程序实现 手机微信支付

    用户在小程序中选择商品或服务。小程序调用微信支付API生成支付订单。用户确认支付并完成支付操作。微信支付系统处理支付请求并返回支付结果。小程序接收支付结果并进行相应的业务处理。

  • IIS发布.net6 api+微信小程序/H5真机调试接口的流程

    我们创建.net6 api程序,然后使用SqlSugar连接MySQL数据库,再使用iis发布,当然使用其他的也行。再开发一个微信小程序,手机运行小程序,手机运行H5,都可以看到数据库的数据,就是这么一个流程。开始!

  • Asp.Net开发微信小程序的授权登录,以及业务处理的思路

    前言: 这几天一直在研究微信小程序,也是初次进行开发微信小程序,说起来还是有点吃力的,看文档看的头大,还好经过这几天的研究 和查询资料也懂了一点,算是先抛个砖吧,想引出后面的玉可能还需要很大功夫。 接下来步入正题:首先给大家提供一个做小程序的思路,让大家明白先从哪入手 基础了解: 微信小程序的开发文档:里面介绍了关于做小程序我们需要准备什么,以及也会提供一些开发思路。 微信小程序的API...

  • .NET MAUI学习笔记——3.创建第一个程序_初级篇

    没接触过的人可能不知道app shell是啥?其实我也不知道,不过在这里应该可以暂时理解为一种UI框架(或UI结构)。可以按下图理解,当VS创建.NET MAUI项目时,会生成4个重要的代码文件。可以在解决方案管理器(Solution Explorer)中看到它们:这些文件用于配置和运行.NET MAUI应用程序。每个文件都有不同的用途,它们的描述如下:这是一个用于引导应用程序的代码文件。里面的代码作为应用程序的跨平台入口点,用于配置和启动应用程序。

  • 零基础学会asp.net做AI大模型网站/小程序之一:总体介绍

    对于各位基础不扎实,想学习点编程技术,以便搞副业,或者进行AI行业的同学,这个专栏的文章将彻底打开您的新世界大门,一步步教你如何安装环境、如何写代码、如何使用各组件、如何写一个属于您自己的网站,以及如何写一个AI大模型网站。学完本专栏,您可以很简单就拥有一个属于自己的、可供网友直接访问的网站。 本节先贴部分实现的效果,然后对asp.net做个简单介绍,对asp.net有一个基本的了解。

  • .net后台+商城小程序源码

    .net后台+微信商城小程序

  • asp.net 微信小程序源码 微信分销源码 源文件完全开源 源码

    语言.NET 数据库Mssql 移动端 微信小程序 授权免授权 源文件完全开源(含全部源文件) 注意事项 1、开发环境为Visual Studio 2017,数据库为SQLServer2008 R2,使用.net 4.5开发。 2、管理员登陆名:admin密码:admin123 3、开发和运行环境: 数据库软件:SqlServer2...

  • 你是否也想为asp.net与微信小程序打通数据通道

    我们都知道,微信小程序是不能有本地数据文件的,打包发布的时候也不能超过10M,云开发中的数据处理能力也是不太强的,那么我们是否可以借助asp.net来把服务器中处理好的数据送给微信小程序呢?也就是说,让微信小程序一定程度上成为一个数据显示器吧!下面我们开始吧! 掌握了这个,你就可以自由的使用网站的数据啦,而且可以和你的网站的数据同步了。如果是使用微信小程序的云数据,那你还要做两套数据。

  • ASP.NET小程序(源代码)

    小例子,大家看看,有数据库

  • 小程序源码,微信小程序asp接口php接口保证能用(官方资源)

    网站不知多少源码都没有用,我这个微信小程序asp接口php接口保证能用,不能用可以找我,小程序就是这么简单的东西。(官方资源)

  • .net小程序

    华氏与摄氏温度互转的程序 博文链接:https://tntxia.iteye.com/blog/192067

  • 2018开源微信小程序+net后台源码可运行二次开发最新版

    (仿牛贝淘客微信小程序+后台源码 仿牛贝淘客微信小程序+后台源码)淘宝客的福利来啦~先开源淘宝客小程序源码,提供给生活在淘客圈的朋友开源使用,代码完全开源无加密,开源二次任意开发。

  • .NET开发的小工具类

    Our .NET development team has been in the process of upgrading our development machines, which has given us an opportunity to re-evaluate and standardize our tooling. Below are what we consider the es...

Global site tag (gtag.js) - Google Analytics