当前在线人数16540
首页 - 分类讨论区 - 电脑网络 - 葵花宝典版 - 同主题阅读文章
未名交友
[更多]
[更多]
胡扯几句什么叫Deep Learning入门
[版面:葵花宝典][首篇作者:CRH1235] , 2017年07月08日22:23:36
来APP回复,赚取更多伪币 关注本站公众号:
[首页] [上页][下页][末页] [分页:1 2 3 ]
CRH1235
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 1 ]

发信人: CRH1235 (江左没狼), 信区: Programming
标  题: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sat Jul  8 22:23:36 2017, 美东)

今天有空瞎扯几句,版上的大神们不要见笑。其实今天很多人所谓的ML入门,其实是DL
入门,或者叫神经网络入门。我觉得可以分三步。

第一,把Goodfellow等著的deep learning书Part I and Park II都看懂,包括第一章数
学基础都查漏补缺完成,基本的理论基础就具备了。看不懂的youtube,Coursera,
udacity找资源帮助理解。

第二,自己实现几个简单的神经网络,我个人建议是用numpy手撕一个MLP,一个
vanilla的CNN和一个vanilla的RNN,重点是了解matrix(或者叫tensor)在层之间怎么流
动,forward(比如convolution),backward(尤其是RNN的backpropagation
through time)怎么实现。这些都不难,但是需要一些耐心。虽然耗时间,但是对彻底
摸清神经网络的工作细节很有帮助。所有的三个网络都可以用mnist数据集。

第三,学习一两个主流的libraries。个人推荐先学pytorch,后学tensorflow。因为这
两个是DL libraries的两种风格,imperative programming vs symbolic programming
的代表。symbolic programming一开始会不习惯,不如先把pytorch学好再开始
tensorflow。这两个反正都得学会,先学哪个都一样。从pytorch开始learning curve
比较平缓。

学习libraries的顺序是先看tutorial,依葫芦画瓢做几个图像识别(比如 not hotdog
)和简单的语言模型,这就算CNN和RNN都算是“会了”。下一步可以做些复杂的图像应
用比如style transfer,object detection,对RNN有兴趣的可以用pytorch自己
写个LSTM什么的。

能做到以上三点个人觉得可以算DL入门了。再往下的更深入的研究就要看个人的兴趣。



--
※ 修改:·CRH1235 於 Jul  8 23:24:24 2017 修改本文·[FROM: 71.]
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 71.]

 
wdong
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 2 ]

发信人: wdong (万事休), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sat Jul  8 23:02:56 2017, 美东)

靠谱。不过工作后真的很难抽出时间学东西。一直没时间破NLP。
最好的办法还是大致看一下,然后争取在某一个细节方面成为行家。

【 在 CRH1235 (江左没狼) 的大作中提到: 】
: 今天有空瞎扯几句,版上的大神们不要见笑。其实今天很多人所谓的ML入门,其实是
DL
: 入门,或者叫神经网络入门。我觉得可以分三步。
: 第一,把Goodfellow等著的deep learning书PartI and ParkII都看懂,包括第一章数
: 学基础都查漏补缺完成,基本的理论基础就具备了。看不懂的youtube,Coursera,
: udacity找资源帮助理解。
: 第二,自己实现几个简单的神经网络,我个人建议是用numpy手撕一个MLP,一个
: vanilla的CNN和一个vanilla的RNN,重点是了解matrix(或者叫tensor)在层之间怎么流
: 动,forward(比如convolution),backward(尤其是RNN的backpropagation
: through time)怎么实现。这些都不难,但是需要一些耐心。虽然耗时间,但是对彻底
: 摸清神经网络的工作细节很有帮助。所有的三个网络都可以用mnist数据集。
: ...................


--

※ 来源:·BBS 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 108.]

 
CRH1235
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 3 ]

发信人: CRH1235 (江左没狼), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sat Jul  8 23:14:42 2017, 美东)

被大牛认可也算没白码这么多字。

【 在 wdong (万事休) 的大作中提到: 】
: 靠谱。不过工作后真的很难抽出时间学东西。一直没时间破NLP。
: 最好的办法还是大致看一下,然后争取在某一个细节方面成为行家。
: DL




--
※ 修改:·CRH1235 於 Jul  8 23:16:58 2017 修改本文·[FROM: 71.]
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 71.]

 
peking2
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 4 ]

发信人: peking2 (Lambda), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 01:36:47 2017, 美东)


【 在 CRH1235 (江左没狼) 的大作中提到: 】
: 今天有空瞎扯几句,版上的大神们不要见笑。其实今天很多人所谓的ML入门,其实是
DL
: 入门,或者叫神经网络入门。我觉得可以分三步。
: 第一,把Goodfellow等著的deep learning书Part I and Park II都看懂,包括第一
章数
: 学基础都查漏补缺完成,基本的理论基础就具备了。看不懂的youtube,Coursera,
: udacity找资源帮助理解。
: 第二,自己实现几个简单的神经网络,我个人建议是用numpy手撕一个MLP,一个
: vanilla的CNN和一个vanilla的RNN,重点是了解matrix(或者叫tensor)在层之间怎么流
: 动,forward(比如convolution),backward(尤其是RNN的backpropagation
: through time)怎么实现。这些都不难,但是需要一些耐心。虽然耗时间,但是对彻底
: 摸清神经网络的工作细节很有帮助。所有的三个网络都可以用mnist数据集。
: ...................


多谢大牛。看来现在DL就相当于ML了。那DL的工作机会如何?
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 50.]

 
fantasist
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 5 ]

发信人: fantasist (一), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 05:28:36 2017, 美东)

质量帖

--
☆ 发自 iPhone 买买提 1.23.04
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 2601:0641:0101:]

 
keneager
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 6 ]

发信人: keneager (ken), 信区: Programming
标  题: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 06:42:02 2017, 美东)

Mark一下,学习了

--
※ 来源:· 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 97.]

 
qingkong
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 7 ]

发信人: qingkong (qingkong), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 09:34:35 2017, 美东)

mark
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 2604:2d80:401b:]

 
taar
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 8 ]

发信人: taar (taar), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 12:32:19 2017, 美东)

https://www.youtube.com/user/BrandonRohrer/videos
推荐一个视频吧
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 72.]

 
ELFINCAT
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 9 ]

发信人: ELFINCAT (onlyforyou), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 12:58:42 2017, 美东)

re
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 2601:02c6:4300:]

 
taar
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 10 ]

发信人: taar (taar), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 14:14:24 2017, 美东)

不懂ml直接上dl对新人来说难度有点大。
推荐先学好ml.
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 72.]

 
dumbCoder
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 11 ]

发信人: dumbCoder (HumbleCoder 不懂就问-_-), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 14:19:20 2017, 美东)

我怎么听到的建议是,推荐直接上DL呢


【 在 taar (taar) 的大作中提到: 】
: 不懂ml直接上dl对新人来说难度有点大。
: 推荐先学好ml.



--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 2601:0646:c501:]

 
peking2
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 12 ]

发信人: peking2 (Lambda), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 15:14:20 2017, 美东)


【 在 dumbCoder (HumbleCoder 不懂就问-_-) 的大作中提到: 】
: 我怎么听到的建议是,推荐直接上DL呢


我感觉先学一下ML比较好。基本概念就有了。
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 50.]

 
CRH1235
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 13 ]

发信人: CRH1235 (江左没狼), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 15:21:03 2017, 美东)

直接学DL也未尝不可,但是ML这课早晚是要补上的

【 在 peking2 (Lambda) 的大作中提到: 】
: 我感觉先学一下ML比较好。基本概念就有了。





--
☆ 发自 iPhone 买买提 1.23.04
--
※ 修改:·CRH1235 於 Jul  9 15:21:21 2017 修改本文·[FROM: 71.]
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 71.]

 
holydistance
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 14 ]

发信人: holydistance (植物猫), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 15:29:19 2017, 美东)

主要是看学的目的是要干啥
也要根据自己现有的姿势水平调整
一个简单的自我定位:
为啥要用xentropy?看能回答到哪种程度

【 在 CRH1235 (江左没狼) 的大作中提到: 】
: 直接学DL也未尝不可,但是ML这课早晚是要补上的




--
☆ 发自 iPhone 买买提 1.23.04
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 24.]

 
silverhawk
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 15 ]

发信人: silverhawk (silverhawk), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 17:06:01 2017, 美东)

要看找什么工作了,如果是图像视频直接raw data处理DL也许可以直接学,否则像啥
search,ranking之类还是得掌握比如GBDT之类的,只学DL要是别人一深入问问立马就
发现很多不足
【 在 taar (taar) 的大作中提到: 】
: 不懂ml直接上dl对新人来说难度有点大。
: 推荐先学好ml.



--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 216.]

 
dollar
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 16 ]

发信人: dollar (dollar), 信区: Programming
标  题: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 17:12:45 2017, 美东)

多谢,一直觉得DL入门作为一个高中生的project 挺好的,能识别个图样,一下子把兴
趣给吊起来了。

--
※ 来源:· 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 96.]

 
HHfireYY
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 17 ]

发信人: HHfireYY (HHYY), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 18:28:12 2017, 美东)

DL的最大好处是需要的背景知识很少,不那么数学
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 135.]

 
newpp
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 18 ]

发信人: newpp (New Journey), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Sun Jul  9 20:13:32 2017, 美东)

总结的好
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 137.]

 
walkwalk
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 19 ]

发信人: walkwalk (逛逛), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Mon Jul 10 02:37:51 2017, 美东)

Mark
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 50.]

 
pingapplevlj
进入未名形象秀
我的博客
[回复] [回信给作者] [本篇全文] [本讨论区] [修改] [删除] [转寄] [转贴] [收藏] [举报] [ 20 ]

发信人: pingapplevlj (sanjack), 信区: Programming
标  题: Re: 胡扯几句什么叫Deep Learning入门
发信站: BBS 未名空间站 (Mon Jul 10 03:25:43 2017, 美东)

一直对DL的应用表示怀疑。一头扎进去,花了一堆时间,最后找不到合适的应用,或者
发现除了try一下烂大街的字符识别,其他也没啥可搞的,要真搞,又发现完全要投入
更多的精力,整个人可能都需要再读个phd了。。。
--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 73.]

[首页] [上页][下页][末页] [分页:1 2 3 ]
[快速返回] [ 进入葵花宝典讨论区] [返回顶部]
回复文章
标题:
内 容:

未名交友
将您的链接放在这儿

友情链接


 

Site Map - Contact Us - Terms and Conditions - Privacy Policy

版权所有,未名空间(mitbbs.com),since 1996