登录 | 注册 | 充值 | 退出 | 公司首页 | 繁体中文 | 满意度调查
综合馆
深度学习的昨天、今天和明天
  • 摘要

    机器学习是人工智能领域的一个重要学科.自从20世纪80年代以来,机器学习在算法、理论和应用等方面都获得巨大成功.2006年以来,机器学习领域中一个叫“深度学习”的课题开始受到学术界广泛关注,到今天已经成为互联网大数据和人工智能的一个热潮.深度学习通过建立类似于人脑的分层模型结构,对输入数据逐级提取从底层到高层的特征,从而能很好地建立从底层信号到高层语义的映射关系.近年来,谷歌、微软、IBM、百度等拥有大数据的高科技公司相继投入大量资源进行深度学习技术研发,在语音、图像、自然语言、在线广告等领域取得显著进展.从对实际应用的贡献来说,深度学习可能是机器学习领域最近这十年来最成功的研究方向.将对深度学习发展的过去和现在做一个全景式的介绍,并讨论深度学习所面临的挑战,以及将来的可能方向.

  • 作者

    余凯  贾磊  陈雨强  徐伟  Yu Kai  Jia Lei  Chen Yuqiang  Xu Wei 

  • 作者单位

    百度 北京100085

  • 刊期

    2013年9期 ISTIC EI PKU

  • 关键词

    机器学习  深度学习  语音识别  图像识别  自然语言处理  在线广告  machine learning  deep learning  speech recognition  image recognition  natural language processing  online advertising 

参考文献
  • [1] Markoff J. How many computers to identify a cat. New York Times, 2012-06-25
  • [2] Large Scale Visual Recognition Challenge 2012(ILSVRC2012). http://www.imagenet.org/challenges/LSVRC/2012/, 2013-08-01
  • [3] Xu W;Rudnicky A. Can artificial neural network learn language models. 2000
  • [4] Bengio Y;Ducharme R;Vincent P. A neural probabilistic language model. Journal of Machine Learning Research, 2003
  • [5] Collobert R;Weston J;Bottou L. Natural language processing (Almost) from scratch. Journal of Machine Learning Research, 2011
  • [6] Socher R;Lin C;Ng A. Parsing natural scenes and natural language with recursive neural Networks. Garmany:International Machine Learning Society, 2011
  • [7] Markoff J. Scientists see promise in deep-learning programs. New York Times, 2012,23
  • [8] 李彦宏. 2012百度年会主题报告:相信技术的力量. 北京:百度, 2013
  • [9] 10 Breakthrough Technologies 2013. MIT Technology Review, 2013-04-23
  • [10] Rumelhart D;Hinton G;Williams R. Learning representations by back-propagating errors. Nature, 1986,6088
  • [11] Hinton G;Salakhutdinov R. Reducing the dimensionality of data with neural networks. Science, 2006,504
  • [12] Dahl G;Yu Dong;Deng Li. Context-dependent pretrained deep neural networks for large vocabulary speech recognition. IEEE Trans on Audio Speech and Language Processing, 2012,01
  • [13] Jaitly N;Nguyen P;Nguyen A. Application of pretrained deep neural networks to large vocabulary speech recognition. Grenoble,France:International Speech Communication Association, 2012
  • [14] LeCun Y;Boser B;Denker J S. Backpropagation applied to handwritten zip code recognition. Neural Computation, 1989
查看更多︾
相似文献 查看更多>>
3.81.73.233