机器学习日报 2016-01-26 小预算做深度学习；构建实战机器学习系统的10点经验 ；微软开源...

解应春BW

机器学习日报 2016-01-26

• 微软开源机器深度学习工具包 CNTK @王威廉
• 小预算做深度学习。 @微软亚洲研究院
• 构建实战机器学习系统的10点经验 @CSDN
• 人工智能巨擎Marvin Minsky逝世，享年88岁 @南大周志华
• NLP热点话题：以Attention Model为例谈谈两种研究创新模式 @张俊林say
  

@好东西传送门 出品, 过往目录 见http://ml.memect.com

订阅：给 hao@memect.com 发封空信， 标题: 订阅机器学习日报  

邮件版包括20条，本期的Web版有完整内容28条

用日报搜索找到以前分享的内容： http://ml.memect.com/search/

今日焦点 (5)
王威廉   网页链接 2016-01-26 08:55
深度学习 GPU Python 代码
微软研究院把其深度学习工具包CNTK放到了Github上：http://t.cn/RbnaRw7 对比实验显示其多GPU的表现比Theano, TensorFlow, Torch和Caffe好。

NLPJob 网页链接 转发于2016-01-26 09:21
微软研究院深度学习工具包CNTK

陈天奇怪 网页链接 转发于2016-01-26 09:40  回复 @phunter_lau
其主要原因是更新的时候做了梯度（有损）压缩。benchmark是一个四层全连通

张攀_GIS 网页链接 转发于2016-01-26 09:55
google ms intel

微软亚洲研究院 网页链接 转发于2016-01-26 10:04
了解更多[最右][最右]>>http://t.cn/Rbn4vUY

王威廉 网页链接 转发于2016-01-26 10:37
想进一步了解和学习CNTK的同学可以看前几天公布的《CNTK白皮书》：http://t.cn/RbnjXjD

刘佳祥ML-CV 网页链接 转发于2016-01-26 12:06  回复 @AngelZywei “@刘佳祥ML-CV”
巧合的是，我恰恰不太关心它宣传的速度...233333，tensorflow的可视化还是更有吸引力。不过CNTK有原生的VS工程，这点比较有诱惑啊



微软亚洲研究院   网页链接 2016-01-26 19:28
深度学习 资源 GPU PDF 代码
【预算有限也能做深度学习】一直以来，深度学习的发展离不开硬件的投入。微软发布的深度学习工具包CNTK在面对超大规模深度学习的运算需求时，在多GPU下表现极佳。此外，就算你仅有一台计算机的预算，CNTK同样能帮你深度学习~[偷乐]CNTK介绍>>http://t.cn/RbnjXjD GitHub链接>>http://t.cn/RbnaRw7

CSDN   网页链接 2016-01-26 13:44
算法 Xavier Amatriain 特征工程
［构建实战机器学习系统的10点经验］Xavier Amatriain介绍书上没写的实战机器学习系统的五大经验，包括特征工程、基础架构、是否需要分布式算法、模型以及工程方面经验。http://t.cn/RbnrGRF

南大周志华   网页链接 2016-01-26 11:25
会议活动 算法 IJCAI 会议 闵斯基 神经网络
人工智能研究巨擘，1969年图灵奖得主，1991年IJCAI终身成就奖得主，MIT计算机学科奠基人马文.闵斯基去世 [蜡烛][蜡烛] http://t.cn/RbnQt73 他诸多成就中最广为人知的是作为神经网络研究先驱，他构建了世界上第一个神经网络仿真工具，而他在1969年的著作又直接导致了此后15年的神经网络“冰河期”




张俊林say   网页链接 2016-01-26 07:59
经验总结 自然语言处理 博客
文章分析了自然语言处理中目前见到的Attention Model的各种变体及对其研究模式进行了归类："以Attention Model为例谈谈两种研究创新模式 " http://t.cn/RbnCPrS

爱可可-爱生活 网页链接 转发于2016-01-26 13:43
"以Attention Model为例谈谈两种研究创新模式"



最新动态
segmentfault:图灵访谈   网页链接 2016-01-26 21:01
算法 资源 自然语言处理 高博 机器翻译 书籍
【对话高博（一）| 机器码、Pascal，以及计算机学习的分形】高博 ，1983年生，上海交通大学计算机科学与工程专业本科、软件工程硕士。现任博晓文化传媒集团总裁，香港卫视科教台台长。职场经历丰富，曾在数家世界500强IT和互联网企业打造明星团队。专业兴趣包括软件测试及大规模自动化、持续交付和基础算法研究。业余爱好写作和翻译，2009年至今翻译超过100万字，包括图灵奖作者高德纳作品《研究之美》和布鲁克斯作品《设计原本》... http://memect.co/9J7KyP0kl4v

爱可可-爱生活   网页链接 2016-01-26 20:56
深度学习 算法 应用 神经网络 推荐系统
24小时分享排行：1、【让神经网络会做唐诗】2、【深度学习太简单——选择更有挑战的研究问题】3、【深度学习调试技巧】4、《Practical Machine Learning: Innovations in Recommendation》5、【神经网络入门】…… http://t.cn/Rbm5KVn




GeekFan极客范   网页链接 2016-01-26 20:15
应用 机器人
《亚马逊仓库被打开后，小伙伴们惊呆了！一个活着的仓库！》亚马逊仓储中心就像是庞大的机器人，而精简流畅运营的途径会是将尽可能多的工作任务机械化。亚马逊在一步步为其仓库引入更多的机器人，但人手和人脑始终还是诸多工作的最佳工具。http://t.cn/Rbm4sVv

科学网   网页链接 2016-01-26 19:57
【人工智能领域先驱马文•明斯基逝世 享年88岁[蜡烛]】1958年，明斯基进入了麻省理工学院，与人共同创立人工智能实验室，力图探索如何赋予一台机器以人类的感知和智力。他创造出可操控物品的机器手，制定新的编程框架，探讨了大量关于人工智能的哲学问题，并于1969年获图灵奖。http://t.cn/RbnFtcF

出版人周筠 网页链接 转发于2016-01-26 22:35  回复 @程序员邹欣 “转发微博”
除了在人工智能方面的天分，明斯基还是一位天才的钢琴家。世界上极少数人可以即兴创作赋格曲，他便是其中之一。他在1981年发表的论文《音乐，心灵与意义》使音乐、心理与精神间建立了联系。



TECH2IPO创见   网页链接 2016-01-26 19:11
行业动态 新闻
【友盟、CNZZ 和缔元信合并成立第三方数据服务提供商 三家均为阿里巴巴投资 】合并后的新公司叫「友盟+」。三家合并之后，通过 PC、手机、传感器、无线路由器等多种设备，友盟+目前每天覆盖的用户数为 9 亿+，每天收集线上线下各类应用场景的数据多达数百亿。http://t.cn/RbmLGjv

KissDev 网页链接 转发于2016-01-26 19:33  回复 @平凡的香草 “[赞]”
好大一盘棋，締元信域名 wrating， 来头不小，新浪、搜狐、CNTV、凤凰网、天气网、中华网、网易、天猫等大媒体均嵌入其跟踪代码



梁斌penny   网页链接 2016-01-26 18:20
自然语言处理
有个别网友不理解，分享语料就分享语料，干嘛要附带条件呢？语料里有很多比较危险的言论，如果我不加这些承诺，未来一旦出事我就会有麻烦的，毕竟公开传播了几千人了。礼拜六礼拜日地下室苦死了，就给附带一个承诺为自己将来脱罪，都有个别群众不理解。以后数据分享要更加严谨和小心了，要严防死守。。


梁斌penny 网页链接 转发于2016-01-26 18:24
这次确实草率了，不怪个别群众出言辱骂。以后分享数据要发个长微博，把条款先写好，写严密了。为群众做一点事不容易啊



中科院王飞跃   网页链接 2016-01-26 17:41
算法 Marvin Minsky 神经网络
《纽约时报》报道，人工智能先驱、麻省理工学院教授Marvin Minsky逝世，享年88岁：http://t.cn/RbnCjPH。他 的确是AI界最有思想的人，最近大众哲学的人，顺便成了神经元网络的开拓者和最狠的杀手! 一个XOR，封了神经网络十多年，此事说明权威之可怕，他的天真，其余之顺，说明人类智能有时之低。




果壳网   网页链接 2016-01-26 17:29
算法 资源 神经网络 书籍
AI的父亲们之一、人类智能的研究者、图灵奖得主马文·明斯基，于2016年1月24日在美国波士顿去世。他建立了MIT人工智能实验室，发明了头戴式显示器，开发了第一个随机连线的人工神经网络学习机器，为情感的计算模型做出诸多贡献，还曾给《2001太空漫游》提供过人工智能有关的建议。RIP, Marvin.

InfoQ   网页链接 2016-01-26 16:45
深度学习 算法 神经网络
【微软在GitHub上开源其深度学习工具包CNTK】1月25日，微软在GitHub上发布了其深度学习工具包——Computational Network Toolkit（简称CNTK）。CNTK是一个统一的深度学习工具包，它通过一个有向图将神经网络描述为一系列计算步骤。http://t.cn/RbneuaK




hashjoin   网页链接 2016-01-26 14:18
架构 经验总结 深度学习 视觉 Spark 博客
大数据和机器学习里面最热门的几个关键字就是Spark，Deep Learning，TensorFlow。如果把这些热门关键字都放在一起会怎么样呢？这篇博客讲解了用Spark分布式并行TensorFlow模型训练hyperparameter tuning，进行手写数字的识别，用了小半天时间写的代码就能达到99.47%的准确率。 http://t.cn/RbnJeEF


马超Terminal 网页链接 转发于2016-01-26 18:45
不错的分享。深度学习算法用专用武器训练，spark 来做 deploy 和 model test，确实应该这样做。不过这和分布式训练还是有本质区别，同样也是 spark 做 异步训练和大模型训练的短板。



独孤虎-李利鹏   网页链接 2016-01-26 11:13
深度学习 算法 Geoffrey Hinton 神经网络
minsky老爷对人工智能的态度：论证了单层神经元网络不可实现异或逻辑，导致了人工智能萧条二十年，另外他论证了三层感知器可以模拟任意非线性连续函数（我没找到初始数学证明），这就表示深层神经元网络是没有意义的。当然后来深层神经元网络在Hinton老先生的努力下发展，人工智能又火了起来。




独孤虎-李利鹏   网页链接 2016-01-26 10:06
经验总结 算法 资源 博客 神经网络 书籍
分享自尼克《神经网络简史》 - 自图灵提出“机器与智能”，一直就有两派观点，一派认为实现人工智能必须用逻辑和符号系统，这一派看问题是自顶向下的；还有一派认为通过... (来自 @头条博客) http://t.cn/RbnWnSr

梁斌penny   网页链接 2016-01-26 09:42
自然语言处理
#帝吧出征语料分享# 请之前转发过那条微博的朋友向编辑发邮件（pennyjob [at] qq.com）索取数据，并在邮件中注明：”我XXX（微博ID或者姓名），坚持一个中国，台湾是中国一部分的立场，热爱祖国。并承诺帝吧出征相关数据仅个人研究使用，不二次传播。“ ，编辑会对符合条件的邮件回复下载链接，谢谢。


梁斌penny 网页链接 转发于2016-01-26 10:15
这几天的经历写了一篇小文 http://t.cn/Rbnlq1e

梁斌penny 网页链接 转发于2016-01-26 10:22  回复 @我也没玩微博呀 “：是不是之前没转的，今天就不发...”
转发这条也有效，只要给编辑承诺那几句话就行。。

梁斌penny 网页链接 转发于2016-01-26 23:27
今天分享的是这三天抓的，我还在持续抓，抓满一个月，回头给真正搞科研的同学写论文用，毕竟几天的数据哪能写论文啊。



爱可可-爱生活   网页链接 2016-01-26 05:32
深度学习 算法 Alexey Kamenev Misha Bilenko Ye Xing 神经网络
【视频:深度神经网络(DNN)介绍】《Deep Neural Networks | Cortana Analytics Workshop - September 10-11, 2015 | Channel 9》by Misha Bilenko, Alexey Kamenev, Ye Xing http://t.cn/Rbno7qL




hack1nt0   网页链接 2016-01-26 02:57
算法 资源 自然语言处理 Python 代码 课程
分享一个自己写的英语和中文的统计语法解析的总结：http://t.cn/RbnaUBo。其中算法学习于Stanford的Coursera NLP课程，实现融合了课程作业的已有代码、nltk和自己的实现。英语数据集是课程作业中给定的，而中文数据集采用了Chinese Treebank 8.0，由于是付费语料所以不便分享。