雅虎开源人工智能独门武器 CaffeOnSpark
创始人
2025-01-27 12:30:54
0次

又有一家科技巨头向全世界公开了他们的 know-how 人工智能。2月25日,Yahoo 发布了 CaffeOnSpark 人工智能的源代码,每个学术研究人员或是大公司都可以使用或是加以修改。

[[163190]]

Yahoo 在科技方面的实力大概鲜有人知。事实上开源 Hadoop 就是 Yahoo 孵化的;Facebook、Twitter 以及其他不少公司都在用这个数据处理平台。因此在人工智能方面,Yahoo 公司有着独到的长处,因为在培训人工智能系统的时候,数据就和算法一样重要。而且 Yahoo 手握着全球最有趣***的资料库之一:相片社群网站 Flickr。

就如诸多新的开源人工智能项目一样,CafffeOnSpark 的根基是深度学习。深度学习是人工智能的一个分支,以其人类语音、照片和视频等的识别能力见长。Yahoo 就是用这项技术来识别照片中的不同内容,以此改良 Flickr 网站的搜索结果。与其他网站不同,Flickr 的图片搜索并不是靠图片描述或是用户输入的关键词。Yahoo 会教电脑如何识别照片的某种特征,例如特定的颜色,甚至是物体或动物。

在最近几个月里,Google 开放了深度学习网络 TensorFlow 的源代码,Microsoft 开放了类似的网络 CNTK,Facebook 分享了人工智能硬件设计,中国搜索引擎巨头百度也公开了深度学习训练软件。

这些开源技术项目都各自有所侧重,偏向不同。例如 Yahoo 的目的是要在现存的系统上运行深度学习,避免把数据从一个地方传输到另一个地方。Yahoo 的构架副总裁 Andy Fent 向我们解释,训练深度学习系统识别图片需要巨量的数据信息。你得往算法里放大量的例子,越多越好,比如如果是一只猫的话,系统要足够的图才会「学会」辨认猫之间的共同特征,分辨猫和其他动物。

Flickr 网站上有成千上万张图片,足够拿来训练人工智能了。但是开发团队不想把这些图片从 Flickr 服务器传送到另一层运行深度学习软件的服务器里。于是他们发明了在已有的构架上运行深度学习软件的方法。

从名字上看,CaffeOnSpark 结合了两种现有的科技:深度学习框架 Caffe 和大规模数据处理系统 Spark。Yahoo 所做的就是想办法在 Spark 层次上运行 Caffe。找到方法后,Caffe 不仅可以在 Spark 上运行,还可以两者一起在 Hadoop 上运行。Yahoo 的开发不仅会让人工智能开发者用更简单熟悉的工具、省去传送数据的麻烦过程,还能让深度学习更方便地同时处理数个服务器的内容。Feng 还特意告诉我们,这一点 Google 的 TensorFlow 目前还做不到,Yahoo 领先了一步。

Feng 说到,去年团队在博客上发表了有关 CaffeOnSpark 的帖子后,不少公司都希望 Yahoo 开放 CaffeOnSpark 的源代码。于是他们发现,不少公司其实服务器上都已经具备了不少信息,但是他们不想传送。

相关内容

热门资讯

PHP新手之PHP入门 PHP是一种易于学习和使用的服务器端脚本语言。只需要很少的编程知识你就能使用PHP建立一个真正交互的...
网络中立的未来 网络中立性是什... 《牛津词典》中对“网络中立”的解释是“电信运营商应秉持的一种原则,即不考虑来源地提供所有内容和应用的...
各种千兆交换机的数据接口类型详... 千兆交换机有很多值得学习的地方,这里我们主要介绍各种千兆交换机的数据接口类型,作为局域网的主要连接设...
粉嫩如何诠释霸道 东芝M805... “霸道粉”是个什么玩意东芝M805拿过来的时候,笔者扑哧笑了,不是笑这款笔记本,而是笑这款产品的颜色...
如何利用交换机和端口设置来管理... 在网络管理中,总是有些人让管理员头疼。下面我们就将介绍一下一个网管员利用交换机以及端口设置等来进行D...
什么是大数据安全 什么是大数据... 在《为什么需要大数据安全分析》一文中,我们已经阐述了一个重要观点,即:安全要素信息呈现出大数据的特征...
只需三步,让你掌握阿尔法路由器... 请参照以下阿尔法路由器设置方法,通过浏览器进入及设置宽带路由器。经过这三个步骤的设置,基本上能够熟悉...
如何更省钱? 近期特价热门硒鼓... 如今激光打印设备已经成为商务或企业的绝对主力办公设备,但采购者往往忽视了激光打印设备所用的耗材,相对...
全面诠释网络负载均衡 负载均衡的出现大大缓解了服务器的压力,更是有效的利用了资源,提高了效率。那么我们现在来说一下网络负载...
如何允许远程连接到MySQL数... [[277004]]【51CTO.com快译】默认情况下,MySQL服务器仅侦听来自localhos...