标签:分布式

编程技术

云计算的前世今生(下)

31

songhua.gao 发布于 2017-01-19

作者简介:刘超,[网易云][ https://c.163.com/ ]计算解决方案首席架构师。10年云计算领域研发及架构经验,Open DC/OS贡献者。长期专注于kubernetes, OpenStack、Hadoop、Docker、Lucene、Mesos等开源软件的企业级应...

阅读(1)评论(0)赞 (0)

编程技术

Google发布Zipkin与Stackdriver Trace的集成功能,实现分布式应用的跟踪

1

wenming.gapo 发布于 2017-01-19

Google云平台(Google Cloud Platform)发布了一个开源的 Zipkin服务器 ,允许 兼容Zipkin 的客户端发送跟踪信息到Google自己的 Stackdriver Trace 分布式跟踪服务中,从而实现分析的功能。Zipkin/Stackdriver...

阅读(4)评论(0)赞 (0)

编程技术

2017年想用SDN的不知道这10大产品就OUT了!

1

hellas 发布于 2017-01-19

【51CTO.com快译】据研究公司IHS Markit声称,全球数据中心和企业软件定义网络(SDN)市场在2016年上半年的销售额达到11亿美元。这比2015年上半年增长了42%,全球所有地区都出现了支出上涨的情况。预计2017年会继续保持大幅增长的势头。 虽然思科和VMwar...

阅读(3)评论(0)赞 (0)

互联网.科技

专访红点创投刘岚:IaaS、SaaS趋于完善,大数据行业的投资机会点在于 PaaS

2

邓龙华 发布于 2017-01-19

从 2015 年的中国企业服务元年,到 2016 年云计算、AI、大数据的方兴未艾,To B 领域不论是在底层基础架构(IaaS),还是在前端应用(SaaS)都迎来了新的增长点。 从行业背景来看,随着底层硬件云化的普及与传统企业 IT 系统去 IOE 理念的深入,一部分创业公司有...

阅读(3)评论(0)赞 (0)

编程技术

让 go-sql-driver/mysql 兼容 cobar 的事务

邓龙华 发布于 2017-01-19

背景介绍 由于历史原因,我们部门的 MySQL 中间件既有 Mycat , 也有 Cobar 。 Cobar 号称支持事务, 但是居然不支持 START TRANSACTION 和 BEGIN 显式地开启事务。 单库事务完全支持,分布式事务不能保持强一致性。 分布式事务采用两阶段...

阅读(2)评论(0)赞 (0)

编程技术

Intel开源了基于Apache Spark的分布式深度学习框架BigDL

darida 发布于 2017-01-19

Intel 开源了基于 Apache Spark 的分布式深度学习框架 BigDL 。BigDL借助现有的Spark集群来运行深度学习计算,并简化存储在Hadoop中的大数据集的数据加载。 在 Xeon服务器 上运行的测试结果表明,BigDL比其他开源框架 Caffe 、 Tor...

阅读(4)评论(0)赞 (0)

编程技术

Apache Beam:一个开源的统一的分布式数据处理编程库

9

zhuangli 发布于 2017-01-19

Apache Beam是一个开源的数据处理编程库,由Google共享给Apache的项目,前不久刚刚成为Apache TLP项目。它提供了一个高级的、统一的编程模型,允许我们通过构建Pipeline的方式实现批量、流数据处理,并且构建好的Pipeline能够运行在底层不同的执行引...

阅读(9)评论(0)赞 (0)

编程技术

用Apache Spark做大数据处理——第五部分:Spark机器学习数据流水线

5

刘莉莉 发布于 2017-01-18

关键点: 了解机器学习数据流水线有关内容。 怎么用Apache Spark机器学习包来实现机器学习数据流水线。 数据价值链处理的步骤。 Spark机器学习流水线模块和API。 文字分类和广告检测用例。 在之前的“用Apache Spark做大数据处理”系列文章中,我们学习了Apa...

阅读(7)评论(0)赞 (0)

编程技术

如何训练深度神经网络?老司机的 15 点建议

3

Harries 发布于 2017-01-18

本文为印度深度学习专家、创业者 Rishabh Shukla 在 GitHub 上发表的长博文,总结了他过去的开发经验,旨在给新入门的开发者提供指导。雷锋网做了不改变原意的编译。 在深度学习领域,为了高效训练深度神经网络,有些实践方法被过来人强烈推荐。 在这篇博文中,我会覆盖几种...

阅读(6)评论(0)赞 (0)

编程技术

Go 语言实现 MapReduce 框架

test 发布于 2017-01-18

MapReduce 是 Google 提出的一个软件架构,用于大规模数据集(大于1TB)的并行运算。简而言之,就是将任务切分成很小的任务然后一个一个区的执行最后汇总,这就像小时候我们老师经常教育我们一样,大事化小,小事化了(瞬间感觉那时候老师好言简意赅啊!!!)思想就这么一个思想...

阅读(8)评论(0)赞 (0)

互联网.科技

埃森哲:2025年区块链技术或可为8大投行省120亿美元

hellas 发布于 2017-01-18

新浪科技讯 北京时间1月17日晚间消息,管理咨询服务公司 埃森哲 (Accenture)今日发布报告称,到2025年,区块链(Blockchain)技术每年可帮助全球8大投资银行节省80亿美元至120亿美元的基础设施成本。 该预期基于埃森哲对全球8大投资银行成本数据的分析。区块链...

阅读(4)评论(0)赞 (0)

编程技术

服务都微了,编排怎么整?

15

Harries 发布于 2017-01-18

转载本文需注明出处:EAii企业架构创新研究院(微信号:eaworld),违者必究。如需下载此文PPT,加入微信群参与微课堂、架构设计与讨论直播请直接回复此公众号:“加群 姓名 公司 职位 微信号”。 目录: 1. 编制、编排傻傻分不清楚 2. “ 编排 ” 的关键在于流程 + ...

阅读(7)评论(0)赞 (0)

编程技术

学界 | 谷歌提出深度概率编程语言Edward:融合了贝叶斯、深度学习和概率编程

2

xirruiqiang 发布于 2017-01-18

来源:机器之心 近日,哥伦比亚大学、Adobe Research、Google Research 和 Google Brain 的研究者联合发表了一篇论文,介绍一种新的图灵完备的概率编程语言。该论文表示 Edward 集成到了 TensorFlow 中。以下是该论文及 Edwar...

阅读(6)评论(0)赞 (0)

编程技术

可能是 2017 最全的机器学习开源项目列表

1

likai 发布于 2017-01-18

2016 年,似乎所有巨头公司都在做机器学习,如果没有,也是在赶来的路上。所以 2016 或许会因为 “机器学习大热” 而被载入史册。2017,这个热潮并没有消退的迹象,前阵子 AlphaGo 的升级版以横扫千军的姿态战胜几乎所有中国的围棋大师,如入无人之境,...

阅读(5)评论(0)赞 (0)

开源软件

RabbitMQ 3.7.0 发布,AMQP消息服务器

2

puefu.he 发布于 2017-01-18

          RabbitMQ是实现AMQP(高级消息队列协议)的消息中间件的一种,最初起源于金融系统,用于在分布式系统中存储转发消息,在易用性、扩展性、高可用性等方面表现不俗。消息中...

阅读(8)评论(0)赞 (0)

编程技术

阿里巴巴分布式数据库服务DRDS研发历程

9

zhuangli 发布于 2017-01-18

作者:艾乐强,阿里巴巴中间件(Aliware)产品经理,2009年加入公司,前期主要负责淘宝分布式session框架和淘宝垂直市场的系统设计研发,目前主要负责分布式数据库服务DRDS的产品设计和研发。 责编:仲培艺,关注数据库领域,纠错、寻求报道或者投稿请致邮:zhongpy@c...

阅读(6)评论(0)赞 (0)

编程技术

云计算时代的深度学习训练

6

xiaoli.wang 发布于 2017-01-18

文 | 林亦宁 云计算时代,数据量和数据维度急剧增加,对深度学习训练造成越来越大的压力,来自七牛云的技术专家林亦宁在 OSC 年终盛典上带来了关于深度学习训练的演讲,将就大量分布式集群下,如何高效、可靠地构建深度学习训练计算任务进行了干货分享。以下是他的演讲内容。 云计算和深度学...

阅读(7)评论(0)赞 (0)

互联网.资讯

英特尔开源BigDL,可直接在Spark框架下运行深度学习

1

yanxinchi 发布于 2017-01-18

  近日,英特尔开源了基于 Apache Spark 框架的分布式深度学习库 BigDL。通过使用 BigDL,用户可以将他们的深度学习应用程序作为标准的 Spark 程序发布(即将基于 BigDL 的深度学习代码直接嵌入已有的 Spark 程序中),同时,BigDL 还简化了基...

阅读(7)评论(0)赞 (0)