标签:Apache Yarn

Spring

java B2B2C源码电子商务平台—大话Spring Cloud

1

xiaoli.wang 发布于 2018-12-06

研究了一段时间Spring Boot了准备向Spring Cloud进发,公司架构和项目也全面拥抱了Spring Cloud。在使用了一段时间后发现Spring Cloud从技术架构上降低了对大型系统构建的要求,使我们以非常低的成本(技术或者硬件)搭建一套高效、分布式、容错的平台...

阅读(34)评论(0)赞 (0)

Java

Spring技术内幕:设计理念和整体架构概述

3

puefu.he 发布于 2018-05-20

程序员都很崇拜技术大神,很大一部分是因为他们发现和解决问题的能力,特别是线上出现紧急问题时,总是能够快速定位和解决。 一方面,他们有深厚的技术基础,对应用的技术知其所以然,另一方面,在采坑的过程中不断总结,积累了很多经验。 相信大家都使用过Spring,有些人了解它的核心:IOC...

阅读(233)评论(0)赞 (0)

Spring

Spring Cloud微服务 浅谈

3

Harries 发布于 2017-10-14

Spring Cloud是什么鬼? Spring Cloud是一个基于Spring Boot实现的云应用开发工具,它为基于JVM的云应用开发中的配置管理、服务发现、断路器、智能路由、微代理、控制总线、全局锁、决策竞选、分布式会话和集群状态管理等操作提供了一种简单的开发方式。 微服...

阅读(290)评论(0)赞 (0)

编程技术

Hadoop YARN在Hulu的成功实践

6

邓龙华 发布于 2016-03-10

编者按:Hadoop于2006年1月28日诞生,至今已有10年,它改变了企业对数据的存储、处理和分析的过程,加速了大数据的发展,形成了自己的极其火爆的技术生态圈,并受到非常广泛的应用。在2016年Hadoop十岁生日之际,InfoQ策划了一个Hadoop热点系列文章,为大家梳理H...

阅读(125)评论(0)赞 (0)

编程技术

Mesos 和YARN:两个集群的故事

3

刘莉莉 发布于 2015-12-29

这是一个关于两个孤立集群的故事。第一个是Apache Hadoop集群,它的资源与Hadoop进程完全隔离。另一个集群指代所有的资源,这些资源并不是Hadoop集群的一部分。通过这种方式来区分两个集群是因为Hadoop通过Apache YARN(Yet Another Resou...

阅读(145)评论(0)赞 (0)

编程技术

Apache YARN/Mesos与Google Borg差距多远?

1

Harries 发布于 2015-08-16

作者: Dong | 新浪微博: 西成懂 | 可以转载, 但必须以超链接形式标明文章原始出处和作者信息及 版权声明 网址: http://dongxicheng.org/mapreduce-nextgen/yarn-mesos-borg/ 本博客的文章集合: http://don...

阅读(209)评论(0)赞 (0)

编程技术

什么是 Hadoop 生态系统

2

邓龙华 发布于 2015-07-30

https://www.facebook.com/hadoopers  在一些 Teiid 的一些文章和示例上都会有关于 JBoss Data Virtualization (Teiid) 通过 Hive 使用 Hadoop 作为数据源的信息。当使用 Hadoop 环境...

阅读(122)评论(0)赞 (0)

编程技术

Docker将会改变Hadoop,变的更快更容易

邓龙华 发布于 2015-06-22

【编者的话】 最近在San Jose,Clif开幕的hadoop峰会上会有关于Docker和Hadoop的话题讨论,越来越多的创业公司致力于使用Docker技术来简化hadoop应用开发部署的速度。 目前有两个方向:1)使用Docker容纳Hadoop stack;2)通过YAR...

阅读(273)评论(0)赞 (0)

编程技术

Myriad项目: Mesos和YARN 协同工作

Harries 发布于 2015-03-19

Jim Scott发表了新文章《 两个集群的故事:Mesos和YARN 》,它从当今许多IT采购中一个相当常见的情况开始讲述,即多资源孤岛: 第一个集群是Apache Hadoop,它相当于一个岛,它的资源全部用于Hadoop平台和它的进程。第二个集群就是除了Hadoop之外其它...

阅读(212)评论(0)赞 (0)

编程技术

谷歌发布可在Hadoop中运行原生代码的C语言版本MapReduce开源框架

Harries 发布于 2015-02-28

谷歌上周 宣布 发布C语言版本的MapReduce开源框架 MR4C ,利用该框架开发者可以在 Hadoop 框架中运行原生代码。 MR4C框架将原生开发算法的性能和灵活性与Hadoop执行框架的可扩展性和生产力相结合。该项目的目标是抽象化MapReduce框架的细节,让用户将精...

阅读(195)评论(0)赞 (0)

编程技术

Spark生态系统解析及基于Redis的开源分布式服务Codis

10

Harries 发布于 2015-02-02

1月24日,一场基于Spark和Redis组成的分布式系统实践分享由Spark资深布道者陈超和豌豆荚资深系统架构师刘奇联手打造。 陈超:Spark Ecosystem & Internals 陈超(@CrazyJvm),Spark布道者 在分享中,陈超首先简短的介绍了Sp...

阅读(148)评论(0)赞 (0)