标签:HDFS

编程技术

我只是下了个订单,鬼知道我在微服务里经历了什么?

42

wenming.gapo 发布于 2019-06-19

【51CTO.com原创稿件】面试的时候,面试官问:用户在电商网站中购买成功了,那么它在微服务中经历了什么?你该如何作答? 当我傻啊,用户在电商网站购买成功,还在微服务中,那肯定就是有一套微服务架构的电商系统。 设计一套电商系统还不简单?简单想象一下,既然是一个电商系统,有用户去...

阅读(9)评论(0)赞 (0)

编程技术

百亿级日志系统架构设计及优化

24

wenming.gapo 发布于 2019-06-18

本文将从海量日志系统在优化、部署、监控方向如何更适应业务的需求入手,重点从多种日志系统的架构设计对比;后续调优过程:横向扩展与纵向扩展,分集群,数据分治,重写数据链路等实际现象与问题展开。 日志系统架构基准 有过项目开发经验的朋友都知道:从平台的最初搭建到实现核心业务,都需要有日...

阅读(17)评论(0)赞 (0)

编程技术

「如何设计」一套微服务高可用方案

17

likai 发布于 2019-06-17

在定义什么是高可用,可以先定义下什么是不可用,一个网站的内容最终呈现在用户面前需要经过若干个环节,而其中只要任何一个环节出现了故障,都可能导致网站页面不可访问,这个也就是网站不可用的情况。 参考维基百科,看看维基怎么定义高可用 系统无中断地执行其功能的能力,代表系统的可用性成都,...

阅读(15)评论(0)赞 (0)

编程技术

宜人贷PaaS数据服务平台Genie:技术架构及功能

21

darida 发布于 2019-06-17

上篇:架构及组件 一、数据平台的发展 1.1 背景介绍 随着数据时代的到来,数据量和数据复杂度的增加推动了数据工程领域的快速发展。为了满足各类数据获取/计算等需求,业内涌现出了诸多解决方案。但大部分方案都遵循以下原则: 降低数据处理成本 合理提高数据使用/计算效率 提供统一的编程...

阅读(21)评论(0)赞 (0)

Spring

tio-websocket-spring-boot-starter 的简单使用 原 荐

6

xiaoli.he 发布于 2019-06-17

丶Pz的个人空间 t-io 正文 tio-websocket-spring-boot-starter 的简单使用 原 荐   丶Pz 发布于 今天 08:16 字数 919 阅读 33 收藏 1 WebSocket t-io Spring Spring Boot 201...

阅读(19)评论(0)赞 (0)

编程技术

蚂蚁金服一站式、高可用架构实践与输出应用

10

小丁 发布于 2019-06-14

作者: 梁耀斌,花名追源,来自“追本溯源”,目前主要负责蚂蚁金融科技输出产品架构,关注 ToB 的数字化转型领域;2013 年加入到阿里技术保障部架构工具团队,从淘宝的异地多活架构的实施,到阿里集团的高可用架构和容灾体系建设,也曾经管理大规模的物理机集群和统一调度,对系统高可用和...

阅读(25)评论(0)赞 (0)

编程技术

千万级并发下,淘宝服务端架构如何演进?

17

likai 发布于 2019-06-14

本文以淘宝为例,介绍从一百个并发到千万级并发下服务端架构的演进过程,同时列举出每个演进阶段遇到的相关技术,让大家对架构的演进有一个整体的认知,文章最后汇总了一些架构设计的原则。 在介绍架构之前,为了避免部分读者对架构设计中的一些概念不了解,下面对几个最基础的概念进行介绍: ①分布...

阅读(28)评论(0)赞 (0)

Java

从简历被拒到收割今日头条 offer,我用一年时间破茧成蝶!

6

changyuan.xu 发布于 2019-06-14

点击上方 石杉的架构笔记 ,右上选择“ 设为星标 ” 每日早8点半,精品技术文章准时送上 往期文章 BAT 面试官是如何360°无死角考察候选人的(上篇) 每秒上万并发下的Spring Cloud参数优化实战 分布式事务如何保障实际生产中99.99%高可用 记一位朋友斩获...

阅读(26)评论(0)赞 (0)

Java

从简历被拒到收割今日头条 offer,我用一年时间破茧成蝶!

5

尖兵 发布于 2019-06-14

来源:大数据肌肉猿 本文是无精疯同学投稿的面试经历 在此感谢无精疯同学的分享 目录: 1. 印象中的头条 2. 面试背景 3. 准备面试 4. 头条一面(Java+项目) 5. 头条二面(大数据+项目) 6. 头条三面(算法+场景题) 7. 如何通过头条笔试? 8. 如何准备头条...

阅读(21)评论(0)赞 (0)

编程技术

面试官们“爱不释手”的分布式系统架构到底是个什么鬼?

4

darida 发布于 2019-06-13

本文是公众号读者W同学的投稿 感谢W同学的技术分享 目录: 一、什么是分布式系统? 二、为什么要走分布式系统架构? 三、系统如何进行拆分? 四、分布式之后带来的技术挑战? 一、什么是分布式系统? 在谈分布式系统架构前,我们先来看看,什么是分布式系统? 假设原来我们有一个系统,代码...

阅读(31)评论(0)赞 (0)

Java

2019一线互联网公司最全面试心得汇总

1

刘莉莉 发布于 2019-06-11

关注微信公众号:进击的java程序员K 每日精选BAT技术文章,面试真题,源码资料。 今天分享的BAT等一线互联网公司面试经验: 面试前的心态准备(3点建议) 技术硬实力包含的范围(50题目) 个人简历突出和优化(3点优化步骤) 个人软实力的提升(6点提升维度) BAT面试经验总...

阅读(48)评论(0)赞 (0)

Spring

数据批处理神器:Spring Batch(一)简介及使用场景

2

changyuan.xu 发布于 2019-06-05

数据批处理神器-Spring Batch(1)简介及使用场景 tags: springbatch 1.引言 最近使用 SpringBatch 进行做数据迁移、数据同步、数据批处理等工作,感叹 SpringBatch 设计之简洁,对批处理编程的抽象能力之强大。 众所周知,随着大数据...

阅读(39)评论(0)赞 (0)

编程技术

从 GFS 失败的架构设计来看一致性的重要性

16

songhua.gao 发布于 2019-06-04

作者简介 陈东明,饿了么北京技术中心架构组负责人,负责饿了么的产品线架构设计以及饿了么基础架 构研发工作。曾任百度架构师,负责百度即时通讯产品的架构设计。具有丰富的大规模系统构 建和基础架构的研发经验,善于复杂业务需求下的大并发、分布式系统设计和持续优化。 作者微信公众号dong...

阅读(28)评论(0)赞 (0)

Java

Java开发人员使用哪些大数据工具?

19

songhua.gao 发布于 2019-06-03

1、MongoDB——最受欢迎的,跨平台的,面向文档的数据库。 MongoDB是一个基于分布式文件存储的数据库,使用C++语言编写。旨在为Web应用提供可扩展的高性能数据存储解决方案。应用性能高低依赖于数据库性能,MongoDB则是非关系数据库中功能最丰富,最像关系数据库的,随着...

阅读(30)评论(0)赞 (0)

Java

终于有人把Java进阶大数据缘由全面讲明白了!

3

darida 发布于 2019-05-31

如今随着计算机技术的全面普及,数字化的数据已经对人们的生活起到了息息相关的作用,大家也经常关注技术圈的发展,很多java工程师都在担心自己适合的技术发展道路该怎么走,现在也算有个方向了。 大数据的介绍: 大数据(BIG DATA),指无法在一定时间范围内用常规软件工具进行收集、管...

阅读(30)评论(0)赞 (0)

Java

Java工程师成神之路:程序员的学习路线规划以及书籍推荐

2

puefu.he 发布于 2019-05-24

一、基础篇 面向对象 什么是面向对象 面向对象、面向过程 面向对象的三大基本特征和五大基本原则 平台无关性 Java如何实现的平台无关性的 JVM还支持哪些语言(Kotlin、Groovy、JRuby、Jython、Scala) 值传递 值传递、引用传递 为什么说Java中只有值...

阅读(51)评论(0)赞 (0)

编程技术

什么是架构设计的五个核心要素?

7

dulong 发布于 2019-05-21

架构中五个重要的核心指标:分别是性能、可用性、伸缩性、扩展性和安全性。 一、性能 性能就是核心要素之一,不然我为什么架构设计?随随便便一个lowlow的系统上线就好了。所以性能优化是很多小公司卖不去过的坎。这么说吧,当然优化网站性能的手段也非常多: (1)web前端性能优化: 浏...

阅读(33)评论(0)赞 (0)

Java

我搞CRUD的,你跟我说算法有用?【石杉的架构笔记】

4

zhuangli 发布于 2019-05-21

很多Java开发同学经常有一个疑惑,搞Java开发也需要懂算法吗?本文咱们就来谈谈这个问题。 其实如果你开发一个非常复杂而且有挑战的大型系统,那么必然会在系统中使用算法。同理,如果你可以将算法进行合理的优化,那么也可以将系统性能提升几十倍! 空口无凭,下面用真实案例来进行说明。我...

阅读(24)评论(0)赞 (0)