标签:HDFS

Java

大数据方向学习面试知识图谱

5

yeseng 发布于 2020-01-15

正所谓,无招胜有招。 愿读到这篇文章的技术人早日明白并且脱离技术本身,早登彼岸。 一切技术最终只 是雕虫小 技 。 大纲 本系列主题是大数据开发面试指南,旨在为大家提供一个大数据学习的基本路线,完善数据开发的技术栈,以及我们面试一个大数据开发岗位的时候,哪些东西是重点考察的,这些...

阅读(38)评论(0)赞 (0)

Java

Apache Hadoop代码质量:生产VS测试

1

wenming.gapo 发布于 2020-01-13

为了获得高质量的生产代码,仅确保测试的最大覆盖范围还不够。无疑,出色的结果需要主要的项目代码和测试才能有效地协同工作。因此,测试必须与源代码一样受到重视。体面的测试是成功的关键因素,因为它将赶上生产的衰退。让我们看一下PVS-Studio静态分析器警告,以查看测试错误并不比生产错...

阅读(18)评论(0)赞 (0)

Java

2019年排名Top 100的Java类库——在分析了30073份源码之后得出的结论

3

xiaoli.he 发布于 2020-01-13

最近,OveOps公布了《The 2019 edition of the Top 100 Java packages from GitHub》,作者查看了这份榜单,做了翻译和补充,向你展示2019年的风云Java类库,希望可以给正在使用Java的你一些帮助和启示。不能说榜单中的类...

阅读(16)评论(0)赞 (0)

编程技术

如何使用 NoSQL 架构构建实时广告系统

2

changyuan.xu 发布于 2020-01-12

JDNoSQL平台是什么 JDNoSQL平台是一个分布式面向列的KeyValue毫秒级存储服务,存储结构化数据和非机构化数据,支持随机读写与更新,灵活的动态列机制,架构上支持水平扩容,提供高并发、低延迟、高可用、强一致数据库服务,可满足各种业务场景。完善的平台支持,支持业务自助化...

阅读(26)评论(0)赞 (0)

编程技术

新工作第十五周

xiaoli.he 发布于 2020-01-11

到春节,新工作就完整四个月了,磨合的也差不多了,情况也了解的差不多了,需要做计划了,当然不是为了计划而计划,也不是为了产品数据而计划,而是从一个程序员的角度去考虑。 面临的复杂性在于,自己的水平和认知还处于一个可提升的阶段,很多考虑不全面,但正因为如此,才要去想,虽然过程很痛苦。...

阅读(17)评论(0)赞 (0)

Java

Linkis 0.9.2 版本发布

邓龙华 发布于 2019-12-30

什么是Linkis ? Linkis 是微众银行自研的一个打通了多个计算存储引擎如:Spark、TiSpark、Hive、Python和HBase等,对外提供统一REST/WebSocket/JDBC接口,提交执行SQL、Pyspark、HiveQL、Scala等脚本的计算中间件...

阅读(24)评论(0)赞 (0)

编程技术

「分布式系统前沿技术」专题 | Pulsar 的设计哲学

10

xiaoli.he 发布于 2019-12-27

分布式技术的发展,深刻地改变了我们编程的模式和思考软件的模式。值 2019 岁末,PingCAP 联合 InfoQ 共同策划出品“分布式系统前沿技术 ”专题, 邀请众多技术团队共同参与,一起探索这个古老领域的新生机。本文出自 StreamNative 联合创始人 Sijie Gu...

阅读(32)评论(0)赞 (0)

编程技术

高级架构师如何仅用6步,就为企业量身打造一套高可用系统?

9

xiaoli.wang 发布于 2019-12-27

对于用户量较大的系统以及系统稳定性要求极高的企业,每一次计划外的系统停机都是严重事故。想要降低计划外系统停机的概率,有两个关键动作,一是执行计划内维护来及时更新硬件或者软件,另外一个有效的动作就是搭建一套高可用系统来降低系统意外停机的概率。 随着企业用户对集群方案需求的多样性提升...

阅读(42)评论(0)赞 (0)

Java

一个应届生拿字节跳动offer的努力

6

darida 发布于 2019-12-25

张小方推荐:很多人选择了计算机这个行业,为了提供自己的薪资收入可谓煞费苦心,但是结果差强人意,其实基础知识扎实的人,拿薪资还是不难的。本文分享了一位应届校招生拿 40W 年薪今日头条的 offer 的经历,其面试的内容虽然不难,但是非常基础,不踏实的人一定答不好。这里分享给大家,...

阅读(70)评论(0)赞 (0)

编程技术

“国货之光” 完美日记的微服务实践和优化思路

4

邓龙华 发布于 2019-12-13

作者 | 庄工,关工,唐工 如果你是一位程序媛,你一定知道完美日记。 如果你是一位程序员,你的那个她一定知道完美日记。 今年双11,完美日记仅用28分钟就超过了2018年双11全天的销售额,成为第一个登上天猫双11彩妆榜首的国货品牌。 在这个遍地都是漂亮小姐姐、号称男人...

阅读(45)评论(0)赞 (0)

Java

如何健壮后端服务?

xubiao.zhuang 发布于 2019-12-13

对每一个程序员而言,故障都是悬在头上的达摩克利斯之剑,都唯恐避之不及,如何避免故障是每一个程序员都在苦苦追寻希望解决的问题。对于这一问题,大家都可以从需求分析、架构设计 、代码编写、测试、code review、上线、线上服务运维等各个视角给出自己的答案。本人结合自己两年有限的互...

阅读(38)评论(0)赞 (0)

编程技术

架构师详解:从0-1构建大数据平台

13

darida 发布于 2019-12-13

如今大数据在各行业的应用越来越广泛:运营基于数据关注运营效果,产品基于数据分析关注转化率情况,开发基于数据衡量系统优化效果等。 美图公司有美拍、美图秀秀、美颜相机等十几个 app,每个 app 都会基于数据做个性化推荐、搜索、报表分析、反作弊、广告等,整体对数据的业务需求比较多、...

阅读(37)评论(0)赞 (0)

编程技术

常用的几种大数据架构分析

7

xiaoli.he 发布于 2019-12-12

数据分析工作虽然隐藏在业务系统背后,但是具有非常重要的作用,数据分析的结果对决策、业务发展有着举足轻重的作用。随着大数据技术的发展,数据挖掘、数据探索等专有名词曝光度越来越高,但是在类似于Hadoop系列的大数据分析系统大行其道之前,数据分析工作已经经历了长足的发展,尤其是以BI...

阅读(37)评论(0)赞 (0)

编程技术

万字长文剖析架构设计全攻略(上)

2

刘莉莉 发布于 2019-12-10

正文开始前,先花大量笔墨推荐几个我工作中常用的思考框架、实践框架,后续文章中会使用这几种思考框架作为工具来描述、拆解、分析问题。当然你也可以使用到其它工作内容中,掌握几种利器,比无头苍蝇样做事效率会高很多。 1. 几个思考、实践框架 1、目标驱动、可量测的行动框架 OGSM 是 ...

阅读(70)评论(0)赞 (0)

Spring

硬核! 逛了4年Github ,一口气把我收藏的 Java 开源项目分享给你!

1

yanxinchi 发布于 2019-12-09

Awsome Java Great Java project on Github(Github 上非常棒的 Java 开源项目). English Version 欢迎大家推荐自己觉得不错的 Java 项目,下面项目的排序很大程度是根据当前项目的 Star 数量。 教程 Java...

阅读(54)评论(0)赞 (0)

Spring

硬核! 逛了4年Github ,一口气把我收藏的 Java 开源项目分享给你!

1

尖兵 发布于 2019-12-09

Awsome Java Great Java project on Github(Github 上非常棒的 Java 开源项目). English Version 欢迎大家推荐自己觉得不错的 Java 项目,下面项目的排序很大程度是根据当前项目的 Star 数量。 教程 Java...

阅读(47)评论(0)赞 (0)

编程技术

ZB 级的大数据探索与应用实践「附 PPT」 | U刻

9

xubiao.zhuang 发布于 2019-12-06

技术分享 / ZB 级的大数据探索与应用实践「附 PPT」 <返回 ZB 级的大数据探索与应用实践「附 PPT」 2019.12.06 栏目:技术分享 据报告显示到 2025 年,全球将产生 180ZB 的数据。这些海量的数据正是企业进行数字化转型的核心生产因素,然而真正被...

阅读(41)评论(0)赞 (0)

编程技术

Flutter 沙龙回顾 | 跨平台技术趋势及字节跳动 Flutter 架构实践

26

邓龙华 发布于 2019-12-04

11 月 23 日, 字节跳动技术沙龙 | Flutter 技术专场  在北京后山艺术空间圆满结束。我们邀请到字节跳动移动平台部 Flutter 架构师袁辉辉,Google Flutter 团队工程师 Justin McCandless,字节跳动移动平台部 Flutte...

阅读(97)评论(0)赞 (0)