标签:Hadoop

Java

读Hadoop3.2源码,深入了解java调用HDFS的常用操作和HDFS原理

9

changyuan.xu 发布于 2020-03-30

本文将通过一个演示工程来快速上手java调用HDFS的常见操作。接下来以创建文件为例,通过阅读HDFS的源码,一步步展开HDFS相关原理、理论知识的说明。 说明:本文档基于最新版本Hadoop3.2.1 目录 一、java调用HDFS的常见操作 1.1、演示环境搭建 1.2、操作...

阅读(6)评论(0)赞 (0)

编程技术

揭秘万亿级别的全域数据统计分析平台技术架构演进

2

xiaoli.wang 发布于 2020-03-26

作者:友盟+技术专家 王翔 截止到2019年6月,友盟+已累计为180万移动应用和815万家网站提供10年的专业稳定数据服务;当前友盟+每天接收日志量达万亿级别,实现每秒处理2亿次事件的能力,相当于每眨眼一次,就有2亿数据被刷新了!友盟+数据存量高达50PB,相当于A4...

阅读(13)评论(0)赞 (0)

Java

ASM字节码编程 | 如果你只写CRUD,那这种技术栈你永远碰不到!!!

4

xirruiqiang 发布于 2020-03-26

小傅哥 | bugstack.cn 沉淀、分享、成长,专注于原创专题案例,以最易学习编程的方式分享知识,让自己和他人都能有所收获。目前已完成的专题有;Netty4.x实战专题案例、用Java实现JVM、基于JavaAgent的全链路监控、手写RPC框架、架构设计专题案例、源码分析...

阅读(11)评论(0)赞 (0)

编程技术

孙玄谈:微服务架构何去何从?

10

wenming.gapo 发布于 2020-03-25

前言 分布式技术的发展,深刻地改变了我们编程的模式和思考软件的模式。2019 岁末,PingCAP 联合 InfoQ 共同策划出品“分布式系统前沿技术 ”专题, 一起探索这个古老领域的新生机。 微服务架构模式经过5年多的发展, 在各行各业如火如荼地应用和实践。如何在企业中优雅地设...

阅读(20)评论(0)赞 (0)

Java

从简历被拒到收割今日头条 Offer,我花了一年时间

17

yeseng 发布于 2020-03-24

作者|大数据肌肉猿 责编|伍杏玲 出品|CSDN博客 印象中的头条 1.老板张一鸣跟我是福建老乡,龙岩市在我朋友说来就是山沟沟,能走出美团王兴和头条张一鸣让我卯足了去龙岩吃特产老鼠干的欲望。 2.给的钱多,笔试也贼难。参加过头条笔试的同学都知道,头条笔试可以笔试三次,就是不论你有...

阅读(13)评论(0)赞 (0)

Java

Smart Retry 1.3.3 发布

邓龙华 发布于 2020-03-23

Smart Retry 主要是用来进行方法重试的。和Guava Retry、Spring Retry相比,Smart Retry最大的特点是异步重试,支持持久化,系统重启之后可以继续重试。 项目特点 方法重试持久化,系统重启之后可以继续重试 异步重试(不支持同步重试) 支持接口实...

阅读(12)评论(0)赞 (0)

Java

配置中心

songhua.gao 发布于 2020-03-22

所谓集群,就是将部署在多个服务器上的相同应用集合在一起做同一件事情。因此,集群首先要解决的问题就是如何将多个服务器主机上的应用进行统一的管理,达到从外面看来就像是只有一个服务器主机在跑应用一样,这就要求集群系统必须具备全局信息的管理能力。比如应用程序的运行一般总是依赖一些配置信息...

阅读(12)评论(0)赞 (0)

编程技术

【JAVA进阶架构师指南】之一:如何进行架构设计

2

邓龙华 发布于 2020-03-19

前言 本博客是长篇系列博客,旨在帮助想提升自己,突破技术瓶颈,但又苦于不知道如何进行系统学习从而提升自己的童鞋.笔者假设读者具有3-5年开发经验,java基础扎实,想突破自己的技术瓶颈,成为一位优秀的架构师,所谓java基础扎实,比如: 1.java语言三大特性. 2.java语...

阅读(22)评论(0)赞 (0)

Java

[精华集锦] 20+ 互联网大厂Java面试题全面整理总结

16

likai 发布于 2020-03-19

每年金三银四都是招聘季,今年虽然有疫情影响,但相信也还是有不少人出来面试。我发现很多候选人,聊起架构、框架侃侃而谈,但一写代码,就暴露真实水平。说白了,还是基本功不够扎实。在我看来,所有计算机基本功中,最核心的一定是数据结构与算法。也因此,所有大厂面试,都必考算法题。 这里,小编...

阅读(15)评论(0)赞 (0)

Java

Java方法重载和重写原理区别解析

Harries 发布于 2020-03-18

一、方法重写(0verride) 在Java 程序中,类的继承关系可以产生一个子类,子类继承父类,它具备了父类所有的特征,继承了父类所有的方法和变量。 子类可以定义新的特征,当子类需要修改父类的一些方法进行扩展,增大功能,程序设计者常常把这样一种操作方法称为重写,也可以叫覆写或覆...

阅读(17)评论(0)赞 (0)

Java

大数据的“helloworld”,你还记得怎么写吗?

1

刘莉莉 发布于 2020-03-18

java入门hello world 大数据入门–wordcount 因为工作的关系,频繁的重复被wordcount配置的恐惧,尤其是在scala横飞的今天,长久的不再使用有的时候真的记不住啊,从网上找各种相应的代码,五味杂陈,所以在这里将简单的wordcount的代码...

阅读(18)评论(0)赞 (0)

Java

独家|浅谈对象序列化

7

yeseng 发布于 2020-03-16

导语 本文介绍了对象序列化的应用场景、常见框架和核心实现原理,有助于大家了解更多序列化细节,对日常开发、线上问题的解决等大有裨益。 背景 随着微服务架构和大数据技术的兴起,序列化作为数据传输中的一个重要组件,几乎无处不在。在微服务里,超高的调用频率要求编解码的速度要更快。在大数据...

阅读(21)评论(0)赞 (0)

Java

Java后端学习路线

16

songhua.gao 发布于 2020-03-16

点赞再看,养成习惯,微信搜索【 三太子敖丙 】关注这个互联网苟且偷生的工具人。 本文 GitHub github.com/JavaFamily 已收录,有一线大厂面试完整考点、资料以及我的系列文章。 前言 这期我想写很久了,但是因为时间的原因一直拖到了现在,我以为一两天就写完了,...

阅读(19)评论(0)赞 (0)

Java

代码实战到底告诉你什么是Spring的IOC,通俗易懂

8

hanze 发布于 2020-03-14

1、什么是 IOC? IOC-Inversion of Control,即控制反转。它不是什么技术,而是一种设计思想。 传统的创建对象的方法是直接通过  new 关键字 ,而 spring 则是通过 IOC 容器来创建对象,也就是说我们将创建对象的控制权交给了 IOC ...

阅读(21)评论(0)赞 (0)

Spring

一文解读微服务架构的服务与发现—Spring Cloud

11

songhua.gao 发布于 2020-03-12

简单来说,服务化的核心就是将传统的一站式应用根据业务拆分成一个一个的服务,而微服务在这个基础上要更彻底地去耦合(不再共享DB、KV,去掉重量级ESB),并且强调DevOps和快速演化。这就要求我们必须采用与一站式时代、泛SOA时代不同的技术栈,而Spring Cloud就是其中的...

阅读(27)评论(0)赞 (0)

编程技术

这些年我对微服务的理解

yanxinchi 发布于 2020-03-12

M onolith、 SOA、DDD、 The two-pizza rule、 分库分表这些概念跟微服务有啥关系,你知道吗? 这篇文章记录我的理解,分享给大家。 微服务(micro service),个人感觉也就近几年才吵起来的概念,记得退回去四五年(2014...

阅读(17)评论(0)赞 (0)

Java

十大编程语言,Java 未能榜首?

yanxinchi 发布于 2020-03-11

code小生  一个专注大前端领域的技术平台 公众号回复 Android 加入安卓技术群 来源:https://urlify.cn/IzYvmm 如果你是软件开发领域的新手,那么你会想到的第一个问题是“如何开始?”编程语言有数百种可供选择,但是你怎么发现哪个最适合你,你...

阅读(13)评论(0)赞 (0)

Java

中国开发者真实画像:Java长盛,偏爱Windows操作系统,鲜少参与开源项目

25

xiaoli.he 发布于 2020-03-10

整理 | 夕颜 责编 | 唐小引 出品 | CSDN(ID:CSDNnews) 要问全世界最牛的程序员来自哪里,不少人肯定想都不想就会脱口而出是美国。然而,事实上真是这样吗? 答案并非绝对,但中国程序员绝对在全球都有着非比寻常的名声。这是一群爱学习、肯钻研、想法多,虽然...

阅读(24)评论(0)赞 (0)