标签:Namenode

Java

CDH6.0.1 搭建过程及所遇到的错误处理

1

zhuangli 发布于 2020-04-19

一、集群服务器配置说明( 整个 过程中我会提前把一些小坑填上,有的坑后面没有提到 ) IP 节点名 OS Cores Memory Disk Remark 172.25.16.1 cdh1 CentOS7.5 40 128 4T cloudera Server、cloudera ...

阅读(56)评论(0)赞 (0)

Java

读Hadoop3.2源码,深入了解java调用HDFS的常用操作和HDFS原理

9

changyuan.xu 发布于 2020-03-30

本文将通过一个演示工程来快速上手java调用HDFS的常见操作。接下来以创建文件为例,通过阅读HDFS的源码,一步步展开HDFS相关原理、理论知识的说明。 说明:本文档基于最新版本Hadoop3.2.1 目录 一、java调用HDFS的常见操作 1.1、演示环境搭建 1.2、操作...

阅读(72)评论(0)赞 (0)

Java

从简历被拒到收割今日头条 Offer,我花了一年时间

17

yeseng 发布于 2020-03-24

作者|大数据肌肉猿 责编|伍杏玲 出品|CSDN博客 印象中的头条 1.老板张一鸣跟我是福建老乡,龙岩市在我朋友说来就是山沟沟,能走出美团王兴和头条张一鸣让我卯足了去龙岩吃特产老鼠干的欲望。 2.给的钱多,笔试也贼难。参加过头条笔试的同学都知道,头条笔试可以笔试三次,就是不论你有...

阅读(45)评论(0)赞 (0)

编程技术

微信架构总监:微信 10 亿日活场景下,后台系统微服务架构实践

18

songhua.gao 发布于 2020-03-24

点击“ 技术领导力 ”关注 ∆    每天 早上8:30 推送 作者| 许家滔   编辑| 老K 作者介绍: 许家滔 ,微信技术架构部后台总监,专家工程师,多年来伴随QQ邮箱和微信后台成长,历经系统从0到10亿级用户的过...

阅读(58)评论(0)赞 (0)

编程技术

微信架构总监:微信10亿日活场景下,后台系统微服务架构实践!15页ppt全解

18

xubiao.zhuang 发布于 2020-03-16

点击“ 技术领导力 ”关注 ∆    每天 早上8:30 推送 作者| 许家滔   编辑| 老K 作者介绍: 许家滔 ,微信技术架构部后台总监,专家工程师,多年来伴随QQ邮箱和微信后台成长,历经系统从0到10亿级用户的过...

阅读(56)评论(0)赞 (0)

Java

大数据方向学习面试知识图谱

5

yeseng 发布于 2020-01-15

正所谓,无招胜有招。 愿读到这篇文章的技术人早日明白并且脱离技术本身,早登彼岸。 一切技术最终只 是雕虫小 技 。 大纲 本系列主题是大数据开发面试指南,旨在为大家提供一个大数据学习的基本路线,完善数据开发的技术栈,以及我们面试一个大数据开发岗位的时候,哪些东西是重点考察的,这些...

阅读(166)评论(0)赞 (0)

Java

一个应届生拿字节跳动offer的努力

6

darida 发布于 2019-12-25

张小方推荐:很多人选择了计算机这个行业,为了提供自己的薪资收入可谓煞费苦心,但是结果差强人意,其实基础知识扎实的人,拿薪资还是不难的。本文分享了一位应届校招生拿 40W 年薪今日头条的 offer 的经历,其面试的内容虽然不难,但是非常基础,不踏实的人一定答不好。这里分享给大家,...

阅读(154)评论(0)赞 (0)

Java

2020面试预备你也能收割Offer,Java程序员必会知识清单全在这份pdf文档里

31

hellas 发布于 2019-12-02

关于程序员,除了做项目来提高自身的技术之外,还有一种提升自己的专业技能就是:多!看!书! 小编整理出一篇Java进阶架构师之路的核心知识,同时也是面试时面试官必问的知识点,篇章也是包括了很多知识点,其中包括了有基础知识、Java集合、JVM、多线程并发、spring原理、微服务、...

阅读(147)评论(0)赞 (0)

Java

Ubuntu 18.04下搭建单机Hadoop和Spark集群环境

29

xiaoli.wang 发布于 2019-12-01

Hadoop在整个大数据技术体系中占有至关重要的地位,是大数据技术的基础和敲门砖,对Hadoop基础知识的掌握程度会在一定程度决定在大数据技术的道路上能走多远。 最近想要学习Spark,首先需要搭建Spark的环境,Spark的依赖环境比较多,需要Java JDK、Hadoop的...

阅读(149)评论(0)赞 (0)

编程技术

阿里技术架构内部总结:HDFS监控落地的思考

12

xiaoli.he 发布于 2019-11-08

Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。 HDFS能提供高吞吐量的数据访问,非常适合大规模数据集上的应用。在大数据生态圈中,HDFS是最重要的底层分布式文件系统,它的稳定性关乎整个生态系统的健康。...

阅读(127)评论(0)赞 (0)

Java

分布式监控CAT服务端的本地部署

3

zhuangli 发布于 2019-10-30

一、CAT简介 CAT(Central Application Tracking),是美团点评基于 Java 开发的一套开源的分布式实时监控系统。美团点评基础架构部希望在基础存储、高性能通信、大规模在线访问、服务治理、实时监控、容器化及集群智能调度等领域提供业界领先的、统一的解决...

阅读(118)评论(0)赞 (0)

Java

Java开发三年转行大数据,我失业了

22

zhuangli 发布于 2019-10-14

互联网人的中年危机似乎都来的特别早…… 面对日新月异的技术和层出不穷的架构,几乎每一个互联网人都需要在工作中不断充能去适应不断更新的互联网环境。 软件工程 专业毕业五年,我觉得我的中年危机已经到了,做了三年多的java开发,每天都做着差不多的工作,连我自己都找不到现在工作的价值,...

阅读(135)评论(0)赞 (0)

Java

大数据面试知识图谱

7

Harries 发布于 2019-09-11

作者: 大数据技术与架构 By  大数据技术与架构 场景描述:大数据开发岗位技能树,学习和复习总纲。 关键词:面试 大数据 大纲 正所谓,无招胜有招。 愿读到这篇文章的技术人早日明白并且脱离技术本身,早登彼岸。 一切技术最终只 是雕虫小 技 。 大纲 本系列主题是大数据...

阅读(250)评论(0)赞 (0)

Java

Java代码质量检查工具及案例

28

yanxinchi 发布于 2019-08-19

编辑推荐: 本文来自于csdn,本文主要介绍了Java编码格式规范 、 代码重复、 代码覆盖率 、 依赖项分析、复杂度监控、Java模拟技术及一些相关的工具等。 在现在的软件开发中,由于软件的复杂度越来越高,业务也覆盖很广,各个业务模块业务错综复杂。这样就需要我们需要团队开发,在...

阅读(136)评论(0)赞 (0)

编程技术

架构师技术图谱,助你早日成为架构师

1

hanze 发布于 2019-07-25

架构师技术图谱,助你早日成为架构师 本项目是《码农周刊》架构学习资料精选, 码农周刊团队官方出品 。架构师必读,助你早日成为架构师! 架构师技术图谱包括:分布式、前端、大数据、存储、微服务、推荐系统、框架、消息队列、编程语言、设计模式、重构、集群等内容。 欢迎订阅《码农周刊》! ...

阅读(368)评论(0)赞 (0)

Java

从简历被拒到收割今日头条 offer,我用一年时间破茧成蝶!

5

尖兵 发布于 2019-06-14

来源:大数据肌肉猿 本文是无精疯同学投稿的面试经历 在此感谢无精疯同学的分享 目录: 1. 印象中的头条 2. 面试背景 3. 准备面试 4. 头条一面(Java+项目) 5. 头条二面(大数据+项目) 6. 头条三面(算法+场景题) 7. 如何通过头条笔试? 8. 如何准备头条...

阅读(271)评论(0)赞 (0)

Java

我搞CRUD的,你跟我说算法有用?【石杉的架构笔记】

4

zhuangli 发布于 2019-05-21

很多Java开发同学经常有一个疑惑,搞Java开发也需要懂算法吗?本文咱们就来谈谈这个问题。 其实如果你开发一个非常复杂而且有挑战的大型系统,那么必然会在系统中使用算法。同理,如果你可以将算法进行合理的优化,那么也可以将系统性能提升几十倍! 空口无凭,下面用真实案例来进行说明。我...

阅读(128)评论(0)赞 (0)