标签:Apache Hadoop

Java

2018年排名Top 100的Java类库――在分析了277,975份源码之后得出的结论

2

xirruiqiang 发布于 2018-11-08

时间如流水,转眼间2018年已经要接近尾声了,过去的一年,可以说是疯狂的一年。SpaceX成功发射了重型猎鹰火箭,苹果成为首个突破一万亿美元市值的上市公司。 2018年,在IT圈也发生了许多大事和喜事,SpringBoot 2发布、Java发布了10 和 11两个版本、GitHu...

阅读(22)评论(0)赞 (0)

Java

2018年排名Top 100的Java类库——在分析了277,975份源码之后得出的结论

3

xiaoli.he 发布于 2018-11-08

时间如流水,转眼间2018年已经要接近尾声了,过去的一年,可以说是疯狂的一年。SpaceX成功发射了重型猎鹰火箭,苹果成为首个突破一万亿美元市值的上市公司。 2018年,在IT圈也发生了许多大事和喜事,SpringBoot 2发布、Java发布了10 和 11两个版本、GitHu...

阅读(23)评论(0)赞 (0)

Java

原 荐 Uber 开源分布式追踪工具:JVM Profiler

7

puefu.he 发布于 2018-08-19

《JVM Profiler: An Open Source Tool for Tracing Distributed JVM Applications at Scale 》 Apache Spark 计算框架已经被广泛用来构建大规模数据应用。对 Uber 而言, 数据是战略决策和...

阅读(74)评论(0)赞 (0)

Java

Web 爬虫 Apache Nutch 1.15 发布,支持 Java 10

changyuan.xu 发布于 2018-08-13

Apache Nutch 1.15 已发布。Nutch是一个成熟的、可用于生产的 Web 爬虫。 Nutch 1.x 可以依靠 Apache Hadoop™ 数据结构进行细粒度配置,这对于批处理非常有用。 此版本包含100多项 bug 修复和改进,完整的更改列表可 查阅发布说明 ...

阅读(306)评论(0)赞 (0)

开源软件

Hadoop老矣,为什么腾讯还要花精力在其开源发布上?

3

xubiao.zhuang 发布于 2018-07-12

      前些日子,腾讯主导开源大数据平台 Apache Hadoop 2.8.4 新版本发布的新闻引起了笔者的注意。自 Hadoop 从雅虎诞生之日起,已经走过了 10 来个年头,这期间,尤其是近年来,由华人作为 Release Manager ...

阅读(141)评论(0)赞 (0)

Java

Zip Slip任意文件覆盖漏洞处置手册

4

hellas 发布于 2018-06-08

阅读: 4 近日Snyk的研究员公布了一个名为Zip Slip的漏洞。攻击者可以恶意构造Zip压缩文件,通过路径遍历覆盖任意文件,从而导致潜在的代码执行。Zip Slip是“任意文件覆盖”和“目录遍历”问题的结合,攻击者可以将文件解压缩到正常解压缩路径之外并覆盖敏感文件,从而等待...

阅读(168)评论(0)赞 (0)

Java

学会这12个框架,你的薪资和level能更上一层楼

10

changyuan.xu 发布于 2018-05-10

在当今世界,对各种框架的了解是非常重要的。它们使你可以快速开发原型和实际项目。在本文中分享了12个与Java开发、移动app开发、Web开发和大数据相关的有用框架。希望可以能够提升技术方面的知识。 1)Angular 这是另一个JavaScript框架,也在我的2018年学习清单...

阅读(103)评论(0)赞 (0)

编程技术

Cloudera CDH简介

5

xiaoli.he 发布于 2017-08-31

  马马虎虎学了30多天的大数据课程,从最开始的不明所以到现在略知一二,准备将所学的内容进行一下梳理。   与CDH同级的概念是 HDP,Apache Hadoop.   本文讲讲CDH相关的概念. CDH是Cloudera这个公司发布的产品,官网地...

阅读(337)评论(0)赞 (0)

Spring

Spring for Apache Hadoop 2.5.0 GA 版本发布

xiaoli.wang 发布于 2017-07-07

Spring for Apache Hadoop 2.5.0 GA 版本发布,包括 bug 修复和版本升级,具体内容可查阅 发行主页 。 Spring for Apache Hadoop 提供了Spring框架用于创建和运行 Hadoop MapReduce ...

阅读(180)评论(0)赞 (0)

开源软件

盘点大数据开源软件Google Trends指数

77

尖兵 发布于 2017-04-08

在QCon2016 北京站上,Druid开源项目的负责人,Imply联合创始人Fangjin Yang分享了题为 《Evolution of Open Source Data Infrastructure》的主题演讲大数据开源技术演进,探讨了开源大数据世界的发展和方向。作为引申,...

阅读(321)评论(0)赞 (0)

互联网.资讯

盘点大数据开源软件Google Trends指数

77

puefu.he 发布于 2017-04-07

  在 QCon2016 北京站上,Druid 开源项目的负责人,Imply 联合创始人 Fangjin Yang 分享了题为 《Evolution of Open Source Data Infrastructure》的主题演讲大数据开源技术演进,探讨了开源大数据世界的发展和方...

阅读(236)评论(0)赞 (0)

互联网.资讯

进行数据挖掘的8个最佳开源工具

4

hanze 发布于 2017-04-07

  数据挖掘,又称为资料探勘、数据采矿。它是数据库知识发现(英语:Knowledge-Discovery in Databases,简称:KDD)中的一个步骤,是一个挖掘和分析大量数据并从中提取信息的过程。其中一些应用包括市场细分 – 如识别客户​​从特定品牌购买特定...

阅读(125)评论(0)赞 (0)

互联网.资讯

HBaseCon West 2017开幕在即,Apache HBase开发者别错过

1

xiaoli.wang 发布于 2017-04-03

  日前谷歌通过官方博客宣布,基于 Apache HBase 社区的官方研讨会 HBaseCon West 2017 将于美国当地时间 6 月 12 日在加州山景城正式开幕,目前参会注册和论文征集活动已同步启动。对各位 Hadoop Hbase 相关的大数据从业人员及开发者而言,...

阅读(241)评论(2)赞 (0)

编程技术

DC/OS关键技术与应用场景

8

songhua.gao 发布于 2017-02-21

【编者的话】文章首先对数据中心操作系统内的主要技术,包括Mesos、Yarn、Kubernetes和容器进行了阐述。根据国内外电信运营商的现状和面临的问题,提出了一种解决方案,并对技术实现及选型建议进行了讨论。最后对电信运营商应用DC/OS关键技术的案例进行了简要介绍。 引言 随...

阅读(177)评论(0)赞 (0)

编程技术

Zookeeper笔记

1

darida 发布于 2017-02-09

Zookeeper是Apache Hadoop的一个子项目,本质是一个分布式小文件系统,主要解决分布式系统应用中遇到的数据管理问题(一致性问题):统一命名服务,状态同步服务,集群管理,分布式应用配置项的管理。 数据结构 Zookeeper数据结构的特点 每个 子目录项 (比如图中...

阅读(149)评论(0)赞 (0)

互联网.资讯

大数据与机器学习 2016年大事记

wenming.gapo 发布于 2017-02-03

  前言   不知不觉间,2016 年已然过去,2017 年已经到来。蓦然回首,我们发现在过去的一年,大数据和人工智能领域的发展让我们眼花缭乱,应接不暇,待我为大家梳理一番。   标志性大事件   Apache Hadoop at 10:Hadoop 诞生 10 年了。2006 ...

阅读(145)评论(0)赞 (0)

编程技术

【国际资讯】Hadoop和Couchdb成为新一波数据库攻击的目标

3

darida 发布于 2017-01-24

翻译:D reamrider 预估稿费:100RMB(不服你也来投稿啊!) 投稿方式:发送邮件至 linwei#360.cn ,或登陆 网页版 在线投稿 前言 最近,一些经常劫持并删除数据的网络罪犯盯上了不安全的Hadoop和CouchDB应用。安全研究人员在上周表示,在针对未设...

阅读(140)评论(0)赞 (0)

编程技术

羽毛也疯狂,盘点 Apache 最新毕业的11个顶级项目

12

尖兵 发布于 2017-01-20

自1999年成立至今,Apache 软件基金会已成功建立起自己强大的生态圈。其社区涌现了非常多优秀的开源项目,同时有越来越多国内外项目走向这个国际开源社区进行孵化。据悉,目前所有的 Apache 项目都需要经过孵化器孵化,满足一系列质量要求之后才可毕业。从孵化器里毕业的项目,要么...

阅读(191)评论(0)赞 (0)