转载

WOT2015谢佳标:基于R语言的大数据处理及建模技术

正如马云所说:“大家还没搞清PC时代的时候,移动互联网来了,还没搞清移动互联网的时候,大数据时代来了。”在信息时代,海量数据迎来了大爆发,也给大数据技术平台带来了用武之地。在深圳的 【WOT2015"互联网+"时代大数据技术峰会】 现场,51CTO记者采访了WOT特邀讲师、乐逗游戏高级数据分析师谢佳标,从R语言和大数据建模等方面对大数据做深刻解读。

WOT2015谢佳标:基于R语言的大数据处理及建模技术

谢佳标,乐逗游戏高级数据分析师。主要利用R语言进行大数据的挖掘及可视化工作。第七届、第八届中国R语言大会的演讲嘉宾。有超过八年的数据挖掘建模经验,从事过咨询、电商、电力、游戏等行业,了解不同领域的数据特点。有丰富的利用R语言进行大数据挖掘的实战经验。

谢佳标告诉笔者,游戏公司获得的数据量是相对较大的,数据维度比较多,数据源头也难以把握,所以获取到的数据是没法直接用的,需要对数据做预处理。包括几个部分:一是数据的缺失处理,如果有哪些字段缺失,需要通过机器学习的技术进行填补,有的样本没法通过预处理的话,会直接删除掉。预处理后,需要读数据进行转换,有的需要增加一个新的维度来达到数据分析的要求。

那么为什么用R语言进行处理呢?谢佳标表示,R语言是开源的,内建了很多特有的函数建模,并拥有众多的拓展包。另外由于开源,我们可以看到函数背后的逻辑是怎样的,每一个步骤是怎样转换和处理的。除此之外,在灵活性方面,R近几年发展很快,很多新的模型、算法和研究等都纳入进去,比如深度学习、社交网络和一些较新的算法等。

在这个大数据技术爆发的时代,对于数据分析师的需求也迎来了大增长,数据分析师的职业前景也十分广阔。谢佳标告诉笔者他从事数据相关工作已经有八九年,在这个领域总是有很多新东西要研究,能给人带来很大的成就感和愉悦感。

在他看来,要成为一个优秀的数据分析师,首先要有态度,要保持一个认真的态度来对待。其次,要熟悉统计学知识,有很强的统计学知识或者数学逻辑的话,分析数据会更清晰有条理。最后,应该选择适合自己的工具来实现数据分析。

笔者让谢佳标为有志于从事R相关工作的人推荐文档或者书籍。谢佳标表示学习R最佳的方法是看官网,因为官网有很多完善的帮助文档。然后可以看一些入门书籍,比如《R语言实践》《R语言编程艺术》都是比较好的入门书籍。

【责任编辑:李英杰 TEL:(010)68476606】

正文到此结束
Loading...