浅谈大数据这个含糊的概念
现如今大数据行业人工智能可以说是很火的,也有很多人想要转大数据,但是大数据这一类的转型需要用到的技术这些到底是什么,我们需要为转型做哪些准备。
大数据的分类现如今主要分为大数据应用和大数据开发。大数据系统开发的话主要涉及到利用现有的大数据工具,Hadoop , Hive , Flink 等工具来开发大数据应用。系统开发需要java 的原因是现有的开发工具都是用java 来写的,所以我们需要了解的基本语言就是java ,python ,R 等,个人建议可以先学python ,上手快,数据分析容易。之后再学java ,java 主要的是数据处理类的。没事可以多了解了解hadoop 源包,基础知识就是java core ,还有数据结构。
对于大数据应用这类开发的话主要是能够使用这些工具做一些应用。比如Hive 进行数据分析,sqoop 做数据抽取。最基本的就是sql 了吧。因为sql 是最基本的,能够熟练使用pl-sql 也是可以的。
总之,加油吧,现如今我的目标是先做数据应用,即数据分析,利用现有工具做数据分析。
虽然可能没有数据系统开发的同学技术上厉害,但是觉得这方面对业务需求理解的深一点。之后再深入了解大数据系统开发这快的话可能会容易些。以上就是鄙人的观念,在这个大数据人工智能横行的时代,我们需要不断的与时俱进才能有栖身之地。老鸟也要飞。
浅谈大数据这个含糊的概念
现如今大数据行业人工智能可以说是很火的,也有很多人想要转大数据,但是大数据这一类的转型需要用到的技术这些到底是什么,我们需要为转型做哪些准备。
大数据的分类现如今主要分为大数据应用和大数据开发。大数据系统开发的话主要涉及到利用现有的大数据工具,Hadoop , Hive , Flink 等工具来开发大数据应用。系统开发需要java 的原因是现有的开发工具都是用java 来写的,所以我们需要了解的基本语言就是java ,python ,R 等,个人建议可以先学python ,上手快,数据分析容易。之后再学java ,java 主要的是数据处理类的。没事可以多了解了解hadoop 源包,基础知识就是java core ,还有数据结构。
对于大数据应用这类开发的话主要是能够使用这些工具做一些应用。比如Hive 进行数据分析,sqoop 做数据抽取。最基本的就是sql 了吧。因为sql 是最基本的,能够熟练使用pl-sql 也是可以的。
总之,加油吧,现如今我的目标是先做数据应用,即数据分析,利用现有工具做数据分析。
虽然可能没有数据系统开发的同学技术上厉害,但是觉得这方面对业务需求理解的深一点。之后再深入了解大数据系统开发这快的话可能会容易些。以上就是鄙人的观念,在这个大数据人工智能横行的时代,我们需要不断的与时俱进才能有栖身之地。老鸟也要飞。
发布评论