知秀网 > 读书 > 正文

大数据专业需要学习哪些技术 大数据工程师需要学哪些技术?

大数据专业需要学习哪些技术 大数据工程师需要学哪些技术?

1.大数据工程师要学习JAVA、Scala、Python等编程语言,不过这些语言都是相通的,掌握了一门编程语言其他的就很好学习了。大数据的学习需要掌握以下技术:Hadoop、spark、storm等核心技术。

2.基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等各种技术范畴和不同的技术层面。首先给出一个通用化的大数据处理框架,主要分为几个方面:数据采集与预处理、数据存储、数据清洗、数据查询分析和数据可视化。