大数据需要掌握哪些技术

马云说：“我们已经从IT时代进入DT时代。将来，我们的汽车，灯泡，电视，冰箱等都将配备操作系统和数据集成。数据将使机器更加智能”  “。世界500强公司，BAT等公司和初创公司都需要数据人才。目前，大数据人才的数量很少，这也是学习大数据的好时机！

  就目前的就业情况而言，大数据的就业一般在2万左右。 这个水平是不固定的。 首先，它取决于个人的技术能力，然后取决于公司。 一些公司非常重视大数据技术人才。 薪水比较高。

  我们可以取代公司的招聘意图，但技术确实是硬件条件，它是确定您的薪水水平的直接因素！那么，一些大数据工程师需要具备哪些技能？

  1.精通JAVA开发语言，熟悉Python和Scala开发语言者优先；

  2.熟悉Spark或Hadoop生态系统技术，具有源代码阅读和二次开发经验； 精通Hadoop生态和与高性能缓存相关的各种工具，并且具有源代码开发经验者优先；

  3.熟悉SQL，熟悉数据库原理，至少熟悉一个主流关系数据库； 熟悉Linux操作系统，熟练使用常用命令，熟练使用shell脚本； 熟悉ETL开发并精通至少一个ETL（技巧，水壶，ogg等）。最好使用那些转换开放源代码工具的人；

  4.具有清晰的系统思维逻辑，对解决行业中的实际问题有浓厚的兴趣，并具有良好的沟通和协调能力以及学习能力。