大数据是什么?

    /    2018-05-29

  马云说:“我们已从IT时代进入了DI时代,未来我们的汽车、电灯泡、电视机、电冰箱等将全部装上操作系统,并进行数据集成,数据将会让机器更“聪明”,DT时代,数据将成为主要的能源,离开了数据,任何组织的创新都基本上是空壳”,由此可见,大数据对当今社会的重要性,那么大数据到底是什么呢?

  大数据是指所涉及的数据巨大,无法利用常规软件工具进行捕捉、管理和处理的数据集合,需要采用新处理模式才能具有更强的决策力、洞察力和流程优化能力。

  常见的大数据类型:

  传统企业数据:包括 CRM systems的消费者数据、传统的ERP数据、库存数据以及账目数据等;

  机器和传感器数据:包括呼叫记录、智能仪表、工业设备传感器、设备日志、交易数据等;

  社交数据:包括用户行为记录、反馈数据等,如Twitter,Facebook这样的社交媒体平台。

  从海量的数据中提取有价值的信息,需要进行一系列的处理操作,主要包括、数据采集、数据导入和清洗处理、数据统计和分析以及数据挖掘应用等,这些都离不开相应的大数据技术,从事大数据开发工作需要掌握技术有: JavaLinux、Hadoop、Hive、Avro与Protobuf、ZooKeeper、HBase、Phoenix、Flume、SSM、Kafka、Scala、Spark、azkaban、Python数据分析等。

  大数据根基于互联网,数据仓储、数据挖掘、云计算等互联网技术的发展为大数据的应用奠定基础,想要更多的了解和应用大数据,就需掌握以上大数据技能!

(8)

分享至