文章浏览阅读754次,点赞2次,收藏3次。要说当下IT行业什么最火?ABC无出其右。所谓ABC者,AI + Big Data + Cloud也,即人工智能、大数据和云计算(云平台)。每个领域目前都有行业领袖在引领前行,今天我们来讨论下大数据Big Data这......
2024-01-23 10:43 阅读 阅读全文文章浏览阅读1.5k次。大数据方向的工作目前分为三个主要方向:01.大数据工程师02.数据分析师03.大数据科学家04.其他(数据挖掘本质算是机器学习,不过和数据相关,也可以理解为大数据的一个方向吧)一、大数据工程师的技能......
2024-01-23 18:47 阅读 阅读全文文章浏览阅读1.1w次。要想从急剧增长的数据资源中挖掘分析出有价值的信息,需要先进的分析技术作支撑。从宏观上看,大数据分析技术发展所面临的问题均包含三个主要特征:(1)数据量庞大并以惊人的速度增长;(2)数据......
2024-01-22 20:03 阅读 阅读全文文章浏览阅读1.3k次。近期,经常听到这样一句特别豪气的话"我家里有矿"!对于数据而言,没有大数据技术的数据一无是处,但经过大数据技术处理的数据,就是金矿,价值连城!面临能将"矿"玩弄于股掌之间的......
2024-01-23 10:47 阅读 阅读全文 HBase的命令行工具,最简单的接口,适合HBase管理使用,可以使用shell命令来查询HBase中数据的详细情况。安装完HBase之后,启动hadoop集群(利用hdfs存储),启动zookeeper,使用start-hbase.sh命令开启hbase服务,最后在shell中执行hbase s......
2023-10-11 21:36 阅读 阅读全文文章浏览阅读2k次。Apache Spark,它是用于大数据分析、处理和计算的通用引擎。与MapReduce相比,它具有几个优点:它更快、更易于使用、简单,并且几乎可以在任何地方运行。它具有用于 SQL、机器学习和流式传输的内置工具,这......
2024-01-22 17:28 阅读 阅读全文Flume基础1、Flume是什么?Flume是数据采集,日志收集的框架,通过分布式形式进行采集,(高可用分布式)本质:可以高效从各个网站服务器中收集日志数据,并且存储到HDFS、hbase2、Flume可以对接的数据源? Console、RPC、Text、Tail、Sy......
2023-10-11 21:08 阅读 阅读全文资源浏览查阅126次。Scala和Spark大数据分析函数式编程、数据流和机器学习flume消费kafka数据太慢更多下载资源、学习资料请访问CSDN文库频道....
2024-01-22 22:42 阅读 阅读全文文章浏览阅读1.7k次,点赞3次,收藏22次。大数据技术之_19_Spark学习_07_Spark 性能调优 + 数据倾斜调优 + 运行资源调优 + 程序开发调优 + Shuffle 调优 + GC 调优 + Spark 企业应用案例_大数据技术之_19_spark学习_07_spark 性能调优 数据倾斜......
2024-01-23 16:54 阅读 阅读全文文章浏览阅读626次。大数据技术之_23_Python核心基础学习_01_计算机基础知识 + Python 入门 (9.5小时)_大数据技术与应用实习内容python代码...
2024-01-23 16:54 阅读 阅读全文