文章浏览阅读364次。计算引擎Spark百度百科Spark:各种格式、各种计算(机器学习、图形计算)、可sql、可代码处理、支持scala/java/python语言开发。提供scala/python代码命令行运行、超大数据支持差。分析引擎(预计算系统)Apache Druid......
2024-01-22 20:13 阅读 阅读全文一、什么是大数据大数据(big data),指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。......
2023-10-11 14:04 阅读 阅读全文文章浏览阅读1.6k次。一、Hadoop1.HadoopHadoop的初衷是采用大量的廉价机器,组成一个集群!完成大数据的存储和计算!2.hadoop中的组件hadoop 1.xHDFS: 负责大数据的存储Common: HDFS和MR共有的常用的工具包模块MapReduce: 负责计算,负责......
2024-01-22 20:15 阅读 阅读全文TPshop B2C商城专为解决传统电商的弊端,数据库从原有的结构中分离了出来,单独应用阿里云的RDS云数据库,轻松hold住大数据,解决刚需问题,大步迈入大数据时代。...
2024-03-15 21:08 阅读 阅读全文文章浏览阅读3k次,点赞4次,收藏41次。大数据面试题(完整)2020大数据面试题真题总结(附答案):点击这里技术栈Hadoop万亿数据下 Hadoop 的核心竞争力:点击这里HBaseHBase应用与高可用实践:点击这里Kafka基于 Kafka 的实时计算引擎......
2024-01-23 02:46 阅读 阅读全文一、什么是Akka Akka 是一个用 Scala 编写的库,用于简化编写容错的、高可伸缩性的 Java 和 Scala 的 Actor 模型应用。二、Akka特性 1.更加简单的并发策略Simpler Concurrency,通过ActorsSTM & Transactors能够简化编写可靠的并行计算。 2.EDA......
2023-10-10 03:27 阅读 阅读全文log4j升级之路,内网穿透简介,使用maxwell实时采集mysql数据,大数据,azkaban,任务调度...
2024-01-23 12:28 阅读 阅读全文文章浏览阅读3.3k次,点赞2次,收藏18次。一. Hadoop二. Spark三. Flink四. Zookeeper _大数据技术栈...
2024-01-22 20:15 阅读 阅读全文文章浏览阅读2.8k次。大数据要实现处理,需要专业的技术手段去实现,以Hadoop、Spark为首的一些计算框架,也已经在大数据处理当中,稳稳地占据一席之地。当然,在大数据当中,可用的计算处理框架不止于此。今天加米谷学院......
2024-01-22 20:14 阅读 阅读全文尘.埃擅长笔记,大数据生态框架搭建,大数据环境搭建,等方面的知识,尘.埃关注安全威胁分析,python,ddos,密码学,网络安全,计算机网络,java,安全,系统安全,web安全,安全架构,网络攻击模型,可信计算技术领域....
2023-10-11 14:53 阅读 阅读全文