spark集群从HDFS中读取数据并计算,spark集群的搭建,hadoop之远程debug,hadoop,centos,vmware...
2024-01-23 09:05 阅读 阅读全文文章浏览阅读1.6k次。简单说有三大核心技术:拿数据,算数据,卖数据。首先做为大数据,拿不到大量数据都白扯。现在由于机器学习的兴起,以及万金油算法的崛起,导致算法地位下降,数据地位提高了。举个通俗的例子,......
2024-01-22 20:04 阅读 阅读全文文章浏览阅读259次。【大数据学习与分享】主要是做什么的?【大数据学习与分享】主要专注于大数据领域常用的技术,如Spark、Hadoop、Hive、HBase、Kafka、Zookeeper等技术的使用、实战技巧、源码解读,语言主要以Java和Scala为主,......
2024-01-23 11:58 阅读 阅读全文文章浏览阅读3.5k次。随着大数据分析市场快速渗透到各行各业,哪些大数据技术是刚需?哪些技术有极大的潜在价值?根据弗雷斯特研究公司发布的指数,这里给出最热的十个大数据技术。1、预测分析预测分析是一种统计或数据......
2024-01-22 19:40 阅读 阅读全文文章浏览阅读453次。阿里云技术架构云数仓技术选型_阿里云 大数据 技术架构图...
2024-01-23 12:31 阅读 阅读全文科学数据中心软件栈FairStack,转载:用户画像建设过程简析,转载:用户画像系统原型...
2024-01-22 20:24 阅读 阅读全文文章浏览阅读3.3k次,点赞2次,收藏13次。大数据本身是一个抽象的概念。从一般意义上讲,大数据是指无法在有限时间内用常规软件工具对其进行获取、存储、管理和处理的数据集合。目前,业界对大数据还没有一个统一的定......
2024-01-22 19:50 阅读 阅读全文·scala入门:基本语法(变量和数据类型、运算符、流程控制) ·核心特性:函数式编程、面向对象、集合·其他特色:模式匹配、异常处理、隐式转换、泛型 Spark—新一代内存级大数据计算框架,是大数据的重要内容......
2023-10-10 03:05 阅读 阅读全文文章浏览阅读9.7k次,点赞48次,收藏343次。个人期末复习材料,根据林子雨的大数据技术教材与其它资料整理。第一章 大数据概述1.大数据的4v特征数据量大 volume价值密度低 value数据类型繁多 variety处理速度快 velocity2.大数据3种......
2024-01-23 08:29 阅读 阅读全文