文章浏览阅读2.8k次,点赞2次,收藏50次。问题重述• 基于Eclipse或IDEA完成Spark大数据分析• Spark1.x或2.x版本均可• 能够读取给定的数据文件• 出租车GPS数据文件(taxi_gps.txt)• 北京区域中心坐标及半径数据文件(district.txt)• 能......
2024-01-22 14:10 阅读 阅读全文文章浏览阅读1.7k次,点赞14次,收藏5次。一、Scala简介scala是运行在JVM上的多范式编程语言,同时支持面向对象和面向函数编程多范式:就是包含多种编程思想。目前主流的编程思想有4中,即面向对象、面向过程、面向函数、以......
2024-01-23 22:23 阅读 阅读全文文章浏览阅读93次。Scala 简介它是一门基于JVM的面向函数和面向对象的编程语言, 它包含了求值表达式,闭包,切片操作,模式匹配,隐式转换等特性。可变量/不可变量可变集合/不可变集合、集合操作函数值函数求值表达式函......
2024-01-23 05:07 阅读 阅读全文文章浏览阅读437次。彻底征服Scala模式匹配和类型系统第一部分学习笔记 //一、模式匹配(类似java switch case 但java switch case只对值进行匹配) def bigData(data: String){ data match{ case "Spark" => println("Wow!!!")/......
2024-01-22 21:31 阅读 阅读全文小小酥_LH擅长大数据,scala,spark,等方面的知识,小小酥_LH关注hive,flink,storm,spark,hadoop,etl,推荐算法领域....
2023-10-11 14:13 阅读 阅读全文文章浏览阅读126次。【大数据Scala系列】Scala隐式转换和隐式参数_scala2.11 spark2.无法隐式变化...
2024-01-23 13:14 阅读 阅读全文Scala 全称为 Scalable Language,即“可伸缩的语言”,之所以这样命名,是因为它的设计目标是希望伴随着用户的需求一起成长。Scala 是一门综合了面向对象和函数式编程概念的静态类型的编程语言,它运行在标准的 Java 平台上,可......
2023-10-10 03:08 阅读 阅读全文文章浏览阅读2.8k次。第一阶段:Spark streaming、spark sql、kafka、spark内核原 理(必须有一个大型项目经验);第二阶段:spark运行的各种环境,各种故障的解决,性能 优化(精通spark内核、运行原理);第三阶段:流处理、机器......
2024-01-22 21:31 阅读 阅读全文第一阶段:Spark streaming、spark sql、kafka、spark内核原理(必须有一个大型项目经验);第二阶段:spark运行的各种环境,各种故障的解决,性能优化(精通spark内核、运行原理);第三阶段:流处理、机器学习为鳌头,需要首先掌......
2023-10-10 03:07 阅读 阅读全文第一阶段:Spark streaming、spark sql、kafka、spark内核原 理(必须有一个大型项目经验);第二阶段:spark运行的各种环境,各种故障的解决,性能 优化(精通spark内核、运行原理);第三阶段:流处理、机器学习为鳌头,需要首先......
2023-10-10 03:07 阅读 阅读全文