资源浏览查阅83次。该代码为spark的最简单本地运行代码,初学者如果本地创建失败,可以参照该代码进行学习spark入门项目更多下载资源、学习资料请访问CSDN文库频道....
2024-01-23 20:01 阅读 阅读全文文章浏览阅读1.9w次,点赞7次,收藏46次。Spark GraphX是一个分布式图处理框架,它是基于Spark平台提供对图计算和图挖掘简洁易用的而丰富的接口,极大的方便了对分布式图处理的需求。众所周知•,社交网络中人与人之间有很多......
2024-01-23 23:12 阅读 阅读全文文章浏览阅读392次。学习目标:理解Spark框架的使用创建Maven项目:为了方便,将创建的新项目当成父项目,删除src创建子项目提示:这里可以添加要学的内容例如:1、 增加Scala插件当jdk版本为1.8时,选用scala2.1.0创建scala项目进......
2024-01-23 20:01 阅读 阅读全文文章浏览阅读1.8k次,点赞2次,收藏20次。文章目录数据说明需求1:Top10热门品类1.1 需求说明1.2 实现方案一数据说明//用户访问动作表case class UserVisitAction( date: String,//用户点击行为的日期 user_id: Long,//用户的ID session_id: Stri......
2024-01-23 16:50 阅读 阅读全文文章浏览阅读957次。Scala入门官网:https://www.scala-lang.org/课程版本:2.13.1HelloWorld创建一个scala工程创建一个包创建HelloWorld.scala编写代码object HelloWorld { def main(args: Array[String]): Unit = {//入口函数 pr..._flink scala入门实践...
2024-01-23 10:58 阅读 阅读全文✒️ 前 言大数据技术栈思维导图大数据常用软件安装指南一、Hadoop分布式文件存储系统——HDFS分布式计算框架——MapReduce集群资源管理器——YARNHadoop单机伪集群环境搭建Hadoop集群环境搭建HDFS常用Shell命令HDFS Java API的使用基于......
2023-10-11 14:30 阅读 阅读全文文章浏览阅读946次。方法和函数说明:在Scala中既有方法也有函数,大多数情况下,他们没有区别,作为初学者暂时不用明确区分。一般情况下方法的类型为具体一个返回值类型,可以省略不写。而函数的类型为:参数类型 => ......
2024-01-22 14:09 阅读 阅读全文