网友收藏 Hive进阶函数之【分割函数(split)、行转列函数(explode)、lateral view】1、split 函数—分割2、explode函数—行转列2.1 用于array类型的数据2.2 用于map类型的数据2.3 如何将其用入string类型的数据2.4 explode函数的局限性3、lateral view作用: ......
2023-10-11 20:53 阅读
阅读全文 网友收藏 在本文中以爬取贝壳网中每个房型房源信息,并且按照房源用途分别保存到不同表中为例。首先导入爬虫需要的selenuim模块、休眠要用的time模块、连接数据库要用的pymysql模块,并且连接数据库。host=你本机的ip地址,localhost就是......
2024-01-25 02:02 阅读
阅读全文 网友收藏 源码获取:博客首页 "资源" 里下载!项目介绍该超市订单管理毕业设计基于jdk8版本开发,在部署时需要使用jdk8以上的版本。使用了目前流行的框架组合springboot+mybatis的框架技术, 实现了供应商管理对供应商实现......
2024-03-02 03:52 阅读
阅读全文 网友收藏 一、背景我们在某个下午三点执行了某个库zone表的ddl操作,导致线上服务出现灾难性的后果:1、系统核心服务无法访问。2、系统基础服务依赖zone表的服务C出现线程阻塞进而导致服务C无法响应连接,使用apache的httpClient在获取......
2023-10-12 12:13 阅读
阅读全文 网友收藏 Spark环境搭建JunLeon——go big or go home目录Spark环境搭建一、环境准备1、软件准备2、Hadoop集群搭建3、Anaconda环境搭建二、Spark Local模式搭建1、Spark下载、上传和解压2、配置环境变量3、配置Spark配置文件4、测试5、补充:spark-shell、sp......
2024-01-23 22:43 阅读
阅读全文 网友收藏 目录一、数仓分层1.1 为什么要分层1.2 数据集市与数据仓库概念1.3 数仓命名规范1.3.1 表命名1.3.2 脚本命名1.3.3 表字段类型二、数仓理论2.1 范式理论2.1.1 范式概念2.1.2 函数依赖2.1.3 三范式区分2.2 关系建模与维度建模2.2.1 关系建模2......
2024-01-12 19:54 阅读
阅读全文 网友收藏 一、kafka-manager 简介为了简化开发者和服务工程师维护Kafka集群的工作,yahoo构建了一个叫做Kafka管理器的基于Web工具,叫做 Kafka Manager。这个管理工具可以很容易地发现分布在集群中的哪些topic分布不均匀,或者是分区在整个集群......
2023-10-11 21:27 阅读
阅读全文 网友收藏 问题:MySQL workbench 8.0.27版本连接本地MySQL数据库报SSL connection error: SSL is required but the server doesn't support it.解决:不启用SSL,在Advance TAB页,Others框中输入参数:useSSL=0,然后就可以连接上了。... hongweigg 华为云开发者联盟...
2024-01-25 07:36 阅读
阅读全文 网友收藏 文章目录事务ACID特性是如何实现的事务ACID特性是如何实现的事务的四种特性大家都知道是原子性、一致性、隔离性和持续性,也就是ACID,那么这四种特性是如何实现的呢?隔离性由锁机制实现剩下的三种特性由事务的redo和undo日......
2023-10-12 12:25 阅读
阅读全文 网友收藏 以前装了个vmware,里面安装了Ubuntu Linux的系统,突然想研究下Docker,却发现虚拟机打不开了,提示‘如果已在 BIOS/固件设置中禁用 Intel VT-x,或主机自更改此设置后从未重新启动,则 Intel VT-x 可能被禁用’原因:系统的Intel 虚拟技......
2024-01-25 06:05 阅读
阅读全文