相关文章
Spark的学习-01
我们使用Spark主要是用于做离线数仓,虽然Spark也可以做实时的,但是我们基本不用
实时数仓使用的是flink
spark可以做数仓,数仓中也可以分层。 离线场景:实现离线数据仓库中的数据清洗、数据分析、即席查询等应用 实时场景&#…
建站知识
2024/11/4 12:16:02
spark==centos安装hadoop集群,安装spark standalone集群,编写pyspark/java/scala代码使用集群
master地址 hadoop100:8080
历史服务器 hadoop100:18080
hdfs地址 http://hadoop100:9870/dfshealth.html#tab-overview 1
centos安装hadoop集群,
上传文件到hdfs
2
安装spark standalone集群,查看自带的pyspark使用的python版本,然后安…
建站知识
2024/11/4 12:15:01
全面指南:数据预处理技术与实践
在数据分析和机器学习项目中,数据预处理是一个至关重要的步骤。它涉及到对原始数据进行清洗、转换和规范化,以确保数据的质量和可用性。本文将详细介绍数据预处理的各个阶段,并提供相应的代码示例,帮助读者深入理解并实践数据预处…
建站知识
2024/11/5 13:31:21
Linux -- 初识信号
目录
什么是信号?
如何使用信号?
代码:
testSig.cc
makefile:
验证:
2号信号:
9号信号:
建立对信号的认识:
信号的处理
自定义信号的处理方式:
signal 函数…
建站知识
2024/11/4 12:12:58
Rust线程构建安全并发应用
并发功能支持程序同时执行多个任务。在Rust中线程用于实现并发执行,然而并发性也带来线程安全和数据竞争的挑战。在这篇博文中,我们将探索Rust中的线程和线程安全,从基础到更高级的技术,以帮助你安全地构建并发应用程序。 理解Rus…
建站知识
2024/11/4 12:11:57
前端的全栈Deno篇(五):与前端保持一致的模块化方案,摆脱ERR_REQUIRE_ESM和mjs、cjs等模块混乱带来的心智负担
在现代JavaScript开发中,模块化系统的演变经历了多次变革,使得前端和后端开发人员在选择模块加载方式时常常感到困惑。尤其是Node.js所采用的CommonJS和ESM(ECMAScript Modules)两种模块体系,以及文件扩展名的多样性&a…
建站知识
2024/11/4 12:10:55
算法训练(leetcode)二刷第十一天 | 144. 二叉树的前序遍历、145. 二叉树的后序遍历、94. 二叉树的中序遍历、102. 二叉树的层序遍历
刷题记录 144. 二叉树的前序遍历思路一:递归前序遍历思路二:迭代前序遍历思路三:统一迭代法 145. 二叉树的后序遍历思路一:递归后序遍历思路二:迭代后序遍历思路三:统一迭代法 94. 二叉树的中序遍历思路一&…
建站知识
2024/11/4 12:09:54
ele-table表格列表内,双击编辑部分信息(el-table组件同理)
说明 ele-table 为公司内部组件,重点看 【主要代码】 部分代码 ele-table表格列表内:双击需要编辑的区域,编辑部分信息 实现 双击需要编辑的数据,展示输入框/日期选择, 展示输入框:修改完之后,按…
建站知识
2024/11/4 12:08:50