相关文章
Gravitino源码分析-SparkConnector 实现原理
Gravitino SparkConnector 实现原理
本文参考了官网介绍，想看官方解析请参考 官网地址 本文仅仅介绍原理 文章目录 Gravitino SparkConnector 实现原理背景知识-Spark Plugin 介绍(1) **插件加载**(2) **DriverPlugin 初始化**(3) **ExecutorPlugin 初始化**(4) *…
建站知识
2025/4/2 2:33:08
Spark数据倾斜的问题
Spark数据倾斜业务背景
Spark数据倾斜表现
Spark的数据倾斜，包括SparkStreaming和Spark SQL，表现主要有下面几种： 1、Excutor lost，OOM，Shuffle过程出错 2、Driver OOM 3、单个Excutor执行器一直在运行，整…
建站知识
2025/3/21 5:15:16
如何理解检索增强生成
检索增强生成（Retrieval-Augmented Generation，RAG）是一种结合信息检索与生成模型的技术，旨在通过动态引入外部知识库，提升生成内容的准确性、专业性和时效性。其核心思想是让模型在生成答案前，先“查阅”相…
建站知识
2025/3/21 5:15:17
centos中使用svn整理
centos中使用svn整理 1. 安装 SVN 客户端2. 常见 SVN 用法及示例2.1 创建 SVN 仓库2.2 检出（Checkout）项目2.3 添加文件到版本控制2.4 提交（Commit）更改2.5 更新（Update）本地工作副本2.6 查看文件状态2.7 查…
建站知识
2025/3/21 5:15:18
Centos的ElasticSearch安装教程
由于我们是用于校园学习，所以最好是关闭防火墙
systemctl stop firewalld
systemctl disable firewalld
个人喜欢安装在opt临时目录，大家可以随意
在opt目录下创建一个es-standonely-docker目录
mkdir es-standonely-docker 进入目录编辑yml文件 se…
建站知识
2025/3/21 5:15:19
鸿蒙HarmonyOS-Navagation基本用法
Navagation基本用法 Navigation组件是路由导航的根视图容器，一般作为Page页面的根容器使用，其内部默认包含了标题栏，内容栏和公工具栏，其中内容区默认首页显示导航内容（Navigation的子组件）或非首页显示&am…
建站知识
2025/3/21 5:15:21
K8S学习之基础十五：k8s中Deployment扩容缩容
deployment扩容缩容比较简单，下面介绍两种常用方法
vi deploy-demo.yaml
kind: Deployment
metadata:name: myapp-v1
spec:replicas: 2selector:matchLabels:app: myappversion: v1template:metadata:labels:app: myappversion: v1spec:containers:- name: myappim…
建站知识
2025/3/21 5:15:23
DeepSeek系列模型技术报告的阅读笔记
DeepSeek系列模型技术报告的阅读笔记
之前仔细阅读了DeepSeek系列模型的主要技术方面内容与发展脉络，以下是DeepSeek系列模型技术报告的笔记，有错误的地方欢迎指正！ 文章目录 DeepSeek系列模型技术报告的阅读笔记GQADeepseek MoEAbstractIn…
建站知识
2025/3/21 5:15:24
