本文分类：news发布日期：2024/12/28 10:02:40
相关文章
大数据面试题 —— Spark数据倾斜及其解决方案
目录 1 调优概述2 数据倾斜发生时的现象3 数据倾斜发生的原理4 如何定位导致数据倾斜的代码4.1 某个 task 执行特别慢的情况4.2 某个 task 莫名其妙内存溢出的情况5 查看导致数据倾斜的 key 的数据分布情况6 数据倾斜的解决方案6.1 使用 Hive ETL 预处理数据6.2 过滤少数导致倾…
建站知识
2024/12/27 21:47:53
【计算机科学速成课】笔记二
笔记一 文章目录 7.CPU阶段一：取指令阶段阶段二：解码阶段阶段三：执行阶段 8.指令和程序9.高级CPU设计——流水线与缓存10.早期编程方式11.编程语言发展史12.编程原理13.算法入门14.数据结构15.阿兰图灵 7.CPU
CPU也叫中央处理器，…
建站知识
2024/11/25 22:59:10
设备能源数据采集新篇章
在当今这个信息化、智能化的时代，设备能源数据的采集已经成为企业高效运营、绿色发展的重要基石。而今天，我们要向大家介绍的就是一款颠覆传统、引领未来的设备能源数据采集神器——HiWoo Box网关！
一、HiWoo Box网关：一站式解决…
建站知识
2024/12/25 21:55:37
垃圾的flinkcdc
在 MySQL 中，创建表时使用反引号 将表名或字段名括起来的作用是： 保留字和关键字: 使用反引号可以避免使用MySQL的保留字和关键字作为表名或字段名时产生的冲突。比如，你可以创建一个名为 select 或 order 的表： sqlCopy Code C…
建站知识
2024/12/21 18:27:35
Linux学习之Tcp与Udp
目录 UDP
Udp协议的格式
UDP的传输特性
UDP的缓冲区 基于UDP的应用层协议 TCP协议
TCP的报文格式
1.ACK确认应答机制
2.超时重传
3.TCP的链接管理机制
为什么要三次握手呢？
理解TIME_WAIT状态 流量控制（可靠性效率）
滑动窗口
拥塞…
建站知识
2024/12/17 11:00:36
Spark运行流程及架构设计
spark中一个应用程序application会在任务控制节点上启动一个Driver程序，并且这个Driver程序会创建一个SparkContext对象（类似于mapreduce中的applicationManager）。该对象有三个任务，1是向资源管理器clusterManager注册࿰…
建站知识
2024/12/26 13:55:49
Excel 批量获取sheet页名称，并创建超链接指向对应sheet页
参考资料
用GET.WORKBOOK函数实现excel批量生成带超链接目录且自动更新 目录 一. 需求二. 名称管理器 → 自定义获取sheet页名称函数三. 配合Index函数，获取所有的sheet页名称四. 添加超链接，指向对应的sheet页 一. 需求
⏹有如下Excel表，需…
建站知识
2024/12/20 20:18:15
ES数据存储与查询基本原理
Elasticsearch（ES）简介
Elasticsearch（ES）是一个分布式、可扩展、近实时的搜索和分析引擎，它基于Lucene，设计用于云计算中，处理大规模文档检索和数据分析任务，常用于实现内部搜索引…
建站知识
2024/12/23 18:12:26
