相关文章
Spark AQE 导致的 Driver OOM问题
背景
最近在做Spark 3.1 升级 Spark 3.5的过程中,遇到了一批SQL在运行的过程中 Driver OOM的情况,排查到是AQE开启导致的问题,再次分析记录一下,顺便了解一下Spark中指标的事件处理情况
结论
SQLAppStatusListener 类在内存中存…
编程日记
2024/12/22 13:06:18
Qt客服端开发的组件库
Qt 是一个功能丰富的跨平台 C 应用程序框架,它包含了许多用于不同目的的组件库。以下是一些主要的 Qt 组件库,这些库为开发者提供了广泛的工具和功能,以便构建复杂的应用程序。北京木奇移动技术有限公司,专业的软件外包开发公司&a…
编程日记
2024/12/19 5:03:47
Android 11 12 13耳机图标不显示问题解决方案以及整个图标显示流程
目录
1.解决方案
2.原理分析
①.config.xml配置文件
②.StatusBarIconControllerImpl
③.StatusBarIconView类
编程日记
2024/12/15 14:38:37
2024-04学习笔记
1.sql优化-子查询改为外连接
1.改之前
改之前是这样,那针对查出来的每一条数据,都要执行一次箭头所指的函数 执行的sql很慢 2.改之后
改之后是这样,整体做外连接,不用每一条都再执行一次查询 执行时间缩短了好几倍 2.Mybatis中…
编程日记
2024/12/16 19:56:04
JAVA基础---Stream流
Stream流出现背景
背景
在Java8之前,通常用 fori、for each 或者 Iterator 迭代来重排序合并数据,或者通过重新定义 Collections.sorts的 Comparator 方法来实现,这两种方式对 大数量系统来说,效率不理想。
Java8 中添加了一个…
编程日记
2024/12/17 15:41:07
机器学习之sklearn基础教程
Scikit-learn是一个开源的Python机器学习库,提供了各种用于机器学习和数据挖掘的工具和算法。本教程将介绍Scikit-learn的基础知识,包括数据预处理、特征工程、模型训练和评估等方面的内容。
在使用Scikit-learn之前,首先需要安装Scikit-lea…
编程日记
2024/12/18 4:35:48