BigData

张某人的学习积累

大数据集群

某Spark程序运行时长略长

作者admin

6 月 11, 2024
  • 查看spark history发现，程序运行并行度为8
  • task数能否再提高？
  • 如何提高运行效率？
  • 如何设置excutor和driver的内存？
  • 如何设置yarn的内存？

作者 admin

张宴银，大数据开发工程师

相关文章

hive 复习 大数据集群 学习笔记 性能调优 数据治理

数据治理 – 常用的hive调优参数

8 月 14, 2024 张, 宴银
大数据集群

Linux中安装python3

6 月 11, 2024 admin
大数据开发bug日记 大数据集群

修改mysql的binlog日志保存天数和大小限制

6 月 11, 2024 admin

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

You missed

业务知识 学习笔记

物流知识讲堂 – 物流业务知识

2025 年 5 月 13 日 admin
数据治理

零基础学习数据治理 – 黎山

2025 年 2 月 27 日 张, 宴银
AI

AI大模型工具

2025 年 2 月 25 日 张, 宴银
AI 机器学习

机器学习 – Numpy

2025 年 2 月 11 日 张, 宴银