首页 > 2021年05月31日 > 全部分享
Spark 数据倾斜与解决方案
Spark 数据倾斜 数据倾斜的表现: 大部分的task都迅速完成,只有少数几个task运行非常慢,或者在运行过程中报OOM,反复执行几次都是OOM。 数据过量: 由于数据量较大而导致的整体任务运行缓慢,这种情况只需要增加资源即可。 造成数据倾斜的原因: 使用了具有shuffle的算子、数据本身就存 ...
分类:其他   时间:2021-05-31 21:51:32    收藏:0  评论:0  赞:0  阅读:20
NAT的应用与配置
1.NAT概述 NAT英文全称是“Network Address Translation”,中文意思是“网络地址转换”,它是一个IETF(Internet Engineering Task Force, Internet工程任务组)标准,允许一个整体机构以一个公用IP(Internet Protoc ...
分类:其他   时间:2021-05-31 21:51:24    收藏:0  评论:0  赞:0  阅读:33
【力扣】字母异位词分组
来源:力扣(LeetCode) 链接:https://leetcode-cn.com/problems/group-anagrams 给定一个字符串数组,将字母异位词组合在一起。字母异位词指字母相同,但排列不同的字符串。 输入: ["eat", "tea", "tan", "ate", "nat", ...
分类:其他   时间:2021-05-31 21:51:15    收藏:0  评论:0  赞:0  阅读:25
【nginx】配置Nginx实现负载均衡
原文地址:https://www.cnblogs.com/qlqwjy/p/8536779.html 在关于高并发负载均衡一文中已经提到,企业在解决高并发问题时,一般有两个方向的处理策略,软件、硬件,硬件上添加负载均衡器分发大量请求,软件上可在高并发瓶颈处:数据库+web服务器两处添加解决方案,其中 ...
分类:其他   时间:2021-05-31 21:51:07    收藏:0  评论:0  赞:0  阅读:25
splay树板子
//Suplex #include <cstdio> #include <iostream> #include <cstring> #include <algorithm> #include <cmath> #define N 100000 using namespace std; const in ...
分类:其他   时间:2021-05-31 21:50:54    收藏:0  评论:0  赞:0  阅读:29
BUAA_OO第三单元JML规格总结
一、实现规格的设计策略 ? JML规格中的绝大部分函数都可以直接按照规格实现,如基础的get,compare,add等;某些着重于搜索的函数并不能完全按照JML规格对整个数组遍历实现,可以考虑使用更适合的Hashmap存储并实现搜索;在实现一些较为复杂的功能时,JML给出的描述可能不能实现方法或时间 ...
分类:其他   时间:2021-05-31 21:50:39    收藏:0  评论:0  赞:0  阅读:29
react 项目中实现粒子效果
效果如图 1.首先安装依赖 Npm npm i react-particles-js Yarn yarn add react-particles-js 2.在项目中引入 import Particles from 'react-particles-js'; 3.使用 Particles <Parti ...
分类:其他   时间:2021-05-31 21:50:30    收藏:0  评论:0  赞:0  阅读:33
Python的输出格式化与运算符
上周内容回顾 编写python程序的两种方式 1.cmd窗口2.编辑环境 pycharm vscode sublime 编程环境的选择 pycharm 变量与常量 1.变量的定义(底层逻辑) 变量名 赋值符号 变量值 2.变量名的命名规范 数字 字母 下划线的组合 数字不能开头 下划线尽量不要用(后 ...
分类:编程语言   时间:2021-05-31 21:50:15    收藏:0  评论:0  赞:0  阅读:29
jquery 中 tab切换的三种方法
方法一:(如图) 代码 <!doctype html> <html> <head> <meta charset="utf-8"> <title>无标题文档</title> <script src="jquery.js"></script> <style> body{ font-family: 'Mi ...
分类:Web开发   时间:2021-05-31 21:50:04    收藏:0  评论:0  赞:0  阅读:26
Helm 教程
1.概述 Helm是k8s的包管理工具,类似Linux系统常用的 apt、yum等包管理工具。 使用helm可以简化k8s应用部署 2.基本概念 Chart:一个 Helm 包,其中包含了运行一个应用所需要的镜像、依赖和资源定义等,还可能包含 Kubernetes 集群中的服务定义,类似 Homeb ...
分类:其他   时间:2021-05-31 21:49:55    收藏:0  评论:0  赞:0  阅读:22
<unittest学习8>unittest生成测试报告
HTMLTestRunner HTMLTestRunner是Python标准库的unittest模块的扩展。它生成易于使用的HTML测试报告。 下载地址:http://tungwaiyip.info/software/HTMLTestRunner.html 下载完成后直接放到我们代码文件夹中,也可以 ...
分类:其他   时间:2021-05-31 21:49:43    收藏:0  评论:0  赞:0  阅读:31
DAY04 与用户交 互格式化输出与运算符
与用户交互 输入: input # python2与python3的区别 # python3 res = input('please in put your username>>>>:') # 将获取到的变量名赋值给变量名res print(res, type(res), id(res)) # id ...
分类:其他   时间:2021-05-31 21:49:28    收藏:0  评论:0  赞:0  阅读:26
C#进阶语法复习——反射(一)
(1)什么是程序集? (2)元数据 (3)反射的概念 (4)反射的作用 (5)语法相关 声明一个类: Type: 其获得的信息都是在一个内存空间 ******************************************************************* 以下为重点: ...
分类:Windows开发   时间:2021-05-31 21:48:56    收藏:0  评论:0  赞:0  阅读:20
centos7.2升级完毕测试登录ssh以及重启后登录ssh均无问题。
升级包准备: 从官网下载相应的包文件,包括 zlib openssl openssh openssh 下载地址 wget https://openbsd.hk/pub/OpenBSD/OpenSSH/portable/openssh-8.0p1.tar.gz openssl 下载地址 wget ht ...
分类:其他   时间:2021-05-31 21:48:41    收藏:0  评论:0  赞:0  阅读:24
Python元组的用法
#创建元组 tuple1=(3,4,5,6,7,8,9) #元组元素不可直接更改 print(tuple1) #列表关键是中括号[],元组关键是整数和, temp1=() #创建空元组 temp2=(3,) #有逗号隔开即是元组 #元组分片 tuple2=tuple1[:3] print(tuple ...
分类:编程语言   时间:2021-05-31 21:48:30    收藏:0  评论:0  赞:0  阅读:25
Linux cat 命令
cat命令是linux下的一个文本输出命令,通常是用于观看某个文件的内容的;cat主要有三大功能:1.一次显示整个文件。$ cat filename2.从键盘创建一个文件。$ cat > filename只能创建新文件,不能编辑已有文件.3.将几个文件合并为一个文件。$cat file1 file2 ...
分类:系统服务   时间:2021-05-31 21:48:19    收藏:0  评论:0  赞:0  阅读:18
idea实现更改servlet模板
简述 每次我们new一个servlet文件,我们都需要更改servlet的路径和在get方法调用dopost方法,这样就十分麻烦,idea提供了我们修改模板的方法。 模板的修改 在setting中搜索code temp 然后在web->java code templates里找到带注解的servle ...
分类:其他   时间:2021-05-31 21:48:04    收藏:0  评论:0  赞:0  阅读:20
Can't use Subversion command line client:svn
在IDEA中,出现了一个Can't use Subversion command line client:svn的错误 需要重装svn,默认不选择command line client tools,如下图: 然后选择如下图重装。 安装完成后,phpstorm可以使用svn的命令了 ...
分类:其他   时间:2021-05-31 21:47:55    收藏:0  评论:0  赞:0  阅读:25
CentOs7安装node
1、到node官网下载自己需要的压缩包(https://nodejs.org/zh-cn/download/) 下载后按照如下内容安装: [root@localhost ~]# tar -zxvf /usr/local/software/node-v14.7.0-linux-x64.tar.gz - ...
分类:其他   时间:2021-05-31 21:47:39    收藏:0  评论:0  赞:0  阅读:25
Python内置小工具
一、1秒钟启动一个下载服务器在实际工作中,时不时会有这样的一个需求:将文件传给其他同事。将文件传给同事本身并不是一个很繁琐的工作,现在的聊天工具一般都支持文件传输。但是,如果需要传送的文件较多,那么,操作起来就会比较麻烦。Python内置了一个下载服务器就能够显著提升效率了。例如,你的同事要让你传的 ...
分类:编程语言   时间:2021-05-31 21:47:21    收藏:0  评论:0  赞:0  阅读:24
672条   上一页 1 ... 3 4 5 6 7 ... 34 下一页
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!