背景 需要对埋点数据进行增量清洗,增量更新parquet数据文件,步骤如下: 首次清洗历史所有数据 后续每次取增量数据和上次清洗结果做合并 问题 1、如何判断为首次任务,实现方案: 方案1:判断指定目录下是否存在数据文件 方案2:默认按照增量处理,首次不存在数据文件,通过异常捕获机制全量清洗 2、增 ...
分类:
其他 时间:
2021-06-08 20:22:50
收藏:
0 评论:
0 赞:
0 阅读:
12
说真的,这玩意要是想写出一个在效率上高于malloc的,还挺难。。。 list.h 1 #pragma once 2 3 #ifndef __LC_LIST_H 4 #define __LC_LIST_H 5 6 namespace LC 7 { 8 9 template<typename T> 1 ...
分类:
编程语言 时间:
2021-06-08 20:22:40
收藏:
0 评论:
0 赞:
0 阅读:
22
前言 当我们使用地图进行开发时,利用已经录制好的轨迹进行轨迹回放来检查导航的准确性是十分常用的手段,并且上一篇已经讲完了关于地图使用时GPS轨迹文件的录制,现在对于安卓系统下使用腾讯导航SDK进行轨迹回放做一个分享 前期准备 腾讯导航SDK依赖于腾讯地图SDK、腾讯定位SDK,具体权限的开通需要去l ...
分类:
其他 时间:
2021-06-08 20:22:24
收藏:
0 评论:
0 赞:
0 阅读:
15
之前分析了fastjson,jackson,都依赖于JDNI注入,即LDAP/RMI等伪协议 JNDI RMI基础和fastjson低版本的分析:https://www.cnblogs.com/piaomiaohongchen/p/14780351.html 今天围绕JNDI LDAP注入,RM ...
分类:
其他 时间:
2021-06-08 20:21:57
收藏:
0 评论:
0 赞:
0 阅读:
19
注意:使用PortableGit-2.30.0.2-64-bit进行测试,在windows cmd命令行中测试(非git bash) 设置环境变量,LANG之后的.UTF-8必不可少,否则git log 的输出是utf-8编码,但是会按照GBK进行字符解码显示 set LANG=zh_CN.UTF- ...
分类:
其他 时间:
2021-06-08 20:21:49
收藏:
0 评论:
0 赞:
0 阅读:
12
Ⅰ、js 作用域与 this 一.作用域 1. 全局变量可以直接引用 2. 函数内的普通变量使用 3. 普通函数可以对全局变量做赋值,发生的是一个永久的改变 4. 通过元编程定义的函数,访问相应的变量,因为不是window的,而是内部的,所以会报 not defined 的错误。 var six = ...
分类:
Web开发 时间:
2021-06-08 20:21:37
收藏:
0 评论:
0 赞:
0 阅读:
17
div: <div class="xz"> <!-- 外层最大容器 --> <div class="wrap"> <!--包裹所有元素的容器--> <div class="cube"> <!--前面图片 --> <div class="out_front"> <img src="../assets/ ...
分类:
其他 时间:
2021-06-08 20:21:19
收藏:
0 评论:
0 赞:
0 阅读:
21
这是一个VUEX的修改值的流程,先通过组键使用——请求后台提交到Mutatlons然后通过state修改 首先要通过命令下载vuex,或通过新建目录时就一起安装一个。 示例: 在store,index下新建一个值为dnum:0 然后在需要使用修改dnum值的页面引用 home页面 $store 是在 ...
分类:
其他 时间:
2021-06-08 20:20:58
收藏:
0 评论:
0 赞:
0 阅读:
24
本文介绍了在Linux实例中,MySQL常见的无法启动或启动异常处理方法。 转自:https://help.aliyun.com/knowledge_detail/41106.html#Xcfnz 详细描述 常见问题处理描述,目录如下。 提示:MySQL错误日志通常记录在/alidata/log/m ...
分类:
数据库技术 时间:
2021-06-08 20:20:45
收藏:
0 评论:
0 赞:
0 阅读:
25
使用msf对tomcat测试 1.1 使用nmap命令对目标主机进行扫描。单击桌面空白处,右键菜单选择“在终端中打开”。 1.2 在终端中输入命令“nmap –sV 192.168.1.3”,对目标主机进行端口扫描,发现开放8081端口并且运行着ApacheTomcat/CoyoteJSP engi ...
分类:
其他 时间:
2021-06-08 20:20:36
收藏:
0 评论:
0 赞:
0 阅读:
18
在config文件下的index.js文件中,修改host为: host: '0.0.0.0', 在package.json文件下"scripts"的"dev"值后新增–host 0.0.0.0", "dev": "webpack-dev-server --inline --progress --c ...
分类:
Web开发 时间:
2021-06-08 20:20:20
收藏:
0 评论:
0 赞:
0 阅读:
20
#mac 别名操作Alias ##在mac系统中,目前的mac都是使用zsh这个引擎,所以需要修改.zshrc文件 ##操作步骤 1.cd ~ 2.vim .zshrc 3.添加别名,lg:下面是我对于git操作的一些别名 #git 操作别名 alias gpl="git pull" alias g ...
分类:
系统服务 时间:
2021-06-08 20:20:06
收藏:
0 评论:
0 赞:
0 阅读:
14
import time# 年4位,月2位,日2位,时2位print("{0}{1:0>2d}{2:0>2d}{3:0>2d}".format(*time.localtime())) 网上很多例子抄来抄去都是错误的,这是我自己写的一个例子。记录一下免得又忘。 ...
分类:
编程语言 时间:
2021-06-08 20:19:52
收藏:
0 评论:
0 赞:
0 阅读:
23
一、前期准备 1. 在npmjs.com上注册一个账户 2. 简单搭建本地npm私服 1. 全局安装pm2 2.全局安装verdaccio 3.使用pm2启动verdaccio,地址为http://localhost:4873 4. 使用nrm注册本地registry,命名为local 5. 使用n ...
分类:
Web开发 时间:
2021-06-08 20:19:44
收藏:
0 评论:
0 赞:
0 阅读:
24
我们都知道React 16实现了新的调度策略(Fiber),新的调度策略提到的异步、可中断,其实就是基于浏览器的 requestIdleCallback 和 requestAnimationFrame 这两个API。 requestAnimationFrame就不多说可以看刚刚这篇博客:浅析requ ...
分类:
其他 时间:
2021-06-08 20:19:24
收藏:
0 评论:
0 赞:
0 阅读:
22
一、子依赖 在依赖注入系统中可以构建任意深度的依赖关系,FastAPI会负责进行解析。而一个依赖项依赖于另一个依赖项,那么另一个依赖项就被称为子依赖。比如: from typing import Optional from fastapi import Cookie, Depends, FastAP ...
分类:
Windows开发 时间:
2021-06-08 20:19:00
收藏:
0 评论:
0 赞:
0 阅读:
18
下面这段打印是读use_libhdca_util程序对应pid的map得到的打印: 00110000-00263000 r-xp 00000000 fd:00 2197259 /lib/libc-2.5.so 00263000-00264000 p 00153000 fd:00 2197259 /l ...
分类:
其他 时间:
2021-06-08 20:18:51
收藏:
0 评论:
0 赞:
0 阅读:
20
前言: 好久不用mobx了,今天正好搞了个新的架子,安装了最新的mobx, 按照以前的写法, 居然不生效!!! 最终查阅文档发现: mobx版本6 更新了写法 版本5代码示例: 1 import { observable, action } from 'mobx' 2 3 export defaul ...
分类:
其他 时间:
2021-06-08 20:18:37
收藏:
0 评论:
0 赞:
0 阅读:
21
javaweb上传文件 上传文件的jsp中的部分 上传文件同样可以使用form表单向后端发请求,也可以使用 ajax向后端发请求 1.通过form表单向后端发送请求 <form id="postForm" action="${pageContext.request.contextPath}/Uplo ...
分类:
Web开发 时间:
2021-06-08 20:18:24
收藏:
0 评论:
0 赞:
0 阅读:
19
install chrome for redhat8.4 documents 0、依赖库查询:https://pkgs.org/ 1. reference: https://m.linuxidc.com/Linux/2019-09/160524.htm 2. download "google-chr ...
分类:
其他 时间:
2021-06-08 20:18:07
收藏:
0 评论:
0 赞:
0 阅读:
19