自从公司使用大数据产品之后,就很少碰开源的东西了,集群出问题也是跟研发沟通,前些天有朋友问我,怎么能把hive底层的引擎换成spark,我想了想,是不是将hive的数据库共享给spark然后用spark-shell不就好了,后来查了查资料,原来不是这样的,这里面的操作还挺多了。哎,真的是,用了别人产品,开发是方便了,原理懂的就少了,小编一直还沉浸在用一条SQL底层就能转换的
分类:
其他 时间:
2019-05-12 00:35:51
收藏:
0 评论:
0 赞:
0 阅读:
366
#####################################################查看硬盘[root@server0/]#lsblk2.修改硬盘的分区表[root@server0/]#fdisk/dev/vdbn创建新的分区----->回车----->回车---->回车----->在last结束时+2Gp查看分区表n创建新的分区----->回车
分类:
其他 时间:
2019-05-12 00:34:58
收藏:
0 评论:
0 赞:
0 阅读:
129
对马哥教育的第一周感悟 本人专科毕业,在校期间学到的计算机知识比较杂乱,基础不是很好。大家也都知道IT行业竞争是比较激烈的,科技不断地更新换代,发展迅速,所以我们需要不断的学习。对于刚入行的我也是很是迷茫,不知道要从事IT的哪个方向。在这时,我的引路人,也就是我哥,让我选择了马哥教育,为了以后工作能有更好的发展。 马哥这边就像他们所说的一样,“匠心精神,
分类:
其他 时间:
2019-05-12 00:30:47
收藏:
0 评论:
0 赞:
0 阅读:
113
安装准备workstation15proCentOS-7-x86_64-DVD-1810分区规划/dev/sda?200G?磁盘总大小/dev/sda1?mount?/boot?1G/dev/sda2?mount?/?100G/dev/sda3?mount?/data?50G/dev/sda4?extend?50G?扩展分区/dev/sda5?逻辑分区?swap?4G?(通常为内存的2倍)开始安装
分类:
其他 时间:
2019-05-12 00:29:38
收藏:
0 评论:
0 赞:
0 阅读:
162
为什么使用ELK日志分析:一般我们需要进行日志分析场景:直接在日志文件中grep、awk就可以获得自己想要的信息。但在规模较大的场景中,此方法效率低下,面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理,所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集系统,将所有节点上的日志统一收集,管理,访问。准备两台测试服务器:Centos7(1),Cento
分类:
其他 时间:
2019-05-12 00:29:06
收藏:
0 评论:
0 赞:
0 阅读:
118
Linux第一周学习心得在过去的一周里王老师给我们讲了一些计算机基础,以及linux的基本操作:计算机(Computer):俗称电脑,是一种能接收和存储信息,并按照存储在其内部的程序对海量数据进行自动、高速地处理,然后把处理结果输出的现代化智能电子设备发展历史:第一代计算机(1946-1957)电子管时代第二代计算机(1958-1964)晶体管时代第三代计算机(1965-1970)集成电路时代第四
分类:
其他 时间:
2019-05-12 00:27:20
收藏:
0 评论:
0 赞:
0 阅读:
159
我们这次试试用selenium爬取QQ音乐的歌曲评论,我选的歌是《甜甜的》。 https://y.qq.com/n/yqq/song/000xdZuV2LcQ19.html 1 from selenium import webdriver 2 import time 3 4 driver = web ...
分类:
其他 时间:
2019-05-12 00:20:27
收藏:
0 评论:
0 赞:
0 阅读:
296
自动爬取每日的天气,并定时把天气数据和穿衣提示发送到你的邮箱。 之所以选择这个相对朴实的爬虫项目,是因为天气每天都会有变化,那么在学完这一关之后,不出意外,你就可以在明早收到天气信息了。以此,亲身体验程序的作用。 你还可以把每日的天气和温馨的穿衣提示发送到你的恋人、家人、或朋友的邮箱里,这也是传递心 ...
分类:
其他 时间:
2019-05-12 00:20:06
收藏:
0 评论:
0 赞:
0 阅读:
160
组合: “is-a”关系,我们可以使用“继承”。从而实现子类拥有的父类的方法和属性。“is-a” 关系指的是类似这样的关系:狗是动物,dog is animal。狗类就应该继承动物类。 “has-a”关系,我们可以使用“组合”,也能实现一个类拥有另一个类的方法和属性。” has-a”关系指的是这样的 ...
分类:
编程语言 时间:
2019-05-12 00:19:50
收藏:
0 评论:
0 赞:
0 阅读:
146
首先我们安装的Ubuntu18.04默认的apt源是国外的,以至于会出现在终端执行apt install 安装各种软件速度极慢,让人实在抓狂, 又因为在以后的虚拟机使用时会安装很多软件,所以嘛,珍爱生命,我们第一步要做的就是更改apt源. (我可在这走了不少弯路与折磨啊,ok,分享给大家方法) 转载 ...
分类:
其他 时间:
2019-05-12 00:19:33
收藏:
0 评论:
0 赞:
0 阅读:
155
前言 未加 参数使用Uiautomator可以正常使用driver.keyevent()方法,使用Uiautomator2时driver.keyevent()方法报错: selenium.common.exceptions.WebDriverException: Message: An unknow ...
分类:
移动平台 时间:
2019-05-12 00:19:14
收藏:
0 评论:
0 赞:
0 阅读:
192
GraphicsView坐标体系: 在之前添加一张图片的图元构成的场景被显式时,发现呈现在view中的位置是在中间位置的。这是因为这一张图片尺寸较小,它构成的场景小于GraphicsView容器,所以在中间位置上显式。 GraphicsView有两套坐标体系: 1、就是上面提及到的,当场景小于Gra ...
分类:
其他 时间:
2019-05-12 00:18:41
收藏:
0 评论:
0 赞:
0 阅读:
108
如何实现批量截取整个网页完整长截图,批量将网页保存成图片web2pic/webshot/screencapture ...
分类:
Web开发 时间:
2019-05-12 00:18:25
收藏:
0 评论:
0 赞:
0 阅读:
207
参数的几种类型: 位置参数: 函数调用时,实参默认按位置顺序传递,需要个数和形参匹配。按位置传递的参数,称为: “位置参数” 默认值参数: 我们可以为某些参数设置默认值,这样这些参数在传递时就是可选的。称为“默认值参数”。 默认值参数放到位置参数后面。 命名参数: 我们也可以按照形参的名称传递参数, ...
分类:
编程语言 时间:
2019-05-12 00:18:07
收藏:
0 评论:
0 赞:
0 阅读:
136
一:for循环和可迭代对象遍历 for 循环通常用于可迭代对象的遍历。for 循环的语法格式如下: for 变量 in 可迭代对象: 循环体语句 可迭代对象: Python包含以下几种可迭代对象: 1. 序列。包含:字符串、列表、元组 2. 字典 3. 迭代器对象(iterator) 4. 生成器函 ...
分类:
编程语言 时间:
2019-05-12 00:17:50
收藏:
0 评论:
0 赞:
0 阅读:
141
一:format()基本用法 Python2.6 开始,新增了一种格式化字符串的函数 str.format(),它增强了字符串格式化的 功能。 基本语法是通过 {} 和 : 来代替以前的 % 。 format 函数可以接受不限个参数,位置可以不按顺序。 可以通过{索引}/{参数名},直接映射参数值, ...
分类:
编程语言 时间:
2019-05-12 00:17:31
收藏:
0 评论:
0 赞:
0 阅读:
153
今天在做mxonline项目时,注册了用户表进admin后,想在后台添加一个用户试试,结果出现了错误,经过一番搜索发现以下两个解决方法,不过我只用了一种 报错信息: IntegrityError: (1452, u'Cannot add or update a child row: a foreig ...
分类:
其他 时间:
2019-05-12 00:17:14
收藏:
0 评论:
0 赞:
0 阅读:
108