一、大数据平台 大数据在工作中的应用有三种： 与决策相关，数据科学的领域，了解统计学、算法，这是数据科学家的范畴； 与工程相关，如何实施、如何实现、解决什么业务问题，这是数据工程师的工作。 数据工程师在业务和数据科学家之间搭建起实践的桥梁。本文要分享的大数据平台架构技术选型及场景运用偏向于工程方面。 ...
分类：
其他 时间：
2019-10-02 00:25:23
收藏：
0 评论：
0 赞：
0 阅读：
140
自定义sql和分页的使用: ...
分类：
其他 时间：
2019-10-02 00:24:51
收藏：
0 评论：
0 赞：
0 阅读：
149
"C Primes and Multiplication" 思路：找到 的所有质数因子，用一个 储存起来，然后对于每一个质因子来说，我们要找到它对最后的答案的贡献的大小，即要找到它在最后的乘积中出现了多少次。 求解方法： 另外，该题还需要用到快速幂的技巧。 代码： cpp // Created by ...
分类：
其他 时间：
2019-10-02 00:24:28
收藏：
0 评论：
0 赞：
0 阅读：
126
介绍 的实现效果就是保留左表的全部信息，将右表往左表上拼接，如果拼不上则为 。 除了 以外，还有 、`outer join right join join`的底层原理是如何实现的？具体效果是怎样呈现的？ 只有懂得了底层原理，才能更好的写出性能优越的SQL脚本，提高SQL的执行速度。 主要有3种方式， ...
分类：
数据库技术 时间：
2019-10-02 00:23:33
收藏：
0 评论：
0 赞：
0 阅读：
171
[TOC] wtforms 安装：pip3 install wtforms 使用1： login.html 使用2： register.html 多app应用 flask script 用于实现类似于django中 python3 "manage.py" runserver ...类似的命令 安装： ...
分类：
其他 时间：
2019-10-02 00:23:16
收藏：
0 评论：
0 赞：
0 阅读：
100
Apache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架，最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一，与Hadoop和Storm等其他大数据和MapReduce技术相比，Spark有如下优势： Spark提供了一个全面、统 ...
分类：
其他 时间：
2019-10-02 00:23:00
收藏：
0 评论：
0 赞：
0 阅读：
169
异常处理 捕捉异常可以使用try/except语句。 try/except语句用来检测try语句块中的错误，从而让except语句捕获异常信息并处理。 如果你不想在异常发生时结束你的程序，只需在try里捕获它。 语法： try....except...else的语法： try的工作原理： 1、当开始 ...
分类：
编程语言 时间：
2019-10-02 00:21:59
收藏：
0 评论：
0 赞：
0 阅读：
127
1、异步和同步的概念 同步调用：调用方在调用过程中，持续等待返回结果。 异步调用：调用方在调用过程中，不直接等待返回结果，而是执行其他任务，结果返回形式通常为回调函数。 2 、异步转为同步的概率 需要在异步调用过程中，持续阻塞至获得调用结果。 3、异步调用转同步的5种方式 1、使用wait和noti ...
分类：
编程语言 时间：
2019-10-02 00:21:20
收藏：
0 评论：
0 赞：
0 阅读：
107
设计模式的目的是为了提高代码的整洁性、降低代码的资源占用量。可分为以下三种：创建型设计模式、结构性设计模式、行为设计模式。 ...
分类：
编程语言 时间：
2019-10-02 00:20:47
收藏：
0 评论：
0 赞：
0 阅读：
116
1. Elasticsearch 命令的基本格式 RESTful接口URL的格式： http://localhost:9200/<index>/<type>/[<id>] 其中index、type是必须提供的。id是可选的，不提供es会自动生成。index、type将信息进行分层，利于管理。inde ...
分类：
其他 时间：
2019-10-02 00:20:20
收藏：
0 评论：
0 赞：
0 阅读：
110
慎点！这是一篇很水很水的文章, 抄自[react中文文档](https://zh-hans.reactjs.org/docs/react-component.html), 本文详细介绍了react生命周期函数执行顺序, 以及各生命周期函数的含义和具体作用. ...
分类：
其他 时间：
2019-10-02 00:19:44
收藏：
0 评论：
0 赞：
0 阅读：
99
1、Linux官方镜像 Deepin镜像 https://www.deepin.org/mirrors/releases/ Mint 镜像 https://www.linuxmint.com/mirrors.phpkernel 镜像站： http://mirrors.kernel.org/ Fedo ...
分类：
系统服务 时间：
2019-10-02 00:18:39
收藏：
0 评论：
0 赞：
0 阅读：
124
selenium（自动化测试工具可用于在爬虫中解决js动态加载问题） 简介(本质就是模仿浏览器工作) Selenium 是什么？一句话，自动化测试工具。它支持各种浏览器，包括 Chrome，Safari，Firefox 等主流界面式浏览器，如果你在这些浏览器里面安装一个 Selenium 的插件，那 ...
分类：
Web开发 时间：
2019-10-02 00:18:23
收藏：
0 评论：
0 赞：
0 阅读：
105
MySQL如果删除了所有用户怎么办？ 前提： 1、 判断数据库有没有关闭 2、 判断数据库又没有主从 操作流程： 1、 先关闭数据库 2、 以不验证的方式登陆（无需密码） 3、 进入数据库中在mysql库中授权一个用户 4、 或者向mysql中的user表中插入数据 操作如下： [root@loca ...
分类：
数据库技术 时间：
2019-10-02 00:18:02
收藏：
0 评论：
0 赞：
0 阅读：
109
本人也是新手小白，在创建 Maven 项目的时候几乎踩完了所有的坑。特此总结如下： 1、咱先选中 File -> New -> Maven Project 2、然后如下图 在这里说明一下 Group Id 一般为域名倒过来，Aritifact Id 是你的项目名。 3、点击完 Finish 后会出现 ...
分类：
系统服务 时间：
2019-10-02 00:16:50
收藏：
0 评论：
0 赞：
0 阅读：
128
1. HBase简介 1.1 什么是HBase HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBASE的目标是存储并处理大型的数据，更具体来说是仅需使用普通的硬件配置，就能够处理由成千上万的行和列所组成 ...
分类：
其他 时间：
2019-10-02 00:16:23
收藏：
0 评论：
0 赞：
0 阅读：
120
在安卓手机上抓包 1、将手机root并连上，记得开启开发者选项，并选择传输文件 2、将tcpdump程序拷到手机里面，可以直接在电脑上操作，也可以用adb 3、使用adb操作手机内核，安卓内核基于linux内核，adb就是用来进入这个内核的 win+R，进入adb所在文件夹 adb push c:/ ...
分类：
其他 时间：
2019-10-02 00:16:03
收藏：
0 评论：
0 赞：
0 阅读：
113
TMD写了一篇博客竟然还不够清醒，那就再写一篇睡觉去了 首先一看题目就会发现这可以先套上个 分数规划 ，即我们现在要最小化$|\frac{\sum_{i=1}^{len} w_i}{len} k|$ 考虑二分答案$x$，顺便拆掉绝对值，即$ x\le\frac{\sum_{i=1}^{len} w_ ...
分类：
其他 时间：
2019-10-02 00:15:10
收藏：
0 评论：
0 赞：
0 阅读：
107
Patchava博士说，“医疗保健与银行业不同，更确切地说，这是一项更感性的行业。医疗保健中的人工智能意味着使用非人类系统，如计算机、执行诸如决策等任务，而不需要人类的接触。而在医疗方面，尽管人工智能可以解决一些问题，例如在供应链中，增强智能在临床医学方面更适用。” 至于数据，Patchava解释了 ...
分类：
其他 时间：
2019-10-02 00:14:30
收藏：
0 评论：
0 赞：
0 阅读：
110
参见 HDP2.4安装(五)：集群及组件安装 ，安装配置的spark版本为1.6, 在已安装HBase、hadoop集群的基础上通过 ambari 自动安装Spark集群，基于hadoop yarn 的运行模式。 目录： Spark集群安装 参数配置 测试验证 Spark集群安装： 在ambari ...
分类：
其他 时间：
2019-10-02 00:13:43
收藏：
0 评论：
0 赞：
0 阅读：
107
