在hive里建一个数据库test，在数据库里建了一张表user，然后在Spark程序中使用Spark sql读取这张表 "select * form test.user" 当部署模式是spark stand模式和yarn-client模式时，程序可以正常运行，但yarn-cluster模式就报了找不 ...
分类：
数据库技术 时间：
2017-01-11 22:10:31
收藏：
0 评论：
0 赞：
0 阅读：
327
随着系统用户访问量的不断增加，数据库的频繁访问将成为我们系统的一大瓶颈之一。由于项目前期用户量不大，我们实现单一的数据库就能完成。但是后期单一的数据库根本无法支撑庞大的项目去访问数据库，那么如何解决这个问题呢？实际的应用中，数据库都是读多写少（读取数据的频率高，更新数据的频率相对较少），而读取数据通... ...
分类：
数据库技术 时间：
2017-01-11 18:21:45
收藏：
0 评论：
0 赞：
0 阅读：
368
一、 解压kettle包 1、把包拷到Linux系统下 还有mysql的驱动包 2、解压zip后缀的包 输入命令：unzip /software/pdi-ce-7.0.0.0-25.zip 可以把原来的包删了 输入命令：rm -f pdi-ce-7.0.0.0-25.zip 二、 创建数据库和表 三 ...
分类：
数据库技术 时间：
2017-01-11 15:55:31
收藏：
0 评论：
0 赞：
0 阅读：
916
fsdb dumper的很多task和cmd line option ...
分类：
数据库技术 时间：
2017-01-11 15:51:14
收藏：
0 评论：
0 赞：
0 阅读：
1072
转自：C#操作SQL Server数据库 1、概述 ado.net提供了丰富的数据库操作，这些操作可以分为三个步骤： 第一，使用SqlConnection对象连接数据库； 第二，建立SqlCommand对象，负责SQL语句的执行和存储过程的调用； 第三，对SQL或存储过程执行后返回的“结果”进行操作 ...
分类：
数据库技术 时间：
2017-01-11 15:39:45
收藏：
0 评论：
0 赞：
0 阅读：
326
写在前面：本篇博客讲述的是如何使用pentaho工具快速的将数据库数据导出为Excel文件，以及如何将Excel文件数据导入数据库。 补充：使用此工具并不需要任何一句代码并能快速便捷解决实际问题，此工具功能不仅仅局限这一点，其他功能后续更新。 工具下载：你可以根据你电脑的系统选择不同版本在penta ...
分类：
数据库技术 时间：
2017-01-11 15:37:38
收藏：
0 评论：
0 赞：
0 阅读：
518
使用App.config配置文件封装连接字符串，方便重复使用 >添加App.conifg配置文件 >Add : ConnectionString: >添加引用 封装一个SQLHelper类方便使用 C#using三种使用方法： http://www.cnblogs.com/fashui/archiv ...
分类：
数据库技术 时间：
2017-01-11 15:35:25
收藏：
0 评论：
0 赞：
0 阅读：
287
ToadforMySQL下载地址phpmyadminworkbenchmysqlfrontNavicatromysqlToadforMySQL:http://www.download3k.com/Install-Quest-Software-Toad-for-MySQL.html[root@jacktestphp53]#rpm-ivhphp53-common-5.3.3-23.el5_10.i386.rpm[root@jacktestphp53]#rpm-ivhphp53-pdo-5.3.3-23.e..
分类：
数据库技术 时间：
2017-01-11 14:47:00
收藏：
0 评论：
0 赞：
0 阅读：
265
select*fromtablesWHERETABLE_NAMEin(‘comp_game_calc_start‘,‘rewat‘,‘patport‘,‘rent‘,‘hom‘)andTABLE_SCHEMA=‘abc‘\G;
分类：
数据库技术 时间：
2017-01-11 14:43:13
收藏：
0 评论：
0 赞：
0 阅读：
162
今儿一直在测试服务器的迁移问题，不断地创建表空间、创建数据库、创建用户。后来感觉创建这么多东西太占用磁盘空间，心想删除一下吧，于是，我们执行了dbca命令，将没用的数据库统统删除，将dbf和dmp文件也统统删除了，再后来发现服务无法启动了，连接时会提示oracle initialization or ...
分类：
数据库技术 时间：
2017-01-11 14:32:56
收藏：
0 评论：
0 赞：
0 阅读：
215
项目完成后，需要把历史oracle 的数据库转移mysql 用kettle 转换数据。 步骤： 1、打开spoon.bat，文件-->新建-->转换，点击“主对象树”，DB连接右键“新建”，按要求填上数据库连接信息，不再赘述，需要建两个，一个是oracle（源库），一个是MySQL（目标库） 2、点 ...
分类：
数据库技术 时间：
2017-01-11 14:31:12
收藏：
0 评论：
0 赞：
0 阅读：
466
思路：读取到一个数据库里所有的表名，然后通过sqoop循环导入到hbase 实现过程中发现 不会写shell是个硬伤 最后只能分两步进行操作 1.sel_tabs.sh /usr/bin/mysql -hIp地址 -u用户名 -p密码 -D数据库名<<EOF use select table_nam ...
分类：
数据库技术 时间：
2017-01-11 14:18:06
收藏：
0 评论：
0 赞：
0 阅读：
352
在windows中运行sql server命令需使用sqlcmd命令，这个在安装sql server时会一并安装。 使用sqlcmd进入交互模式下： 之前使用的命令为： 上述命令需要按照顺序执行， 通常比直接使用右键菜单中的“收缩”命令要快很多。 但是，这个命令在2008的版本下并不能运行，限于SQ ...
分类：
数据库技术 时间：
2017-01-11 14:16:15
收藏：
0 评论：
0 赞：
0 阅读：
246
一、Mysql连接数 1、配置Mysql连接数： vim /etc/my.cnf [mysqld]下面修改 max_connections=1000 不写默认为100。 wait_timeout=60 设置超时时间 2、查看当前连接数： show status like '%Threads_conn ...
分类：
数据库技术 时间：
2017-01-11 13:59:54
收藏：
0 评论：
0 赞：
0 阅读：
156
package com.jpzhutech.select; import java.sql.Connection; import java.sql.DriverManager; import java.sql.ResultSet; import java.sql.SQLException; impo... ...
分类：
数据库技术 时间：
2017-01-11 13:00:15
收藏：
0 评论：
0 赞：
0 阅读：
168
import java.sql.Connection;import java.sql.DriverManager;import java.sql.ResultSet;import java.sql.PreparedStatement;import java.sql.ResultSetMetaData ...
分类：
数据库技术 时间：
2017-01-11 12:54:01
收藏：
0 评论：
0 赞：
0 阅读：
246
问题处理方式： 查询：select userenv('language') from dual; 对比电脑环境变量NLS_LANG的值与查询结果是否一致，如果不一致，修改电脑环境变量NLS_LANG 问题解决后通过查询资料对会话字符做了一些总结： 字符集分可为三类： 1、数据库服务器字符集； SEL ...
分类：
数据库技术 时间：
2017-01-11 12:43:29
收藏：
0 评论：
0 赞：
0 阅读：
222
利用 druid 的 sql parser 模块解析 sql 语句 druid 是阿里开源在 github 上面的数据库连接池，里面有一个专门解析 sql 语句的模块 源码位置： https://github.com/alibaba/druid https://github.com/alibaba/ ...
分类：
数据库技术 时间：
2017-01-11 11:58:47
收藏：
0 评论：
0 赞：
0 阅读：
1111
update table a set a.placeOnPer='李琳' where placeOnPer in(select min(placeOnPer) from (select * from table where placeOnPer='李琳') as a group by placeOn ...
分类：
数据库技术 时间：
2017-01-11 11:12:01
收藏：
0 评论：
0 赞：
0 阅读：
176
/*********完整备份作业*********/ –完整备份,每周一次 USE Master GO declare @str varchar(100) set @str='D:\DBtext\jgj\DBABak\FullBak'+replace(replace(replace(convert( ...
分类：
数据库技术 时间：
2017-01-11 10:01:35
收藏：
0 评论：
0 赞：
0 阅读：
283
