分析下自己写的SQL Server同步工具的性能和缺陷...
分类:
数据库技术 时间:
2014-10-23 12:29:31
收藏:
0 评论:
0 赞:
0 阅读:
274
回顾一下,在前面几章中,就sparkSQL1.1.0基本概念、运行架构、基本操作和实用工具做了基本介绍。
基本概念:
SchemaRDD
RuleTreeLogicPlanParserAnalyzerOptimizerSparkPlan
运行架构:
sqlContext运行架构hiveContext运行架构
基本操作
原生RDD的操作parquet文件的操作j...
分类:
数据库技术 时间:
2014-10-23 12:27:51
收藏:
0 评论:
0 赞:
0 阅读:
292
spark是一个快速的内存计算框架;同时是一个并行运算的框架。在计算性能调优的时候,除了要考虑广为人知的木桶原理外,还要考虑平行运算的Amdahl定理。
木桶原理又称短板理论,其核心思想是:一只木桶盛水的多少,并不取决于桶壁上最高的那块木块,而是取决于桶壁上最短的那块。将这个理论应用到系统性能优化上,系统的最终性能取决于系统中性能表现最差的组件。例如,即使系统拥有充足的内存资源和...
分类:
数据库技术 时间:
2014-10-23 12:26:41
收藏:
0 评论:
0 赞:
0 阅读:
524
mysql 数据库数据订正http://blog.itpub.net/22664653/viewspace-717175/工作过程中时常遇到数据订正的需求,该操作本身不难。操作时要求能够保持回滚~对于能够满足回滚的要求,我通常执行备份表,然后执行变更!如果发送订正错误或者用户要求回滚的时候,就完全恢...
分类:
数据库技术 时间:
2014-10-23 12:21:21
收藏:
0 评论:
0 赞:
0 阅读:
234
某公司内部的sp模板create procedure [usp_my_procedure_name]asbegin set nocount on; declare @trancount int; set @trancount = @@trancount; begin try ...
分类:
数据库技术 时间:
2014-10-23 12:19:01
收藏:
0 评论:
0 赞:
0 阅读:
331
新装的centos6.3+db29.7,数据库导入完了的之后用Toad连接访问之的时候出错了。DB2 Database Error: ERROR [08001] [IBM] SQL30081N A communication error has been detected. Communicatio...
分类:
数据库技术 时间:
2014-10-23 12:17:41
收藏:
0 评论:
0 赞:
0 阅读:
385
C#连接SQL数据库还需要进行验证,Windows验证就是SqlServer服务器使用Windows自带的验证系统。在建立数据库连接时,还需要考虑到地址的有效性。C#连接SQL数据库的七个步骤:1、建立SqlConnection对象;2、指定SqlConnection对象的ConnectionStr...
分类:
数据库技术 时间:
2014-10-23 12:13:41
收藏:
0 评论:
0 赞:
0 阅读:
228
--创建会话临时表create global temporary table tmp_user_session(user_id int, user_name varchar2(20),user_email varchar2(30)) --这句表示 当事务提交时 保留数据on commit prese...
分类:
数据库技术 时间:
2014-10-23 12:12:21
收藏:
0 评论:
0 赞:
0 阅读:
261
Centos6iptables配置Ben2011/12/24[root@localhostben.liu]#serviceiptablesstatusTable:filterChainINPUT(policyACCEPT)numtargetprotoptsourcedestination1ACCEP...
分类:
数据库技术 时间:
2014-10-23 12:11:41
收藏:
0 评论:
0 赞:
0 阅读:
440
9.3 Tempdb的并发阻塞
在介绍Tempdb的并发问题前,先介绍几个比较特殊的数据页。
PFS(Page Free Space),用于标识数据页空间的使用情况,以字节标识,可以表示数据页使用百分比,例如使用百分五十,百分八十,百分九十五以及完全被使用,同时,还有一个字节位表示数据页的类型,例如...
分类:
数据库技术 时间:
2014-10-23 12:11:31
收藏:
0 评论:
0 赞:
0 阅读:
377
SELECT REGEXP_SUBSTR ('first field, second field , third field', '[^,]+', 1,rownum) FROM DUAL CONNECT BY ROWNUM <= LENGTH ('first field, secon...
分类:
数据库技术 时间:
2014-10-23 12:07:21
收藏:
0 评论:
0 赞:
0 阅读:
431
using System;
using System.Collections.Generic;
using System.Configuration;
using System.Data;
using System.Data.SqlClient;
using System.Linq;
using S...
分类:
数据库技术 时间:
2014-10-23 12:05:11
收藏:
0 评论:
0 赞:
0 阅读:
343
http://www.zvolkov.com/clog/2009/07/09/why-nhibernate-updates-db-on-commit-of-read-only-transaction/Always be careful with NULLable fields whenever yo...
分类:
数据库技术 时间:
2014-10-23 12:04:41
收藏:
0 评论:
0 赞:
0 阅读:
323
1 --==============================数据库管理=============================== 2 --创建数据库 3 CREATE DATABASE 测试数据库 4 5 --创建数据库,指定数据文件 6 CREATE DATABASE ...
分类:
数据库技术 时间:
2014-10-23 12:02:41
收藏:
0 评论:
0 赞:
0 阅读:
361
apahce和php的结合方式有两种 1 php作为模块与apache结合 2 php作为一个独立进程与apache结合,这种方式就需要通过反向代理的方式处理php脚本lamp中mysql的分离,一般使用的是第二种方式!参考帖子:http://chenpipi.blog.51cto.com/85.....
分类:
数据库技术 时间:
2014-10-23 12:02:01
收藏:
0 评论:
0 赞:
0 阅读:
394
原文地址:http://www.cppblog.com/issay789/archive/2013/01/05/196967.html一、安装 m4 下载地址:http://files.w3pc.com/download/mysql/m4-1.4.16.tar.gz二、安装 bison 下载地址.....
分类:
数据库技术 时间:
2014-10-23 12:00:31
收藏:
0 评论:
0 赞:
0 阅读:
431
create procedure [spname]([spvariable])asbeginbegin transactionbegin try--具体sql过程commit;end trybegin catchrollback;end catchend
分类:
数据库技术 时间:
2014-10-23 11:57:51
收藏:
0 评论:
0 赞:
0 阅读:
335
MySQLs数据库建外键时自动跑到缩影处,真奇怪MyISAM引擎不支持外键;InnoDB存储引擎支持外键。如何解决的,把表修改成innodb类型吧用的工具是SQLyog Ultimate如图所示:
分类:
数据库技术 时间:
2014-10-23 11:56:11
收藏:
0 评论:
0 赞:
0 阅读:
450
最近工作中需要跨服务器同步数据,在数据库DB1中的表T1插入数据,同时触发T1的触发器(这里暂不讨论触发器的效率问题),向另一台服务器DB2中的相同的一张表T2插入数据,查看了一些资料说,需要打开DTC(分布式交易协调器)协调跨多个数据库、消息队列、文件系统等资源管理器的事务,于是按照网上说的,将自...
分类:
数据库技术 时间:
2014-10-23 11:55:41
收藏:
0 评论:
0 赞:
0 阅读:
391
本文转自:http://www.cnblogs.com/adforce/p/3312252.html完整的Oracle数据库通常由两部分组成:Oracle数据库和数据库实例。 1) 数据库是一系列物理文件的集合(数据文件,控制文件,联机日志,参数文件等); 2) Oracle数据库实例则是一组Ora...
分类:
数据库技术 时间:
2014-10-23 11:52:51
收藏:
0 评论:
0 赞:
0 阅读:
270