首页 > 2015年07月10日 > 全部分享
HDFS设计理念
HDFS是用户空间文件系统,不像ext3文件系统需要挂载,只用应用程序显式地编译它即可集群中的各个主机只存储文件系统的一个数据子集,当需要存储更多数据块时,只需要添加更多挂载了多个物理磁盘的主机即可实现。文件系统的元数据存储在中央服务器中,提供数据块的目录结构,并..
分类:其他   时间:2015-07-10 16:57:08    收藏:0  评论:0  赞:0  阅读:124
Ubuntu忘记root密码怎么办?下面戳进来瞧一瞧看看啦
进入界面内容:Rwsingleinit=/bin/bash后按ctrl+x保存退出稍等片刻会出下下面界面输入命令:passwd最后成功修改成功
分类:系统服务   时间:2015-07-10 16:56:58    收藏:0  评论:0  赞:0  阅读:330
创建时空表
ifnotexists(select*fromsysobjectswherename=‘zdbc_ypda‘)createtablezdbc_ypda(dabhchar(25)nulldefault‘‘,rqchar(10)nulldefault‘‘,spmchchar(60)nulldefault‘‘,tongymchar(40)nulldefault‘‘,shpggvarchar(30)nulldefault‘‘,jixingchar(20)nulldefault‘‘,youxqchar(10)nulld..
分类:其他   时间:2015-07-10 16:56:28    收藏:0  评论:0  赞:0  阅读:416
HDFS读写流程
数据读取流程:客户端访问NameNode,告知需要读取的文件客户身份确认通过信任的客户端。由其指定用户名通过诸如kerberos等强制认证机制完成检查文件的所有者及其设定的访问权限,如果文件确实存在,而且用户对这个有访问权限。NameNode告知客户端文件的第一个数据块的标号以及..
分类:其他   时间:2015-07-10 16:56:18    收藏:0  评论:0  赞:0  阅读:296
Mysql系列之A------操作系统安装
在MySQL中,一般建议安装操作系统如下:1、选择Minimal安装,自定义2、BaseSystem需要如下包:3、Development需要如下包:
分类:数据库技术   时间:2015-07-10 16:56:08    收藏:0  评论:0  赞:1  阅读:153
【VMCloud云平台】SCSM(九)SCSM创建服务产品
请求产品与服务产品的不同在于,服务产品是由一系列的请求产品组成,如:申请虚拟机资源、更新虚拟机资源、回收虚拟机资源多个请求产品可以组成一个服务产品,服务产品是最终呈现给客户的可视化产物(紫色为已完成施工,红色为施工中,蓝色为计划中)同样用scsm管理员登录SCSM0..
分类:其他   时间:2015-07-10 16:55:58    收藏:0  评论:0  赞:0  阅读:219
备份数据库,保留15天的备份
备份数据库mysqldump-uroot-p12345-S/var/lib/mysql3307/mysql.socktest>/home/backup/test.${DATE}.sql只保留15天备份videlsqlbut15day.shcd/home/backupoldDate=$(date-d"14dayago""+%y%m%d")#保存的天数减1,目前保存15天foriin`find.-maxdepth1-typef|grep\.sql$`;do#匹..
分类:数据库技术   时间:2015-07-10 16:55:48    收藏:0  评论:0  赞:0  阅读:383
计算列建立索引
计算列上的索引只要满足下列要求就可以为计算列定义索引:1、所有权要求2、确定性要求3、精度要求4、数据类型要求5、SET选项要求所有权要求计算列中的所有函数引用必须与表具有相同的所有者。测试环境(MSSQL2012):--自定义所有者为guest的标量函数GetMonthCREATEFUNCTIONgue..
分类:其他   时间:2015-07-10 16:55:38    收藏:0  评论:0  赞:0  阅读:204
linux双网卡绑定
环境:eth0,eth1绑定为bond0,绑定ip为192.168.1.110。操作:1:bondind模块配置。在/etc/modprobe.conf中添加bond模块内容:#vi/etc/modprobe.conf aliasbond0bonding optionsbond0miimon=100mode=0mode0表示负载均衡模式,mode1表示主备模式,默认eth0为主工作网卡2:创建网卡..
分类:系统服务   时间:2015-07-10 16:55:28    收藏:0  评论:0  赞:0  阅读:262
超长距离波分传输技术
超长距离波分传输技术波分传输是现在的光纤网络最常用的骨干网传输方式,波分传输由CWDM/DWDM波分复用器+EDFA光纤放大器+DCM色散补偿器组成,因此波分传输是一个系统性的。今天我就在这里分享一下超长距离波分传输技术。一、超长距离传输的类型和应用环境近年来,波分复用技术..
分类:其他   时间:2015-07-10 16:55:18    收藏:0  评论:0  赞:0  阅读:221
Nginx报错nginx: [emerg] unknown log format "main"
故障描述:在添加Nginx的子配置文件后报错误nginx:[emerg]unknownlogformat"main"无法重新加载,仔细查看配置没有语法错误经过调试才发现是定义log_format的时候写到HTTP模块最下面,导致子配置文件无法识别。错误的写法include/opt/app/nginx/conf/conf.d/*.conf; log_form..
分类:其他   时间:2015-07-10 16:54:58    收藏:0  评论:0  赞:0  阅读:311
Linux文件系统 软链接 硬链接
要理解软硬链接,就先要从ext文件系统的存储原理说起硬盘上最小的存储单位是sector,大小为512bytes.因为数据往往都大于512bytes所以我们把多个sector连起来存储数据,这样做的目的是减少磁盘I/O的负担这个多个连起来的sector叫做block。Block的大小是2的n次方倍512bytes存储空间..
分类:系统服务   时间:2015-07-10 16:54:28    收藏:0  评论:0  赞:0  阅读:221
配置nginx支持thinkphp请求
直接记录配置如下 userwww; worker_processes1; events{ worker_connections1024; } http{ includemime.types; default_typeapplication/octet-stream; keepalive_timeout300; sendfileon; server{ listen80; server_namelocalhost; root/var/www/web; indexindex.phpindex.htm..
分类:Web开发   时间:2015-07-10 16:54:19    收藏:0  评论:0  赞:0  阅读:288
dns本地缓存性能压力测试
结论:1、开启nscd,通过Unixsocket获取解析,10万次解析5秒。2、开启nscd,通过内存cache直接获取解析,10万次解析0.06秒3、使用dnsmasq,通过udp获取解析,10万解析5秒,和通过Unixsocket方式的nscd性能持平。4、无缓存,10万次解析请求,遥遥无期。。。(抓包发现有明显的卡..
分类:其他   时间:2015-07-10 16:54:08    收藏:0  评论:0  赞:0  阅读:232
SQLAlchemy 多数据源 多个数据库
databases.py app.config[‘SQLALCHEMY_DATABASE_URI‘]=globalsSet[‘dblink‘]#默认数据库链接 app.config[‘SQLALCHEMY_BINDS‘]={‘one‘:globalsSet[‘dblink_one‘], ‘two‘:globalsSet[‘dblink_two‘]} models.py __tablename__=‘tname‘ __bind_key__=‘one‘问题:去重使用groupby..
分类:数据库技术   时间:2015-07-10 16:53:48    收藏:0  评论:0  赞:0  阅读:217
总结四:Linux与时间相关的常用命令
总结四:Linux与时间相关的常用命令1、date命令--显示时间或设定时间用法(1):date[options]...[+format]显示+%F,+%D显示日期+%T显示时间+%Y年+%m月+%d日+%H时+%M分+%S秒+%u星期+%s时间戳计时法,从Unix元年(1970-01-0100:00:00)到此刻所经过的秒数[root@www~]#date+%F2015-07-..
分类:系统服务   时间:2015-07-10 16:53:38    收藏:0  评论:0  赞:0  阅读:301
HDFS元数据管理
NameNode将文件系统的元数据以不同的文件保存在本地磁盘中,其中最重要的两个文件是fsp_w_picpath和edits。fsp_w_picpath包含文件系统元数据的完整快照,而edits仅包含元数据的增量修改。NameNode启动后,直接加载fsp_w_picpath到RAM,再通过回放引入edits的增量变化。NameNode..
分类:其他   时间:2015-07-10 16:53:29    收藏:0  评论:0  赞:0  阅读:239
tr命令
tr命令作用tr命令用于对字符集的替换,删除,去重复等语法:tr[–c/d/s/t][SET1][SET2]SET1:字符集1SET2:字符集2-c:complement,用SET2替换SET1中没有包含的字符-d:delete,删除SET1中所有的字符,不转换-s:squeeze-repeats,压缩SET1中重复的字符-t:truncate-set1,将SET1用..
分类:其他   时间:2015-07-10 16:53:18    收藏:0  评论:0  赞:0  阅读:107
如何给Map/Reduce程序传递参数?
前言以前我们启动一个Map/Reduce,经常是利用hadoopjar./xxx.jaryyy.KKinputoutput的方式在SHELL脚本或者命令行直接提交作业。但是最近涉及到的一个项目,需要根据配置动态的启动MR作业,也就是涉及到向MAP,REDUCE处理类传递参数的问题。传递参数的方式最常见的方式:Configurat..
分类:其他   时间:2015-07-10 16:53:08    收藏:0  评论:0  赞:0  阅读:95
MySQL5.7半同步强复制
这里不赘述5.7的安装步骤,主要注意初始化方法和配置文件,有了很大的改动,同时5.7加强了安全性,初始化后会给出密码,第一次登陆要修改密码。OK,废话少说,回到主题,5.7的半同步强复制。半同步复制搭建与5.6版本没有差别,搭建过程略。将主库的半同步时间加长。参数如下图..
分类:数据库技术   时间:2015-07-10 16:52:58    收藏:0  评论:0  赞:0  阅读:290
1879条   上一页 1 ... 34 35 36 37 38 ... 94 下一页
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!