首页 > 编程语言 > 详细

【转】Linux中多线程wait使用注意

时间:2017-01-10 11:47:07      阅读:198      评论:0      收藏:0      [点我收藏+]

使用管道生成的while,是无法进行并发管理的

 
技术分享
hdfs dfs -rmr $cdns_hadoop_base_dir/dt=$ydate
hdfs dfs -mkdir $cdns_hadoop_base_dir/dt=$ydate
cat nodeList| while read nodename 
do
    hdfs dfs -mkdir $cdns_hadoop_base_dir/dt=$ydate/node=$nodename
    ls *$nodename*lzo > cdnsFileListLzo
    while read query_log
    do
    (    hdfs dfs -put $query_log $cdns_hadoop_base_dir/dt=$ydate/node=$nodename
        rm $query_log -rf
        yarn jar ${hadooplzojar} ${hadooplzoclass} $cdns_hadoop_base_dir/dt=$ydate/node=$nodename/$query_log ) &
    done < cdnsFileListLzo
wait
done

 

里面用小括号括住代码块。。。

在处理日志的时候,采用管道多线程,怎么都实现不了wait功能,经上篇文章才知道,使用管道生成的while,无法进行并发管理。

修改为上述方式,完美解决问题。。。

 

OVER

【转】Linux中多线程wait使用注意

原文:http://www.cnblogs.com/zhzhang/p/6268517.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!