当前位置:  技术问答>linux和unix

多进程写文件速度问题

    来源: 互联网  发布时间:2015-10-28

    本文导语:  linux服务器3系统,起了1000个进程,每个进程的工作就是循环打开100个文件不关闭写入5个字节,然后再循环关闭。 下面列举以下情况 1 1000*100个文件写同一个目录下,例如 /data/目录所有进程完成需要600多秒有时候更...

linux服务器3系统,起了1000个进程,每个进程的工作就是循环打开100个文件不关闭写入5个字节,然后再循环关闭。

下面列举以下情况
1 1000*100个文件写同一个目录下,例如 /data/目录所有进程完成需要600多秒有时候更多
2 1000*100个文件写到1000个目录,进程同时建立目录,即100个文件对应一个目录,例如进程1的100个写到/data/1/目录    所有进程完成时间仅需要20秒
3 1000*100个文件写1000*100个目录,进程同时建立目录 例如进程1地一个文件写入/data/1/1/目录,所有程序完成时间也要600多秒。

请问情况2为什么只用20秒这么少?盘存储文件的方式究竟是怎样的,例如存满了一块再存。。。。,哪里可以获得相关资料?

|
13 区别不大
2 比1/3快, 是操作系统管理硬盘读写机制导致的

|
cpu肯定是分时处理。不同的处理优先级不一样,感觉应该是这方面的原因。

|
不懂,等着看答案

|
1 3  都要让同一个进程访问不连续的 存储空间 来建立文件
2    每个进程可以在连续空间上建立文件

|
这个涉及的是   操作系统   的知识

|
转Linux/Unix

|
提一下, 在文件读写方面, I/O属于共享资源, 多进程并不能显著提高效率. 因为这时, I/O操作可以当作是临界资源.

    
 
 

您可能感兴趣的文章:

  • 单进程和多进程各在何时有速度优势?
  • 关于3种进程间通讯方式的速度比较!!!
  • 进程kjournald占用较多的CPU资源,而且大大影响到程序的运行速度,怎么处理
  • 子进程关闭父进程打开的文件,父进程可以访问该文件吗
  • 我要实现当进程打开文件时,根据文件名判断是否符合要求,符合后处理文件,再把文件返回给进程,怎么实现啊
  • fork一个子进程后在打开一个文件,如何在子进程中使用这个打开的文件描述符号
  • 一进程源源不断地创建文件,另一进程把这些创建的文件抓取并挪走
  • UNIX系统下,进程写文件,写了很大量的文件,但是进程被KILL -9杀掉,系统可以保证写缓冲上的文件写到系统吗?
  • 在shell命令行中敲一个可执行文件,起一个进程pc,这个进程属于shell进程
  • 用kill/killall强杀进程时,如何能让该进程生成core文件?
  • 多进程mmap同一个文件,当一个进程退出时,是否需要unmap
  • 用多进程读写文件的效率为什么会远远不如一个进程直接IO的效率
  • 请教怎么根据进程输出的日记文件内容判断来重起进程?
  • 有没有办法在打开一个文件之前判断当前是否有进程在使用(读或写)该文件
  • 父子进程读写文件问题
  • 文件操作 多个进程打开文件 不加锁 情况如何
  • 问一个关于多进程同时写文件的问题?
  • 两个进程写同一个文件
  • 父子进程共享文件描述符问题
  • 写一个主目录下修改文件内容,用守护进程把这个动作写在日志上
  • 关于用文件实现进程互斥的问题
  • 给一个文件加了写锁,为什么子进程仍然可以read?
  • ***如果有两个进程同时写数据到文件,系统是怎样决定写入顺序的?***
  •  
    本站(WWW.)旨在分享和传播互联网科技相关的资讯和技术,将尽最大努力为读者提供更好的信息聚合和浏览方式。
    本站(WWW.)站内文章除注明原创外,均为转载、整理或搜集自网络。欢迎任何形式的转载,转载请注明出处。












  • 相关文章推荐
  • linux僵尸(zombie)进程介绍及清除
  • 进程Afork进程B,进程Bfor进程C,如果进程C退出发出SIGCHLD,A进程是否可以收到
  • Ubuntu查看内存,进程相关命令介绍
  • 如果一个server进程要fork许多子进程,但不等待子进程终止,也不希望子进程结束后处于僵进程状态直到父进程终止。请问可采用什么方法实现
  • linux下进程占用内存空间详解
  • 在多进程中父进程frok子进程,怎样让子进程自举,脱离父进程,而且父进程不退出
  • Linux进程的内核栈和用户栈概念,相互关系及切换过程
  • fock()开出的子进程的进程ID是否进程ID都大于父进程的?
  • android 4.0 托管进程介绍及优先级和回收机制
  • 父进程等待子进程n秒,如果子进程正常退出,父进程立即继续向下执行,如果子出现进程故障一直不退出,父进程等待n秒后继续向下执行,请问
  • linux下进程间通信:共享内存原理及具体用法举例(基于c/c++语言)
  • 多进程问题 子进程读取内容 读完挂起,父进程写 写入后唤醒子进程
  • 一个进程首先监听一个端口,等到有连接了就新开一个进程,让新进程来处理后面的通讯。请问母进程中已经打开了端口,子进程怎么来使用同一
  • 我在一个父进程中,生成了4个子进程,子进程的优先级是一样的。我现在想结束子进程。该如何做?
  • 子进程wait/waitpid//子进程不结束,父进程会等待子进程吗?
  • 在多进程中父进程frok子进程,怎样让子进程自举,脱离父进程,而且父进程不退出 iis7站长之家
  • 怎样一次杀掉父进程创建的所有子进程?我在父进程中用kill(0,SIGKILL),结果父进程也给干掉了,参数0难道不是表示除自己外的所有同uid的进
  • 进程创建进程组后,然后创建该组中的进程,然后终止。这里的终止....?
  • 如何实现子进程根据父进程的信号来确定是否终止子进程???
  • 高手请教!linux怎样通过pid获取进程信息,如:进程名、进程状态等?
  • 如何通过进程号获得进程的一些信息,例如:进程运行的目录


  • 站内导航:


    特别声明:169IT网站部分信息来自互联网,如果侵犯您的权利,请及时告知,本站将立即删除!

    ©2012-2021,,E-mail:www_#163.com(请将#改为@)

    浙ICP备11055608号-3