ds342222 2017-04-20 20:22
浏览 57
已采纳

如何在PHP只有1 GB内存的虚拟专用服务器上迭代4GB CSV文件?

So my case is like this:

I do have a CSV 4GB comma separated value file and my virtual private server has only 1 GB of memory dedicated to PHP.

My question is this:

Is there any way to allocate memory for only one CSV row at a time instead of reading the entire 4GB file into memory?

Example code:

<?php
function getRows($file){
    $handle = fopen($file, 'rb');
    if($handle === false){
        throw new Exception();
    }
    while(feof($handle)===false){
        $line_of_txt=fgetcsv($handle);
    }
    fclose($handle);
    return $line_of_txt;
}
foreach(getRows('DWBankStatmentApril.csv') as $row){
    print_r($row);
}
?>
  • 写回答

1条回答 默认 最新

  • donglu7286 2017-04-22 22:52
    关注

    Got it right now.

     <?php
    function getRows($file){
        $handle = fopen($file, 'rb');
        if($handle === false){
            throw new Exception();
        }
        while(feof($handle)===false){
            yield=fgetcsv($handle);
        }
        fclose($handle);
    
    }
    foreach(getRows('DWBankStatmentApril.csv') as $row){
        print_r($row);
    }
    ?>
    

    The issue was solved by using a generator instead, they are mainly used for forward-only interating large data sets with a tiny amount of system memory.

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题?

悬赏问题

  • ¥15 基于卷积神经网络的声纹识别
  • ¥15 Python中的request,如何使用ssr节点,通过代理requests网页。本人在泰国,需要用大陆ip才能玩网页游戏,合法合规。
  • ¥100 为什么这个恒流源电路不能恒流?
  • ¥15 有偿求跨组件数据流路径图
  • ¥15 写一个方法checkPerson,入参实体类Person,出参布尔值
  • ¥15 我想咨询一下路面纹理三维点云数据处理的一些问题,上传的坐标文件里是怎么对无序点进行编号的,以及xy坐标在处理的时候是进行整体模型分片处理的吗
  • ¥15 CSAPPattacklab
  • ¥15 一直显示正在等待HID—ISP
  • ¥15 Python turtle 画图
  • ¥15 stm32开发clion时遇到的编译问题