Büyük bir dosya satır satır nasıl okunur?

Bir dosyayı satır satır okumak istiyorum, ancak tamamen belleğe yüklemeden.

Dosyam bellekte açılamayacak kadar büyük ve bunu yapmaya çalışırsanız her zaman bellek hatalarından kurtulurum.

Dosya boyutu 1 GB.

fgets()Dosyayı satır satır okumak için işlevi kullanabilirsiniz :

$handle = fopen("inputfile.txt", "r");
if ($handle) {
    while (($line = fgets($handle)) !== false) {
        // process the line read.
    }

    fclose($handle);
} else {
    // error opening the file.
} 

if ($file = fopen("file.txt", "r")) {
    while(!feof($file)) {
        $line = fgets($file);
        # do same stuff with the $line
    }
    fclose($file);
}

Bir dosya için nesne yönelimli bir arayüz sınıfı kullanabilirsiniz - SplFileObject http://php.net/manual/en/splfileobject.fgets.php (PHP 5> = 5.1.0)

<?php

$file = new SplFileObject("file.txt");

// Loop until we reach the end of the file.
while (!$file->eof()) {
    // Echo one line from the file.
    echo $file->fgets();
}

// Unset the file to call __destruct(), closing the file handle.
$file = null;

Büyük bir dosya açıyorsanız, tüm dosyayı belleğe yüklemekten kaçınmak için muhtemelen fgets () ile birlikte Jeneratörler kullanmak istersiniz:

/**
 * @return Generator
 */
$fileData = function() {
    $file = fopen(__DIR__ . '/file.txt', 'r');

    if (!$file)
        die('file does not exist or cannot be opened');

    while (($line = fgets($file)) !== false) {
        yield $line;
    }

    fclose($file);
};

Şöyle kullanın:

foreach ($fileData() as $line) {
    // $line contains current line
}

Bu şekilde, foreach () içindeki tek tek dosya satırlarını işleyebilirsiniz.

Not: Jeneratörler> = PHP 5.5 gerektirir

Dosyayı okumak için arabelleğe alma tekniklerini kullanın.

$filename = "test.txt";
$source_file = fopen( $filename, "r" ) or die("Couldn't open $filename");
while (!feof($source_file)) {
    $buffer = fread($source_file, 4096);  // use a buffer of 4KB
    $buffer = str_replace($old,$new,$buffer);
    ///
}

file()Dosyada bulunan satır dizisini döndüren bir işlev vardır.

foreach(file('myfile.txt') as $line) {
   echo $line. "\n";
}

foreach (new SplFileObject(__FILE__) as $line) {
    echo $line;
}

Açık cevap tüm yanıtlarda yoktu.
PHP tam olarak bu amaçla yapılmış temiz bir akış sınırlayıcı ayrıştırıcı vardır.

$fp = fopen("/path/to/the/file", "r+");
while ($line = stream_get_line($fp, 1024 * 1024, "\n")) {
  echo $line;
}
fclose($fp);

'While (! Feof ... fgets ()' öğelerine dikkat edin, fgets bir hata alabilir (yanlış dönen) ve dosya sonuna ulaşmadan sonsuza kadar döngü yapabilir. döngü sona erer, kontrol edin; doğru değilse, bir hatayla karşılaştınız.

Bu şekilde çok büyük bir dosya (100G'ye kadar test edilmiş) ile yönetiyorum. Ve daha hızlı ()

$block =1024*1024;//1MB or counld be any higher than HDD block_size*2
if ($fh = fopen("file.txt", "r")) { 
    $left='';
    while (!feof($fh)) {// read the file
       $temp = fread($fh, $block);  
       $fgetslines = explode("\n",$temp);
       $fgetslines[0]=$left.$fgetslines[0];
       if(!feof($fh) )$left = array_pop($lines);           
       foreach ($fgetslines as $k => $line) {
           //do smth with $line
        }
     }
}
fclose($fh);

Bu sorunun popüler çözümlerinden biri yeni çizgi karakteriyle ilgili sorunlara sahip olacak. Bir basit ile oldukça kolay sabitlenebilir str_replace.

$handle = fopen("some_file.txt", "r");
if ($handle) {
    while (($line = fgets($handle)) !== false) {
        $line = str_replace("\n", "", $line);
    }
    fclose($handle);
}

SplFileObject büyük dosyalarla uğraşırken kullanışlıdır.

function parse_file($filename)
{
    try {
        $file = new SplFileObject($filename);
    } catch (LogicException $exception) {
        die('SplFileObject : '.$exception->getMessage());
    }
    while ($file->valid()) {
        $line = $file->fgets();
        //do something with $line
    }

    //don't forget to free the file handle.
    $file = null;
}

<?php
echo '<meta charset="utf-8">';

$k= 1;
$f= 1;
$fp = fopen("texttranslate.txt", "r");
while(!feof($fp)) {
    $contents = '';
    for($i=1;$i<=1500;$i++){
        echo $k.' -- '. fgets($fp) .'<br>';$k++;
        $contents .= fgets($fp);
    }
    echo '<hr>';
    file_put_contents('Split/new_file_'.$f.'.txt', $contents);$f++;
}
?>

Dizi dönüşüyle ​​okuma işlevi

function read_file($filename = ''){
    $buffer = array();
    $source_file = fopen( $filename, "r" ) or die("Couldn't open $filename");
    while (!feof($source_file)) {
        $buffer[] = fread($source_file, 4096);  // use a buffer of 4KB
    }
    return $buffer;
}