SFTP-файл не загружается полностью с помощью ssh2.sftp и fread


Я работаю над загрузкой файла журнала для отдельной системы, которая требует SFTP для просмотра журналов. Я могу просматривать доступные файлы журналов на сервере и загружать их. Моя проблема заключается в том, что кажется, что загрузка останавливается на 2K, который, в большинстве случаев, является только первыми 10 строками файла журнала. Файлы должны содержать тысячи строк, поскольку они представляют собой ежедневные журналы изменений, внесенных в систему.

Я сделал это в двух отдельных файлах, один загружает все файлы на страницу, где пользователь может выбрать доступные файлы журнала и щелкнуть ссылку для просмотра содержимого в браузере:

$ftp_server = "IP of Server";
$ftp_user_name = "USERNAME";
$ftp_user_pass = "PASSWORD";

$connection = ssh2_connect($ftp_server, 22); 
ssh2_auth_password($connection,$ftp_user_name, $ftp_user_pass);
$sftp = ssh2_sftp($connection); 

$dh = opendir("ssh2.sftp://$sftp//EMSftp/audit_files/"); 

while (($file = readdir($dh)) !== false) { 
    if ($file != '.' && $file != '..'){
        if (strpos($file,"2017-04")){
            echo '/EMSftp/audit_files/'.$file.' | <a href="open_file_curl.php?file='.$file.'" target="_blank">curl</a>
                                                | <a href="open_file.php?file='.$file.'" target="_blank">view</a><br>';
        }
    }
} 

closedir($dh);

Я попытался загрузить файлы двумя различными способами, используя sftp и ssh2:

$file = $_GET['file'];
$local_file = "/var/www/uploads/logs/$file";

if (!file_exists($local_file)){
    $connection = ssh2_connect($ftp_server, 22); 
    ssh2_auth_password($connection,$ftp_user_name, $ftp_user_pass);
    $sftp = ssh2_sftp($connection); 

    $stream = @fopen("ssh2.sftp://$sftp//EMSftp/audit_files/$file", 'r');

    if (! $stream)
        throw new Exception("Could not open file: $remote_file");
    $contents = fread($stream, filesize("ssh2.sftp://$sftp//EMSftp/audit_files/$file"));            
    file_put_contents ($local_file, $contents);
    @fclose($stream);
}

echo '<pre>';
echo file_get_contents($local_file);
echo '</pre>';

И также попытался сделать это с помощью curl. Это только создает пустой файл. Не знаю, чего здесь не хватает. Невозможно добавить содержимое файла в файл.

$file = $_GET['file'];

$local_file = "/var/www/uploads/logs/$file";

fopen($local_file, 'w+');
chmod($local_file, 0777);

$remote = "sftp://$ftp_user_name:$ftp_user_pass@$ftp_server//EMSftp/audit_files/$file";

$curl = curl_init();
curl_setopt($curl, CURLOPT_URL, $remote);
curl_setopt($curl, CURLOPT_PROTOCOLS, CURLPROTO_SFTP);
curl_setopt($curl, CURLOPT_USERPWD, "$ftp_user_name:$ftp_user_pass");
curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
$somecontent = curl_exec($curl);
if (is_writable($local_file)) {

    if (!$handle = fopen($local_file, 'a')) {
         echo "Cannot open file ($local_file)";
         exit;
    }

    if (fwrite($handle, $somecontent) === FALSE) {
        echo "Cannot write to file ($local_file)";
        exit;
    }

    echo "Success, wrote ($somecontent) to file ($local_file)";

    fclose($handle);

} else {
    echo "The file $local_file is not writable";
}
curl_close($curl);

Не уверен, где я что-то упускаю. Интересно, есть ли тайм-аут, связанный с этой процедурой, который я пропускаю. Помощь есть?

1 2

1 ответ:

Это неправильно:

$contents = fread($stream, filesize("ssh2.sftp://$sftp//EMSftp/audit_files/$file"));

Это не гарантирует вам, что весь файл будет прочитан.

Какдокументально :

fread() читает до length байты


Если журналы имеют разумный размер, используйте простые file_get_contents:

$contents = file_get_contents("ssh2.sftp://$sftp//EMSftp/audit_files/$file");

Если нет, считайте файл кусками в цикле:

$stream = @fopen("ssh2.sftp://$sftp//EMSftp/audit_files/$file", 'r');

while (!feof($stream))
{
    $chunk = fread($stream, 8192);
    // write/append chunk to a local file
}

@fclose($stream);