700字范文,内容丰富有趣,生活中的好帮手!
700字范文 > PHP快速按行读取CSV大文件的封装类分享(也适用于其它超大文本文【PHP】

PHP快速按行读取CSV大文件的封装类分享(也适用于其它超大文本文【PHP】

时间:2024-02-18 17:52:21

相关推荐

PHP快速按行读取CSV大文件的封装类分享(也适用于其它超大文本文【PHP】

后端开发|php教程

PHP,按行读取,大文件,CSV

后端开发-php教程

CSV大文件的读取已经在前面讲述过了(PHP按行读取、处理较大CSV文件的代码实例),但是如何快速完整的操作大文件仍然还存在一些问题。

1、如何快速获取CSV大文件的总行数?

办法一:直接获取文件内容,使用换行符进行拆分得出总行数,这种办法对小文件可行,处理大文件时不可行;

办法二:使用fgets一行一行遍历,得出总行数,这种办法比办法一好一些,但大文件仍有超时的可能;

办法三:借助SplFileObject类,直接将指针定位到文件末尾,通过SplFileObject::key方法获取总行数,这种办法可行,且高效。

具体实现方法:

复制代码 代码如下:

$csv_file = ‘path/bigfile.csv’;

$spl_object = new SplFileObject($csv_file, ‘rb’);

$spl_object->seek(filesize($csv_file));

echo $spl_object->key();

整站源码扒,vscode更改终端ip,ubuntu基本玩法,怎么获取tomcat堆栈,端上爬虫,php between,seo推广策略快速排名,草根社区网站,模板网站搭建lzw

2、如何快速获取CSV大文件的数据?

仍然使用PHP的SplFileObject类,通过seek方法实现快速定位。

复制代码 代码如下:

$csv_file = ‘path/bigfile.csv’;

$start = 100000; // 从第100000行开始读取

$num = 100; // 读取100行

$data = array();

$spl_object = new SplFileObject($csv_file, ‘rb’);

$spl_object->seek($start);

while ($num– && !$spl_object->eof()) {

$data[] = $spl_object->fgetcsv();

$spl_object->next();

}

print_r($data);

3、综合上面两点,整理成一个csv文件读取的类:

复制代码 代码如下:

class CsvReader {

private $csv_file;

private $spl_object = null;

private $error;

稀量币币交易系统源码,vscode如何注释代码,ubuntu 镜像卸载,grpc与tomcat,vs使用sqlite数据库,程序员爬虫最多的方法是,php 上传文件目录,河北seo优化标题报价,手机网站整站模板,php视频课程网站模板下载地址lzw

public function __construct($csv_file = ”) {

if($csv_file && file_exists($csv_file)) {

$this->csv_file = $csv_file;

}

}

海洋CMS影视源码免费,ubuntu的r命令,爬虫原理 网盘,php 彩票遗漏,建阳seo技术lzw

public function set_csv_file($csv_file) {

if(!$csv_file || !file_exists($csv_file)) {

$this->error = ‘File invalid’;

return false;

}

$this->csv_file = $csv_file;

$this->spl_object = null;

}

public function get_csv_file() {

return $this->csv_file;

}

private function _file_valid($file = ”) {

$file = $file ? $file : $this->csv_file;

if(!$file || !file_exists($file)) {

return false;

}

if(!is_readable($file)) {

return false;

}

return true;

}

private function _open_file() {

if(!$this->_file_valid()) {

$this->error = ‘File invalid’;

return false;

}

if($this->spl_object == null) {

$this->spl_object = new SplFileObject($this->csv_file, ‘rb’);

}

return true;

}

public function get_data($length = 0, $start = 0) {

if(!$this->_open_file()) {

return false;

}

$length = $length ? $length : $this->get_lines();

$start = $start – 1;

$start = ($start < 0) ? 0 : $start;

$data = array();

$this->spl_object->seek($start);

while ($length– && !$this->spl_object->eof()) {

$data[] = $this->spl_object->fgetcsv();

$this->spl_object->next();

}

return $data;

}

public function get_lines() {

if(!$this->_open_file()) {

return false;

}

$this->spl_object->seek(filesize($this->csv_file));

return $this->spl_object->key();

}

public function get_error() {

return $this->error;

}

}

调用方法如下:

复制代码 代码如下:

include(‘CsvReader.class.php’);

$csv_file = ‘path/bigfile.csv’;

$csvreader = new CsvReader($csv_file);

$line_number = $csvreader->get_lines();

$data = $csvreader->get_data(10);

echo $line_number, chr(10);

print_r($data);

其实,上述CsvReader类并不只针对CSV大文件,对于其他文本类型的大文件或超大文件同样可用,前提是将类中fgetcsv方法稍加改动为current即可。

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。