php上传处理20万数据 php处理大量数据

求php怎么实现web端上传超大文件

加大PHP上传文件大小的限制，是通过修改PHP.INI文件来实现，但是这个支持是有限度的，因为WEB协议本为下载而生，超大文件的上传是FTP的专利。

专业领域包括成都网站建设、网站建设、商城网站建设、微信营销、系统平台开发， 与其他网站设计及系统开发公司不同，成都创新互联的整合解决方案结合了帮做网络品牌建设经验和互联网整合营销的理念，并将策略和执行紧密结合，为客户提供全网互联网整合方案。

PHP用超级全局变量数组$_FILES来记录文件上传相关信息的。

1.file_uploads=on/off

是否允许通过http方式上传文件

2.max_execution_time=30

允许脚本最大执行时间，超过这个时间就会报错

3.memory_limit=50M

设置脚本可以分配的最大内存量，防止失控脚本占用过多内存，此指令只有在编译时设置了

--enable-memory-limit标志的情况下才生效

4.upload_max_filesize=20M

允许上传文件的最大大小，此指令必须小于post_max_size

5.upload_tmp_dir

上传文件临时存放目录

6.post_max_size=30M

允许post方式可以接受最大大小

$_FILES['myFile']['name'] 客户端上次文件的原始名称。

$_FILES['myFile']['type'] 文件的 MIME 类型，需要浏览器提供该信息的支持，例如"image/gif"。

$_FILES['myFile']['size'] 已上传文件的大小，单位为字节。

$_FILES['myFile']['tmp_name'] 文件被上传后在服务端储存的临时文件名，一般是系统默认。可以在php.ini的upload_tmp_dir 指定，但 用 putenv() 函数设置是不起作用的。

$_FILES['myFile']['error'] 和该文件上传相关的状态码。['error'] 是在 PHP 4.2.0 版本中增加的。下面是它的说明：(它们在PHP3.0以后成了常量)

UPLOAD_ERR_OK

值：0; 没有错误发生，文件上传成功。

UPLOAD_ERR_INI_SIZE

值：1; 上传的文件超过了 php.ini 中 upload_max_filesize 选项限制的值。

UPLOAD_ERR_FORM_SIZE

值：2; 上传文件的大小超过了 HTML 表单中 MAX_FILE_SIZE 选项指定的值。

UPLOAD_ERR_PARTIAL

值：3; 文件只有部分被上传。

UPLOAD_ERR_NO_FILE

值：4; 没有文件被上传。

值：5; 上传文件大小为0.

文件被上传结束后，默认地被存储在了临时目录中，这时您必须将它从临时目录中删除或移动到其它地方，如果没有，则会被删除。

也就是不管是否上传成功，脚本执行完后临时目录里的文件肯定会被删除。

附：修改PHP上传文件大小限制的方法

1. 一般的文件上传,除非文件很小.就像一个5M的文件,很可能要超过一分钟才能上传完.

但在php中,默认的该页最久执行时间为 30 秒.就是说超过30秒,该脚本就停止执行.

这就导致出现 无法打开网页的情况.这时我们可以修改 max_execution_time

在php.ini里查找

max_execution_time

默认是30秒.改为

max_execution_time = 0

0表示没有限制

2. 修改 post_max_size 设定 POST 数据所允许的最大大小。此设定也影响到文件上传。

php默认的post_max_size 为2M.如果 POST 数据尺寸大于 post_max_size $_POST 和 $_FILES superglobals 便会为空.

查找 post_max_size .改为

post_max_size = 150M

3. 很多人都会改了第二步.但上传文件时最大仍然为 8M.

为什么呢.我们还要改一个参数upload_max_filesize 表示所上传的文件的最大大小。

查找upload_max_filesize,默认为8M改为

upload_max_filesize = 100M

另外要说明的是,post_max_size 大于 upload_max_filesize 为佳.

php 如何将一个13m（60万行数据）的txt文件优雅的写入到数据库中

13M并不是太大，先全部存入数组（内存），然后使用SQL一次性导入（最好使用事务处理，数据库底层会自动优化）；必要时可在导入前检查数据完备性，反正要点是尽量减少磁盘操作（太耗时）。

PHP效率问题，上万条数据一次性取出？还是分开取出处理？

显示数据还是更新（update）数据，都是先处理一部分数据，完成后再处理下一步数据 更有效率。

显示数据取出部分数据的方法最常用的是分页方式，分页是仅读取前面的几十页信息，读取数据库是很快的，可以比较一下10条和100条的显示速度，差很远。

更新（update）数据也不能一次性处理大量数据，那样经常会出现页面死定的情况，可以设置更新一定数据后跳转到下一步再更新一定数据，大多数cms更新数据都是采用这种方式。

无需显示直接读取表内所有数据生成HTML页面时，不论是取出全部数据直接生成有效率，还是一次取出一部分，分别处理有效率。

php如何导入几十万数据

现在一些web程序的备份功能其实真的是摆设，读取数据，拼装写文件，

要是数据多点的话就死悄悄了，这个工作还是要用专门的dump工具做。

希望回答对你有帮助，如果有疑问，请继续追问

答题不易，互相理解，您的采纳是我前进的动力，感谢您。

PHP文件上传设置问题

PHP上传文件非常简单，你需要一个上传的HTML文件（FORM），一个保存文件的PHP文件（保存），一个查询上传文件清单的工具。

真正实现完整功能的上传和管理需要使用数据库，我的网站俱乐部里面上传文件一开放很快就传了几万个文件。

最简单的方法不用数据库，可以用一个PHP文件实现，这个文件列出指定目录下的所有文件，然后提供一个上传的FORM，最后检测是否提交了FORM数据，是就保存文件到指定位置。

--------------------------------------------------------------------------------

文件上传处理

POST 方法上传

本特性可以使用户上传文本和二进制文件。用 PHP 的认证和文件操作函数，可以完全控制允许哪些人上传以及文件上传后怎样处理。

PHP 能够接受任何来自符合 RFC-1867 标准的浏览器（包括 Netscape Navigator 3 及更高版本，打了补丁的 Microsoft Internet Explorer 3 或者更高版本）上传的文件。

相关的设置: 请参阅 php.ini 的 file_uploads，upload_max_filesize，upload_tmp_dirpost_max_size 以及 max_input_time 设置选项。

请注意 PHP 也支持 PUT 方法的文件上传，Netscape Composer 和 W3C 的 Amaya 客户端使用这种方法。请参阅对 PUT 方法的支持以获取更多信息。

例 39.1. 文件上传表单

可以如下建立一个特殊的表单来支持文件上传：

!-- The data encoding type, enctype, MUST be specified as below --

form enctype="multipart/form-data" action="__URL__" method="POST"

!-- MAX_FILE_SIZE must precede the file input field --

input type="hidden" name="MAX_FILE_SIZE" value="30000" /

!-- Name of input element determines name in $_FILES array --

Send this file: input name="userfile" type="file" /

input type="submit" value="Send File" /

/form

以上范例中的 __URL__ 应该被换掉，指向一个真实的 PHP 文件。

MAX_FILE_SIZE 隐藏字段（单位为字节）必须放在文件输入字段之前，其值为接收文件的最大尺寸。这是对浏览器的一个建议，PHP 也会检查此项。在浏览器端可以简单绕过此设置，因此不要指望用此特性来阻挡大文件。实际上，PHP 设置中的上传文件最大值是不会失效的。但是最好还是在表单中加上此项目，因为它可以避免用户在花时间等待上传大文件之后才发现文件过大上传失败的麻烦。

注意: 要确保文件上传表单的属性是 enctype="multipart/form-data"，否则文件上传不了。

全局变量 $_FILES 自 PHP 4.1.0 起存在（在更早的版本中用 $HTTP_POST_FILES 替代）。此数组包含有所有上传的文件信息。

以上范例中 $_FILES 数组的内容如下所示。我们假设文件上传字段的名称如上例所示，为 userfile。名称可随意命名。

$_FILES['userfile']['name']

客户端机器文件的原名称。

$_FILES['userfile']['type']

文件的 MIME 类型，如果浏览器提供此信息的话。一个例子是“image/gif”。不过此 MIME 类型在 PHP 端并不检查，因此不要想当然认为有这个值。

$_FILES['userfile']['size']

已上传文件的大小，单位为字节。

$_FILES['userfile']['tmp_name']

文件被上传后在服务端储存的临时文件名。

$_FILES['userfile']['error']

和该文件上传相关的错误代码。此项目是在 PHP 4.2.0 版本中增加的。

文件被上传后，默认地会被储存到服务端的默认临时目录中，除非 php.ini 中的 upload_tmp_dir 设置为其它的路径。服务端的默认临时目录可以通过更改 PHP 运行环境的环境变量 TMPDIR 来重新设置，但是在 PHP 脚本内部通过运行 putenv() 函数来设置是不起作用的。该环境变量也可以用来确认其它的操作也是在上传的文件上进行的。

使文件上传生效

请查阅函数 is_uploaded_file() 和 move_uploaded_file() 以获取进一步的信息。以下范例处理由表单提供的文件上传。

?php

// In PHP versions earlier than 4.1.0, $HTTP_POST_FILES should be used instead

// of $_FILES.

$uploaddir = '/var/www/uploads/';

$uploadfile = $uploaddir . basename($_FILES['userfile']['name']);

echo 'pre';

if (move_uploaded_file($_FILES['userfile']['tmp_name'], $uploadfile)) {

echo "File is valid, and was successfully uploaded.\n";

} else {

echo "Possible file upload attack!\n";

}

echo 'Here is some more debugging info:';

print_r($_FILES);

print "/pre";

?

接受上传文件的 PHP 脚本为了决定接下来要对该文件进行哪些操作，应该实现任何逻辑上必要的检查。例如可以用 $_FILES['userfile']['size'] 变量来排除过大或过小的文件，也可以通过 $_FILES['userfile']['type'] 变量来排除文件类型和某种标准不相符合的文件，但只把这个当作一系列检查中的第一步，因为此值完全由客户端控制而在 PHP 端并不检查。自 PHP 4.2.0 起，还可以通过 $_FILES['userfile']['error'] 变量来根据不同的错误代码来计划下一步如何处理。不管怎样，要么将该文件从临时目录中删除，要么将其移动到其它的地方。

如果表单中没有选择上传的文件，则 PHP 变量 $_FILES['userfile']['size'] 的值将为 0，$_FILES['userfile']['tmp_name'] 将为空。

如果该文件没有被移动到其它地方也没有被改名，则该文件将在表单请求结束时被删除。

上传一组文件

PHP 的 HTML 数组特性甚至支持文件类型。

form action="" method="post" enctype="multipart/form-data"

pPictures:

input type="file" name="pictures[]" /

input type="file" name="pictures[]" /

input type="file" name="pictures[]" /

input type="submit" value="Send" /

/p

/form

?php

foreach ($_FILES["pictures"]["error"] as $key = $error) {

if ($error == UPLOAD_ERR_OK) {

$tmp_name = $_FILES["pictures"]["tmp_name"][$key];

$name = $_FILES["pictures"]["name"][$key];

move_uploaded_file($tmp_name, "data/$name");

}

}

?