php处理10万数据 php处理百万数据方案

在PHP中怎么解决大量数据处理的问题

1、先把VisualBasic 0的安装光盘放入电脑的光盘驱动器中，通常电脑能够自动运行光盘上的安装程序。

创新互联公司专注于金水企业网站建设,自适应网站建设,商城开发。金水网站建设公司,为金水等地区提供建站服务。全流程按需制作网站，专业设计，全程项目跟踪，创新互联公司专业和态度为您提供的服务

2、对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。

3、而且如果使用mysql的话，它也有一个超时时间，运行一串代码时间如果超过配置文件的时间，会被中断不运行。第一种你可以修改php配置文件timeout的运行时间，第二你可以分批处理大量数据，注意是分批处理，就OK了。

4、这个问题在PHP的官方网站上叫缓冲查询和非缓冲查询(Buffered and Unbuffered queries)。PHP的查询缺省模式是缓冲模式。也就是说，查询数据结果会一次全部提取到内存里供PHP程序处理。

5、首先我们准备一个含有数据的Excel表格，表头和数据表中的表字段相对应。在ThinkPHP中引入PHPExcel类库。然后我们编写导入的PHP代码。然后我们编写导出的PHP代码。然后我们进行导出测试发现可以导出即可。

php向mysql插入10万数据

拼接sql语句，每条sql执行20个插入语句。

但是又会出现个问题。如果你是10万条数据在文件里，你要是想用一个INSERT插入，那必须得先把这数据读到内存里，肯定也很慢，而且不稳定。如果你逐条读出插入，对数据库也是个消耗。

我知道你为什么会停下来，因为mysql插入大量数据（1000W）的情况下，执行时间需要的很长，而你八成设定执行时间不限制，如果时间默认超过30秒，那么程序就会自动停下来。

21，1，2015-09-17)} sql = substr($sql，0，strlen($sql)-1)；var_dump($sql)；if($pdo - exec($sql)){ echo 插入成功！echo pdo - lastinsertid()；} 试试吧。

Php如何分批处理数据

直接写一个php，递归执行就差不多了，但是php.ini中，将memory_limit设置大一些，再将mysql.connect_timeout值加大些，max_execution_time设置的值大一些。

你可以查1W条，然后按每个数据100条来分。

而且如果使用mysql的话，它也有一个超时时间，运行一串代码时间如果超过配置文件的时间，会被中断不运行。第一种你可以修改php配置文件timeout的运行时间，第二你可以分批处理大量数据，注意是分批处理，就OK了。

可以设置更新一定数据后跳转到下一步再更新一定数据，大多数cms更新数据都是采用这种方式。无需显示直接读取表内所有数据生成HTML页面时，不论是取出全部数据直接生成有效率，还是一次取出一部分，分别处理有效率。