php大数据处理mysql

① PHP中如何更新大量的mysql数据

sql= "UPDATE mydata SET p1='".$pointarr[i][1]."' where ps like '%".$pointarr[i][

每次都去做一次like的全表扫描当然慢了。

建议使用批量更新，减少查询次数。

比如先查询出结果集，然后在内存里去操作字段更新

最后采用 update ...... where id = xxx 这样的更新方法。避免多次全表扫描。

不是最了解你的需求，仅供参考。

② 求php 大量向mysql数据库插入数据最快的方法！！！！

一次性插入1000条数据比一条一条的插入速度会提升N倍，主要技巧就是在写SQL的上面，没啥难度
insert into table1 value (v1, v2, v3), (x1,x2,x3),....

而不是
insert into table1 value (v1, v2, v3);
insert into table1 value (x1,x2,x3);
这样一条一条的插入
希望你能明白

③ php中向mysql取数据，如果数据库中的数据量大于10w，后面的数据就取不到，如何解决

应该是你的数据库配置限制了内存使用量导致的.建议查找下相关mysql配置资料.
直接倒序取一部分,如果可以就应该是配置的问题.
如果慢的话要考虑字段优化
问题需要具体.不铭感的话可以把数据发来我调试一下看看.

④ PHP-大数据量怎么处理优化

大数据的话可以进行以下操作：

1. 减少对数据库的读取，也就是减少调用数据库，
   

2. 进行数据缓存，

3. 利用数据库的自身优化技术，如索引等

4. 精确查询条件，有利于提高查找速度
   

⑤ php post 大数据写入mysql

你可以将10W条分批写入，在循环里加个判断，当数组中的个数达到500或者1000条时，批量写入一次，循环结束后，不管数据有没有达到你设定的这个值，只要有数据都再写入一次就可以了。

⑥ 用PHP连接MYSQL查询大数据出错问题求助

当查询类容过多时会导致php内存溢出，建议加limit分段查询，或着修改php.ini文件的
memory_limit 字段，默认是128M,改成你需要的大小

⑦ 求关于php excel导入大数据到mysql的解决办法

下载 PHPExcel

require_once('./PHPExcel/IOFactory.php');
$filePath='D:/xxx.xlsx';//excel文件名
$objReader=newPHPExcel_Reader_Excel2007();//具体查看（Documentation/Examples/Reader/exampleReader01.php）
$objPHPExcel=$objReader->load($filePath);
$sheetData=$objPHPExcel->getActiveSheet()->toArray(null,true,true,true);
$insql='insertinto表名(x,x,x)valeus';
//遍历数组$sheetData
//如果有标题先删除unset($sheetData[1]);
foreach($sheetDataas$k=>$data){
$insql.='('.$data['A'].','.$data['B'].','.$data['C'].'),';
//一次插入100条数据减少数据库压力
if(($k+1/100)==0){
$insql=rtrim($insql,',').';';//将最后的逗号替换成分好
//插入数据库并且重置字符串$insql
//或者保存到文件中利用source命令插入数据库
}
}

⑧ php+Mysql 大数据导入怎样提高效率

1、采用长连接连接数据库2、一次性读取查询结果到本地（mysqli_result::store_result、pdo::fetchall）

⑨ php+mysql可以处理亿级的数据吗

理论上是可以的，但效率上就有问题了，这么大量的数据一般不会放一张表里面，都会考虑分表，然后考虑索引、数据库主从、服务器配置等，提高查询效率php+mysql可以处理亿级的数据吗