如何处理大数据?

时间:2015-11-04 06:58:56

标签: php xml api rest

我想通过REST-API将大型XML(~23mb)导入我的CMS。 我通过simpleXML阅读XML - >处理并验证数据 - >为每个节点执行api调用.. 所有semms都可以在较小的测试XML上正常工作..但是当我切换到我想导入的最终XML时,我迟早会在几百行之后得到500服务器错误..似乎网络服务器不能处理这么多请求..

我已经将max_execution_time和memory_size设置为非常高的值,但不费吹灰之力..

有类似问题的经验吗? ..我能做些什么,让它发挥作用?

编辑: 所以我现在尝试流式传输XML,但我不能这样做,因为我必须在将其推送到API之前对传入数据进行排序:/

0 个答案:

没有答案