Python请求块数据

时间:2017-03-14 12:22:30

标签: python post python-requests

我试图使用python的请求库废弃一个网站,但它正在整理我的数据。有问题的网站有点奇怪,并从POST返回html,当我读取响应时,请求只打印页面的1/5。 继承人代码:

  gulp.task('copy_flolder',function(){
  gulp.src(['./bower_components/jqueryui/**', '!./bower_components/jqueryui/themes/**'])
    .pipe(gulp.dest('your dist folder'))
  });
  gulp.task('copy_only_Themes',['copy_flolder'], function() {
     gulp.src(['./bower_components/jqueryui/themes/base/**', './bower_components/jqueryui/themes/ui-lightness/**'])
    .pipe(gulp.dest('your dist folder'))
 });

此外,如果我使用浏览器API客户端,响应大小为31 KB,请求仅为+ - 8192字节

任何人都知道如何限制这里的回应?

1 个答案:

答案 0 :(得分:0)

您在代码中缺少分页。快速浏览一下页面显示,您可以在POST请求中使用currentPage参数来获取其余页面。 currentPage:1获取第二页,currentPage:2获得第三页。

我在给定的例子中找到的问题:

  • 删除Cookie&标题中的内容长度字段。
  • 删除数据。

发布结果应该是完整的。