Dask read_csv是否支持http Web请求?

时间:2018-08-17 08:41:25

标签: dask

import dask.dataframe as dd  
df=dd.read_csv('http://www.example.data')

错误:

  

ValueError:未知协议http

注意:http_proxy和https_proxy都已设置

python版本: 3.6.1

dask版本: 0.14.3

2 个答案:

答案 0 :(得分:0)

我找到了一种希望对他人也有帮助的方法

import pandas as pd
  import dask.dataframe as dd
  pdf=pd.read_csv('url_path')
  ddf=dd.from_pandas(pdf,npartitions=n)

答案 1 :(得分:0)

Dask 确实支持直接从HTTP(S)读取,但对服务器功能和文件大小有一些警告。不支持地球仪。 您的Dask版本较旧over a year,但是-您应该进行更新。