如何在scala中连接并读取连续(分块)http流?例如,如果我有这个用python / bottle编写的简单服务:
from gevent import monkey; monkey.patch_all()
import gevent
from bottle import route, run
@route('/stream')
def stream():
while True:
yield 'blah\n'
gevent.sleep(1)
run(host='0.0.0.0', port=8100, server='gevent')
我打算使用akka-stream
来处理数据,我只需要一种方法来检索它。
答案 0 :(得分:3)
这应该有效。基本上,您对生成分块响应的uri执行单个请求。响应实体包含dataBytes流。在分块响应的情况下,这将是块的流。如果是非分块响应(HttpEntity.Strict),这将是一个只有一个块的流。
显然你也可以在实体上明确匹配,看它是否是HttpEntity.Chunked,但通常你也希望保留处理非分块响应的能力。
在实际应用程序中,您不会使用runForeach执行副作用,而是使用dataBytes流进行一些处理。
import akka.actor.ActorSystem
import akka.http.scaladsl.Http
import akka.http.scaladsl.model.{Uri, HttpRequest}
import akka.stream.ActorMaterializer
object ChunkTestClient extends App {
implicit val system = ActorSystem("test")
import system.dispatcher
implicit val materializer = ActorMaterializer()
val source = Uri("https://jigsaw.w3.org/HTTP/ChunkedScript")
val finished = Http().singleRequest(HttpRequest(uri = source)).flatMap { response =>
response.entity.dataBytes.runForeach { chunk =>
println(chunk.utf8String)
}
}
}