Question

如何在Scala中执行以下操作：

HTTP Get
HTTP Get With Custom headers
HTTP Post

Answer 1

你可以尝试Dispatch。起初有点难以掌握，但过了一段时间我才开始喜欢它。它适用于HttpClient。

import dispatch.Http
import Http._
// Get
Http(url("http://youruri.com/yo") >>> System.out)
// Get with header
Http(url("http://youruri.com/yo") <:< Map("Accept" -> "application/json") >>> System.out)
// Post
Http(url("http://youruri.com/yo") << yourPostData >|)

Answer 2

您只需使用java.net.URL发送HTTP GET和HTTP POST请求即可。您还可以在HttpURLConnection上设置HTTP请求标头，如下所示：

val con = url.openConnection.asInstanceOf[HttpURLConnection]
con.setRequestProperty("Header", "Value")

我自己写了一个实用程序类，它正是这样做的。你可以在这里看到它：

https://github.com/gruenewa/gruenewa-misc/blob/master/gruenewa-wsclient/src/main/scala/gruenewa/wsclient/Service.scala

Answer 3

这是我自己实现的一个简单的Http客户端，包括cookie管理。也许它对你有用。但我不确定是否可以直接修改标头（可能需要您自己实现URLConnection）。

import java.io.OutputStreamWriter
import java.net.{URLConnection, URL}

class Http(userAgent: String,
           encoding: String,
           HttpRequestTimeout: Int = 15000) {

  import collection.JavaConversions._
  import Implicits.wrapInputStream
  import java.net.URLEncoder.encode

  var cookies = Map[String, String]()

  private def loadCookies(conn: URLConnection) {
    for ((name, value) <- cookies) conn.setRequestProperty("Cookie", name + "=" + value)
  }

  private def saveCookies(conn: URLConnection) {
    conn.getHeaderFields.lift("Set-Cookie") match {
      case Some(cList) => cList foreach { c =>
        val (name,value) = c span { _ != '=' }
        cookies += name -> (value drop 1)
      }
      case None =>
    }
  }

  private def encodePostData(data: Map[String, String]) =
    (for ((name, value) <- data) yield encode(name, encoding) + "=" + encode(value, encoding)).mkString("&")

  def Get(url: String) = {
    val u = new URL(url)
    val conn = u.openConnection()
    conn.setRequestProperty("User-Agent", userAgent)
    conn.setConnectTimeout(HttpRequestTimeout)

    loadCookies(conn)

    conn.connect

    saveCookies(conn)

    conn.getInputStream.mkString
  }

  def Post(url: String, data: Map[String, String]) = {
    val u = new URL(url)
    val conn = u.openConnection

    conn.setRequestProperty("User-Agent", userAgent)
    conn.setConnectTimeout(HttpRequestTimeout)

    loadCookies(conn)

    conn.setDoOutput(true)
    conn.connect

   val wr = new OutputStreamWriter(conn.getOutputStream())
    wr.write(encodePostData(data))
    wr.flush
    wr.close


    saveCookies(conn)

    conn.getInputStream.mkString
  }
}

Answer 4

虽然我很欣赏Dispatch库的所有价值，但语法仍然让我感到困惑。

有人指示我scalaj-http the other day这似乎更容易

Answer 5

关于简单地从URL获取数据。如果您不想使用外部资源，请：

  val in = scala.io.Source.fromURL("http://some.your.url/params?start&here", 
                                   "utf-8")
  for (line <- in.getLines)
    println(line)

对于所有其他内容，您可以从上面的答案中选择您喜欢的任何方法。

Answer 6

根据@Antonin Brettsnajdr的回答，使用POST上传文件的简单版本

val conn = new URL("http://myserver.appspot.com/upload").openConnection()
conn.setDoOutput(true)
conn.connect
val input = new FileInputStream(file)
val buffer = new Array[Byte](2 * 1024 * 1024)
Stream.continually(input.read(buffer)).takeWhile(_ != 1).foreach(conn.getOutputStream.write(_))

Answer 7

您可以使用spray-client。文档缺乏（我花了一些时间来找出how to make GET requests with query parameters）但如果你已经使用喷雾，这是一个很好的选择。我们在AI2超过dispatch时使用它，因为运算符不那么符号，我们已经使用了喷雾/演员。

import spray.client.pipelining._

val url = "http://youruri.com/yo"
val pipeline: HttpRequest => Future[HttpResponse] = addHeader("X-My-Special-Header", "fancy-value") ~ sendReceive

// Get with header
pipeline(Get(url)) map (_.entity.asString) onSuccess { case msg => println(msg) }

// Get with header and parameters
pipeline(Get(Uri(url) withParams ("param" -> paramValue)) map (_.entity.asString) onSuccess { case msg => println(msg) }

// Post with header
pipeline(Post(url, yourPostData)) map (_.entity.asString) onSuccess { case msg => println(msg) }

Answer 8

我使用过Dispatch，Spray Client和Play WS Client Library ......它们都不是简单的使用或配置。所以我创建了一个更简单的HTTP客户端库，它允许您以简单的单行执行所有经典HTTP请求。

查看示例：

import cirrus.clients.BasicHTTP.GET

import scala.concurrent.Await
import scala.concurrent.duration._

object MinimalExample extends App {

  val html = Await.result(Cirrus(GET("https://www.google.co.uk")), 3 seconds)

  println(html)
}

...生产......

<!doctype html><html itemscope="" itemtype="http://schema.org/WebPage" lang="en-GB">...</html>

该库名为Cirrus，可通过Maven Central获取

libraryDependencies += "com.github.godis" % "cirrus_2.11" % "1.4.1"

该文档可在GitHub上找到

https://github.com/Godis/Cirrus

Scala http操作

8 个答案: