从curl_easy_perform()获取数据的libcurl问题

时间:2011-01-20 19:44:30

标签: c curl libcurl

这可能是一个愚蠢的问题,但我如何将<{1}}返回的网站数据强调到我可以使用的变量中。当它执行时,我只是在终端上看到它全部闪烁。顺便说一句,我正在使用C.

有什么想法吗?谢谢。

修改 这是我正在使用的代码(我正在访问Twitter Streaming API,我甚至正确地做了吗?)

curl_easy_perform()

3 个答案:

答案 0 :(得分:5)

要将数据转换为字符串,您需要设置写回调函数:

curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, callback_func);

另外,用于接收数据的字符串变量的地址:

curl_easy_setopt(curl, CURLOPT_WRITEDATA, &str)

回调函数如下所示:

size_t callback_func(void *ptr, size_t size, size_t count, void *stream)
{
      /* ptr - your string variable.
      stream - data chuck you received */

     printf("%.*s", size, (char*)stream);
}

因为您不知道您要接收的数据的总大小,所以您需要进行指针重新分配才能将其转换为字符串。

答案 1 :(得分:0)

另一个答案在使用callback_func的第一个和最后一个参数时似乎是错误的(请参阅the docs)。您收到的实际数据块在第一个参数ptr中,而您通过CURLOPT_WRITEDATA传递的指针是最后一个参数。

我已经制作了一个完整的可编译示例:

#include <stdlib.h>
#include <string.h>
#include <curl/curl.h>

size_t dataSize=0;
size_t curlWriteFunction(void* ptr, size_t size/*always==1*/,
                         size_t nmemb, void* userdata)
{
    char** stringToWrite=(char**)userdata;
    const char* input=(const char*)ptr;
    if(nmemb==0) return 0;
    if(!*stringToWrite)
        *stringToWrite=malloc(nmemb+1);
    else
        *stringToWrite=realloc(*stringToWrite, dataSize+nmemb+1);
    memcpy(*stringToWrite+dataSize, input, nmemb);
    dataSize+=nmemb;
    (*stringToWrite)[dataSize]='\0';
    return nmemb;
}

int main()
{
    char* data=0;
    CURL*const curl=curl_easy_init();
    if(!curl)
    {
        fprintf(stderr, "Failed to init curl");
        return 1;
    }
    curl_easy_setopt(curl, CURLOPT_URL, "https://www.google.com");
    curl_easy_setopt(curl, CURLOPT_WRITEDATA, &data);
    curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, &curlWriteFunction);
    if(curl_easy_perform(curl)!=CURLE_OK)
    {
        fprintf(stderr, "Failed to get web page\n");
        return 1;
    }
    curl_easy_cleanup(curl);

    if(!data)
    {
        fprintf(stderr, "Got no data\n");
        return 1;
    }

    printf("Page data:\n\n%s\n", data);
    free(data);
}

答案 2 :(得分:0)

函数writeDataOnStream具有一个称为缓冲区的空指针,该指针保存所有数据(HTML代码和头文件)

#include <iostream>
#include <string.h>
#include <curl/curl.h>

using namespace std;

//ADD THIS FUNCTION: NOTE the Void pointer "buffer"
size_t writeDataOnStream(void * buffer, size_t size, size_t nbytes, void * stream){
    size_t bytes_written = fwrite( buffer, size, nbytes, (FILE *) stream);
    return bytes_written;
}

int main(void)
{
  CURL *curl;
  CURLcode res;

  curl = curl_easy_init();
  if(curl) {
     curl_easy_setopt(curl, CURLOPT_URL, "http://stream.twitter.com/1/statuses/filter.json?track=http");
     curl_easy_setopt(curl, CURLOPT_USERPWD, "JEggers2:password");

     //APPEND THIS
     curl_easy_setopt(curl, CURLOPT_HEADER, 1L);  //Enable Headers
     curl_easy_setopt(curl, CURLOPT_WRITEFUNCTION, writeDataOnStream);
     curl_easy_setopt(curl, CURLOPT_WRITEDATA, stdout);   //Print data in STDOUT
     //END

     res = curl_easy_perform(curl);
     curl_easy_cleanup(curl);      // always cleanup
  }   
  return 0;
}

CURLOPT_WRITEFUNCTION

CURLOPT_WRITEDATA