我正在开发一个使用cURL lib的C ++程序。当我尝试连接到URL时,这是不正确的或页面已关闭我得到以下错误:
程序终止。这就是问题,因为我要进一步加入其他页面。我只是不会解析和分析破碎的页面,我不想在遇到这样的程序后结束我的程序。
我发布了类似的主题,但它只包含代码片段,因此您很难说出错了,现在我将发布整个代码。
int PageHandler::getCleanAndRepairedPage(string pageURL, string& outDoc)
throw (exception) {
if (find(visitedPages.begin(), visitedPages.end(), pageURL)
!= visitedPages.end()) {
// url has already been visited
outDoc = "";
return VISITED_PAGE_ERROR;
} else { // new url
visitedPages.push_back(pageURL);
char *charURL;
charURL = const_cast<char*> (pageURL.c_str());
CURL *curl;
char curl_errbuf[CURL_ERROR_SIZE];
TidyBuffer output = { 0 };
TidyBuffer errbuf = { 0 };
TidyBuffer docbuf = { 0 };
TidyDoc tdoc = tidyCreate(); // Initialize "document"
tidyOptSetBool(tdoc, TidyForceOutput, yes);
tidyOptSetInt(tdoc, TidyWrapLen, 4096);
tidyBufInit(&docbuf);
int rc = -1;
Bool ok;
curl = curl_easy_init();
curl_easy_setopt( curl, CURLOPT_URL, charURL );
curl_easy_setopt( curl, CURLOPT_ERRORBUFFER, curl_errbuf );
curl_easy_setopt( curl, CURLOPT_WRITEFUNCTION, write_cb );
curl_easy_setopt(curl, CURLOPT_NOPROGRESS, 0L);
curl_easy_setopt(curl, CURLOPT_VERBOSE, 1L);
curl_easy_setopt( curl , CURLOPT_WRITEDATA, &docbuf );
int err;
err = curl_easy_perform(curl);
cout << "curl_easy_perfom return value = " << err << endl;
if (!err) {
ok = tidyOptSetBool(tdoc, TidyXhtmlOut, yes); // Convert to XHTML
if (ok) {
rc = tidySetErrorBuffer(tdoc, &errbuf); // Capture diagnostics
if (rc >= 0) {
rc = tidyParseBuffer(tdoc, &docbuf); // parse the buffer
}
if (rc >= 0) {
rc = tidyCleanAndRepair(tdoc); // Tidy it up!
}
if (rc >= 0) {
rc = tidyRunDiagnostics(tdoc); // Kvetch
}
if (rc > 1) { // If error, force output.
rc = (tidyOptSetBool(tdoc, TidyForceOutput, yes) ? rc : -1);
}
if (rc >= 0) {
rc = tidySaveBuffer(tdoc, &output); // Pretty Print
}
}
if (rc >= 0) {
if (rc > 0) {
//printf("\nDiagnostics:\n\n%s", errbuf.bp);
}
} else {
printf("A severe error (%d) occurred.\n", rc);
}
} else {
printf("%s\n", curl_errbuf);
}
if (err == NO_ERROR) {
string tmp(reinterpret_cast<char const*> (output.bp));
outDoc = tmp;
} else {
outDoc = "";
}
curl_easy_cleanup(curl);
tidyBufFree(&docbuf);
tidyBufFree(&output);
tidyBufFree(&errbuf);
tidyRelease(tdoc);
return err; // err == 0 <=> everything ok!
}
}
控制台输出:
编辑:我忘了说控制台输出发生了什么。我连接到许多页面,无效的URL只是其中之一。在开始时,您可以看到有关它的成功连接和cURL消息,curl_easy_perform的结果等于0,这表明一切都很顺利。下一条消息是关于无效URL的连接,因为你可以看到curl_easy_perform的返回值是6,这是不好的。答案 0 :(得分:1)
“www.wp.pl#”不是合法的URL,它会导致libcurl(错误地)将整个字符串用作主机名,并且您没有任何此类操作并且操作失败。