C++ 获取URL内容的实例
更新时间：2020年12月10日 10:09:08 作者：iYAO
这篇文章主要介绍了C++ 获取URL内容的实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
我就废话不多说了，大家还是直接看代码吧~
以下内容摘自StackOverFlow 链接
#ifndef HTTPUTIL_H
#define HTTPUTIL_H
#include <windows.h>
#include <string>
#include <stdio.h>
using std::string;
#pragma comment(lib,"ws2_32.lib")
void mParseUrl(char *mUrl, string &serverName, string &filepath, string &filename);
SOCKET connectToServer(char *szServerName, WORD portNum);
int getHeaderLength(char *content);
char *readUrl2(char *szUrl, long &bytesReturnedOut, char **headerOut);
char *sendRequest(char szUrl[]) {
WSADATA wsaData;
//char szUrl[] = "http://api.m.taobao.com/rest/api3.do?api=mtop.common.getTimestamp";
long fileSize;
char *memBuffer, *headerBuffer;
memBuffer = headerBuffer = nullptr;
if (WSAStartup(0x101, &wsaData) != 0)
return nullptr;
memBuffer = readUrl2(szUrl, fileSize, &headerBuffer);
printf("returned from readUrl\n");
printf("data returned:\n%s", memBuffer);
if (fileSize != 0) {
//delete (memBuffer);
delete (headerBuffer);
}
WSACleanup();
return memBuffer;
}
void mParseUrl(char *mUrl, string &serverName, string &filepath, string &filename) {
string::size_type n;
string url = mUrl;
if (url.substr(0, 7) == "http://")
url.erase(0, 7);
if (url.substr(0, 8) == "https://")
url.erase(0, 8);
n = url.find('/');
if (n != string::npos) {
serverName = url.substr(0, n);
filepath = url.substr(n);
n = filepath.rfind('/');
filename = filepath.substr(n + 1);
}
else {
serverName = url;
filepath = "/";
filename = "";
}
}
SOCKET connectToServer(char *szServerName, WORD portNum) {
struct hostent *hp;
unsigned int addr;
struct sockaddr_in server;
SOCKET conn;
conn = socket(AF_INET, SOCK_STREAM, IPPROTO_TCP);
if (conn == INVALID_SOCKET)
return NULL;
if (inet_addr(szServerName) == INADDR_NONE) {
hp = gethostbyname(szServerName);
} else {
addr = inet_addr(szServerName);
hp = gethostbyaddr((char *)&addr, sizeof(addr), AF_INET);
}
if (hp == nullptr) {
closesocket(conn);
return NULL;
}
server.sin_addr.s_addr = *((unsigned long *)hp->h_addr);
server.sin_family = AF_INET;
server.sin_port = htons(portNum);
if (connect(conn, (struct sockaddr *)&server, sizeof(server))) {
closesocket(conn);
return NULL;
}
return conn;
}
int getHeaderLength(char *content) {
const char *srchStr1 = "\r\n\r\n", *srchStr2 = "\n\r\n\r";
char *findPos;
int ofset = -1;
findPos = strstr(content, srchStr1);
if (findPos != nullptr) {
ofset = findPos - content;
ofset += strlen(srchStr1);
}
else {
findPos = strstr(content, srchStr2);
if (findPos != nullptr) {
ofset = findPos - content;
ofset += strlen(srchStr2);
}
}
return ofset;
}
char *readUrl2(char *szUrl, long &bytesReturnedOut, char **headerOut) {
const int bufSize = 512;
char readBuffer[bufSize], sendBuffer[bufSize], tmpBuffer[bufSize];
char *tmpResult = nullptr, *result;
SOCKET conn;
string server, filepath, filename;
long totalBytesRead, thisReadSize, headerLen;
mParseUrl(szUrl, server, filepath, filename);
/ step 1, connect //
conn = connectToServer((char *)server.c_str(), 80);
/ step 2, send GET request /
sprintf(tmpBuffer, "GET %s HTTP/1.0", filepath.c_str());
strcpy(sendBuffer, tmpBuffer);
strcat(sendBuffer, "\r\n");
sprintf(tmpBuffer, "Host: %s", server.c_str());
strcat(sendBuffer, tmpBuffer);
strcat(sendBuffer, "\r\n");
strcat(sendBuffer, "\r\n");
send(conn, sendBuffer, strlen(sendBuffer), 0);
// SetWindowText(edit3Hwnd, sendBuffer);
printf("Buffer being sent:\n%s", sendBuffer);
/ step 3 - get received bytes
// Receive until the peer closes the connection
totalBytesRead = 0;
while (1) {
memset(readBuffer, 0, bufSize);
thisReadSize = recv (conn, readBuffer, bufSize, 0);
if ( thisReadSize <= 0 )
break;
tmpResult = (char *)realloc(tmpResult, thisReadSize + totalBytesRead);
memcpy(tmpResult + totalBytesRead, readBuffer, thisReadSize);
totalBytesRead += thisReadSize;
}
headerLen = getHeaderLength(tmpResult);
long contenLen = totalBytesRead - headerLen;
result = new char[contenLen + 1];
memcpy(result, tmpResult + headerLen, contenLen);
result[contenLen] = 0x0;
char *myTmp;
myTmp = new char[headerLen + 1];
strncpy(myTmp, tmpResult, headerLen);
myTmp[headerLen] = NULL;
delete (tmpResult);
*headerOut = myTmp;
bytesReturnedOut = contenLen;
closesocket(conn);
return (result);
}
#endif // HTTPUTIL_H
测试代码：
#include <string>
#include <stdio.h>
#include "HttpUtil.h"
#include <iostream>
using std::string;
using namespace std;
int main() {
char *resData = sendRequest("http://api.m.taobao.com/rest/api3.do?api=mtop.common.getTimestamp");
string str = resData;
cout << endl << str << endl;
delete resData;
return 0;
}
补充知识：C++处理URL的方法，项目有用到，过程记录如下
由于这块需要转换成unicode码，也就是将字符串传换成unicode码，因此需要对输入的字符串做处理，同时又分两种情况，中文 非中文的处理，要区别对待，首先要对输入的字符串进行识别：
int 是不是中文(char *str)
{
char ch;
while (1)
{
ch = *str++;
if (ch == 0)
{
break;
}
if (ch&0x80)
{
if (*str & 0x80)
{
return true;
}
}
else
{
return false;
}
}
return 0;
}
然后要进行相应转换
//---------------------------------------------------------------------
//函数：W2C
//功能：将16位wchar_t转换为 8位char[2]
//参数：w_cn为待转换的16位字符，c_cn[]为转换后的8位字符
//备注：wchar_t的高位字节应该存储在char数组的低位字节
//作者：xxxx
//---------------------------------------------------------------------
void W2C(wchar_t w_cn , char c_cn[]){c_cn[0] = w_cn >> 8 ;c_cn[1] = (char)w_cn ;}
然后主体转换代码：
//-------------------------------------------------------------------
//函数：ToHex
//功能：将16位字符串转换为十六进制字符串
//参数：待转换的字符串，字符串长度
//返回值：转换后的字符串
//作者：xxxx
//-------------------------------------------------------------------
CString ToHex(CString Data, long nDataLength)
{
CString sResult;
for (long nLoop=0; nLoop<nDataLength; nLoop++)
{
wchar_t ch = Data.GetAt(nLoop);
CHAR buff[MAX_PATH] = {0};
LPCWSTR str = &ch;
WideCharToMultiByte(CP_ACP, 0, (LPCWSTR)str, -1, buff, MAX_PATH, 0, 0);
if (IncludeChinese(buff))
{
char c_cn[2]={'0'};
W2C(ch,c_cn);
static const char *hex = "0123456789ABCDEF";
for(int i=0;i<2;i++)
{
unsigned char chHexA = hex[((unsigned char)(c_cn[i]) >> 4) & 0x0f];
unsigned char chHexB = hex[(unsigned char)(c_cn[i]) & 0x0f];
sResult += (char)chHexA;
sResult += (char)chHexB;
}
}
else
{
sResult += ch;
}
}
return sResult;
}
到这里基本上结束了~也查看了一些资料，虽说这个功能简单，但是过程有点曲折。但总算完成了，留个纪念吧~希望对其他人有帮助~希望大家多多支持脚本之家。
相关文章
这篇文章主要为大家详细介绍了OpenCV利用背景建模检测运动物体，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2018-01-01
这篇文章主要介绍了C++ 如何实现顺序栈(使用模板类)，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教2022-07-07
这篇文章主要给大家分享的是C++内存管理的详细内容学习，下面文章围绕C++内存管理的相关资料展开具体学习内容,需要的朋友可以参考一下，希望对你有所帮助2021-11-11
C语言条件控制语句选择结构，是属于计算机的语言编辑，有在C语言条件控制中的语句选择结构的存在，即是C语言条件控制语句选择结构，循环控制语句是一个基于C语言的编程语句，该语句主要有while循环语句、do-while循环语句和for循环语句来实现循环结构2022-08-08
这篇文章主要介绍了 C++ 类的继承与派生实例详解的相关资料,需要的朋友可以参考下2017-06-06
这篇文章主要为大家详细介绍了C语言实现简易的三子棋小游戏，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2022-08-08
这篇文章主要为大家详细介绍了C++实现简单信息管理系统，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2022-03-03
这篇文章主要介绍了C语言实现统计字符串单词数，代码非常的简洁，有需要的小伙伴快来参考下。2015-03-03
本文主要介绍了数据结构-堆，文中通过图片和大量的代码讲解的非常详细，需要学习的朋友可以参考下这篇文章，希望可以帮助到你2021-08-08
这篇文章主要介绍了减小VC6编译生成的exe文件的大小的方法,需要的朋友可以参考下2015-01-01
最新评论