C++ LibCurl实现Web隐藏目录扫描

LibCurl是一个开源的免费的多协议数据传输开源库，该框架具备跨平台性，开源免费，并提供了包括HTTP、FTP、SMTP、POP3等协议的功能，使用libcurl可以方便地进行网络数据传输操作，如发送HTTP请求、下载文件、发送电子邮件等。它被广泛应用于各种网络应用开发中，特别是涉及到数据传输的场景。本章将是《C++ LibCurl 库的使用方法》的扩展篇，在前一篇文章中我们简单实现了LibCurl对特定页面的访问功能，本文将继续扩展该功能，并以此实现Web隐藏目录扫描功能。

读入文件到内存

首先通过读取字典文件，将每行内容与指定的根网址进行拼接，生成新的URL列表，此处GetCombinationURL 函数的目标是根据传入的根网址和字典文件，生成一个包含拼接后的URL列表的std::vector<std::string>。

函数的实现主要包括以下步骤：

  • 打开指定的字典文件，逐行读取其中的内容。
  • 对于每一行内容，去除行末的换行符，并使用sprintf将根网址与当前行内容拼接，形成完整的URL。
  • 将生成的URL加入std::vector`中。
  • 返回包含所有URL的std::vector。

在main函数中，调用GetCombinationURL并将生成的URL列表输出到控制台。代码使用了C++中的文件操作和字符串处理，利用std::vector存储生成的 URL，以及通过std::cout在控制台输出结果。

#include <iostream>
#include <string>
#include <vector>using namespace std;// 传入网址和字典名
std::vector<std::string> GetCombinationURL(char root[64],char dict_file[128])
{char buffer[512] = { 0 };char this_url[1024] = { 0 };std::vector<std::string> ref;FILE *fp = fopen(dict_file, "r");if (fp != NULL){while (feof(fp) == 0){fgets(buffer, 1024, fp);              // 每次读入一行strtok(buffer, "\n");                 // 去掉行末的 \nbuffer[strcspn(buffer, "\n")] = 0;    // 替换所有 \nsprintf(this_url, "%s%s", root, buffer);ref.push_back(this_url);}}return ref;
}int main(int argc, char *argv[])
{std::vector<std::string> ref = GetCombinationURL("https://www.xxx.com", "./save.log");for (int x = 0; x < ref.size(); x++){std::cout << "拼接URL: " << ref[x] << std::endl;}std::system("pause");return 0;
}

我们需要新建一个save.log文件，每行放入一个子目录地址，例如放入；

/index.php
/phpinfo.php

运行后输出效果如下图所示；

增加默认多线程

首先，我们引入了libcurl库，代码中使用libcurl提供的函数来执行HTTP请求，获取返回状态码，并通过多线程处理多个URL。

  • GetPageStatus 函数：用于获取指定URL的HTTP状态码。使用libcurl进行初始化、设置请求头、执行请求，并最终获取返回的状态码。
  • ThreadProc 函数：线程执行函数，通过调用GetPageStatus函数获取URL的状态码，并在控制台输出。如果状态码为200，则将URL记录到日志文件中。
  • main 函数：主函数读取输入的URL列表文件，逐行读取并构造完整的URL。通过CreateThread创建线程，每个线程处理一个URL。同时使用互斥锁确保线程安全。

用户可以通过在命令行传递两个参数，第一个参数为根网址，第二个参数为包含URL列表的文件路径。程序将读取文件中的每个URL，通过libcurl发送HTTP 请求，获取状态码，并输出到控制台。状态码为200的URL将被记录到save.log文件中。

#define CURL_STATICLIB
#define BUILDING_LIBCURL
#include <iostream>
#include <string>
#include "curl/curl.h"#pragma comment (lib,"libcurl_a.lib")
#pragma comment (lib,"wldap32.lib")
#pragma comment (lib,"ws2_32.lib")
#pragma comment (lib,"Crypt32.lib")using namespace std;// 设置锁
HANDLE hmutex;// 屏蔽无用的输出
static size_t write_data(char *d, size_t n, size_t l, void *p){ return 0; }int GetPageStatus(char *HostUrl)
{CURLcode return_code;return_code = curl_global_init(CURL_GLOBAL_WIN32);if (CURLE_OK != return_code)return 0;struct curl_slist *headers = NULL;headers = curl_slist_append(headers, "User-Agent: Mozilla/5.0 (LyShark NT 10.0; Win64; x64; rv:76.0)");CURL *easy_handle = curl_easy_init();int retcode = 0;if (NULL != easy_handle){curl_easy_setopt(easy_handle, CURLOPT_HTTPHEADER, headers);         // 改协议头curl_easy_setopt(easy_handle, CURLOPT_URL, HostUrl);                // 请求的网站curl_easy_setopt(easy_handle, CURLOPT_WRITEFUNCTION, write_data);   // 设置回调函数,屏蔽输出return_code = curl_easy_perform(easy_handle);                       // 执行CURLreturn_code = curl_easy_getinfo(easy_handle, CURLINFO_RESPONSE_CODE, &retcode);}curl_easy_cleanup(easy_handle);curl_global_cleanup();return retcode;
}// 线程执行函数
DWORD WINAPI ThreadProc(LPVOID lpParam)
{char *urls = (char *)(LPVOID)lpParam;WaitForSingleObject(hmutex, INFINITE);int ret = GetPageStatus(urls);if (ret == 200){FILE *fp = fopen("./save.log", "a+");fwrite(urls, strlen(urls), 1, fp);fwrite("\n", 2, 1, fp);fclose(fp);}std::cout << "状态码: " << ret << " 地址: " << urls << std::endl;ReleaseMutex(hmutex);return 0;
}int main(int argc, char *argv[])
{if (argc == 3){FILE *fp = fopen(argv[2], "r");char buffer[1024] = { 0 };char url[1024] = { 0 };hmutex = CreateMutex(NULL, TRUE, NULL);ReleaseMutex(hmutex);while (feof(fp) == 0){fgets(buffer, 1024, fp);strtok(buffer, "\n");buffer[strcspn(buffer, "\n")] = 0;sprintf(url, "%s%s", argv[1], buffer);CreateThread(0, 0, (LPTHREAD_START_ROUTINE)ThreadProc, (LPVOID)url, 0, 0);Sleep(80);}}return 0;
}

使用Boost多线程

如上Web目录扫描器，虽实现了目录的扫描，但是有个很大的缺陷，第一是无法跨平台，第二是无法实现优雅的命令行解析效果，所以我们需要使用boost让其支持跨平台并增加一个输出界面。

#define CURL_STATICLIB
#define BUILDING_LIBCURL
#include <iostream>
#include <string>
#include "curl/curl.h"#include <boost/bind.hpp>
#include <boost/thread.hpp>
#include <boost/function.hpp>
#include <boost/thread/thread_guard.hpp>#include <boost/program_options.hpp>#pragma comment (lib,"libcurl_a.lib")
#pragma comment (lib,"wldap32.lib")
#pragma comment (lib,"ws2_32.lib")
#pragma comment (lib,"Crypt32.lib")using namespace std;
using namespace boost;
namespace opt = boost::program_options;boost::mutex io_mutex;void ShowOpt()
{fprintf(stderr,"#                       #                          #       \n""#                       #                          #       \n""#     #    #    #####   ######    ######   # ###   #   ##  \n""#     #    #   #        #     #  #     #   ##      #  #    \n""#     #    #    ####    #     #  #     #   #       ###     \n""#      #####        #   #     #  #    ##   #       #  #    \n""#####      #   #####    #     #   #### #   #       #   ##  \n\n");
}// 传入网址和字典名
std::vector<std::string> GetCombinationURL(char *root, char *dict_file)
{char buffer[512] = { 0 };char this_url[1024] = { 0 };std::vector<std::string> ref;FILE *fp = fopen(dict_file, "r");if (fp != NULL){while (feof(fp) == 0){fgets(buffer, 1024, fp);              // 每次读入一行strtok(buffer, "\n");                 // 去掉行末的 \nbuffer[strcspn(buffer, "\n")] = 0;    // 替换所有 \nsprintf(this_url, "%s%s", root, buffer);ref.push_back(this_url);}}return ref;
}// 屏蔽无用的输出
static size_t write_data(char *d, size_t n, size_t l, void *p){ return 0; }int GetPageStatus(std::string HostUrl)
{CURLcode return_code;return_code = curl_global_init(CURL_GLOBAL_WIN32);if (CURLE_OK != return_code)return 0;CURL *easy_handle = curl_easy_init();int retcode = 0;if (NULL != easy_handle){curl_easy_setopt(easy_handle, CURLOPT_URL, HostUrl);                // 请求的网站curl_easy_setopt(easy_handle, CURLOPT_WRITEFUNCTION, write_data);   // 设置回调函数,屏蔽输出return_code = curl_easy_perform(easy_handle);                       // 执行CURLreturn_code = curl_easy_getinfo(easy_handle, CURLINFO_RESPONSE_CODE, &retcode);}curl_easy_cleanup(easy_handle);curl_global_cleanup();return retcode;
}// 线程执行函数
void ThreadProc(std::string url)
{boost::lock_guard<boost::mutex> global_mutex(io_mutex);int ret = GetPageStatus(url);if (ret == 200){FILE *fp = fopen("./save.log", "a+");fwrite(url.c_str(), strlen(url.c_str()), 1, fp);fwrite("\n", 2, 1, fp);fclose(fp);}std::cout << "状态码: " << ret << " 地址: " << url << std::endl;
}int main(int argc, char * argv[])
{opt::options_description des_cmd("\n Usage: LyShark URL扫描工具 Ver:1.1 \n\n Options");des_cmd.add_options()("url,u", opt::value<std::string>(), "指定需要的URL地址")("dict,d", opt::value<std::string>(), "指定字典")("help,h", "帮助菜单");opt::variables_map virtual_map;try{opt::store(opt::parse_command_line(argc, argv, des_cmd), virtual_map);}catch (...){ return 0; }// 定义消息opt::notify(virtual_map);// 无参数直接返回if (virtual_map.empty()){ShowOpt();std::cout << des_cmd << std::endl;return 0;}else if (virtual_map.count("help") || virtual_map.count("h")){ShowOpt();std::cout << des_cmd << std::endl;return 0;}else if (virtual_map.count("url") && virtual_map.count("dict")){std::string scan_url = virtual_map["url"].as<std::string>();std::string scan_path = virtual_map["dict"].as<std::string>();// 由于string与char* 需要转换,所以拷贝后转换char src[1024] = { 0 };char path[1024] = { 0 };strcpy(src, scan_url.c_str());strcpy(path, scan_path.c_str());std::vector<std::string> get_url = GetCombinationURL(src, path);boost::thread_group group;for (int x = 0; x < get_url.size(); x++){group.create_thread(boost::bind(ThreadProc, get_url[x]));_sleep(50);}group.join_all();}else{std::cout << "参数错误" << std::endl;}return 0;
}

传入参数运行，当访问出现200提示，则自动保存到save.log中，运行效果如下。

  • main.exe --url https://www.lyshark.com --dict c://dict.log

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/153893.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

【docker下安装jenkins】（一）

【docker下安装jenkins】（一）

目的&#xff1a;在Linux操作系统&#xff08;x86_64)下&#xff0c;使用docker部署jenkins&#xff0c;python使用压缩包安装 安装jenkins的步骤 &#xff11;、编排jenkins的docker-compose.yml文件 说明&#xff1a;这里遇到部署jenkins后&#xff0c;占用内存8G,所以重新…
阅读更多...
HarmonyOS第一课-对比Kotlin，快速入门TypeScript

HarmonyOS第一课-对比Kotlin，快速入门TypeScript

编程语言简介 基础类型 1. 布尔值 TypeScript 和 Kotlin: 两者都有 boolean 类型&#xff0c;用于表示 true 或 false。 ts示例&#xff1a; let isDone:boolean falsekotlin示例&#xff1a; val isDone: Boolean false2. 数字 TypeScript: 有 number 类型&#xff0c…
阅读更多...
hadoop 配置历史服务器 开启历史服务器查看 hadoop (十)

hadoop 配置历史服务器 开启历史服务器查看 hadoop (十)

1. 配置了三台服务器&#xff0c;hadoop22, hadoop23, hadoop24 2. hadoop文件路径: /opt/module/hadoop-3.3.4 3. hadoop22机器配置历史服务器的配置文件&#xff1a; 文件路径&#xff1a;/opt/module/hadoop-3.3.4/etc/hadoop 文件名称&#xff1a;mapred-size.xml 新增历…
阅读更多...
帮我想几个关于实人认证API的中文文章标题

帮我想几个关于实人认证API的中文文章标题

引言 随着信息时代的迅速发展&#xff0c;数据变得愈加庞大和复杂。在这个大数据的时代&#xff0c;企业面临着海量信息的管理和利用挑战。为了更有效地获取并利用数据&#xff0c;企业信息模糊搜索API成为了企业数据智能引擎的一部分&#xff0c;为企业提供了精准的企业列表检…
阅读更多...
RK3588产测软件介绍

RK3588产测软件介绍

1. 简介 本公司研发的产测软件是用于在量产的过程中快速地甄别产品功能和器件的好坏&#xff0c;即重点 FCT&#xff08;Functional Test&#xff09;测试&#xff0c;进而提高生产效率和检测的准确性。 2. 产测软件介绍 QT开发的ARM平台产测图形化软件&#xff0c;一键开启傻…
阅读更多...
【问题处理】WPS提示不能启动此对象的源应用程序如何处理？

【问题处理】WPS提示不能启动此对象的源应用程序如何处理？

哈喽&#xff0c;大家好&#xff0c;我是雷工&#xff01; 最近在用WPS打开word文件中&#xff0c;插入的Excel附件时&#xff0c;无法打开&#xff0c;提示&#xff1a;“不能启动此对象的源应用程序”。 经过上网查找处理办法&#xff0c;尝试解决&#xff0c;现将解决过程记…
阅读更多...
Linux socket编程(4):服务端fork之僵尸进程的处理

Linux socket编程(4):服务端fork之僵尸进程的处理

在上一节利用fork实现服务端与多个客户端建立连接中&#xff0c;我们使用fork函数来实现服务端既可以accept新的客户端连接请求&#xff0c;又可以接收已连接上的客户端发来的消息。但在Linux中&#xff0c;在子进程终止后&#xff0c;父进程需要处理该子进程的终止状态&#x…
阅读更多...
【开源】基于Vue.js的车险自助理赔系统的设计和实现

【开源】基于Vue.js的车险自助理赔系统的设计和实现

项目编号&#xff1a; S 018 &#xff0c;文末获取源码。 \color{red}{项目编号&#xff1a;S018&#xff0c;文末获取源码。} 项目编号&#xff1a;S018&#xff0c;文末获取源码。 目录 一、摘要1.1 项目介绍1.2 项目录屏 二、功能模块2.1 数据中心模块2.2 角色管理模块2.3 车…
阅读更多...
[GFCTF 2021]wordy 编写去花IDAPYTHON

[GFCTF 2021]wordy 编写去花IDAPYTHON

首先查壳 发现没有东西 然后放入ida 发现没有main并且软件混乱 发现这里1144的地方 出错 IDA无法识别数据 报错内容是EBFF 机器码 这里看了wp知道是很常见的花指令 所以我们现在开始去花 这里因为我们需要取出 EBFF 下面的地址也都是 EBFF 所以工作量大 使用IDApython脚本即…
阅读更多...
EasyRecovery2024最新永久破解版本安装包下载

EasyRecovery2024最新永久破解版本安装包下载

当我们处理重要的文件数据时&#xff0c;遇到突然停电导致数据来不及保存&#xff0c;再次打开电脑后&#xff0c;此前处理的数据可能丢失&#xff0c;这无疑会影响我们的工作进度&#xff0c;数据恢复软件在此时就派上用场&#xff0c;那么下面就来具体介绍EasyRecovery软件的…
阅读更多...
FL Studio21怎么破解？2024年最新FLStudio21.2.0安装解锁特别版下载使用图文教程

FL Studio21怎么破解？2024年最新FLStudio21.2.0安装解锁特别版下载使用图文教程

用FL Studio编曲&#xff0c;让音乐成为你的翅膀&#xff0c;飞翔在无尽的创作海洋中吧&#xff01; FL Studio作为一款功能强大且备受赞誉的音乐制作软件&#xff0c;为你提供了一个独特的创作平台。通过FL Studio&#xff0c;你可以自由地创作、编曲&#xff0c;制作属于自己…
阅读更多...
4.6 Windows驱动开发：内核遍历进程VAD结构体

4.6 Windows驱动开发：内核遍历进程VAD结构体

在上一篇文章《内核中实现Dump进程转储》中我们实现了ARK工具的转存功能&#xff0c;本篇文章继续以内存为出发点介绍VAD结构&#xff0c;该结构的全程是Virtual Address Descriptor即虚拟地址描述符&#xff0c;VAD是一个AVL自平衡二叉树&#xff0c;树的每一个节点代表一段虚…
阅读更多...
springboot中动态api如何设置

springboot中动态api如何设置

1.不需要编写controller 等mvc层&#xff0c;通过接口动态生成api。 这个问题&#xff0c;其实很好解决&#xff0c;以前编写接口&#xff0c;是要写controller&#xff0c;需要有 RestController RequestMapping("/test1") public class xxxController{ ApiOperat…
阅读更多...
敏捷DevOps专家王立杰：端到端DevOps持续交付的5P法则 | IDCF

敏捷DevOps专家王立杰：端到端DevOps持续交付的5P法则 | IDCF

今天有一个流行的英文缩写词用来刻画这个风云变幻的时代&#xff1a;VUCA&#xff08;乌卡时代&#xff09;。四个英文字母分别表示动荡性&#xff08;Volatility&#xff09;、不确定性&#xff08;Uncertainty&#xff09;、复杂性&#xff08;Complexity&#xff09;和模糊性…
阅读更多...
C编译流程

C编译流程

1.预处理 hello.c 经过预处理得到 hello.i gcc -E hello.c -o hello.i -E的含义&#xff1a;说明这是一个预处理操作 生成预处理文件(.i) 预处理阶段做了什么事&#xff1a; 1.1 头文件展开 我们发现 原先只有几行的hello.c变成了上千行的hello.i 实际上 预处理完成的是 将头…
阅读更多...
Unity中Shader反射环境

Unity中Shader反射环境

文章目录 前言一、制作反射环境的两种办法法1&#xff1a;属性面板接收一个 Cubemap 作为反射环境法2&#xff1a;把环境烘焙成一张Cubemap 二、在Unity中实现把环境烘焙成一张Cubemap1、先创建一个反射探针&#xff08;可以直接创建&#xff0c;也可以空物体增加组件&#xff…
阅读更多...
【Linux】：进程间通信和日志模拟

【Linux】：进程间通信和日志模拟

进程间通信 一.基本概念二.简单的通信-管道(匿名管道)1.建立通信信道2.通信接口 三.命名管道三.模拟命名管道通信&#xff08;加上日志&#xff09;1.完整代码2.基本使用 一.基本概念 是什么 两个或多个进程实现数据层面的交互。 因为进程独立性的存在&#xff0c;导致进程间…
阅读更多...
广度优先算法（BFS）

广度优先算法（BFS）

广度优先算法&#xff08;Breadth-First Search&#xff09;是在图和树领域的搜索方法&#xff0c;其核心思想是从一个起始点开始&#xff0c;访问其所有的临近节点&#xff0c;然后再按照相同的方式访问这些临近节点的节点&#xff0c;这种访问方式类似涟漪泛起&#xff0c;一…
阅读更多...
HINSTANCE是什么？

HINSTANCE是什么？

HINSTANCE 就是 HMODULE&#xff1a;
阅读更多...
队列OJ--循环队列

队列OJ--循环队列

目录 题目链接&#xff1a;622. 设计循环队列 - 力扣&#xff08;LeetCode&#xff09;​​​​​ 题解&#xff1a; ​编辑 代码实现&#xff1a; 完整代码&#xff1a; 题目链接&#xff1a;622. 设计循环队列 - 力扣&#xff08;LeetCode&#xff09;​​​​​ 题解&#x…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023