High-performance HTTP probing engine written in Rust
Project description
Hprobe 🚀 
A high-performance HTTP probing tool for asset discovery.
hprobe 是一个高性能 HTTP 探测引擎,基于 Rust 实现,并通过 Python 提供简单易用接口。
它支持同步和异步调用,能够快速探测目标 HTTP 服务、端口、指纹等,适用于大规模资产发现/网络空间测绘。
- 跨平台(Linux / Windows / macOS)
- 支持多线程和异步模式
- 可统一全局配置,方便批量调用
- 提供参数化和字典配置两种接口
🔗 GitHub: https://github.com/FlyfishSec/hprobe-python
Core Advantages 📌| 核心优势
-
Tokio 异步运行时,极致高并发
- 基于 Tokio 异步运行时构建,充分利用多核性能,支撑大规模高并发探测
-
纳秒级 ASN 查询
- 自定义二进制结构体,采用零拷贝设计 + mmap 内存映射 + 二分查找,实现纳秒级 ASN 信息查询
-
极速 Web 指纹识别
- 集成 17000 + 指纹规则,进程内单例懒加载,10MB HTML 毫秒级指纹识别
Quick Start⚡| 快速开始
# PyPI 安装(Python >=3.7)
pip install hprobe
示例1 同步快速调用(配置字典调用)
import hprobe
# 核心配置
CORE_CONFIG = {
# 目标支持ip/domain/url,示例:192.168.1.1/example.com/192.168.1.1:443/https://example.com
"target": "example.com", # 必选
"ports": [80, 443], # 可选:探测端口,不填则使用自动端口识别
"timeout": 5.0, # 可选:超时配置,默认10s
"threads": 64, # 可选:并发数配置,默认80
"tls_info": True, # 可选:开启TLS证书信息检测
"asn": True, # 可选:开启ASN归属查询
"tech_detect": True, # 可选:开启技术栈识别
"fingerprint": True, # 可选:开启Web指纹识别
"silent": True, # 可选:禁用命令行冗余日志
}
# 一行调用(字典接口,推荐)
result = hprobe.scan_target_with_config(CORE_CONFIG)
# 打印结果(返回字典,含所有探测信息)
print("探测结果:", result)
示例2 异步快速调用(配置字典调用)
import asyncio
import hprobe
# 核心配置
CORE_CONFIG = {
# 目标支持ip/domain/cidr/url
# 示例:192.168.1.1、example.com、192.168.1.1:443、192.168.1.1/24、https://example.com
"target": "192.168.1.1/24", # 必选
"ports": [80, 443], # 可选:探测端口,不填则使用自动端口识别
"timeout": 5.0, # 可选:超时配置,默认10s
"threads": 64, # 可选:并发数配置,默认80
"tls_info": True, # 可选:开启TLS证书信息检测
"asn": True, # 可选:开启ASN归属查询
"tech_detect": True, # 可选:开启技术栈识别
"fingerprint": True, # 可选:开启Web指纹识别
"silent": True, # 可选:禁用命令行冗余日志
}
async def async_core_scan():
# 异步字典接口,一行调用
result = await hprobe.scan_target_with_config_async(CORE_CONFIG)
print("探测结果:", result)
# 执行异步函数并打印结果
asyncio.run(async_core_scan())
示例3 异步极简调用(链式调用)
import hprobe
import asyncio
async def simple_async_scan():
# 直接设置目标,其余用默认配置
result = await hprobe.HprobeScanner().set_target("192.168.1.1/24").set_timeout(1.0).scan_async()
print(f"扫描结果:共探测到{len(result)}个资产")
# 遍历结果取值
for asset in result:
print(f"存活资产:{asset.get('url')},状态码:{asset.get('status_code')}")
# 执行异步函数
asyncio.run(simple_async_scan())
示例4 同步极简调用(链式调用)
import hprobe
# 同步核心:一行链式调用,直接返回解析后的字典
result = hprobe.HprobeScanner().set_target("httpbin.org").set_tech_detect(True).scan()
# 简单结果展示
if result:
print(f"目标{result[0].get('target')}探测完成,技术栈:{result[0].get('technologies')}")
⚙️ 进阶参数配置说明
# ⚠️ 可选:自定义数据目录
# import os
# os.environ["HPROBE_DATA_ROOT"] = r"C:\mydata\"
🔹 基础参数
-
target
扫描目标,支持 IP 或域名 -
ports
探测端口列表,例如:[80, 443] -
threads
并发线程数,用于控制整体并发规模 -
timeout
单请求超时时间(单位:秒) -
methods
HTTP 请求方法:GET/POST -
scheme_policy
协议策略:Auto/HTTP/HTTPS
🔹 HTTP / 请求相关参数
-
user_agent
自定义 User-Agent,默认使用内置随机 -
max_redirects
最大重定向次数,设置为0则禁止重定向 -
post_data
POST 请求体数据(字符串) -
post_file
POST 文件路径(与post_data二选一) -
content_type
POST 请求 Content-Type
默认值:application/x-www-form-urlencoded
🔹 功能开关(布尔值)
-
asn
是否启用 ASN 查询 -
tech_detect
是否启用技术栈识别 -
fingerprint
是否启用 Web 指纹识别 -
screenshot
是否启用网页截图 -
common_ports
是否启用常见端口扫描
🔹 其他参数
-
silent
静默模式,仅输出结果,不打印日志 -
dns
指定dns: [223.5.5.5,8.8.8.8] -
proxy
使用代理(http/https/socks):socks5://127.0.0.1:1080
License 📄 | 许可证
Copyright (c) 2026 FlyfishSec All rights reserved.
Project details
Release history Release notifications | RSS feed
Download files
Download the file for your platform. If you're not sure which to choose, learn more about installing packages.
Source Distributions
Built Distributions
Filter files by name, interpreter, ABI, and platform.
If you're not sure about the file name format, learn more about wheel file names.
Copy a direct link to the current filters
File details
Details for the file hprobe-0.4.2-cp37-abi3-win_amd64.whl.
File metadata
- Download URL: hprobe-0.4.2-cp37-abi3-win_amd64.whl
- Upload date:
- Size: 13.4 MB
- Tags: CPython 3.7+, Windows x86-64
- Uploaded using Trusted Publishing? No
- Uploaded via: twine/6.2.0 CPython/3.13.7
File hashes
| Algorithm | Hash digest | |
|---|---|---|
| SHA256 |
cffb5577fb1f494b212a94656f2cf340d5e0c43ba4802611e642fab665cce0ae
|
|
| MD5 |
92360c66cad5f63d508a775e169d255a
|
|
| BLAKE2b-256 |
a51f4b8ca333d12bec371f7ee88f38c09cb322f0855c709f1618645c9a23378c
|
File details
Details for the file hprobe-0.4.2-cp37-abi3-manylinux_2_17_x86_64.manylinux2014_x86_64.whl.
File metadata
- Download URL: hprobe-0.4.2-cp37-abi3-manylinux_2_17_x86_64.manylinux2014_x86_64.whl
- Upload date:
- Size: 13.6 MB
- Tags: CPython 3.7+, manylinux: glibc 2.17+ x86-64
- Uploaded using Trusted Publishing? No
- Uploaded via: twine/6.2.0 CPython/3.13.7
File hashes
| Algorithm | Hash digest | |
|---|---|---|
| SHA256 |
0c8ca5fd6780b1032f63c54d336d15ac172578d55d2ceb7cddfa85eaaf1b362a
|
|
| MD5 |
f7f7f1080f814232e1477298e6fd8d1b
|
|
| BLAKE2b-256 |
e4b64161a2aa5912b641505cda1ddf5c258ce01d10456cc3872f6bcb8eda3343
|