Перейти к содержимому
New

DeepSeek V4.1 Flash free for 7 days: 10M tokens a day after a top-up of $10 or more. Until Nov 30.

How it works
aeondave/hakrawlerВеб и bug bounty

hakrawler

⁨Auth/lab ref: Fast Go web crawler for discovering URLs, endpoints, and JavaScript files. For crawling web applications to build a URL inventory before fuzzing or during OSINT on web infrastructure.⁩

v2026.11.13-21cd5684 установки+4 за 7 дней39 ЗвездыMITсинхронизировано 10 часов назад

Установка

Ещё нет NotHoly CLI? Сначала установите её.

$ curl -fsSL https://notholy.com/install.sh | sh
$ notholy skills install aeondave/hakrawler

Пишет в ⁦~/.notholy/skills⁩ после проверки подписи и SHA-256.

ПодписьПодписано, ed25519
vFLAzLpVaq…dpXBrJAA==CLI проверяет SHA-256 и подпись, прежде чем записать хоть один файл.
Пакетf87f9855…8f8ffd41
f87f9855fc18…41638f8ffd412 файла · ⁦2.6 KB⁩
ПроверкаНизкий1 замечание
  • Ссылки на внешние домены
Вся проверка
Источникgithub.com/AeonDave/malskill/tree/main/offensive-tools/recon/hakrawler@21cd568

Эта запись еще не переведена на русский, поэтому показан текст на другом языке: English.

Fast Go web crawler — discover URLs, JS files, forms, and endpoints.

Quick Start

bash
go install github.com/hakluke/hakrawler@latest

# Crawl a domain
echo https://target.com | hakrawler

# Depth 3, include subdomains
echo https://target.com | hakrawler -d 3 -subs

# Output as JSON
echo https://target.com | hakrawler -json

# Pipe multiple domains
cat domains.txt | hakrawler -d 2

Core Flags

Flag Purpose
-d N Depth (default: 1)
-subs Include subdomains
-u Unique URLs only
-insecure Skip TLS verification
-t N Threads
-timeout N Timeout per request (s)
-H "K:V" Custom header
-json JSON output
-scope REGEX Limit to URL pattern
-plain Print plain text (no color)
-proxy <url> HTTP/SOCKS5 proxy
-cookie <str> Cookie string
-dr Disable following redirects
-w N Wait N ms between requests

Common Workflows

Build URL inventory for fuzzing:

bash
echo https://target.com | hakrawler -d 3 -u | tee urls.txt
# Feed to ffuf
ffuf -w urls.txt:URL -u URL -mc 200

Discover JS files:

bash
echo https://target.com | hakrawler -d 2 | grep "\.js$"

Combine with httpx for live check:

bash
cat domains.txt | hakrawler | httpx -silent -mc 200

Scope-limited crawl (stay in scope):

bash
echo https://target.com | hakrawler -d 3 -scope ".*\.target\.com.*" -u

Extract API endpoints:

bash
echo https://target.com | hakrawler -d 3 -u | \
  grep -E "(/api/|/v[0-9]+/|\.json|\.xml)" | sort -u

Form action discovery:

bash
echo https://target.com | hakrawler -json | \
  jq -r 'select(.type=="form") | .source'

Multi-target via live hosts:

bash
subfinder -d target.com -silent | \
  httpx -silent | \
  hakrawler -d 2 -u | sort -u > all_urls.txt

Resources

File When to load
references/crawl-tips.md Scope filtering, JS analysis, pipeline patterns, JS secret extraction

Файлы этой версии

Права

ПравоЗаявленоНайдено проверкой
Читает файлыДаДа
Пишет файлыДаДа
Выполняет команды shellДаДа
Ходит в сетьДаДа
Использует коннекторыНетНет
Управляет браузеромДаДа

Замечания проверки

Проверено 13 нояб. 2026 г.

  1. ИнфоСсылка · Ссылки на внешние домены

Чистая проверка снижает риск, но не доказывает, что пакет безопасен. Читайте то, что ставите.

ВерсияОпубликованаКоммитSHA-256ПодписьИзменение прав
v2026.11.13-21cd56813 нояб. 2026 г.21cd568f87f9855Подписана–

Спрашивайте обо всём, что позволяет ваш скоуп.

Создайте аккаунт, пополните баланс и задайте первый вопрос в чате или в терминале.

  1. 1/3

    Создайте аккаунт

    Личный или для компании. Позже можно перейти на аккаунт компании без потери баланса и ключей.

    ЛичныйКомпания
  2. 2/3

    Пополните баланс

    Картой. Оплата за токены, без подписки.

    $5.00минимальное пополнение
  3. 3/3

    Спрашивайте

    В чате, или установите CLI и выполните notholy login в терминале.

    $ notholy login