MASTER OSINT - Um kit de ferramentas de inteligência avançado e de código aberto para iniciantes

MASTER OSINT v2

MASTER OSINT - Um kit de ferramentas de inteligência avançado e de código aberto para iniciantes

Master OSINT é um kit de ferramentas Python abrangente e amigável para iniciantes, desenvolvido para investigações de inteligência de código aberto. A ferramenta suporta diversos métodos investigativos, incluindo geolocalização de imagens, criação de perfis em redes sociais, verificação de violações e verificação de e-mails, pesquisa de domínio, extração de metadados, Google Dorking, consultas ao Wayback Machine, geolocalização de IP com verificação de lista negra, busca reversa de imagens, inteligência geoespacial e validação de números de telefone.

Índice

• Características

• Pré-requisitos

• Instalação no Kali Linux

• Uso

• Descrições dos módulos

• Configuração de chaves de API

• Considerações éticas

• Contato e Suporte

Características

• Extraia coordenadas GPS de dados EXIF de imagens.

• Investigue a presença nas mídias sociais em mais de 30 plataformas por nome de usuário.

• Detecte violações de e-mail e analise postagens públicas.

• Verifique a validade do e-mail usando Hunter.io, ReverseContact.com e Epieos.

• Execute pesquisas de WHOIS e DNS, enumere subdomínios via crt.sh.

• Extraia metadados de imagens/documentos.

• Utilize os operadores de pesquisa avançada do Google (Google Dorking).

• Acesse instantâneos de sites arquivados via Wayback Machine.

• Localize geolocalização de IP e recupere relatórios de abuso com AbuseIPDB.

• Extraia metadados de sites e entidades nomeadas usando o SpaCy NLP.

• Valide e investigue números de telefone com informações de operadora e tipo.

• Realize pesquisas reversas de imagens usando mecanismos populares.

• Acesse inteligência geoespacial poderosa com o Google Satellite e o OpenStreetMap.

Pré-requisitos

Certifique-se de que seu sistema Kali Linux tenha o seguinte :

• Python 3.x

• gerenciador de pacotes pip

• Conexão de internet para chamadas de API e pesquisas na web

• Instalação no Kali Linux

Atualizar pacotes do sistema:

sudo apt update

Crie e ative um ambiente virtual Python:

virtual my_temp_venv

source my_temp_venv/bin/activate

Instale os pacotes Python necessários:

Você pode instalar todas as dependências de uma vez :

pip install requests beautifulsoup4 waybackpy spacy phonenumbers exifread tldextract python-whois dnspython
python -m spacy download en_core_web_sm

Salve o script do kit de ferramentas:

Nano aberto

nano master_osint.py

Copie o script da ferramenta através do link https://gist.github.com/techenthusiast167/a95ce477eac6eb1b0db9f22b3a55ca2c ( Master OSINT v2 ) e cole-o no editor nano, salve-o como master_osint.py pressionando (Ctrl+O), Enter e (Ctrl+X) para sair .

O Master OSINT v3 já está disponível. Você pode obtê-lo através do link https://gist.github.com/techenthusiast167/5fb49b007d48cf2717bc3c12958e47b5 . Mesma instalação da versão 2.

Pontas :

Use python -m pip install nome-do-pacote se o pip não for reconhecido.

Sempre ative seu ambiente virtual antes de instalar bibliotecas.

Corrija os módulos ausentes usando pip install [nome_do_pacote] conforme necessário. Uso

Executando a ferramenta:

Nota: Antes de estragar a ferramenta, prepare os arquivos de entrada :

Para o Metadados do Site e o Raspador de Entidades , crie um arquivo chamado urls.txt no mesmo diretório, contendo uma URL por linha . Isso facilitará a automatização da extração de resultados usando o módulo Number Ten .

Execute a ferramenta :

python master_osint.py

Você verá um menu com 14 módulos OSINT e uma opção de saída. Insira o número do módulo que deseja executar e siga as instruções.

Por exemplo :

• Digite um nome de usuário para gerar URLs de perfil de mídia social.

• Insira um e-mail para verificar violações ou verificar validade.

• Insira nomes de domínio para pesquisas de WHOIS e DNS.

• Forneça caminhos de arquivos de imagem para geolocalização EXIF.

• Insira endereços IP para geolocalização e verificação de lista negra.

• Use o arquivo urls.txt (uma URL por linha) na pasta para extração de metadados do site.

• Os resultados serão impressos no console ou salvos em arquivos, dependendo do módulo (por exemplo, metadata_output.json para extração de dados de sites).

Descrições dos módulos

1. Geolocalização de imagens : extraia dados de GPS do EXIF da imagem ou execute orientação de localização manual.

2. Investigação de mídia social : gere URLs de perfil em mais de 30 plataformas populares por nome de usuário.

3. Análise de e-mail : detecte o status da violação e pesquise e-mails em pastas públicas e no Google.

4. Consulta e verificação de e-mail : verifique dados de e-mail via Hunter.io e outros serviços.

5. Investigação de domínio : recupere informações WHOIS, registros DNS e enumeração de subdomínios.

6. Extração de metadados : extraia metadados EXIF e informações do sistema de arquivos de arquivos.

7. Google Dorking : realize pesquisas avançadas no Google usando operadores poderosos.

8. Wayback Machine Lookup : acesse instantâneos de páginas da web arquivadas.

9. Geolocalização de IP e verificação de lista negra : localize a geolocalização de IP e verifique listas negras de abuso.

10. Metadados de sites e scraper de entidades : raspe metadados de sites e extraia entidades nomeadas usando PNL.

11. Investigação de números de telefone : valide números de telefone e gere dorks de pesquisa OSINT.

12. Pesquisa reversa de imagens : consulte vários mecanismos de pesquisa reversa de imagens para investigação.

13. Inteligência geoespacial : visualize quaisquer coordenadas de localização ou lugar usando o Google Satellite Maps e o OpenStreetMap.

14. Sair : Sair com segurança do kit de ferramentas.

Configuração de chaves de API

Alguns módulos exigem chaves de API para funcionalidade completa :

• Chave de API HaveIBeenPwned : necessária para verificações de violação de e-mail.

• Cadastre-se em https://haveibeenpwned.com/API/Key e defina sua chave no script.

• Chave de API do Hunter.io : necessária para verificação de e-mail.

• Registre-se em https://hunter.io e atualize a chave no script.

• Chave de API AbuseIPDB : para verificações de lista negra de IP.

• Registre-se em https://www.abuseipdb.com/api e atualize conforme necessário.

Atualize as variáveis de chave da API do espaço reservado em master_osint.py com suas chaves para desbloquear todos os recursos.

Nota de segurança : Nunca codifique chaves de API em repositórios públicos. Em vez disso, use variáveis de ambiente ou arquivos de configuração.

Considerações éticas

Utilize esta ferramenta com responsabilidade apenas para pesquisas jurídicas e educacionais. Obtenha consentimento antes de investigar dados de terceiros.

Não utilize para fins ilegais ou para infringir a privacidade.

Cumpra os termos de serviço de todos os sites e APIs envolvidos. Contato e Suporte

Contribuindo :

Contribuições, sugestões e relatórios de bugs são bem-vindos! Abra um problema ou envie um pull request.

Contato :

Siga-me no LinkedIn para atualizações e lançamentos futuros.

LinkedIn : http://linkedin.com/in/tech-enthusiast-669279263

E-mail : preciousvincentct@gmail.com

MESTRE OSINT v2

Uma análise da versão recém-construída: https://x.com/ctprecious/status/1947949365957685464?s=46

I am thrilled to unveil Master OSINT v2, the powerful evolution of v1, designed to deliver outstanding results and outcomes. Each module has been expertly refined to effectively process user data, ensuring exceptional and satisfying results.

The tool has been refactored to be more advanced and powerful, following a "different outlook" by integrating more context, guidance, and hinting at advanced techniques, while keeping it user-friendly for beginners.


Here Is A Summary Of The Key Changes And Additions:

1. CENTRALIZED IMPORTS & CONSTANTS:

Streamlined and grouped for better readability.


2. ROBUST DEPENDENCY CHECKS:

Added clearer try-except blocks and informative messages if a required library is missing. The script will tell the user what to install.


3. ENHANCED USER GUIDANCE:

- More detailed descriptions for each module, explaining its OSINT value.

- Tips and "Considerations" for manual steps or further investigation.

- Clearer warnings for missing API keys.


4. MODULE ENHANCEMENTS:

- Image Geolocation:

Improved EXIF parsing logic and added reverse image suggestion.

- Email Analysis & Lookup:

Consolidated, added more context to services like HIBP, Hunter[.]io, ReverseContact, and Epieos. Emphasized manual steps for these services.

- Domain Investigation:

Added a placeholder for DNS lookup (A, MX, NS records) using dnspython (requires installation). Also mentions SSL cert analysis as a next step for subdomain enumeration.

- Metadata Extraction:

Clarified exifread's limitations and suggested external tools like ExifTool for broader file types.

- Social Media Investigation:

Explicitly mentions tools like WhatsMyName as external resources.

- IP Geolocation & Blacklist:

Improved output formatting and guidance on interpreting results.

- Website Scraper:

More robust error handling for HTTP requests, and clearer output results.

- Phone Number Investigation:

Improved output, explicit dorking examples.

- Reverse Image Search:

Expanded the list of search engines to 30+ and added tips for effective manual searching.


5. REFACTORED EXTRACT_EMAILS & EXTRACT_ENTITIES:

These are now directly within website_metadata_and_entity_scraper to encapsulate their use more clearly, leveraging the global SPACY_NLP instance.



hashtag#OSINT hashtag#Cybersecurity hashtag#InfoSec hashtag#Python hashtag#CyberThreatIntelligence