Inteligência Open Source para a Agência de Inteligência Moderna

12 de fevereiro de 2019Import.ioInteligência Artificial

Para agências governamentais, a inteligência de código aberto (OSINT) alimenta a carga interminável para tomar decisões informadas. A base do OSINT para as agências do governo são os posts de notícias sociais e locais encontrados na web - com 90% -95% deles sendo texto e fontes não em inglês.

Com tantos dados sendo criados todos os dias, como as agências podem se concentrar em segurança nacional, como a NSA, o DHS, a CIA e outros, obtêm um nível mais alto de confiança, identificando e agindo nos postos? Combine a plataforma de extração de dados da Web líder do mercado do Import.io com  a  plataforma analítica de texto Rosette da Basis Technology , garantindo um fluxo contínuo de dados contextualmente precisos e desambigurados sobre pessoas, lugares, organizações e coisas em sistemas analíticos e de inteligência.

Todos os dados abertos - o desafio

Todos nós já ouvimos falar dos 3 V's de big data: volume, variedade e velocidade. Agora camada sobre as características de vários idiomas, autores e fontes: ambigüidade, outra camada de variedade e fantasmas.

• Variedade: Uma coisa pode ter muitos nomes (exemplo: Franklin D. Roosevelt ou Presidente Roosevelt ou Frank Delano Roosevelt ou FDR podem ser todos a mesma pessoa, sem mencionar as grafias estrangeiras dessas variações)
• Ambiguidade: Muitas coisas compartilhando nomes semelhantes. Você pode encontrar milhares de pessoas chamadas George Bush, duas delas são ex-presidentes dos EUA.
• Fantasmas: pessoas, organizações e entidades que existem em seus dados que não foram catalogados.

Adicionar esses três elementos à mistura torna ainda mais difícil filtrar os dados e obter o significado contextual.

Obtenha o significado contextual construindo uma base de conhecimento melhor

Combinando uma poderosa plataforma de extração de dados da Web com uma solução de análise de texto comprovada, você constrói uma base de conhecimento melhor, mais conectada e inteligente. Você precisa encontrar as coisas de que gosta, entender o relacionamento que essas coisas têm com outras pessoas, lugares e coisas e, em última análise, agir. Veja como isso funcionaria:

1. Obtenha o máximo que puder, mas seja um pouco seletivo  - Na aparência de como um sistema de exploração de inteligência se parece, você precisa considerar monitorar e extrair conteúdo da maior fonte de informações de código aberto nos últimos 10 anos - todas as coisas sendo postado em sites de notícias e mídias sociais. Mas, sejamos realistas, provavelmente há um conjunto (embora sejam algumas centenas ou milhares) de notícias e sites de mídia social com os quais você mais se preocupa e deseja segmentar como uma fonte de conteúdo. Para esta etapa, você aproveita uma plataforma de extração de dados da Web, como o Import.io.
2. Identifique as coisas de que você gosta  - Se a notícia ou postagem nativa está em russo, coreano, chinês, árabe, pashto, urdu ou outro idioma, colher o conteúdo recém-postado é algo que pode ser feito com facilidade. Mas, o desafio do texto não estruturado mutualizado torna a extração de informações acionáveis ​​e relacionamentos significativos mais desafiadores. A identificação das entidades dentro do conteúdo pode ser feita aproveitando a solução Rosette da Basis Technologies. E, além de identificar os itens de alta prioridade, Rosette também marca, indexa e resolve o conteúdo referenciando uma base de conhecimento fácil de aumentar. Depois de identificar os itens, você faz uma camada no processamento de linguagem natural (NLP) para identificar os itens de alta prioridade que devem ser enviados para tradução humana.
3. Integrar e visualizar em seu sistema de inteligência existente  - A capacidade de coletar, identificar e correlacionar dados coletados e expô-los em seus sistemas existentes permite que o OSINT se torne um cidadão de primeira classe em sua infraestrutura analítica.

Monitorar dados de código aberto é uma tarefa gigantesca e multifacetada que é necessária para muitas missões - e a capacidade de encontrar as coisas de que você gosta (pessoas, lugares e coisas) proporcionará um nível mais alto de confiança em análise e inteligência.