O que pertence ao seu programa
- Domains and host patterns
- Products and versions
- Brands, vendors, and identifiers
- Approved sensitive-term patterns
Monitoramento das ameaças e exposição
Colete avisos públicos, atualizações de fornecedores e capturas de páginas suspeitas para pesquisa de segurança. Forneça aos analistas fontes, horários e evidências para análise.
Aprova os ativos, termos, classes de fontes, contextos, tráfego e retenção antes de começar a coleta.
Mantenha a página, timestamp, contexto de solicitação, sugestões de correspondência e estado de coleta com a observação.
A sua equipa de segurança confirma a propriedade, relevância, gravidade, atribuição, contenção e resposta.
Comece com a carga de trabalho
Escolha um caso de uso para ver exemplos de registros e os dados que você pode coletar.
Coleção de descobertas
Coletar resultados de pesquisa, páginas públicas, páginas de informações de domínio, repositórios, páginas de aplicativos e diretórios que correspondem à superfície de referência que a sua equipe fornece.
Informações de acompanhamento
Qualificação do sinal
URL, conteúdo renderado, campos extraídos, contexto de solicitação, estado de resposta, artefatos e tempo de captura.
A WSA pode recolher e conservarIdentificadores correspondentes, indicadores de domínio ou de produto, provas faltantes, exclusões e a versão aprovada da regra.
Incluído quando especificadoValidação de ativos, malicialidade, exposição, gravidade, atribuição, contenção, remediação ou ação do fornecedor.
A sua equipa de segurança decideUma associação candidata é uma ajuda à revisão, não é prova de que um ativo é seu, que o software está a funcionar, que uma vulnerabilidade é exploratória, que um destino é malicioso ou que um ator é responsável.
Registo de analistas
source_captureurl · type · context · response · captured_at
observed_objecthostname · title · text · redirects · visible_form
reference_contextasset_id · vendor_id · product · version · supplied_terms
associationmatched_cues · missing_cues · exclusions · rule_version
artifactsscreenshot_ref · rendered_page_ref · response_ref
history_statefirst_seen · last_seen · changes · collection_state
História e qualidade da coleção
Requisitos de coleta
Opções de entrega
Proxies
Ideal para · Equipes com coletores existentes.
Explore Infraestrutura de proxiesPiloto controlado
Confirmar a identidade, o caso de utilização dos dados públicos, as classes de origem, o tráfego esperado, a retenção e o caminho de escalada.
Teste a mistura de fontes reais, contextos, necessidades de renderização, artefatos de evidências, mascaramento e condições de falha.
Defina os campos, regras de correspondência, chaves de histórico, estados de qualidade, manutenção da fonte, rota de entrega e proprietário.
Executa a cadência acordada, monitorize a saúde e os campos da coleta, mantenha fontes contratadas e entregue registos ou exceções.
Analise registros de exemplo e a cobertura das fontes antes de acordar o cronograma de produção.
Questões comuns
O número WebScrapingAPI coleta observações aprovadas de fontes públicas e pode aplicar regras de correspondência acordadas.
As fontes potenciais incluem páginas públicas de web suportadas, resultados de pesquisa, aconselhamentos de fornecedores, bancos de dados de vulnerabilidades, repositórios, fóruns, mercados, páginas de aplicativos, páginas de status, páginas de informação de domínio público e URLs fornecidas. A cobertura da produção depende da elegibilidade da fonte, viabilidade, geografia, produto selecionado e contrato.
Não. O serviço descrito nesta página abrange apenas fontes públicas aprovadas. fontes privadas, privadas, restritas, secretas e outras fontes não públicas estão fora do seu escopo padrão.
Para um URL público aprovado, os fluxos de trabalho do navegador suportados podem recuperar a página e preservar redirecionamentos, saída renderizada, metadados de resposta e captura de tela. WebScrapingAPI Não detona arquivos, não realiza testes de exploração nem certifica um destino como seguro ou malicioso.
Dependendo do produto e contrato selecionados, um registro pode incluir o URL da fonte, contexto solicitado, metadados de resposta, cadeia de redirecionamento, texto renderizado, campos extraídos, referência de captura de tela, tempo de captura, razão de correspondência e estado de coleta.
Sim, quando a sua equipe fornece dados de referência aprovados e regras de correspondência. Cada candidato pode reter os valores observados, as dicas correspondentes e faltantes, versão da regra e captura de fonte. Os seus analistas validam a relação e sua importância de segurança.
Quando identificadores estáveis ou chaves acordadas estão disponíveis, os registros podem distinguir estados vistos pela primeira vez, vistos pela última vez, alterados, inalterados, desaparecidos, reaparecidos, indisponíveis e não coletados.
O método de entrega é acordado durante a exploração e deve ser suportado para o contrato selecionado. Dependendo desse escopo, os registros podem ser fornecidos através de uma API, webhook, transferência de arquivos, armazenamento de objetos ou entrega de armazém. Sua equipe lida com a ingestão em ferramentas de segurança, correlação e gerenciamento de casos.
Os clientes de proxy mantêm seus colectores. Os clientes da API mantêm fluxos de trabalho a jusante enquanto WebScrapingAPI mantém a camada de serviço documentada. Para programas programados ou gerenciados, WebScrapingAPI mantém os conectores contratados, extração, verificações de qualidade de coleta e entrega.
A coleta de segurança requer identidade verificada do cliente, uma finalidade definida de dados públicos, fontes aprovadas, controles de tráfego e retenção e revisão de uso aceitável.
O âmbito de uma amostra de origem monitorada
Traga uma pequena lista de observação, três a cinco fontes públicas representativas, os contextos das solicitações e as decisões que os teus analistas precisam tomar.