Show Menu
TÓPICOS×

Log Processing Mode.cfg

O arquivo de configuração Log Processing Mode.cfg permite pausar o processamento de dados em um conjunto de dados, especificar fontes offline ou especificar a frequência na qual o servidor de análise de big data salva seus arquivos de estado.
Fazer alterações no Log Processing Mode.cfg arquivo, incluindo adicionar ou remover fontes, não causa o reprocessamento dos dados.
Para editar o arquivo Log Processing Mode.cfg para um perfil de conjunto de dados
  1. Ao trabalhar em seu perfil de conjunto de dados, abra o Profile Manager e clique Dataset para mostrar seu conteúdo.
    Se o Log Processing Mode.cfg arquivo não estiver localizado no diretório do perfil desejado, será necessário copiar esse arquivo do diretório Base na máquina do servidor da análise de big data para o diretório do perfil.
    Para obter informações sobre como abrir e trabalhar com o Profile Manager, Data Workbench, consulte o Guia do Usuário do Data Workbench.
  2. Clique com o botão direito do mouse na marca de seleção ao lado do nome do arquivo de configuração e clique em Make Local . Uma marca de seleção para este arquivo é exibida na User coluna.
  3. Clique com o botão direito do mouse na marca de seleção recém-criada e clique em Open > from the workbench . A janela de configuração é exibida.
  4. Edite os parâmetros no arquivo de configuração usando a tabela a seguir como guia.
    Alguns dos parâmetros no Log Processing Mode.cfg arquivo têm nomes que incluem Fast Input ou Fast Merge. Fast Inputrefere-se à fase de processamento de log da construção do conjunto de dados e é responsável por aproximadamente metade do tempo total de processamento do conjunto de dados. Fast Merge refere-se à fase de transformação da construção do conjunto de dados somente quando precedida pelo processamento de log. Fast Merge não ocorre durante a retransformação que resulta da modificação de um Transformation Dataset Configuration arquivo. Como Fast Input, Fast Merge também é responsável por aproximadamente metade do tempo de processamento do conjunto de dados.
    Parâmetro Descrição
    Bytes na nuvem
    Um parâmetro de ajuste que afeta a eficiência da transformação de dados. O valor padrão é 128000000.
    Observação: Você não deve alterar esse valor sem consultar a Adobe.
    Rácio de decisão de entrada rápida
    Um parâmetro de ajuste que especifica a proporção entre o total e os bytes de log não lidos em que o sistema entra no modo Fast Input (e, subsequentemente, no Fast Merge ) em vez de processar dados em tempo real.
    O valor padrão é 200, o que significa que o sistema entra no modo Fast Input a partir do modo em tempo real quando os dados de log não lidos estão em 1/200 do total de dados. Uma taxa de decisão mais alta faz com que o sistema entre no modo Fast Input mais prontamente, enquanto uma proporção mais baixa torna menos provável que entre no modo Fast Input .
    Observação: Definir o parâmetro como 0 impede que o sistema entre no modo Fast Input , mesmo para o processamento inicial. Definir o parâmetro como 1.1 permite que o sistema insira o Fast Input durante o processamento inicial, mas não para o processamento subsequente. A Adobe não recomenda usar valores entre 0 e 1.1. Para obter mais informações sobre como configurar esse parâmetro, entre em contato com a Adobe.
    Bytes FIFO de entrada rápida
    Um parâmetro de ajuste que equilibra o uso da memória e o desempenho do sistema durante o processamento de dados. O valor padrão é 120000000.
    Observação: Você não deve alterar esse valor sem consultar a Adobe.
    Bytes do buffer de mesclagem rápida
    Um parâmetro de ajuste que equilibra o uso da memória e o desempenho do sistema durante o processamento de dados. O valor padrão é 128000000.
    Observação: Você não deve alterar esse valor sem consultar a Adobe.
    Fontes offline
    Máscara da fonte de log offline.
    Especificação de uma fonte offline
    • Clique com o botão direito do mouse em Fontes off-line e, em seguida, clique em Adicionar novo > Fonte .
    • No parâmetro da nova fonte, insira a máscara da sequência de log. Para fontes de registro de Sensor com nomes de arquivo do formato AAAMMDD- SENSORID .vsl, a máscara é SENSORID.SENSORID diferenciando maiúsculas de minúsculas. Para fontes de log de arquivos de log, a máscara é a string extraída pelo Padrão de máscara . See Log Files .
    Adicionar ou remover fontes de Fontes offline não causa o reprocessamento do conjunto de dados.
    A partir de agora, as medições são mantidas para o processamento das fontes online do perfil. Quando a fonte offline estiver novamente online, o processamento de arquivos de registro recebidos para essa fonte será retomado.
    Sempre que uma fonte retornar on-line, você deve removê-la das Fontes off-line. Se você não fizer isso, o servidor da análise de big data trata a fonte como uma fonte on-line e atualiza o tempo de início, contanto que a fonte envie dados. Se a fonte for colocada off-line novamente, as medições de tempo de início serão interrompidas.
    Pausado Verdadeiro ou falso. Se verdadeiro, os novos dados não serão processados no conjunto de dados. O valor padrão é false.
    Atraso em tempo real A quantidade de tempo em segundos que o servidor da análise de big data aguarda entre os intervalos de dados de processamento no conjunto de dados. Quando esse valor é definido como zero, o sistema tenta acompanhar os dados recebidos em tempo real. O valor padrão é zero (0), mas você pode aumentar esse valor para reduzir a carga da CPU.
    Bytes FIFO em tempo real
    A quantidade de memória em bytes usada para armazenar dados que estão aguardando para serem processados no conjunto de dados. Talvez seja necessário alterar esse valor com base no número de segundos especificados para o Atraso em tempo real. O valor padrão é 16000000.
    Observação: Você não deve alterar esse valor sem consultar a Adobe.
    Intervalo de salvamento (s)
    Frequência na qual o servidor da análise de big data salva seus arquivos de estado. O valor padrão é 3600.
    Observação: Você não deve alterar esse valor sem consultar a Adobe.
    Ao editar o Log Processing Mode.cfg arquivo em uma janela de análise de big data, você pode usar teclas de atalho para recursos básicos de edição, incluindo recortar (Ctrl+x ), copiar (Ctrl+c), colar (Ctrl+v ), desfazer (Ctrl+z ), refazer (Ctrl+Shift+z ), selecionar a seção (clique+arrastar) e selecionar tudo (Ctrl+a ). Além disso, você pode usar os atalhos para copiar e colar o texto de um arquivo de configuração ( .cfg) para outro.
  5. Clique com o botão direito do mouse (modified) na parte superior da janela e clique em Save .
  6. Na Profile Manager, clique com o botão direito do mouse na marca de seleção do arquivo na User coluna e clique em Save to > datasetprofile name .
    Não salve o arquivo de configuração modificado em nenhum dos perfis internos fornecidos pela Adobe, pois suas alterações são substituídas quando você instala atualizações nesses perfis.