Show Menu
TÓPICOS×

Requisitos do sistema do servidor

Identifique os requisitos mínimos e recomendações para os componentes do servidor da Análise de big data antes de planejar e implementar seu sistema.

Requisitos de DPU

A DPU (Unidade de processamento de dados) do servidor é o principal componente de processamento de dados da Análise de big data. Ele escuta as conexões de rede do Análise de big data, lê os dados brutos de origem da Unidade de Servidor de Arquivos (FSU) e usa recursos tecnológicos e de armazenamento substanciais.

Capacidade licenciada

Consulte a Descrição de serviços no AdobeData Workbench (Insight)Service Agreement para obter informações sobre a capacidade da licença.
Para o MS System Center Endpoint Protection nos servidores Windows 2012, esses executáveis precisam ser adicionados aos processos excluídos: >
  • InsightServer64.exe
  • ReportServer.exe
  • ExportIntegration.exe

Recomendações e requisitos do sistema DPU

A Adobe fornece recomendações relacionadas ao design da Análise de big data que atende às suas necessidades comerciais. No entanto, as diretrizes a seguir são úteis ao selecionar o sistema operacional (SO) e o hardware, pois a natureza otimizada do software da DPU coloca requisitos específicos na plataforma do SO/hardware.
Se um único conjunto de dados for limitado pela capacidade ou velocidade de uma única DPU, é possível agrupá-los. Por exemplo, suponha que você tenha três cópias licenciadas do software DPU que são usadas juntas para executar mais rapidamente um conjunto de dados maior. Como os dados são divididos uniformemente entre as máquinas, a capacidade licenciada do conjunto de dados é multiplicada por três. Além disso, a velocidade de processamento por linha se torna três vezes mais rápida do que uma única DPU.
Para obter o melhor desempenho do seu investimento em DPU, a Adobe recomenda os seguintes componentes de alto desempenho descritos na tabela a seguir:
Obrigatório Recomendado
Sistema operacional
Microsoft Windows Server 2008 x64
Microsoft Windows Server 2012 x64
Microsoft Windows Server 2016 x64
CPU
Consulte recomendações.
São recomendados os processadores de mais de 4 núcleos da última geração da Intel ou AMD. Para um desempenho ótimo, 8 núcleos; para uma compensação entre velocidade e custo, são recomendados quatro núcleos.
RAM
8 GB
12 GB
Armazenamento de dados de trabalho
Mais de 1 TB de armazenamento temporário lógico total.
Acesso de baixa latência ao subsistema do disco
Para armazenamento temporário, a Adobe recomenda:
  • (4 a 8) * (750 GB ou mais) HDDs SATA (eixo de 3,5")
  • (6 a 10) * (300 GB ou superior) HDDs SATA (eixo de 2,5 pol)
Eles devem ser configurados em uma matriz JBOD. Como alternativa, quando a capacidade bruta do disco exceder 2 TB, é possível usar uma matriz de volumes RAID1 de 2 discos. Por exemplo, configure seis discos como um par RAID 1 de 3*(2*750 GB).
Armazenamento de dados do sistema
Além disso, a Adobe exige um armazenamento de alta disponibilidade de tamanho modesto (20 GB) para o SO, software DPU e outros softwares do sistema.
Hardware de cluster
Consulte recomendações.
Use um conjunto homogêneo de servidores. Em um cluster DPU, o servidor mais lento reduz o desempenho de todo o conjunto de dados.
Agrupamento de desempenho de rede Uma conexão Ethernet gigabit comutada ou superior.

Subsistemas de disco alternativos

Ao considerar subsistemas de disco alternativos para armazenamento temporário, considere os seguintes fatores e diretrizes:
  • A DPU é extremamente exigente de um sistema de disco de alto desempenho, portanto, a configuração de um subsistema de disco inadequado pode causar gargalos no desempenho.
  • O software DPU faz sua própria divisão de dados orientada ao desempenho em um conjunto de discos JBOD. Não use RAID para aumentar a velocidade.
  • A Adobe recomenda que a DPU tenha mais de 400 MB/s de largura de banda sustentada agregada para os discos.
  • Os tamanhos médios de leitura são muito altos (2MB+). Por essa razão, os discos SAS de 15.000 ou 10.000 alto desempenho geralmente são um pouco melhores (ou piores) do que os discos SATA, com um custo significativo e uma penalidade de capacidade.
  • Evite usar uma arquitetura SAN. A experiência mostra que o custo para fazer uma SAN funcionar nos níveis necessários é geralmente extremo.
  • O subsistema de disco local é usado como espaço de trabalho — nenhum dado é perdido permanentemente devido a uma falha de disco rígido, portanto, considere evitar sistemas caros, mais lentos e de alta disponibilidade.

Considerações sobre velocidade

A Adobe não pode fornecer uma garantia ou representação sobre a velocidade em que os dados são processados por uma análise de big data configurada, pois vários fatores afetam a velocidade de processamento dos dados, incluindo, entre outros, os seguintes:
  • Número de linhas de dados
  • Número de dimensões (colunas) dos dados
  • Número e complexidade de etapas de processamento personalizadas
  • Utilização de agrupamentos
  • Velocidade do hardware

Requisitos da unidade do servidor de arquivos

A FSU (File Serving Unit) do servidor é o principal componente de gerenciamento e armazenamento de dados da Análise de big data. O FSU atua como um servidor de arquivos para dados de fonte bruta para a DPU e, quando apropriado, coordena o agrupamento de DPUs. Cada FSU é licenciado para fornecer dados de origem para até cinco (5) DPUs.
Componentes FSU Recomendações
Sistema operacional, CPU, RAM
Esses requisitos são os mesmos da DPU. No entanto, para o FSU, a Adobe recomenda usar os requisitos mínimos em vez de seguir as recomendações.
Sistema de disco
O FSU requer armazenamento redundante e altamente disponível para grandes volumes de dados. A Adobe trabalhará com você para determinar seus requisitos exatos.
A Adobe recomenda:
  • (12 ou mais) * (750 GB ou mais) HDDs SATA em uma configuração RAID 5/6.
  • Conexão SAN de alto desempenho com suporte a largura de banda sustentada de 100 MB/s+.
Como o FSU retém os dados de fonte bruta, qualquer perda seria irrecuperável, e a Adobe sugere fazer backup desses dados regularmente.
Desempenho da rede
A Adobe exige conexões Ethernet gigabit comutadas entre FSUs e DPUs trabalhando juntas.

Requisitos do sensor

O Sensor da Análise de big data coleta dados de eventos da Web, do aplicativo e dos servidores de coleta de dados a serem transmitidos para qualquer servidor. Sensor’s a instrumentação garante uma medição consistentemente precisa dos eventos que ocorrem no seu canal de Internet. Sensor suporta muitas combinações de software de servidor Web e sistema operacional.

Recomendações do sistema do sensor

A tabela a seguir descreve as recomendações do sistema para Sensor:
Recursos Recomendado
Armazenamento em disco
Mínimo de 512 MB.
RAM
32 MB de RAM devem estar disponíveis para o Sensor no computador HTTP ou em outro servidor que seja seu host.
Desempenho da rede
1 Mbps ou mais conexão de rede com um servidor repetidor ou com um servidor análise de big data . O sensor geralmente consome muito menos largura de banda do que um (1) Mbps. Seus consultores da Adobe o ajudarão a estimar a quantidade real de largura de banda que seria necessária de acordo com a rotina.
Portas de rede e firewalls
O sensor se conecta ao servidor de análise de big data usando HTTPS (normalmente a porta 443, embora seja configurável) ou HTTP (normalmente a porta 80, embora seja configurável).
A porta apropriada em qualquer firewall que resida entre um Sensor e o servidor de análise de big data de destino ou servidor repetidor deve ser aberta apenas entre o respectivo computador Sensor que hospeda e o servidor de análise de big data ou servidor repetidor antes de iniciar o processo de instalação do Sensor. O sensor faz uma conexão HTTPS ou HTTP unidirecional com um servidor de análise de big data ou servidor repetidor.
Sistemas de gerenciamento de rede
Os sistemas de gerenciamento de rede existentes devem monitorar a integridade do hardware do computador subjacente (por exemplo, espaço em disco, serviço de rede) e a conectividade de rede, bem como o log de eventos do Windows ou o syslog do UNIX.
Sincronização de tempo do servidor
Verifique se a hora do sistema do computador está sincronizada continuamente em todos os computadores que hospedam um sensor . Os aplicativos e computadores do servidor Web que são monitorados pelo Sensor devem ter horários sincronizados do sistema para que os dados de eventos coletados deles sejam precisos. Consulte a documentação do seu sistema operacional para obter as etapas para sincronizar os tempos do sistema de forma contínua com o NTP ou outro recurso de sincronização de tempo.
Uso do nome DNS
A Adobe recomenda que os Sensores usem um nome DNS (em vez de um endereço IP) para resolver o endereço de rede de um servidor de análise de big data ou servidor repetidor . Quando um Sensor usa um nome DNS, o DNS do servidor da Web host ou o arquivo de hosts local precisa ser configurado para resolver o nome do servidor de análise de big data ou do servidor repetidor.

Software de servidor de suporte

A tabela a seguir lista as combinações mais comuns que Sensor suportam:
Software de servidor Web Sistema operacional
Apache Server/IBM HTTP Server 2.2
Microsoft Windows Server 2003 ou posterior; RedHat Enterprise Linux 6.x ou posterior; Sun Solaris 8.x ou posterior; IBM AIX 5.1x ou posterior.
Apache Server 2.4
RedHat Enterprise Linux 6.x ou posterior
Microsoft IIS
Microsoft Windows Server 2003 ou posterior
Servidores de aplicativos Java (Tomcat, JBoss, iPlanet, Weblogic)
Microsoft Windows Server 2003 ou posterior; RedHat Enterprise Linux 6.x ou posterior; Sun Solaris 8.x ou posterior; IBM AIX 5.1x ou posterior.
Para obter outras combinações de servidor e sistema operacional, consulte a Adobe em relação à disponibilidade. Nem todos os recursos do Sensor estão disponíveis com todas as combinações de servidor da Web/aplicativo e sistema operacional. Para obter mais informações sobre Sensor versões específicas, entre em contato com o Suporte da Adobe.

Requisitos do Servidor de Relatório

O servidor de relatório da análise de big data é o componente que permite a saída de relatórios programados. Os relatórios que são enviados podem estar na forma de imagens .PNG ou planilhas .XLS colocadas em um sistema de arquivos, ou como emails. Seus requisitos de hardware são idênticos ao Cliente c-data-workbench-client-install.html da Análise de big data.
Existem os seguintes requisitos para report server:
  • Acesso ao sistema de arquivos para saída de dados (compartilhamento de rede ou unidade local).
  • Acesso ao servidor SMTP configurado.
  • Microsoft Excel 2003 ou superior instalado no report servidor. Consulte Considerações para automação do Office no servidor para obter mais informações.

Gerenciamento de rede

A Adobe recomenda que os sistemas de gerenciamento de rede existentes monitorem o hardware e a rede em que a plataforma Análise de big data depende.
Além disso, a Adobe recomenda monitorar os registros de eventos do Windows dos FSUs e DPUs, que são gravados quando ocorre um erro.
Todos os arquivos de log de hospedagem do sistema de armazenamento em rede precisam fornecer pelo menos 10 MB por DPU de largura de banda sustentada.

Disponibilidade de dados

É uma prática normal e obrigatória para uma DPU de servidor processar e reprocessar dados em um conjunto de dados novo ou atualizado.
Isso pode ocorrer devido a alterações na configuração, alterações na fonte de dados, alterações de hardware, configuração inadequada, falha de hardware, falha de software, falha de energia e assim por diante. Quando esse processamento ou reprocessamento ocorrer, todos os dados do conjunto de dados e do sistema deverão estar imediatamente disponíveis para os componentes DPU e FSU. O não cumprimento deste requisito pode levar a um sistema inativo significativo e desnecessário.

Problemas de rede DPU e FSU

Considerações a ter em mente ao trabalhar com redes DPU e FSU.
  • Para a distribuição de arquivos de log em rede, qualquer sistema de armazenamento em rede que hospedar arquivos de log precisa fornecer pelo menos 10 MB por DPU de largura de banda sustentada.
  • A DPU, o FSU e a Análise de big data comunicam bidirecionalmente via HTTP ou HTTPS na porta 80 ou 443 (por padrão; as portas podem ser configuradas como alternativa).
  • A análise de big data Sensor(s) deve ser capaz de se conectar (unidirecional) aos servidores.
  • Para permitir que a DPU envie mensagens de alerta via SMTP, é necessário que ela possa entrar em contato com o servidor SMTP configurado.
  • A Adobe recomenda que os FSUs e DPUs recebam nomes de rede, como FSU01.CLIENT.COM, para evitar a reconfiguração se ocorrer uma alteração no endereço IP.