awffull - Online na nuvem

PROGRAMA:

NOME

AWFFull - Um Webalizer Fork, cheio de recursos

SINOPSE

enorme [...] [arquivo de log]

DESCRIÇÃO

AWFFull é um programa de análise de log de servidor web baseado no Webalizer. AWFFull produz
estatísticas de uso em formato HTML para visualização em um navegador. Os resultados são apresentados em
formato colunar e gráfico, o que facilita a interpretação. Anual, mensal,
estatísticas de uso diário e de hora em hora são apresentadas, junto com a capacidade de exibir o uso
por site, URL, referenciador, agente de usuário (navegador), nome de usuário, strings de pesquisa, páginas de entrada / saída,
e país (algumas informações podem não estar disponíveis se não estiverem presentes no arquivo de log que está sendo
processado).

AWFFull suporta os seguintes formatos de registro mostrados na seguinte lista de variáveis:

Arquivos de log CLF (formato de log comum)

Combinado
formatos de registro conforme definido pelo NCSA e outros, e variações destes que
tenta lidar de forma inteligente

xferlog
Arquivos de log formatados em wu-ftpd permitindo a análise de servidores ftp e logs de proxy squid.
Note

Os registros também podem ser compactados, via gzip. Se um arquivo de log compactado for detectado,
será descompactado automaticamente enquanto é lido. Logs compactados devem ter o
padrão gzip extensão de .gz.

Esta documentação se aplica ao AWFFull Versão 3.8.2

MUDANÇAS A PARTIR DE WEBALIZADOR

O AWFFull é baseado no código do The Webalizer e possui várias alterações grandes e pequenas. Esses
incluem:

· Além das estatísticas brutas: Fazendo uso de fórmulas publicadas para fornecer
percepções sobre o uso do site

· Pesquisas de endereço IP GeoIP para uma detecção mais precisa do país

· Gráficos redimensionáveis

· Integração com gettext GNU permitindo a facilidade de traduções. Atualmente 32 idiomas
são suportados.

· Exibir mais de 12 meses do histórico do site na página inicial.

· Rastreamento de contagem de página adicional e classificação por mesmo.

· Alguns pequenos ajustes visuais, incluindo o uso do Geolizer de Kb, Mb etc para Volumes

· Gráficos circulares adicionais para contagens de URL, páginas de entrada e saída e sites

· Linhas horizontais em gráficos que são mais sensíveis e fáceis de ler

· Agente de usuário e rastreamento de referência agora são calculados via PAGES, não HITS

· Opções de linha de comando longa do estilo GNU agora são suportadas (por exemplo --Socorro)

· Pode escolher o que é uma página, excluindo 'o que não é' vs o método original 'o que é'

· As solicitações para o site que está sendo analisado são exibidas com o URL de referência correspondente

· Uma tabela de erros 404 e o URL de referência podem ser gerados

· Um arquivo CSS externo pode ser usado com o html gerado

· A otimização manual do desempenho do arquivo de configuração agora é mais fácil com uma pós-análise
saída de resumo

· Endereços IP especificados podem ser atribuídos a um determinado país

· Opções adicionais de despejo para análise detalhada com outras ferramentas

· Os logs do Lotus Domino v6 agora são detectados e processados

Mudanças e melhorias adicionais estão planejadas e em implementação. Veja o
Arquivo TODO para detalhes.

NOVAS RELATÓRIO MEDIÇÕES

Com a versão 3.8.1 do AWFFull, vários novos resultados medidos foram adicionados ao
página mensal do relatório detalhado.

Acesso Único
Páginas de acesso único - a única página vista em uma determinada visita

Pegajosidade
A utilidade de uma determinada página de entrada para atrair mais visitantes para o seu site

Popularidade
A proporção de entradas de página para saídas de página

Essas métricas podem ajudar a melhorar o insight no uso do site processado.
E, portanto, permitir que o proprietário do site faça mudanças positivas para tornar o site mais útil para
visitantes do site. Todas as três métricas aparecem no relatório 'Páginas de entrada'. 'Popularidade' também é
no relatório 'Sair das páginas'.

Acesso Único

Mais completamente: 'Páginas de acesso único'. Este é um relatório sobre o número de vezes que um
determinada página foi a única página visualizada em uma visita. Ou em inglês, Alguém veio ao seu
local na rede Internet. Eles viram apenas uma página. O número é a contagem cumulativa de pessoas que fizeram
isso para aquela página específica. Por que isso é útil? Identificar as páginas de entrada que
não atraia visitantes mais profundamente em seu site. Ou ver páginas de entrada que não deveriam ser
Páginas. É também uma verificação da realidade em relação aos próximos dois valores, que são calculados a partir de
este número. O número gerado deve ser um subconjunto das 'Visualizações da página de entrada' e / ou
Métrica 'Exibições de página de saída'. Se não é? Avise-me, temos um bug. :-)

Pegajosidade

É calculado como 1 - (Acesso único / Visualizações de página de entrada) expresso em porcentagem. Dentro
Essência Stickiness descreve o quão útil uma determinada página de entrada é para atrair os visitantes mais profundamente
seu site. Quanto mais pegajosa a página, mais pessoas são pegas por ela. :-) Quanto mais próximo de 100%
o melhor. Geralmente. Certas páginas em SEU site podem não fazer sentido ter um
alta viscosidade ou mesmo> 5%. Essa medição é uma pista para entender como seu site está
usado, não é uma regra. Como isso é útil? Como e onde as pessoas estão entrando em sua web
local. Isso faz sentido? Deve ser aqui ou ali? O que você pode mudar para consertar isso
e, portanto, melhorar o uso do seu site.

Popularidade

Popularidade é a proporção entre entradas e saídas de páginas. o Se for igual a 1.0? Então o número
de visitantes do seu site que começaram com essa página é igual ao número que saiu naquele
página. o Se for maior que 1.0, então mais pessoas entraram aqui e saíram. o Se for menor que 0?
Mais pessoas saíram daqui e entraram. Pessoalmente, considero esta métrica uma das mais
úteis métricas "Visão geral: como está o desempenho das páginas". Uma das dificuldades em usar
esta métrica específica é que certos números NÃO farão sentido para o SEU site. Naquilo
uma página de saída natural teria uma popularidade muito baixa. É uma página de saída, não um
página de entrada. Portanto, se uma página de saída tiver alta popularidade, você terá um problema real.
Da mesma forma, é improvável que uma baixa popularidade para uma página de entrada seja uma coisa boa (tm).

"Onde porque?" Todas essas três métricas são abordadas muito bem no Hack nº 58 da página "Web
Site Measurement Hacks "[1]. Que é onde, crédito onde crédito devido, a inspiração para
adicionar essas métricas vieram.

CORRENDO TERRÍVEL

AWFFull é projetado para ser executado a partir de um prompt de linha de comando Unix ou como um cron(8) trabalho. Lá
não é necessário rodar com privilégios de superusuário e, de fato, é preferível NÃO fazê-lo.

Uma vez executado, o fluxo geral do programa é:

Um arquivo de configuração padrão é verificado, /etc/awffull/awffull.conf e, se encontrado, é
usava.

Quaisquer argumentos de linha de comando fornecidos ao programa são analisados. Isso pode incluir o
especificação de um ou mais arquivos de configuração, que são processados ​​no momento em que são
encontrados.

Pode ser útil ter vários arquivos de configuração. Um mestre usado para vários sites, e
arquivos de configuração individualizados. Esteja ciente de que o último conjunto de opções vence. Então, o último arquivo de configuração,
ou se após um arquivo de configuração, opções de linha de comando. Útil se você deseja enviar a saída
para um diretório alternativo.

Se um arquivo de log foi especificado, ele é aberto e fica pronto para processamento. Se não houver arquivo de log
foi fornecido, STDIN é usado para entrada. Se o nome do arquivo de log '-' for especificado, STDIN será
forçado.

Se um diretório de saída foi especificado, AWFFull muda para esse diretório em preparação para
gerando saída. Se nenhum diretório de saída foi fornecido, o diretório atual é usado.

Se nenhum nome de host for fornecido, o programa tenta obter o nome de host usando um uname(2) sistema
ligar. Se isso falhar, o host local será usado.

Um arquivo de histórico é pesquisado no diretório atual (diretório de saída) e lido se
encontrado. Este arquivo mantém os totais dos meses anteriores, que é usado no principal index.html
Documento HTML. Nota: O local do arquivo agora pode ser especificado com o HistoryName
opção de configuração.

Se o processamento incremental foi especificado, um arquivo de dados é pesquisado e carregado se encontrado,
contendo os dados de 'estado interno' do programa no final de uma execução anterior. Observação:
O local do arquivo agora pode ser especificado com a opção de configuração IncrementalName.

O processamento principal começa no arquivo de log. Se o log se estender por vários meses, um HTML separado
documento é criado para cada mês. Após o processamento principal, a página index.html principal é
criado, que tem totais por mês e links para o documento HTML de cada mês.

Um novo arquivo de histórico é salvo em disco, que inclui os totais gerados pelo AWFFull durante o
corrida atual.

Se o processamento incremental foi especificado, um arquivo de dados é gravado contendo o
dados de 'estado interno' no final desta execução.

INCREMENTAL EM PROCESSAMENTO

A versão 1.2x do Webalizer adicionou capacidade de execução incremental. Simplificando, isso permite
processamento de grandes arquivos de log, dividindo-os em pedaços menores e processando estes
peças em vez disso. O que isso significa em termos reais é que agora você pode girar seus arquivos de log como
quantas vezes você quiser e ainda ser capaz de produzir estatísticas de uso mensal sem a perda
de qualquer detalhe. Basicamente, o AWFFull salva e restaura todos os dados internos em um arquivo chamado
terrível. atual. Isso permite que o programa "comece de onde parou", por assim dizer, e
permite a preservação dos detalhes de uma execução para a próxima. O arquivo de dados é colocado no
diretório de saída atual, e é um arquivo de texto ASCII simples que pode ser visualizado com qualquer
editor de texto padrão. Sua localização e nome podem ser alterados usando o IncrementalName
palavra-chave de configuração.

Algumas precauções especiais precisam ser tomadas ao usar a capacidade de execução incremental de
AWFFull. As opções de configuração não devem ser alteradas entre as execuções, pois isso pode causar
corrupção dos dados internos armazenados. Por exemplo, alterar o nível de MangleAgents
fazer com que diferentes representações de agentes do usuário sejam armazenadas, produzindo resultados inválidos em
a seção de agentes do usuário do relatório. Se você precisar alterar as opções de configuração, faça-o
no final do mês após o processamento normal do mês anterior e antes
processando o mês atual. Você também pode querer excluir o arquivo awffull.current como
bem.

AWFFull também tenta evitar a duplicação de dados, mantendo o controle do carimbo de data / hora do
último registro processado. Este carimbo de data / hora é então comparado aos registros atuais sendo processados,
e quaisquer registros que foram registrados antes desse carimbo de data/hora são ignorados. Isso, em teoria,
deve permitir que você processe novamente os registros que já foram processados ​​ou processe os registros que
conter uma mistura de registros processados/ainda não processados ​​e não produzir duplicação de
estatísticas.

A única vez que isso pode quebrar é se você tiver carimbos de data / hora duplicados em dois registros separados
arquivos. Quaisquer registros no segundo arquivo de log que tenham o mesmo carimbo de data / hora do último
registro no arquivo de log anterior processado, serão descartados como se já tivessem sido
processado. Existem muitas maneiras de evitar isso, por exemplo, parando a web
servidor antes de girar os logs evitará essa situação, ou usar uma ferramenta como o cronolog
(⟨http://cronolog.org/⟩). Essa configuração também exige que você sempre processe os logs em
ordem cronológica, caso contrário, ocorrerá perda de dados como resultado da comparação do carimbo de data / hora.

REVERSE DNS PESQUISAS

AWFFull não oferece mais suporte a pesquisas DNS. Use um programa externo, como DNShistory
ou DNSTran em vez disso.

· ⟨http://www.summary.net/soft/dnstran.html⟩

· ⟨http://www.stedee.id.au/dnshistory⟩

Com a versão 3.7.1 do AWFFull, a capacidade GeoIP pode ser usada para melhorar o país
detecção.

COMANDO LINHA OPÇÕES

AWFFull suporta muitas opções de configuração diferentes que irão alterar a forma como o programa
se comporta e gera saída. A maioria deles pode ser especificada na linha de comando, enquanto
alguns só podem ser especificados em um arquivo de configuração. As opções da linha de comando são listadas
abaixo, com referências às palavras-chave do arquivo de configuração correspondente. Veja também
horrível.conf(5).

Opções gerais

-h, --Socorro
Mostra todas as opções de linha de comando disponíveis e sai do programa

-V, --versão
Exibir versão do programa e sair do programa

-v --verboso
Verbosidade Exibir informações de depuração para erros e avisos. Múltiplos v's testamento
aumentar a quantidade de informações exibidas.

--match_counts
Otimização de exibição de informações úteis relativas ao número de correspondências contra
várias opções de Grupo, Ocultar e Ignorar.

-i --ignore_history
IgnorarHist Ignore a história. USE COM CUIDADO. Isso fará com que o AWFFull ignore qualquer
arquivo de histórico mensal anterior apenas. Os dados incrementais (se presentes) ainda estão
processado.

-p --preserve_state
Incremental Preserve os dados internos entre as execuções.

-T --tempo
TempoMe. Força a exibição de informações de tempo no final do processamento.

-c --config = FILE
Use o arquivo de configuração FILE

-n NOME
HostName. Use o nome de host NAME.

-o --output = DIR
OutputDir. Use o diretório de saída DIR.

-t NOME
Título do relatório. Use NAME para o título do relatório.

F --logtype = TYPE
Tipo de registro. Especifique o tipo de registro a ser processado. O valor pode ser um dos seguintes: auto, clf,
formato combinado, dominó, ftp ou lula. Se não for especificado, o padrão será automático
formato. Os logs de FTP devem estar no formato wu-ftpd xferlog padrão. Um valor de 'auto'
afirma que o formato do log verificado automaticamente.

-f --dobrar
FoldSeqErr. Dobre os registros de log da sequência de volta para a análise, tratando como se
eram a mesma data / hora do último registro válido. Normalmente, fora do log de sequência
os registros são simplesmente ignorados.

-Y PaísGraph. Suprima o gráfico do país.

-G Gráfico horário. Suprima o gráfico de hora em hora.

-x NOME
Extensão HTML. Define a extensão do arquivo HTML a ser usada nos arquivos de relatório criados.
Se não for especificado, o padrão é html. Não inclua o período inicial.

-H Estatísticas horárias. Suprimir estatísticas por hora.

-L GráficoLegend. Suprimir legendas de gráficos codificados por cores.

-l NÚMERO Linhas de gráfico. Use linhas de fundo. O número de linhas e onde colocar são
calculado automaticamente. Para compatibilidade com versões anteriores, qualquer número> 0 ativa. Usar
zero ('0') para desativar as linhas.

-P NOME
Tipo de página. Especifique extensões de arquivo que são consideradas páginas. Às vezes referido
como visualizações de página.

-m NÚMERO VisitTimeout. Especifique o período de tempo limite da visita. Especificado em número de segundos.
O padrão é 1800 segundos (30 minutos). Às vezes referido como sessões.

-Eu NOME
ÍndiceAlias. Use o nome do arquivo como um alias adicional para o índice.

-M NÚMERO Agentes Mangle. Mude os nomes dos agentes de usuário de acordo com o nível de mangle especificado por
número

Os níveis de mangle são:

5 - Nome do navegador e versão principal

4 - Nome do navegador, versão principal e secundária

3 - Nome do navegador, versão principal, versão secundária com duas casas decimais

2 - Nome do navegador, versões principais e secundárias e subversão

1 - Nome do navegador, versão e tipo de máquina, se possível

0 - Todas as informações (deixadas inalteradas).

-g NUM GroupDomains. Agrupe sites automaticamente por domínio. O nível de agrupamento especificado por
num pode ser considerado 'o número de pontos' a serem exibidos no agrupamento. O
o valor padrão de 0 desativa qualquer agrupamento de domínio.

Ocultar opções

-um nome
HideAgent. Oculte o nome de correspondência dos agentes do usuário.

-r NOME
Ocultar referenciador. Oculte o nome correspondente do referenciador.

-s NOME
Ocultar Site. Oculte o nome correspondente do site.

-X NOME
Ocultar todos os sites. Oculte todos os sites individuais (somente grupos de exibição).

-u NOME
Ocultar URL. Ocultar nome de correspondência de URL.

Opções de tamanho da tabela

-A --top_agents = NUM
Principais Agentes. Exibe a tabela de principais agentes do usuário.

-R --top_refers = NUM
Principais referências. Exibe a tabela de referências de números principais.

-S --top_sites = NUM
Melhores sites. Exibe a tabela de números principais.

-U --top_urls = NUM
URLs principais. Exibe a tabela do URL numérica superior.

-C --top_countries = NUM
Principais países. Exiba a tabela do número superior de países.

-e --top_entry=NUM
Entrada principal. Exibe a tabela de primeiras páginas de entrada.

-E --top_exit = NUM
InícioSair. Exibe a tabela de número de páginas de saída superior.

Outras opções

--use_geoip
Permite o uso do recurso Maxmind GeoIP para uma detecção mais precisa de
países.

NOTA! Do não permitir GeoIP if Você análise arquivos que tinha que o IP Endereço
traduzido para a Totalmente Qualificado Proprietário Nome. Use ou cru IP Endereços e GeoIP,
or Names e desabiltar GeoIP. ie. não usar GeoIP E História do DNS.

--match_counts
Exiba as várias Contagens de Partidas de Grupo/Ocultar etc. Esta opção é ideal para
otimização do arquivo awffull.conf. Basta ter cuidado com a otimização de Agentes em
particular, pois a ordem é normalmente importante.

CONFIGURAÇÃO ARQUIVOS

veja a horrível.conf(5) página man para detalhes completos de todas as opções de configuração.

Arquivos de configuração são padrão ASCII(7) arquivos de texto que podem ser criados ou editados usando
qualquer editor padrão.

Linhas em branco e linhas que começam com um sinal de sustenido ('#') são ignoradas.

Quaisquer outras linhas são consideradas linhas de configuração e têm o formato 'Palavra-chave
Value ', onde a' palavra-chave 'é uma das palavras-chave de configuração atualmente disponíveis (consulte
horrível.conf(5)), e 'Valor' é o valor a ser atribuído a essa opção específica.

Qualquer texto encontrado após a palavra-chave até o final da linha é considerado o da palavra-chave
valor, então você não deve incluir nada após o valor real na linha que não seja
na verdade, parte do valor que está sendo atribuído. O arquivo amostra.conf fornecido com o
A distribuição também contém muitas documentações e exemplos úteis.

Certas "palavras-chave" aceitarão um segundo valor. Nessas situações, o primeiro valor pode ser
colocado entre aspas duplas (") para permitir espaços em branco.

Use um serviço online completo usando serviços onworks.net