topic Re: Alto consumo de CPU in Brasil

Alto consumo de CPU

Anonymous — Mon, 05 Dec 2016 12:06:13 GMT

Ola,

estou com um problema quando rodo minha aplicação no servidor, o consumo de CPU fica altíssimo, não estou conseguindo entender o que eleva o uso de CPU, existe alguma maneira de eu verificar no meu computador qual objetivo esta consumindo muito CPU? meu arquivo é leve, esta pesando 32 mb, não tenho nenhum calculo complexo tipo agregações pois movi tudo para a carga do script, talvez o calculo mais pesado que eu tenha seja concatenações onde desconsidero todas as dimensões exceto as que eu preciso em algumas abas, esse calculo poderia consumir muita CPU?

Eu uso muitas variáveis também, isso poderia aumentar o uso de CPU?

Eu precisaria saber alguma forma de mensurar esse consumo de CPU antes de subir o arquivo para o servidor pois no meu pc todas as abas rodam muito rápidas.

Re: Alto consumo de CPU

maiconmello — Mon, 05 Dec 2016 13:56:56 GMT

Bom dia, de um CTRL + T e manda uma imagem da nuvem de dados !

Att,

Re: Alto consumo de CPU

Anonymous — Mon, 05 Dec 2016 14:42:29 GMT

Aparentemente esta acontecendo algum problema no acesso ao arquivo, falei com uma pessoa da TI e ele me disse que estava dando estouro de memoria nos filtros iniciais, essas 3 tabelas que ligam nas dimensões na parte a direita da imagem são filtros que são aplicados na hora de entrar no arquivo, é a parte do acesso do arquivo, o que cada usuario pode ver e quem ele encherga. Existe algum problema nessa forma de fazer a redução dois dados?

Outra coisa eu tenho uma link table que usa autonumber pra concatenar todas essas fatos, o autonumber nesse caso é indicado ou pode piorar as coisas?

Re: Alto consumo de CPU

lucianosv — Mon, 05 Dec 2016 16:58:14 GMT

O que são as tabelas contraídas acima do lado direito?

Re: Alto consumo de CPU

Anonymous — Mon, 05 Dec 2016 17:00:45 GMT

São tabelas de suporte, tipo data island, tabelas que alimentam um listbox para o usuario selecionar se quer ver o resultado por volume ou receita, tabelas com icones que eu carreguei para usar em tabelas.

Re: Alto consumo de CPU

lucianosv — Mon, 05 Dec 2016 17:10:12 GMT

Você usou um autonumber para criar o campo %ChaveLink?

Isso está funcionando bem? Você validou a amarração?

Você poderia fazer o seguinte teste: Carrega só as dimensões, uma fato e a link table.

E vai testando até achar o que está causando a anomalia. tente isolar a causa.

Re: Alto consumo de CPU

Anonymous — Mon, 05 Dec 2016 17:13:52 GMT

Sim usei autonumber pra gerar essa chave, quando validei os dados todos batiam com outro relatório que nos temos, qual forma eu poderia validar alem de comparar com outro arquivo os resultados?

Essa forma de fazer a redução de campos esta correta? no log dava um problema nessa redução inicial.

Re: Alto consumo de CPU

lucianosv — Mon, 05 Dec 2016 17:24:17 GMT

Não sei se está correto.

Não dá para ver como você está reduzindo só pelo print.

Re: Alto consumo de CPU

Anonymous — Mon, 05 Dec 2016 17:29:02 GMT

Se eu postar o script de redução ajudaria?

Login_temp:

LOAD * INLINE [

    ACCESS, USERID, PASSWORD, RP, CH, GP

     ADMINISTRADORES AQUI

];

Concatenate(Login_temp)

LOAD UPPER(ACCESS) as ACCESS,

     UPPER(USERID) as USERID,

     UPPER(PASSWORD) as PASSWORD,

     RP,

     CH,

     GP

FROM

[..\ACESSOS\Painel de Vendas\Acessos.xlsx]

(ooxml, embedded labels, table is Login)

Where UPPER(ACCESS) = 'USER' OR UPPER(ACCESS) = 'DUMMY';

//------------------------------------------------------------------

Section Access;

LOAD *

Resident Login_temp;

Section Application;

//------------------------------------------------------------------

DROP Table Login_temp;

Permissoes:

LOAD RP,

     Supervisor_Nome as [Supervisor Nome]

FROM

[..\ACESSOS\Painel de Vendas\Acessos.xlsx]

(ooxml, embedded labels, table is Permissoes);

Canais_Permissao:

LOAD CH,

     Canal

FROM

[..\ACESSOS\Painel de Vendas\Acessos.xlsx]

(ooxml, embedded labels, table is Canais);

Grupo_Cliente_Redutor:

LOAD GP,

     [Grupo Produto]

FROM

[..\ACESSOS\Painel de Vendas\Acessos.xlsx]

(ooxml, embedded labels, table is [Grupo Cliente]);

Tem um arquivo de excel que relaciona o que cada usuario vera, por exemplo tem uma tabela que relaciona o codigo de um supervisor com um usuario, outra o codigo do supervidor com um canal de venda.

Re: Alto consumo de CPU

lucianosv — Mon, 05 Dec 2016 17:37:40 GMT

Sua redução é só isso:

Você usa o resto? Se precisar joga pras tabelas dim tirando o snow flake.

Re: Alto consumo de CPU

Anonymous — Mon, 05 Dec 2016 18:23:12 GMT

Não entendi muito bem como funcionaria desse jeito, como seria feita a ligação com as dimensões pra filtrar os dados?

Re: Alto consumo de CPU

lucianosv — Tue, 06 Dec 2016 12:02:46 GMT

Seria só eliminar as 3 tabelas da direita fazendo um left join com as de dimensão.

Não sei se alteraria muito.

Re: Alto consumo de CPU

Anonymous — Tue, 06 Dec 2016 16:39:01 GMT

Obrigado Luciano, vou tentar fazer a alteração.

Re: Alto consumo de CPU

lucianosv — Tue, 06 Dec 2016 17:10:17 GMT

Não sei mais o que te falar a respeito.

Eu tentaria carregar os pedaços e ir testando para achar onde está o problema.

É difícil solucionar só olhando o print.

Você vai precisar debulhar a aplicação.

Re: Alto consumo de CPU

Anonymous — Tue, 06 Dec 2016 17:12:38 GMT

Tem algo que eu possa te enviar que ajudaria analisar?

Re: Alto consumo de CPU

maiconmello — Tue, 06 Dec 2016 17:28:38 GMT

Eu sugiro Flavio executar por partes.

Tabela 1

Exit script. Roda a aplicação e veja como esta desempenho.

Depois vai lendo outras tabelas, ou seja montando em partes a sua nuvem de dados e veja aonde esta perdendo a performance.

Veja em configuração - propriedades de documentos - Aba tabelas e veja as tabelas e o volume de dados.

Dessa maneira é muito difícil ajudar.

Re: Alto consumo de CPU

Anonymous — Tue, 06 Dec 2016 17:33:06 GMT

Eu postei aqui https://community.qlik.com/message/1172408?et=watches.email.thread#1172408 umas estatísticas da aplicação, se puder por gentileza de uma olhada.

Re: Alto consumo de CPU

lucianosv — Tue, 06 Dec 2016 18:18:37 GMT

A ideia do Maicon é o que eu penso também.

Carrega uma fato por vez até achar aonde tá pegando.

Re: Alto consumo de CPU

Anonymous — Tue, 06 Dec 2016 20:00:45 GMT

Obrigado, vou fazer esse procedimento

Re: Alto consumo de CPU

Clever_Anjos — Tue, 06 Dec 2016 21:28:08 GMT

Roda o Document Analyzer (http://qlikviewcookbook.com/download/document-analyzer/) e me manda o resultado, eu te ajudo a identificar onde pode estar o problema