topic Re: Recarga Full in Brasil

Recarga Full

Anonymous — Mon, 29 Dec 2014 17:40:14 GMT

Boa tarde!

Estou precisando rodar um script no banco de dados, onde eu gere QVD automático para cada tabela existente no banco.

Alguém pode me ajudar?

Re: Recarga Full

afurtado — Mon, 29 Dec 2014 18:41:38 GMT

Boa tarde.

Tem um modelo que o Pablo Labbe fez um tempo atrás. Usa macro.

Mas se quiser fazer na não (sem macro) le a tabela

SELECT name from sysobjects where xtype = ‘U’

E faz um loop com os nomes lidos da tabela lendo as tabelas e salvando

trace $(vCarga_Tabela);

For iCont = 1 to SubStringCount( vCarga_Tabela, ',' )

v_table = SubField( vCarga_Tabela, ',', iCont);

trace $(iCont) $(v_table);

$(v_table):

SQL SELECT *

FROM $(v_table);

STORE $(v_table) INTO v_table.QVD;

DROP TABLE $(v_table);

Att,

Alessandro Furtado

De: Heitor Kruschewsky

Enviada em: segunda-feira, 29 de dezembro de 2014 15:41

Para: ALESSANDRO FURTADO

Assunto: - Recarga Full

<http://community.qlik.com/resources/images/palette-1004/headerLogo-1391206184624-QlikCommunity_logo.gif>

Re: Recarga Full

Anonymous — Mon, 05 Jan 2015 11:33:07 GMT

Alessandro,

Fiz conforme me orientou, mas não dei conta de gerar os QVD's automático com o conteúdo de cada tabela.

você pode esclarecer esse detalhe?

Re: Recarga Full

afurtado — Mon, 05 Jan 2015 12:26:23 GMT

Heitor, eu estou sem o SQL na minha maquina e nao consigo rodar/testar aqui. Mas achei um outro post

http://community.qlik.com/docs/DOC-6087

este modelo do post foi feito pelo Aderlan Rodrigues.

Att,

AMF

Re: Recarga Full

Mon, 05 Jan 2015 15:31:38 GMT

Heitor

O fato de gerar um QVD para cada tabela do banco é para tentar ganhar em desempenho? Se a intensão for esta, gostaria de compartilhar que já tentei este tipo de "solução" e desisti, pois somando o tempo para gerar as tabelas "grandes" do banco aliado a ter que ler tudo novamente a partir do QVD (mesmo sendo uma recarga muito mais rápidas) e principalmente por abrir mão das vantagens de eventualmente tratar dados via T-SQL na recarga, me fizeram desistir logo nas primeira tentativas.

No meu caso o banco é de um ERP com mais ou menos 600 tabelas e 200 gb de informação.

Compartilhe conosco se você optou por esta solução e se teve experiência positiva.

Abraço!

Re: Recarga Full

Anonymous — Mon, 05 Jan 2015 15:42:38 GMT

Anderson

No meu caso preciso dessa pratica para não onerar o processamento do ERP todas as vezes que precisar extrair informações no momento da criação, e também para quando meu cliente não disponibiliza uma pessoa para sempre me dar acesso ao ERP, nesses casos prefiro extrair tudo e guardar essas informações em QVD em um HD para desenvolvimento do qvw, porem ainda não tive sucesso na transformação de SQL para QVD, você pode me ajudar com algum modelo de QVW?

Re: Recarga Full

nicolett_yuri — Mon, 05 Jan 2015 16:34:33 GMT

Apresentou algum erro?

Nos dê maiores detalhes do que esta ocorrendo.

Re: Recarga Full

Anonymous — Mon, 05 Jan 2015 18:00:49 GMT

Yuri,

estou discutindo o mesmo assunto no link abaixo, me ajude lá.

http://community.qlik.com/inbox?objectType=102&objectID=6087

Re: Recarga Full

Anonymous — Tue, 06 Jan 2015 15:01:41 GMT

Alguém pode me ajudar nesse meu problema????

Re: Recarga Full

Tue, 06 Jan 2015 15:06:10 GMT

Heitor, Poderia relatar que problemas você enfrentou ao usar as soluções propostas pelo Alessandro ?!

Re: Recarga Full

Anonymous — Tue, 06 Jan 2015 15:14:33 GMT

Não estou conseguindo gerar o loop e automaticamente os QVD, está fazendo a leitura direitinho, porem não está gerando os QVD's com os dados de cada tabela, não apresenta erro, só não está gerando os qvds

Re: Recarga Full

nicolett_yuri — Tue, 06 Jan 2015 15:22:18 GMT

Heitor, coloque aqui seu código (é o lugar correto para a discussão).

Certeza que não esta gerando os qvds? Tente colocar o caminho em que deseja gerar esses qvds no STORE.

Re: Recarga Full

Anonymous — Tue, 06 Jan 2015 15:38:14 GMT

Pronto conseguir!

ufa!

Não conhecia a função for..next, rodou perfeito!

Re: Recarga Full

Tue, 06 Jan 2015 16:42:16 GMT

Só por curiosidade, se somar o tamanho de todos os arquivos gerados, quantos mega ou giga resultou e quanto tempo levou?

Re: Recarga Full

Anonymous — Tue, 06 Jan 2015 19:52:33 GMT

coloquei para processar aqui da minha maquina a memoria não suportou, vou fazer um teste no management e te digo!

Re: Recarga Full

nicolett_yuri — Tue, 06 Jan 2015 20:06:18 GMT

Heitor, verifique a real necessidade de fazer download de TODAS as tabelas de seu banco, talvez esse processo seja muito custoso e você não se utilizará de tudo, perdendo tempo e processamento de seu servidor.

Outra coisa importante: tabelas transacionais precisam sempre sofrer carga incremental para não causar nenhum problema de performance no banco de dados. A estrutura de código que você pegou sempre faz FULL de todas as tabelas.

Re: Recarga Full

Anonymous — Mon, 12 Jan 2015 11:09:08 GMT

Estimado Anderson,

segue retorno abaixo:

Tamanho da base de dados em SQL = 212 GB

Tamanho da base da dados em QVD= 9 GB

Tempo de extração = 40 minutos

resumindo estou satisfeito com essa pratica.