topic Re: Extraindo dados do MongoDB pelo Conector nativo do Sense in Brasil

Extraindo dados do MongoDB pelo Conector nativo do Sense

victorbertoldo — Tue, 16 Jul 2019 18:02:43 GMT

Olá pessoas! Tenho um grande problema nas mãos.

Eu preciso extrair os dados do MongoDB no Qlik Sense. Mas alguns pontos devem ser considerados:

Tenho uma base de dados bem grande no Mongo e preciso gerar os QVDs mês a mês ou ano a ano;
Fiz um For para buscar os dados delimitando por intervalo de data;
O Qlik chega a gerar alguns QVDs, quando tento por ano ele gera 1 qvd do primeiro ano e por mes ele chega a gerar qvds de dois ou tres meses.

Porém ocorre erro no meio do processo:

QVX_UNEXPECTED_END_OF_DATA: ERROR [HY000] [Qlik][MongoDBODBC] (110) Error from MongoDB Client: Failed to send "find" command with database "mdfe": socket error or timeout (Error Code: 4)

Segue imagem do erro.

Alguem já fez algum projeto que faz extração do Mongo em produção, pra me ajudar?

HELP PLEASE!

Re: Extraindo dados do MongoDB pelo Conector nativo do Sense

luan_soares — Fri, 19 Jul 2019 14:16:30 GMT

Oi,

Já tentou retirar o timeout ou deixa-lo zerado?

Re: Extraindo dados do MongoDB pelo Conector nativo do Sense

victorbertoldo — Fri, 19 Jul 2019 14:18:33 GMT

Já deixei zerado e fui aumentando gradativamente o Timeout até chegar nesse valor, que por sinal esta próximo do limite do mongodb

Re: Extraindo dados do MongoDB pelo Conector nativo do Sense

afurtado — Thu, 25 Jul 2019 01:55:55 GMT

Este conector não esta em BETA ?

Já tentou este?

https://github.com/mongodb/mongo-odbc-driver/releases/

Re: Extraindo dados do MongoDB pelo Conector nativo do Sense

victorbertoldo — Thu, 25 Jul 2019 14:30:50 GMT

Obrigado pelo interesse, Furtado.

O conector está em beta msm, mas minha idéia em iniciar a thread é justamente contribuir para o amadurecimento do conector para que um dia ele saia da versão beta, já que não achei muito material relacionado a respeito (Qlik com MongoDB).

Já tentei este driver ODBC, porém ele não funciona. Não sei se tem haver com a versão do mongo ou do próprio conector. Tentamos em pelo menos 5 máquinas diferentes, pra ter certeza que o problema não era na estação.

A empresa por trás do Mongo fornece um conector pago para ferramentas de BI, porém adquirir o mesmo não é uma opção no meu caso. E talvez seja por isso que este driver não funciona bem.

Atualmente estamos tentando contornar o problema de outras maneiras, mas fica o post para movimentarmos o assunto.