Outros sites Medialivre
Caldeirão da Bolsa

Qdownloader

Espaço dedicado a todo o tipo de troca de impressões sobre os mercados financeiros e ao que possa condicionar o desempenho dos mesmos.

Re: Qdownloader

por VirtuaGod » 19/2/2020 17:58

rg7803 Escreveu:
VirtuaGod Escreveu:Acabaram de me informar que a yahoo finance alterou a forma de acesso aos dados deles (alteração na API). Agora que já sei o erro acho que vai ser mais simples de corrigir. No fim de semana já vejo ;-)



olha quem está de volta :mrgreen: pensei que estavas zangado connosco !

Cheio de trabalho e com pouco apetite para o fazer lol (incrível como perdes vontade de fazer coisas que fazias por gosto quando passam a ser trabalho :mrgreen: )

Mas muito em breve vai haver novidades :wink:

P.S. O que vale é que os mercados estão a bombar e só me dão alegrias. É o MSCI World, é o ouro, são as treasuries... partying like it's 1999
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por rg7803 » 19/2/2020 17:53

VirtuaGod Escreveu:Acabaram de me informar que a yahoo finance alterou a forma de acesso aos dados deles (alteração na API). Agora que já sei o erro acho que vai ser mais simples de corrigir. No fim de semana já vejo ;-)



olha quem está de volta :mrgreen: pensei que estavas zangado connosco !
“Buy high, sell higher...”.
Avatar do Utilizador
 
Mensagens: 4196
Registado: 1/5/2008 23:09
Localização: Almada.

Re: Qdownloader

por VirtuaGod » 19/2/2020 17:42

Acabaram de me informar que a yahoo finance alterou a forma de acesso aos dados deles (alteração na API). Agora que já sei o erro acho que vai ser mais simples de corrigir. No fim de semana já vejo ;-)
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por VirtuaGod » 16/2/2020 17:53

Já me tinham dito isso ontem e a verdade é que hoje nem consigo entrar no site . Não sei se estou com paciência para resolver isto no meio de tanta cena profissional que tenho de fazer.

Vou dar uma vista de olhos mas não prometo nada. O projecto de criar uma coisa a sério e abranger onde vai buscar dados (incluindo FMI e BCE) tb é uma possibilidade mas nada a curto prazo.

P.S. O problema de ser algo grátis é que não ganho nada, a vantagem é poder dizer "quebrou, só resolvo quando tiver tempo". Vou criar um novo servidor e assim e ver se as coisas começam a funcionar mas tenho as minhas dúvidas.
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por VirtuaGod » 15/2/2020 17:43

Joao.D Escreveu:Not working


Working again. Gestão de servidores é das coisas mais chatas que existe :roll:
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por VirtuaGod » 30/9/2019 20:01

Infelizmente estou com alguns stresses que levaram à quebra de TODOS os meus sites :-/ (tem a haver com a gestão dos servidores). No próximo fim de semana já devem estar todos a bombar. É uma questão de tempo, mas de momento estou ocupadíssimo com outras cenas. Assim que tiver meia dúzia de horas eu coloco tudo on-line de novo.

Abraço e obrigado ;-)
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por VirtuaGod » 20/3/2018 1:56

É possível que brevemente tenhamos uma fonte nova de qualidade. A IEX. A IEX é conhecida para quem leu o livro flash boys do Michael Lewis. Está prestes a tornar-se numa exchange e estão a oferecer as cotações até um histórico de 5 anos em versão End-Of-Day.

É tão simples de incluir que acho que não vou resistir :-) e eles querem aumentar o histórico para 20 anos ;-)

A API deles é bastante rápida (ligeiramente mais rápida que a Tiingo). Pena por enquanto só terem 5 anos!!
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por VirtuaGod » 20/3/2018 1:34

rsacramento Escreveu:com a amazon já não dá erro

contudo tenho uma questão: eu uso o metaStock XV e após converter não consigo abrir o ficheiro no meta...

vocês estão a usar o ms 10.1, não é?


E se não converteres nada? Encontrei isto e parece-me interessante. Pena não conseguir o meta 15 nem para trial. É um filme mesmo pedir a trial.

Ler. CSV no Meta XV

"Once the data is formatted correctly, you can link the files to MetaStock 15 by double clicking on Local Data Lists within the Power Console and browsing for your data"

A data está correctamente formatada acho eu. Tenta com um símbolo só e diz-me o resultado sff (print??)
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por António Vieira » 19/3/2018 16:54

VG muito obrigado pela partilha e pelo excelente trabalho em prol deste forum que acompanho desde 2002.

Bem haja
 
Mensagens: 241
Registado: 14/12/2014 20:38

Re: Qdownloader

por VirtuaGod » 18/3/2018 18:51

Suporte para futuros está a evoluir. Agora tem-se um drop-down menu novo que permite escolher o output dos futuros. Isto porque há muito tipo de formato na base de dados.

Para sacares o ouro recomendo o ticker CME_GC2 e escolheres a opção "Open, High, Low, Last". Tem histórico desde 1974, sai limpo (ao contrário do CME_GC1) e muito próximo do valor spot.

Abr
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por VirtuaGod » 10/3/2018 16:49

António Vieira Escreveu:Boa tarde,

alguem me informa qual o ticket dos futuros do Gold? Queria sacar o historico e não consigo.
GC1? Não dá e já agora é no quandl ou yahoo?

Obrigado desd já

Um dos tickers que se vai poder usar para sacar ouro é o CME_GC1. Teoricamente usar o front month é que o que está mais próximo do valor spot.

Este tipo de futuros ainda não está implementado no Qdownloader. Estará para breve até porque este layout é o mesmo que o NQ (futuros sobre o nasdaq 100) e os ES (futuros sobre o S&P 500) e tenho bastante interesse em ter isso implementado.

Assim que estiver funcional eu aviso aqui. Mas por enquanto ainda não é possível.
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por António Vieira » 9/3/2018 16:59

Boa tarde,

alguem me informa qual o ticket dos futuros do Gold? Queria sacar o historico e não consigo.
GC1? Não dá e já agora é no quandl ou yahoo?

Obrigado desd já
 
Mensagens: 241
Registado: 14/12/2014 20:38

Re: Qdownloader

por VirtuaGod » 4/3/2018 23:04

Para além de mensais são uma média. Uma média dos valores mensais? quem é que usa uma média dos valores mensais? A sério, eu bato mal com estes economistas académicos :shock:

No site da OCDE é a mesma coisa. Os dados são exactamente iguais. Depois ficam espantados por só descobrir que estamos em recessão 3 ou 4 meses depois dela ter começado :wall:
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por VirtuaGod » 4/3/2018 17:46

Estive a brincar com a API ao Statistical Data Warehouse do BCE e parece engraçada e simples de implementar. Pena muitos dados parecerem-me que estão limitados em termos de frequência.

Por exemplo as yields a 10 anos dos países do euro só encontrei com frequência mensal, o que é ridículo para para um banco central como o BCE. Pode ser que eu apenas não tenha encontrado a versão diária mas o site não é propriamente user friendly. Até a este nível a Europa se encontra longe dos EUA.

@António Vieira Os dados que encontrei do euro/JPY são diários mas como normal em sites não de trading só apresenta o fecho
Anexos
Capture.PNG
Capture.PNG (32.13 KiB) Visualizado 7782 vezes
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por VirtuaGod » 4/3/2018 0:08

Ligação à tiingo acabadinha de fazer :wink:

Agora estou numa de tentar testar a qualidade de dados. Principalmente da yahoo :-k :oh: Mas quando tiver as cotações de locais pagos poderei fazer uma comparação!!
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por VirtuaGod » 3/3/2018 15:44

António Vieira Escreveu:VG,
engraçado que meto a API e se pedir os dados do ^gspc a resposta é " An error has occurred. Check your logs or contact the app author for clarification ".

mas se pedir o ICE_B1, já é possivel. Que te parece que é??
É que nos DAX é igual com o ticket ^GDAXI.

jà agoa para o historico do forex do iene e eur é possivel?

Obrigado e se puderes dar a tua opinião agradecia


O ^GDAXI e o ^GSPC são ticker da yahoo finance e como tal deves sacar na tab da yahoo finance, não do quandl (que é o que me parece que estás a tentar fazer)

Em relação ao euro/iene infelizmente parece-me que o símbolo da yahoo finance (EURJPY=X) não tem o histórico para download. Potencialmente só a médio/longo prazo teremos EUR/JPY no Qdownloader porque acho que só uma ligação ao Statistical Data Warehouse do BCE é que dará os dados pretendidos. Virão antes várias ligações, incluindo à FED (através do FRED) mas como é de esperar eles têm é câmbios de tudo apenas vs o dólar
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por rsacramento » 3/3/2018 13:32

VirtuaGod Escreveu:Então, de facto, a minha ferramenta não é para ti!! Ou então é :-) porque complementa aquilo que tens :mrgreen:

bingo!
Avatar do Utilizador
 
Mensagens: 10503
Registado: 29/11/2007 12:50

Re: Qdownloader

por António Vieira » 3/3/2018 11:15

VG,
engraçado que meto a API e se pedir os dados do ^gspc a resposta é " An error has occurred. Check your logs or contact the app author for clarification ".

mas se pedir o ICE_B1, já é possivel. Que te parece que é??
É que nos DAX é igual com o ticket ^GDAXI.

jà agoa para o historico do forex do iene e eur é possivel?

Obrigado e se puderes dar a tua opinião agradecia
 
Mensagens: 241
Registado: 14/12/2014 20:38

Re: Qdownloader

por VirtuaGod » 2/3/2018 23:57

Então, de facto, a minha ferramenta não é para ti!! Ou então é :-) porque complementa aquilo que tens :mrgreen:

Update

O sistema já não pára de sacar quando dá erro. Continua a sacar os restantes tickers e dá um aviso de erro. Vejam que neste caso o ZZZ está no meio dos outros tickers e acabou por ser o único que não sacou (pk o ticker não existe :mrgreen: )
Anexos
Capture.PNG
Capture.PNG (16.21 KiB) Visualizado 9305 vezes
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por rsacramento » 2/3/2018 22:02

VirtuaGod Escreveu:@rsacramento - Tens cotações da reuters? Se sim qual é o primeiro fecho ajustado da apple? Ando a comparar qualidade de dados :wink:

P.S. A data que pretendo é 1980-12-12

não tenho dados US (excepto índices)
Avatar do Utilizador
 
Mensagens: 10503
Registado: 29/11/2007 12:50

Re: Qdownloader

por VirtuaGod » 2/3/2018 21:57

@rsacramento - Tens cotações da reuters? Se sim qual é o primeiro fecho ajustado da apple? Ando a comparar qualidade de dados :wink:

P.S. A data que pretendo é 1980-12-12
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por VirtuaGod » 2/3/2018 0:22

Tive agora a testar a Tiingo.com e parece-me bastante promissora (mercado americano). É uma das fontes de dados do investing.com

Velocidade da yahoo finance com a qualidade da quandl :wink: Vem colmatar a falta de ETFs na quandl ao mesmo tempo que a excelente velocidade vai ser boa para downloads em massa. Parece-me que vai ser a próxima base de dados a ser acrescentada :!:
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por bigboytrader » 1/3/2018 14:40

VirtuaGod Escreveu:Pequeno update do dia

Pequeno mas não pouco importante :mrgreen: Agora ao sacar os dados podem ver um indicador de progresso do vosso download :wink: Para download em massa acho que é algo bastante útil!!

Ainda só está na quandl por causa dos downloads em massa mas depois coloco tb na yahoo.

Abr


Parabéns pelo excelente trabalho VirtuaGod :lol:

Abraço
Ou você tem uma estratégia ou é parte da estratégia de alguém." (Alvin Toffler)
Avatar do Utilizador
 
Mensagens: 34
Registado: 19/7/2011 22:46
Localização: 10

Re: Qdownloader

por VirtuaGod » 28/2/2018 23:08

Pequeno update do dia

Pequeno mas não pouco importante :mrgreen: Agora ao sacar os dados podem ver um indicador de progresso do vosso download :wink: Para download em massa acho que é algo bastante útil!!

Ainda só está na quandl por causa dos downloads em massa mas depois coloco tb na yahoo.

Abr
Anexos
Capture.PNG
Capture.PNG (31.99 KiB) Visualizado 9526 vezes
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Re: Qdownloader

por VirtuaGod » 28/2/2018 20:36

Desconheço se tem validade.

É provável que quem se registe agora tenha de pedir uma ou quem tem uma antiga perca validade se por exemplo não usou há mais de um ano. Eu uso a minha já há mais de um ano (acho eu) mas uso-a semi regularmente. De qualquer das formas acho que é um processo super simples e é só preciso clicar no botão de "Request a new API Key".

O crude tem imensos futuros. Crude, brent etc etc Podes ver aqui a colecção: https://www.quandl.com/collections/markets/crude-oil

Entretanto descobri um desde '93 com o ticker ICE_B1 que funciona bem com o Qdownloader: https://www.quandl.com/data/CHRIS/ICE_B1-Brent-Crude-Futures-Continuous-Contract

Infelizmente a versão com histórico desde '83 não funciona: https://www.quandl.com/data/CHRIS/CME_CL1-Crude-Oil-Futures-Continuous-Contract-1-CL1-Front-Month

Ainda estou a pensar como lidar com estas diferentes versões desta base de dados de futuros e automatizar o máximo do processo de download. Queria ver se consigo colocar o sistema a "descobrir" qual é o formato dos dados e proceder de forma diferente para cada um deles.
Artigos e estudos: Página repositório dos meus estudos e análises que vou fazendo. Regularmente actualizada. É costume pelo menos mais um estudo por semana. Inclui a análise e acompanhamento das carteiras 4 e 8Fundos.
Portfolio Analyser: Ferramenta para backtests de Fundos e ETFs Europeus

"We don’t need a crystal ball to be successful investors. However, investing as if you have one is almost guaranteed to lead to sub-par results." The Irrelevant Investor
Avatar do Utilizador
 
Mensagens: 5707
Registado: 20/11/2002 21:56
Localização: Porto

Próximo

Quem está ligado:
Utilizadores a ver este Fórum: Apramg, Bar38, Bing [Bot], Cem pt, Ferreiratrade, Google [Bot], Google Adsense [Bot], JFDIL, joingue, mpaquim, novato, Opcard, PAULOJOAO e 155 visitantes