"Estamos num bom lugar". Decisões futuras servirão para manter o equilíbrio, diz Lagarde

[MarcoAntonio]

Bom, nem sempre vai funcionar desta forma (haverá períodos em que não funcionará mesmo!) mas aqui fica o update:




Entretanto tenho estado a tentar treinar modelos baseado em Transformers (um irmaozinho muito pequinininho do chatGPT) mas tenho dificuldade em fazê-los convergir. Mas há alguma promessa. Aqui fica um exemplo, parece ter capacidade para capturar detalhe que os outros não têm. O que coloco aqui são sempre testes com dados desconhecidos para o modelo, note-se:





PSI actualizado:

[MarcoAntonio]

Pequenos passos mas dá para perceber a evolução positiva. Uma amostra de testes contra dados desconhecidos (do histórico do PSI):

[MarcoAntonio]

Entretanto detectei um erro que estava a afectar especialmente a parte do forecast (estava a achar estranho que as bandas, estranhamente estreitas, não alargassem nesse caso como o esperado e apresentassem sempre o mesmo padrão típico e dei com o "gato"). Aqui fica então um exemplo de forecast rectificado:




Actualizado até à sessão corrente:



PSI actualizado:

[trend=friend]

Marco, tens opinião sobre os trabalhos do Nassim Taleb? Em particular aplicados aos mercados?

Estou familiarizado de raspão com as teses dele, incluindo as considerações dele acerca dos investimentos, retornos, etc. Tendo a concordar no geral, perguntas por alguma razão em particular?

Já percebi que terás formação na mesma área e como gosto do que ele vai escrevendo (não tenho bagagem para a parte mais técnica pois sou de outra área), lembrei-me de ter perguntar. Acaba por ser um dos estudiosos de estatística que fala de mercados com mais visibilidade.

Gosto em particular do que fala sobre a exposição a cisnes negros “positivos”, impossível com grandes diversificações (e estas nem salvaguardam as consequências dos cisnes negros convencionais…).

[MarcoAntonio]

Marco, tens opinião sobre os trabalhos do Nassim Taleb? Em particular aplicados aos mercados?

Estou familiarizado de raspão com as teses dele, incluindo as considerações dele acerca dos investimentos, retornos, etc. Tendo a concordar no geral, perguntas por alguma razão em particular?

[trend=friend]

Marco, tens opinião sobre os trabalhos do Nassim Taleb? Em particular aplicados aos mercados?

[MarcoAntonio]

Isto é um pormenor, ou aparte, mas a evolução do treino permite inferir o princípio do information bottleneck (este foi introduzido por um israelita, Naftali Tishby, entretanto já falecido há uns 2 ou 3 anos atrás, em co-autoria com um português(!), Fernando Pereira. Segundo o princípio do information bottleneck, numa primeira fase as redes tendem a comprimir a informação e numa segunda fase aprendem a generalizar. Ambos os passos são importantes no processo de aprendizagem, mas no final, o que queremos é que a rede saiba generalizar, para "fazer boas inferências" em dados que nunca viu. Nem sempre os modelos (ou o processo de aprendizagem) apresentam porém estas características. Nem as curvas das losses seguem necessariamente este padrão. Neste caso é bastante evidente e eu suspeito que tem precisamente bastante que ver com a natureza dos dados...

[ASimoes]

Em Agosto, Traders de Férias, costuma cair
Mas, a Bolsa, é o que fizermos dela Pois continuamos, em Guerra e !?! Numa Fogueira, não se apaga, enquanto lhe, meterem lenha (Armas)
Bons negócios até 6ª feira, julgo eu, o velho

[MarcoAntonio]

Muito interessante. Sucintamente só lá para Agosto é que teríamos esgotamento deste ciclo de descida e eventual novo arranque, certo?

Ambas as abordagens sugerem que o PSI vai continuar a aproximar-se da SMA50 (para isso acontecer, basta uma consolidação, eventualmente com alguma correcção, dentro do que tem estado a fazer). A partir daí, os diferentes modelos/abordagens sugerem coisas um pouco diferentes entre si (uns acham que vai ser mais rápido/violento do que outros).

Apesar de ambas abordagens e todos os modelos concordarem "no geral", espero que se compreenda que isto não é uma garantia.




Deixo o método 1 actualizado com a sessão corrente incluida:



No método 2 (IA) a incerteza aumenta quanto mais olhamos para o futuro, como as ilustrações deixam perceber. O método 1 é passivo e limita-se a projectar no gráfico o ciclo com o melhor fit com base nos dados recentes (a análise espectral permite perceber senão será apenas uma coincidência estatística e/ou se existem potencialmente diversos ciclos em simultâneo).

[trend=friend]

Muito interessante. Sucintamente só lá para Agosto é que teríamos esgotamento deste ciclo de descida e eventual novo arranque, certo?

[MarcoAntonio]

A segunda abordagem baseia-se em Machine Learning (vulgo, inteligência artificia). Utilizando o mesmo dataset que já tinha preparado para o primeiro método (baseado em abordagens de processamento digital de sinal clássico, ie, sem IA). Os dados principais são os mesmos (desvio para a media movel e a propria media movel, o que permite reconstruir o sinal (como já fiz mais atrás para o Método 1). Em todo o caso, o foco principal é antecipar os ciclos do "nosso" índice.

Chegar a um modelo que não desse resultados estúpidos (ou que fossem minimamente interessantes, como se queira) não foi difícil. A partir daqui o trabalho fica bastante mais árduo pois requere muita experimentação (e sensibilidade também). E tempo. Cada modelo demora uns 10~15 minutos a treinar no meu desktop (tudo feito localmente com uma RTX 4070 Super c/ 12GB).

Os gráficos seguintes ilustram um pouco como está a evoluir o treino, com diferentes modelos e ajustamentos. MOD1 e 2 são "baselines" e pouco diferem. MOD3 são diferentes variações na arquitectura, com crescente complexidade da esquerda para a direita, grosso modo. T_loss diz respeito à loss de treino e V_loss diz respeito à loss de validação (a loss contra um dataset que a rede não vê durante o treino, ou seja, dados/períodos desconhecidos para o modelo). MOD1/2 são praticamente o mesmo modelo de que já partilhei alguns exemplos.



Os gráficos da linha de cima são baselines de treino (sem alteração nos parametros de treino) permitindo comparar de uma forma visual rápida como os modelos estão a "usar" o tempo de treino que lhes estou a dar. Os modelos da direita estão claramente a fazer overfitting no fim do treino (a loss de treino começa a ser muito mais baixa do que a de validação, o que indica que os modelos já não estão a generalizar, antes estão a "decorar" o dataset). Os gráficos da linha de baixo contêm ajustamentos no treino/arquitectura das redes para tentar contrariar essa tendência dos modelos.

Isto é, os gráficos mais importantes são os da esquerda (best_models) mas os da direita também são importantes para perceber melhor como os modelos estão a usar o tempo de treino e a tendência para overfitting/underfitting, por forma a tentar optimizar o agendamento do treino.


Exemplo da evolução da T_loss/V_loss num treino completo:


(MOD3 S1)


Exemplos de test (com ground truth):


(MOD3 S1)


(MOD3 S1)


Forecasting (momento actual, sem ground truth) com o mesmo modelo:


(MOD3 S1)


(wip!)

[MarcoAntonio]

A gráfico entretanto está legendado para se perceber melhor.

[MarcoAntonio]

Actualizado:

[MarcoAntonio]

Actualizado até ao momento (incluindo a sessão em curso).

[MarcoAntonio]

Ainda tudo muito work in progress mas alguns resultados sugestivos.

Actualização do método anterior:




Agora, método alternativo de previsão utilizando o mesmo conjunto de dados, aplicado ao momento actual (os dados futuros ainda não são conhecidos), ou seja, basicamente o mesmo período do gráfico anterior:




Aqui contra dados recentes em que os períodos seguintes são conhecidos (ie, contra ground truth), para referência trata-se de um período ligeiramente atrás mas que é também visível no primeiro gráfico:





Nem sempre funciona muito bem (por vezes falha categoricamente). Mas uma boa parte das vezes prevê algo que não é muito estúpido (no forum de testes e imagens tenho mais cenários, aqui coloco apenas estes para não sobrecarregar o tópico; link direto para o post com mais exemplos).

[MarcoAntonio]

PSI com maior série de ganhos desde agosto

A principal índice nacional cresceu 3,86% em maio, um mês recheado de contas trimestrais. As energéticas foram as protagonistas: a EDPR liderou os ganhos e a Galp as perdas.

[yaya]

mais uma vela mensal fechada

[Shimazaki_2]

Obrigado pelo esclarecimento

[MarcoAntonio]

Para o valor decair basta na verdade uma consolidação. Se o índice corrigir em baixa, o retorno à média (trata-se efetivamente da aproximação à média móvel de 50d) ou correção no segundo gráfico é naturalmente mais rápida. E para ir para terreno negativo é praticamente obrigatória uma correção. Convém colocar alguma água na fervura quanto ao poder preditivo de uma análise deste tipo (ie, comportamento cíclico do índice) uma vez que o período dos ciclos varia ao longo do tempo e a força - leia-se, preponderância - dos ciclos também depende do estado do índice, conforme já aludi atrás nos posts anteriores.

Trocando por miudos, o gráfico basicamente está a dizer que está "mais ou menos na altura" do PSI consolidar e/ou corrigir, se seguir "mais ou menos" os ciclos que tem vindo a seguir. Naturalmente, não é impeditivo de o índice resolver fazer outra coisa qualquer e eu sugiro olhar para isto mais como uma ferramenta para efeitos de análise de risco do que propriamente como uma calculadora que diga o que o índice vai fazer exactamente.

Acho que já foi isso que quiseste dizer com as aspas, mas em todo o caso aqui fica para reforçar a ideia.



Ressalvo também que não é um indicador de tendência. A tendência está largamente descontada ao utilizar a distância para a média móvel de 50 dias (e que é intencional).

[Shimazaki_2]

Atualizado.




O ciclo entretanto está ajustado para estar centrado com o índice (não tem qualquer efeito em termos de cálculo).

Portanto "teremos" uma leg down no psi nas proximas sessões? com a sinusoide a virar pra baixo?

[MarcoAntonio]

Atualizado.




O ciclo entretanto está ajustado para estar centrado com o índice (não tem qualquer efeito em termos de cálculo).

[MarcoAntonio]

Bom, para já está a funcionar...



O período tem estado a alargar (entretanto, o algoritmo actual é dinâmico e está automatizado, pelo que vai fazendo a actualização sessão a sessão utilizando o ciclo com o melhor fit). Pelo que tenho observado, o período dos ciclos em certas fases tende a derivar mais ou menos lentamente, noutras ocasiões dão-se saltos relativamente bruscos. Durante fases de tendência muito forte os ciclos tendem a funcionar pior, em lateralizações ou tendências mais ténues parecem ser mais eficientes (conforme seria espectável).



Não pretendo sugerir que este tipo de análise tenha uma capacidade preditiva bestial (seguramente, não tem!) mas inclino-me para achar que é um razoável indicador de risco.

[Shimazaki_2]

https://finance.yahoo.com/news/inflation-three-german-states-pointing-094733291.html

Inflation up in three German states, pointing to slight national rise

[MarcoAntonio]

28 maio
Petróleo sobe 3%, há coisas mesmo engraçadas

Mais tarde atualizo o petróleo, que está num ponto "engraçado". Mas entretanto deixo o que o S&P500 andava a fazer há meio ano atrás, para quem estiver a acompanhar os meus posts sobre o tema (advertência: a correlação é tenue).

[yaya]

27 maio
BCE sinaliza descida dos juros na próxima semana
A não ser que...
https://www.publico.pt/2024/05/27/econo ... na-2091944

28 maio
Petróleo sobe 3%, há coisas mesmo engraçadas

Será isto o "a não ser que"?
Nunca o referem mas lá no fundo sabem perfeitamente que o petróleo é o que mina toda a economia
Parece-me uma ratoeira