@mbnunes @riverfount @ton: vocês tem interesse em fazer code review das novas coisas do ETL?
@cuducos @mbnunes @riverfount Sim, vai ajudar muito no aprendizado do repo. :-)

@ton @mbnunes @riverfount knock knock… tem um code review aí pufavô

https://github.com/cuducos/minha-receita/pull/429

(a CI falhou no linux mas foi não relacionado, mongo q não instalou… depois rodo outra vez manualmente se não tiver mais commit)

Carrega os dados dos CSVs no Badger by cuducos · Pull Request #429 · cuducos/minha-receita

No contexto do refatoração #426, esse PR escreve os dados dos CSVs (qie já estavam sendo lidos) no Badger (armazenamento chave-valor). Para tanto: corrige um bug no método de desserializar impleme...

GitHub
@cuducos @mbnunes @riverfount revisei atrasado 🫢

@ton @mbnunes @riverfount Retomando esse fio… esse PR é gigante pq o JSON tem uns 40 campos…

Hoje trabalhei um pouco nele e adiantei bastante coisa.

Tá tudo quebrado, mas resolvi compartilhar aqui assim mesmo caso alguém queira ajudar (pode abrir PR pra essa branch, ao invés de para a main, por exemplo)

https://github.com/cuducos/minha-receita/pull/432

Carregando dados no banco de dados by cuducos · Pull Request #432 · cuducos/minha-receita

Ver #426 Abrindo o PR com o que consegui avançar hoje: Esqueleto do criar uma empresa com todos os dados cast.go mantive exatamente o do ETL antigo company.go e enrich.go são os principais o prim...

GitHub
@cuducos @ton @riverfount opa vou tentar dar uma olhada, eu tenho estado sumido pq final de ano as coisas estão pegando fogo no trânsito
@mbnunes @cuducos @ton eu to preocupado hehehe pq to bem noobie em Go, vou ter que estudar muito mais. Então, nesse momento, eu vou ficar um pouco mais de espectador e estudando o código e o que está sendo feito, para entender ...
@riverfount @cuducos @ton te dá uma dica, experiência minha. Tente!!! Eu era muito Noob qndo comecei a ajudar no projeto, e recebi um banho de aula. ( Ainda sou Noob )

@riverfount @mbnunes @ton Pô, esqueci de falar no outro post (e vale pra todo mundo): podemos fazer isso juntos (de revisar, de explorar o código, de conversar sobre etc)

Só marcar outro encontro : ) Sdds hahahaha

@cuducos @riverfount @ton eu topo, costumo poder as 20hs (dr Brasília) em diante
@mbnunes @cuducos @ton depois das 20h (UT -3 hahahahahahah) eu posso tb, estou de férias do curso técnico, então pode ser em qq dia da semana.
@riverfount @mbnunes @cuducos Também posso. Fazendo um review (preview) antes pra aquecer as perguntinhas.

@ton @riverfount @mbnunes

Ia ser massa! Essa semana tá corrida, viajo amanhã, final de semana for etc. Semana q vem estou em casa e super livre pois desempregada : )

Quarta é dia de maracatu, segunda talvez o fuso horário não deixe… entre terça ou quinta, alguma preferência?

Em, um parênteses: estou super aberta a puxões de orelha se fui uma baleia dobrada de grossa nesse review aqui (não foi nenhum de vcs, relaxem) https://github.com/cuducos/minha-receita/pull/433 — passei nervoso escrevendo, quero ter assertividade a barrar videcoding irresponsável pra não perder tempo, mas tb não quero desencorajar contribuição. Sei lá se consegui : /

feat: implement 2-step ETL refactoring to simplify transform package by opazenha · Pull Request #433 · cuducos/minha-receita

Summary Reduces complexity from 4-step to 2-step transformation pipeline Centralizes all key-value data in Badger (eliminates in-memory lookups) Optimizes memory usage with sync.Pool and efficient...

GitHub
@cuducos @ton @riverfount opa qualquer um dos dois dias está ótimo pra mim
@mbnunes @cuducos @ton para mim tb, marcando com antecedência tá ótimo.
@mbnunes @cuducos @riverfount pra mim os dois também estão bons, mas estou disponível somente às 21h
@ton @cuducos @riverfount opa para mim 21 e melhor ainda pq as crianças estão dormindo
@ton @cuducos @riverfount só não posso hj pq amanhã viajo pra festa da empresa em SP
@mbnunes @ton @riverfount Terça q vem, dia 2, 21h de Brasília?
@ton @cuducos @riverfount senhores esposa com crise de ansiedade, logo se as crianças dormirem eu certeza estarei com vcs
@mbnunes @ton @cuducos já to esperando aqui, mas hoje só terei uma hora, mais ou menos ...
@riverfount @mbnunes @ton tens o link fácil aí? Posso entrar já já
Jitsi Meet

Join a WebRTC video conference powered by the Jitsi Videobridge

@riverfount @cuducos @ton pondo as crianças para dormirem agora vou atrasar um pouco
@riverfount @cuducos @ton podem iniciando sem problemas, e desculpe por isso
@riverfount @cuducos @ton gente desculpe os dois ainda acordado e a esposa fora de operação. Na próxima estarei com vcs.

@mbnunes @riverfount @ton Gente, ontem “terminei” (foquem nessas aspas aí hahaha) o grosso da nova versão do ETL.

Tem algumas coisas ainda para fazer, não considero “perto” de pronto ainda… o principal é que a escrita ficou bem mais lenta (aparentemente, preciso isolar melhor para um benchmark decente)

Enfim, se tiverem curiosidade, atualizei a issue com o progresso próximos passos

https://github.com/cuducos/minha-receita/issues/426

@cuducos @mbnunes @ton gente cai e não to conseguindo voltar