Skip to content

feat(Agora no Vale): Criação do spider e scraper do portal de notícias Agora no Vale - #55

Open
alanagabriele wants to merge 17 commits into
EH-FAKE:developfrom
GCES-EhFake-Fork:feat/agora-no-vale
Open

alanagabriele wants to merge 17 commits into
EH-FAKE:developfrom
GCES-EhFake-Fork:feat/agora-no-vale

Conversation

@alanagabriele

Copy link
Copy Markdown

Descrição

Foi criado o scraper do portal Agora no Vale para extrair conteúdo de notícias (título, descrição, corpo e tags).

🗂️ Tipo de Mudança

  • 🐞 Correção de bug (fix)
  • ✨ Nova funcionalidade (feat)
  • ♻️ Refatoração (refactor/improve)
  • 📝 Documentação (docs)
  • 🚀 Performance (perf)
  • 🧪 Testes (test)
  • ⚙️ Build/CI (build/ci/cd/static)

📌 Checklist

  • Mensagem de commit segue o padrão Conventional Commits
  • Nome da branch segue a Política de Branches Git Flow
  • Testes adicionados/atualizados
  • Documentação atualizada (README / Storybook / Swagger / MkDocs)
  • Pipeline CI/CD aprovado
  • Sem dependências pendentes

🔗 Issues Relacionadas

Closes #52

🧪 Como Testar

  1. Configure o ambiente
make setup  
  1. Rodar spider para coletar URLs de notícias:
make crawl_agoranovale
  1. Rodar scraper para processar e salvar as notícias no MinIO:
make scrape_agoranovale

📷 Evidências

Screenshots, GIFs ou logs (se aplicável).

📃 Notas Adicionais

Observações para revisores ou deploy.

@alanagabriele alanagabriele self-assigned this Oct 8, 2025
DanielRogs and others added 3 commits October 20, 2025 15:18
* fix: corrige links e atualiza config de issues do repositorio

* fix(link documentacao):  atualiza link doc novo spider

---------

Co-authored-by: luciano-freitas-melo <lucianodefreitasmelo@hotmail.com>
* adição de icones para os respectivos portais

* refactor(frontend/Home): remove comentarios de debug


---------

Co-authored-by: luciano-freitas-melo <lucianodefreitasmelo@hotmail.com>
alanagabriele and others added 4 commits October 22, 2025 11:05
docs(nova documentacao): criação guia de contribuição e codigo de conduta
feat(Jornal da Paraiba): Criação do spider e scraper do portal de notícias Jornal da Paraiba
…ecutar um scraper (#31)

* Adiciona correção que instala o firefox ao iniciar qualquer scraper.

* fix: Ajustando instalação do firefox no playwrigth

* build(Makefile): melhoria na execucao dos containers scraper

---------

Co-authored-by: Carlos Nascimento <cdgodoy17@gmail.com>
Co-Authored-By: alanagabriele
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

Status: Revisão PR (equipe)

Development

Successfully merging this pull request may close these issues.

[NOVO] Portal: Agora no Vale

5 participants