Pesquise por "Windows Defender Firewall com Segurança Avançada", clique em "Regras de entradas" e depois em "Nova Regra" (não sei se isto vale para Regras de Saída)
Uma nova página irá ser aberto e você seleciona a opção "Porta"
Ao avançar ele irá perguntar qual protocolo você deseja escolher (no caso TCP ou UDP) e você seleciona a porta específica que você deseja fechar
E como eu quero que a porta seja fechado, então seleciono a opção "Bloquear conexão"
E em "Perfil" ele irá perguntar quando a regra será aplicada de acordo do seu ambiente
E depois é só colocar o nome da regra e pronto
DICA: caso a porte continua aberta, tente seguir os mesmos procedimentos mas indo na opção "Regras de saída", e caso queira testar o seu firewall e saber se existe alguma porta aberta o artigo esta aqui: https://www.Baboo.com.br/seguranca-digital/dicas-tutoriais-seguranca-digital/como-testar-seu-firewall/