Baixa Concordância entre a Classificação da NYHA e as Variáveis do Teste de Exercício Cardiopulmonar em Pacientes com Insuficiência Cardíaca e Fração de Ejeção Reduzida

Resumo

Fundamento

A classificação funcional da New York Heart Association (NYHA) é o sistema de classificação mais utilizado para a insuficiência cardíaca (IC), enquanto o teste de exercício cardiopulmonar (TECP) é o padrão ouro para a avaliação do estado funcional na IC.

Objetivo

Analisar a correlação e a concordância entre as classes da NYHA e as variáveis do TECP.

Métodos

Foram selecionados pacientes com IC com indicação clínica para TECP e fração de ejeção (FE) < 50%. A correlação (coeficiente de Spearman) e a concordância (kappa) entre a classificação da NYHA e as classificações baseadas no TECP foram analisadas. Um valor de p < 0,05 foi considerado significativo.

Resultados

No total, foram incluídos 244 pacientes no estudo. A idade média foi de 56±14 anos, e a FE média foi de 35,5%±10%. A distribuição de pacientes de acordo com a classificação da NYHA foi a seguinte: classe I (31,2%), classe II (48,3%), classe III (19,2%) e classe IV (1,3%). A correlação (r) entre as classes da NYHA e de Weber foi de 0,489 (p < 0,001), e a concordância foi de 0,231 (p < 0,001). A correlação (r) entre as classes da NYHA e ventilatórias (inclinação da ventilação minuto/produção de dióxido de carbono [VE/VCO₂]) foi de 0,218 (p < 0,001), e a concordância foi de 0,002 (p = 0,959). A correlação de Spearman entre as classes da NYHA e do escore TECP foi de 0,223 (p = 0,004), e a concordância kappa foi de 0,027 (p = 0,606).

Conclusão

Foi identificada uma associação moderada entre as classes da NYHA e de Webber, embora a concordância tenha sido baixa. As classes ventilatórias (inclinação VE/VCO₂) e do escore TECP apresentaram uma associação fraca e uma baixa concordância com as classes da NYHA.

Insuficiência Cardíaca; Prognóstico; Teste de Esforço

Abstract

Background

The New York Heart Association (NYHA) functional classification is the most commonly used classification system for heart failure (HF), whereas cardiopulmonary exercise testing (CPET) is the gold standard for functional status evaluation in HF.

Objective

This study aimed to analyze correlation and concordance between NYHA classes and CPET variables.

Methods

HF patients with clinical indication for CPET and ejection fraction (EF) < 50% were selected. Correlation (Spearman coefficient) and concordance (kappa) between NYHA classification and CPET-based classifications were analyzed. A p < 0.05 was accepted as significant.

Results

In total, 244 patients were included. Mean age was 56 ± 14 years, and mean EF was 35.5% ± 10%. Distribution of patients according to NYHA classification was 31.2%% class I, 48.3% class II, 19.2% class III, and 1.3% class IV. Correlation (r) between NYHA and Weber classes was 0.489 (p < 0.001), and concordance was 0.231 (p < 0.001). Correlation (r) between NYHA and ventilatory classes (minute ventilation/carbon dioxide production [VE/VCO₂] slope) was 0.218 (p < 0.001), and concordance was 0.002 (p = 0.959). Spearman correlation between NYHA and CPET score classes was 0.223 (p = 0.004), and kappa concordance was 0.027 (p = 0.606).

Conclusion

There was a moderate association between NYHA and Weber classes, although concordance was low. Ventilatory (VE/VCO₂slope) and CPET score classes had a weak association and a low concordance with NYHA classes.

Heart Failure; Prognosis; Exercise Test

Introdução

Embora seja uma doença progressiva, a insuficiência cardíaca (IC) não apresenta um curso linear. As hospitalizações por IC descompensada são fatores independentes de prognóstico. Modelos de predição de risco e escores prognósticos determinarão a necessidade de escalonar estratégias terapêuticas específicas, como alterações do medicamento, terapia de ressincronização cardíaca, cardioversor-desfibrilador implantável, dispositivo de assistência ventricular e transplante cardíaco.¹

A classificação da New York Heart Association (NYHA) é um instrumento de estratificação funcional para IC simples, de baixo custo e bem conhecido, com valor prognóstico.² , ³ Divide os pacientes em quatro grupos diferentes, de acordo com a gravidade da dispneia e as limitações da atividade física autorrelatadas.² , ³ No entanto, visto que a classe funcional da NYHA depende do autorrelato de sintomas, é influenciada pela subjetividade de cada paciente.⁴ , ⁵

Em contrapartida, o estado funcional é avaliado objetivamente pelo teste de exercício cardiopulmonar (TECP), um instrumento prognóstico considerado o padrão ouro para a avaliação da IC.⁶ , ⁷ Nesse contexto, diretrizes importantes definem o TECP como uma recomendação de classe I para o transplante cardíaco e de classe IIa para a prescrição de exercícios.⁶ , ⁷

Normalmente, a avaliação prognóstica do TECP é baseada nas medidas do pico de consumo de oxigênio (VO_2peak).⁸ , ⁹ No entanto, outras variáveis, como a inclinação da ventilação minuto/produção de dióxido de carbono (VE/VCO₂), recuperação da frequência cardíaca em 1 minuto (HRR₁), inclinação da eficiência de consumo de oxigênio (OUES), pressão parcial do dióxido de carbono ao final da expiração (PetCO₂) e ventilação periódica, têm demonstrado um valor prognóstico independente e incremental ao VO_2peak na IC.¹⁰ Com base nessas variáveis, classificações prognósticas específicas foram validadas, como as classes de Weber (VO_2peak), as classes ventilatórias (inclinação VE/VCO₂) e o escore TECP (uma combinação de VO_2peak, inclinação VE/VCO₂, HRR₁, OUES e PetCO₂).¹¹

Embora o sistema de classificação da NYHA seja amplamente utilizado, há poucos estudos correlacionando as classes da NYHA com o prognóstico de IC ou as variáveis do TECP.¹⁴ , ¹⁵ Uma revisão sistemática recentemente comparou as classificações da NYHA e as variáveis do TECP. A variável comum em todos os estudos analisados foi o VO_2peak, embora com muita heterogeneidade.¹⁴ O objetivo do presente estudo foi avaliar a correlação e a concordância entre a classificação da NYHA para IC e as classificações funcionais baseadas no TECP, isto é, as classes de Weber, as classes ventilatórias e o escore TECP.¹¹

Métodos

O presente estudo transversal recrutou consecutivamente pacientes submetidos a TECP para avaliação da IC. Os critérios de inclusão foram os seguintes: 1) idade ≥ 18 anos; 2) diagnóstico confirmado de IC com fração de ejeção (FE) < 50%; e 3) indicação clínica para TECP entre 2009 e 2019. Os critérios de exclusão foram doença pulmonar obstrutiva crônica moderada a grave, hipertensão pulmonar e/ou fibrose ou anemia sintomática.

Os dados demográficos e as variáveis do TECP foram coletados junto a informações clínicas e testes complementares relevantes (eletrocardiograma em repouso de 12 derivações e ecocardiografia com Doppler dos últimos 3 meses). O TECP foi limitado aos sintomas e realizado com esforço máximo através de um protocolo de rampa em uma esteira (Micromed Centurion 300, São Paulo, Brasil), utilizando um ergoespirômetro respiração a respiração Cortex 3b (Cortex Inc., Leipzig, Alemanha). A calibração de gás de dois pontos foi realizada antes dos testes. Todas as técnicas foram realizadas de acordo com as diretrizes atuais, e um médico certificado em nível nacional foi responsável por cada teste.¹⁰

Todos os TECPs foram conduzidos pelo mesmo médico, um cardiologista especializado em TECP. Antes da realização do teste, o cardiologista determinou a classe da NYHA de cada paciente de acordo com a limitação da atividade física autorrelatada: (I) sem limitação; (II) pouca limitação; (III) limitação acentuada; ou (IV) incapaz de realizar qualquer atividade física sem desconforto.¹⁶ Em seguida, com base nas variáveis do TECP, os pacientes foram categorizados em classes de Weber, classes ventilatórias ou classes do escore TECP de acordo com os resultados do teste.¹¹

A classificação de Weber categoriza os pacientes de acordo com o VO_2peak, da seguinte maneira: (A) VO₂ > 20 mL.kg^-1.min^-1; (B) VO₂ 16-20 mL.kg^-1.min^-1; (C) VO₂ 10-15 mL.kg^-1.min^-1; ou (D) VO₂ < 10 mL.kg^-1.min^-1.¹² As classes ventilatórias utilizam a inclinação VE/VCO₂: (I) VE/VCO₂ ≤ 29,9; (II) VE/VCO₂ 30-35,9; (III) VE/VCO₂ 36-44,9; ou (IV) VE/VCO₂ ≥ 45.¹³ O escore TECP foi calculado para cada paciente com base na soma das respostas anormais, da seguinte maneira: VE/VCO₂ ≥ 34 (7 pontos); HRR₁ ≤ 6 bpm (5 pontos); OUES ≤ 1,4 (3 pontos); PetCO₂ < 33 mm Hg (3 pontos); e VO_2peak ≤ 14 mL.kg^-1.min^-1 (2 pontos).¹¹ , ¹⁵ Na sequência, o escore foi dividido em quartis: (I) 0-5; (II) 6-10; (III) 10-15; e (IV) > 15.¹¹

Análise estatística

As análises estatísticas foram realizadas no software SPSS versão 17.0 (SPSS Inc., Chicago, IL, EUA). As variáveis contínuas foram apresentadas como média e desvio padrão para a distribuição paramétrica ou como mediana e intervalo interquartil para a distribuição não paramétrica. O teste de normalidade de Kolmogorov-Smirnov e as análises de histograma foram utilizados para determinar a distribuição. As variáveis categóricas foram apresentadas como números absolutos e proporções. A correlação entre as variáveis foi avaliada através do coeficiente de correlação de Spearman ( s ) ou de Pearson ( p ), e a concordância foi avaliada através do coeficiente kappa (k). Para todas as análises, um valor de p < 0,05 foi considerado estatisticamente significativo.

O Comitê de Ética em Pesquisa da instituição aprovou o protocolo do estudo. O estudo está em conformidade com todos os regulamentos nacionais e internacionais para pesquisas com seres humanos.

Resultados

As características dos pacientes estão descritas na Tabela 1 . A amostra incluiu 244 pacientes, principalmente homens (77,9%), com idade média de 56±14 anos. A isquemia foi a etiologia mais frequente (44,4%). A FE média foi de 35,5%±10%. Os pacientes receberam terapia médica otimizada, conforme a seguir: inibidores da enzima conversora da angiotensina ou bloqueadores dos receptores de angiotensina II (86,4%); betabloqueadores (91,4%); antagonistas da aldosterona (57,0%); e diuréticos (53,5%). O VO_2peak médio foi de 19,2±6,7 mL.kg^-1.min^-1, enquanto a inclinação VE/VCO₂ média foi de 39±10. A taxa de troca respiratória (RER) média foi de 1,041±0,12 (25% apresentaram RER > 1,10). Todos os testes foram interrompidos pelo critério de esforço, e nenhum foi interrompido prematuramente ou devido a critérios hemodinâmicos, arrítmicos ou isquêmicos. Os pacientes foram distribuídos de acordo com a classificação da NYHA, da seguinte maneira: classe I (31,2%), classe II (48,3%), classe III (19,2%) e classe IV (1,3%) ( Tabela 2 ).

Tabela 1
– Características demográficas, clínicas e do teste de exercício cardiopulmonar gerais dos pacientes (n = 244)

Variáveis
Idade (média ± DP)	56±14 anos
Sexo
Masculino, n (%)	190 (77,9)
Etiologia
Isquêmico, n (%)	107 (44,4)
Idiopático, n (%)	56 (23,2)
Viral, n (%)	30 (12,4)
Chagásico, n (%)	18 (7,5)
Outro, n (%)	30 (12,5)
Comorbidades
Hipertensão, n (%)	70 (34,7)
Diabetes melito, n (%)	43 (21,2)
Doença arterial coronariana, n (%)	94 (46,3)
Tabagismo, n (%)	4 (2,0)
Medicamentos utilizados
IECA ou BRA, n (%)	209 (86,4)
Betabloqueador, n (%)	222 (91,4)
ARM, n (%)	138 (57,0)
Diuréticos, n (%)	129 (53,5)
Dispositivos implantáveis
Marca-passo, n (%)	17 (7,0)
TRC e/ou CDI, n (%)	28 (11,5)
VO2peak(mL.kg-1.min-1) , média ± DP	19,2±6,7
Porcentagem do VO2peakprevisto (%) , média ± DP	63±20
FE (%) , média ± DP	35,5±10
RER , média ± DP	1,041±0,12
Inclinação VE/VCO2 , média ± DP	39,0±10,8
PetCO2(mm Hg) , média ± DP	29,8±4,66
HRR1 , mediana (IIQ)	18,0 (15)
PAS em repouso , mediana (IIQ)	120 (10)
FC em repouso , mediana (IIQ)	74 (22)

• _1222peak

Tabela 2
– Distribuição da amostra de acordo com classificações objetivas e subjetivas, n (%)

	I	II	III	IV
Classes da NYHA	75 (31,3)	116 (48,3)	46 (19,2)	3 (1,3)
Inclinação VE/VCO2	42 (17,2)	70 (28,7)	74 (30,3)	58 (23,8)
Escore TECP	57 (34,7)	61 (37,2)	36 (22,0)	10 (6,1)
	A	B	C	D
Classes de Weber	95 (39)	55 (22,5)	81 (33,2)	13 (5,3)

• ₂

A Figura 1 mostra a distribuição das classes da NYHA de acordo com as classes de Weber ( Figura 1A ), ventilatórias ( Figura 1B ) e do escore TECP ( Figura 1C ). A correlação (r) entre as classes da NYHA e de Weber foi de 0,489 (p < 0,001), e a concordância foi de 0,231 (p < 0,001). A correlação (r) entre as classes da NYHA e ventilatórias foi de 0,218 (p < 0,001), e a concordância foi de 0,002 (p = 0,959). Por fim, a correlação (r) entre as classes da NYHA e do escore TECP foi de 0,223 (p = 0,004), e a concordância foi de 0,027 (p = 0,606).

Figura 1
– Concordância, correlação e distribuição da classe da NYHA de acordo com as classes (A) de Weber, (B) ventilatórias (inclinação VE/VCO2) e (C) do escore TECP. TECP: teste de exercício cardiopulmonar; NYHA: New York Heart Association; r: coeficiente de correlação; VE/VCO2: v entilação minuto/produção de dióxido de carbono.

Discussão

Em pacientes com IC e FE reduzida que foram submetidos a TECP após indicação clínica, foi identificada apenas uma associação moderada entre as classes da NYHA e de Weber, com baixa concordância. No entanto, foram identificadas associação e concordância ainda mais baixas entre a classificação da NYHA e as classes ventilatórias e do escore TECP.

Todas essas classificações do estado funcional possuem um valor prognóstico validado para IC.³ , ¹¹ Assim, o estado funcional é o melhor parâmetro para a predição de risco nesses pacientes.³ , ¹¹ No entanto, conforme demonstrado, houve baixa concordância entre a classificação da NYHA e as três classificações baseadas no TECP (o qual é um teste clínico objetivo). Embora tenha sido encontrada uma correlação moderada entre as classes da NYHA e de Weber, parece razoável levantar a hipótese de que a subjetividade interfere na predição de risco para IC da classe da NYHA e apresenta um impacto subsequente nas decisões terapêuticas.

Uma recente revisão sistemática abordou a correlação entre a classificação da NYHA para IC e as medidas do VO_2peak (determinadas pelo TECP).¹⁴ Foi identificada uma grande heterogeneidade nas classes da NYHA entre os estudos analisados.¹⁴ Nossos achados corroboram os de Lim et al. e refletem uma análise de correlação adicional, visto que descrevemos a correlação entre a classificação subjetiva da NYHA e algumas classificações objetivas baseadas nos resultados do TECP através de escore validado ou classes ventilatórias. Por exemplo, os pacientes subjetivamente classificados na classe I da NYHA pelos seus médicos podem apresentar valores de inclinação VE/VCO₂ classe ventilatória IV (pior prognóstico) ou se encontrar no pior quartil prognóstico do escore TECP ( Figura 1 ).¹¹ , ¹³

A classificação da NYHA pode levar a diferentes interpretações do mesmo paciente por diferentes médicos,³ especialmente quando são relatados sintomas de classes intermediárias (II e III). Em uma publicação do nosso grupo, Ritt et al. demonstraram que os pacientes na classe B de Weber poderiam ser divididos em dois grupos prognósticos distintos quando o escore TECP era calculado.¹⁵ Os grupos foram, então, divididos em de maior risco e menor risco. No entanto, os pacientes nas classes intermediárias da NYHA geralmente são aqueles cujo estado funcional é de grande importância para a tomada de decisão. Essas decisões incluem o aumento ou a alteração de medicamentos, a provisão de indicações cirúrgicas ou a implantação de dispositivos (como terapia de ressincronização cardíaca ou dispositivo de assistência ventricular).¹⁶ Em tais grupos, a classificação da NYHA pode não ser sensível o suficiente para abordar características clínicas secundárias, mas importantes. Dessa forma, necessita-se urgentemente de uma classificação confiável, objetiva e de fácil reprodução. Os pacientes nas classes I ou II da NYHA podem ser reclassificados pelo TECP como de maior risco, e pacientes na classe III da NYHA podem ser reclassificados como de menor risco, principalmente aqueles que são candidatos para alterações de medicamentos e/ou dispositivos. O uso do TECP para esse objetivo é um tema para futuros estudos.

Nosso estudo apresenta algumas limitações, como a ausência de seguimento clínico da amostra de pacientes. Excluímos a anemia sintomática, visto que focamos em critérios diagnósticos clínicos, mas pode-se argumentar que a anemia assintomática também possa ter impacto na capacidade funcional. Além disso, não avaliamos a prevalência de depressão entre os pacientes, embora possa contribuir para a falta de esforço. Nossa amostra apresentou uma RER média de 1,04; pode-se argumentar que uma RER > 1,10 é o padrão para atingir a acidose, embora uma RER > 1,00 seja usada como um critério aceitável na IC.¹⁷ Embora isso possa afetar o VO_2peak, não impacta a inclinação VE/VCO₂, a OUES ou a HRR₁. Novos estudos abordando uma população mais ampla e analisando desfechos clínicos são necessários para uma melhor compreensão do real valor prognóstico de cada classificação da IC (NYHA, inclinação VE/VCO₂, classes de Weber e escore TECP). Focamos nas classes de Weber, nas classes da inclinação VE/VCO₂ e no escore TECP porque todos esses parâmetros podem ser apresentados como classificações de escala de quatro níveis, como a NYHA; além disso, o VO_2peak e a inclinação VE/VCO₂ são as variáveis mais estudas no TECP, e as outras variáveis do TECP estão inseridas no escore TECP. No entanto, estudos futuros com foco em variáveis específicas do TECP são de grande valor. É importante ressaltar que ainda resta determinar se, de fato, uma estratégia objetiva baseada no TECP é mais acurada do que as outras.

Conclusão

Foi identificada uma associação moderada entre a classificação subjetiva da NYHA e as classes de Weber avaliadas objetivamente, embora a concordância tenha sido baixa. As classes ventilatórias avaliadas objetivamente e as classes do escore TECP apresentaram uma associação fraca e uma concordância baixa com a classificação da NYHA.

Referências

• ¹
  Chaudhry SP, Stewart GC. Advanced Heart Failure: Prevalence, Natural History, and Prognosis. Heart Fail Clin. 2016;12(3):323-33. doi: 10.1016/j.hfc.2016.03.001.
• ²
  Holland R, Rechel B, Stepien K, Harvey I, Brooksby I. Patients’ self-assessed functional status in heart failure by New York Heart Association class: a prognostic predictor of hospitalizations, quality of life and death. J Card Fail. 2010;16(2):150-6. doi: 10.1016/j.cardfail.2009.08.010.
• ³
  Caraballo C, Desai NR, Mulder H, Alhanti B, Wilson FP, Fiuzat M, et al. Clinical Implications of the New York Heart Association Classification. J Am Heart Assoc. 2019;8(23):e014240. doi: 10.1161/JAHA.119.014240.
• ⁴
  Yap J, Lim FY, Gao F, Teo LL, Lam CS, Yeo KK. Correlation of the New York Heart Association Classification and the 6-Minute Walk Distance: A Systematic Review. Clin Cardiol. 2015;38(10):621-8. doi: 10.1002/clc.22468.
• ⁵
  Raphael C, Briscoe C, Davies J, Whinnett ZI, Manisty C, Sutton R, et al. Limitations of the New York Heart Association functional classification system and self-reported walking distances in chronic heart failure. Heart. 2007;93(4):476-82. doi: 10.1136/hrt.2006.089656.
• ⁶
  Mehra MR, Kobashigawa J, Starling R, Russell S, Uber PA, Parameshwar J, et al. Listing criteria for heart transplantation: International Society for Heart and Lung Transplantation guidelines for the care of cardiac transplant candidates--2006. J Heart Lung Transplant. 2006;25(9):1024-42. doi: 10.1016/j.healun.2006.06.008.
• ⁷
  Ponikowski P, Voors AA, Anker SD, Bueno H, Cleland JGF, Coats AJS, et al. 2016 ESC Guidelines for the diagnosis and treatment of acute and chronic heart failure: The Task Force for the diagnosis and treatment of acute and chronic heart failure of the European Society of Cardiology (ESC)Developed with the special contribution of the Heart Failure Association (HFA) of the ESC. Eur Heart J. 2016;37(27):2129-200. doi: 10.1093/eurheartj/ehw128.
• ⁸
  Mancini DM, Eisen H, Kussmaul W, Mull R, Edmunds LH Jr, Wilson JR. Value of peak exercise oxygen consumption for optimal timing of cardiac transplantation in ambulatory patients with heart failure. Circulation. 1991;83(3):778-86. doi: 10.1161/01.cir.83.3.778.
• ⁹
  Guimarães GV, Silva MS, d’Avila VM, Ferreira SM, Silva CP, Bocchi EA. Peak VO2 and VE/VCO2 slope in betablockers era in patients with heart failure: a Brazilian experience. Arq Bras Cardiol. 2008;91(1):39-48. doi: 10.1590/s0066-782x2008001300007.
• ¹⁰
  Balady GJ, Arena R, Sietsema K, Myers J, Coke L, Fletcher GF, et al. Clinician’s Guide to cardiopulmonary exercise testing in adults: a scientific statement from the American Heart Association. Circulation. 2010;122(2):191-225. doi: 10.1161/CIR.0b013e3181e52e69.
• ¹¹
  Myers J, Oliveira R, Dewey F, Arena R, Guazzi M, Chase P, et al. Validation of a cardiopulmonary exercise test score in heart failure. Circ Heart Fail. 2013;6(2):211-8. doi: 10.1161/CIRCHEARTFAILURE.112.000073.
• ¹²
  Weber KT, Kinasewitz GT, Janicki JS, Fishman AP. Oxygen utilization and ventilation during exercise in patients with chronic cardiac failure. Circulation. 1982;65(6):1213-23. doi: 10.1161/01.cir.65.6.1213.
• ¹³
  Arena R, Myers J, Abella J, Peberdy MA, Bensimhon D, Chase P, et al. Development of a ventilatory classification system in patients with heart failure. Circulation. 2007;115(18):2410-7. doi: 10.1161/CIRCULATIONAHA.107.686576.
• ¹⁴
  Lim FY, Yap J, Gao F, Teo LL, Lam CSP, Yeo KK. Correlation of the New York Heart Association classification and the cardiopulmonary exercise test: A systematic review. Int J Cardiol. 2018;263:88-93. doi: 10.1016/j.ijcard.2018.04.021.
• ¹⁵
  Ritt LE, Myers J, Stein R, Arena R, Guazzi M, Chase P, et al. Additive prognostic value of a cardiopulmonary exercise test score in patients with heart failure and intermediate risk. Int J Cardiol. 2015;178:262-4. doi: 10.1016/j.ijcard.2014.10.025.
• ¹⁶
  Ponikowski P, Voors AA, Anker SD, Bueno H, Cleland JGF, Coats AJS, et al. 2016 ESC guidelines for the diagnosis and treatment of acute and chronic heart failure, Rev. Esp. Cardiol. 2016;69(12):1167. https://doi.org/10.1016/j.recesp.2016.10.014
  » https://doi.org/10.1016/j.recesp.2016.10.014
• ¹⁷
  Malhotra R, Bakken K, D’Elia E, Lewis GD. Cardiopulmonary Exercise Testing in Heart Failure. JACC Heart Fail. 2016;4(8):607-16. doi: 10.1016/j.jchf.2016.03.022.

• Vinculação acadêmica
  Não há vinculação deste estudo a programas de pós-graduação.

• Fontes de financiamento: O presente estudo não teve fontes de financiamento externas.

Datas de Publicação

• Publicação nesta coleção
  04 Abr 2022
• Data do Fascículo
  2022

Histórico

• Recebido
  12 Mar 2021
• Revisado
  08 Ago 2021
• Aceito
  01 Set 2021