Multiple testing correction over contrasts for brain imaging

Detalhes bibliográficos
Ano de defesa: 2020
Autor(a) principal: Alberton, Bianca Alessandra Visineski
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: eng
Instituição de defesa: Universidade Tecnológica Federal do Paraná
Curitiba
Brasil
Programa de Pós-Graduação em Engenharia Elétrica e Informática Industrial
UTFPR
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Link de acesso: http://repositorio.utfpr.edu.br/jspui/handle/1/5050
Resumo: The multiple testing problem appears in brain imaging in the context of the general linear model in two forms: a statistical test is performed at each voxel or vertex of the image, and multiple contrasts are tested over the same data. The first has been greatly studied and various different procedures have been proposed, e.g., Bonferroni, random field theory, non-parametric approaches and false discovery rate. The second arises when there are various hypotheses (contrasts) about the same model, or different models are analyzed using the same data. If left uncontrolled, such multiplicity can lead to an undesirably high false positive rate, and spurious effects can be interpreted as real. Even though a number of methods have been proposed for contrast correction in non-imaging fields, most of these have seen little use in brain imaging, and often the brain analyses are reported without such correction. Thus, in this work, I discuss and compare the correction performance from Bonferroni, Dunn–Šidák, Fisher’s lsd, Tukey, Scheffé, Fisher–Hayter, Wang–Cui and Westfall–Young permutation method using both simulated data and real data from imaging studies of the brain. Although some procedures had good performance in some simulation scenarios, permutation method was the most suitable method to correct for multiple testing: it can be used to correct across both contrasts and voxels (or vertices), showed a strong control of the fwer, can be used with balanced and unbalanced models, and held one of the highest power independently of the number of contrasts tested or their dependency structure. I also confirmed that Fisher’s lsd presents a weak control of the fwer for more than three groups and, therefore, is invalid. Using magnetic resonance images of the brain, I showed how these methods can be applied to different types of analysis, such that they can be used as guideline for anyone working with neuroimaging.
id UTFPR-12_c5fe89bd6805d59f4657b0db40d38a04
oai_identifier_str oai:repositorio.utfpr.edu.br:1/5050
network_acronym_str UTFPR-12
network_name_str Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
repository_id_str
spelling Multiple testing correction over contrasts for brain imagingCorreção para o problema dos testes múltiplos em contraste aplicado a neuroimagemCérebro - RadiografiaCérebro - Imagem - TestesCérebro - Doenças - DiagnósticoDiagnóstico por imagem - Simulação por computadorBrain - RadiographyBrain - Imaging - TestingBrain - Diseases - DiagnosisDiagnostic imaging - Computer simulationCNPQ::ENGENHARIAS::ENGENHARIA BIOMEDICA::BIOENGENHARIA::PROCESSAMENTO DE SINAIS BIOLOGICOSEngenharia ElétricaThe multiple testing problem appears in brain imaging in the context of the general linear model in two forms: a statistical test is performed at each voxel or vertex of the image, and multiple contrasts are tested over the same data. The first has been greatly studied and various different procedures have been proposed, e.g., Bonferroni, random field theory, non-parametric approaches and false discovery rate. The second arises when there are various hypotheses (contrasts) about the same model, or different models are analyzed using the same data. If left uncontrolled, such multiplicity can lead to an undesirably high false positive rate, and spurious effects can be interpreted as real. Even though a number of methods have been proposed for contrast correction in non-imaging fields, most of these have seen little use in brain imaging, and often the brain analyses are reported without such correction. Thus, in this work, I discuss and compare the correction performance from Bonferroni, Dunn–Šidák, Fisher’s lsd, Tukey, Scheffé, Fisher–Hayter, Wang–Cui and Westfall–Young permutation method using both simulated data and real data from imaging studies of the brain. Although some procedures had good performance in some simulation scenarios, permutation method was the most suitable method to correct for multiple testing: it can be used to correct across both contrasts and voxels (or vertices), showed a strong control of the fwer, can be used with balanced and unbalanced models, and held one of the highest power independently of the number of contrasts tested or their dependency structure. I also confirmed that Fisher’s lsd presents a weak control of the fwer for more than three groups and, therefore, is invalid. Using magnetic resonance images of the brain, I showed how these methods can be applied to different types of analysis, such that they can be used as guideline for anyone working with neuroimaging.Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES)O problema dos testes múltiplos aparece em neuroimagem de duas formas no contexto do modelo linear general: um teste estatístico é realizado em cada voxel ou vértice da imagem, ou vários contrastes são testados utilizando os mesmos dados. Para o primeiro, diversos procedimentos para correção foram propostos, como por exemplo, Bonferroni, teoria dos campos aleatórios, testes não paramétricos e taxa de falsas descobertas. O segundo surge quando existem várias hipóteses (contrastes) sobre o mesmo modelo ou diversos modelos são testados usando os mesmos dados. Se não for controlada, essa multiplicidade de testes pode levar a uma taxa de falsos positivos acima do desejável e efeitos espúrios podem ser interpretados como reais. Embora vários métodos tenham sido propostos para correção de testes múltiplos em contrastes em outros campos do conhecimento, muitos são pouco conhecidos na área de neuroimagens e muitas vezes os estudos de imagens do cérebro são relatadas sem essa correção. Portanto, neste trabalho, são avaliados diversos métodos para correção dos testes múltiplos em contrastes, especificamente os métodos de Bonferroni, Dunn–Šidák, Fisher’s lsd, Tukey, Scheffé, Fisher–Hayter, Wang–Cui e Westfall–Young. O desempenho de cada método foi analisado usando tanto dados simulados, como imagens reais de ressonância magnética do cérebro. De maneira geral, o único método com bom desempenho em todos os cenários considerados foi o proposto por Westfall–Young, o qual efetua a correção analisando a distribuição do máximo obtida por meio de permutações. Verificou-se que este método apresenta controle do tipo forte sobre a taxa de erros na família de testes, pode ser usado com modelos balanceados e desbalanceados, e que é um dos procedimentos com maior poder, independentemente do número de contrastes testados ou de sua estrutura de dependência. O método de Westfall–Young também tem a vantagem de poder ser usado para corrigir simultaneamente contrastes, voxels (ou vértices) e modalidades, além de poder ser aplicado a estudos que envolvem regressores contínuos e discretos. Também foi confirmado que o método lsd apresenta um controle fraco da taxa de erros na família de testes quando há mais de três grupos e, portanto, é inválido.Universidade Tecnológica Federal do ParanáCuritibaBrasilPrograma de Pós-Graduação em Engenharia Elétrica e Informática IndustrialUTFPRWinkler, Anderson Marcelohttp://lattes.cnpq.br/3158613415305645Gamba, Humberto Remigiohttp://lattes.cnpq.br/9211006688316492Gamba, Humberto Remigiohttp://lattes.cnpq.br/9211006688316492Sato, Joao Ricardohttp://lattes.cnpq.br/7913813209624175Melo Jr, Luiz Ledo Motahttp://lattes.cnpq.br/6264380736822687Alberton, Bianca Alessandra Visineski2020-07-01T21:33:30Z2020-07-01T21:33:30Z2020-02-17info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfALBERTON, Bianca Alessandra Visineski. Multiple testing correction over contrasts for brain imaging. 2020. Dissertação (Mestrado em Engenharia Elétrica e Informática Industrial) - Universidade Tecnológica Federal do Paraná, Curitiba, 2020.http://repositorio.utfpr.edu.br/jspui/handle/1/5050enginfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))instname:Universidade Tecnológica Federal do Paraná (UTFPR)instacron:UTFPR2020-07-02T06:01:21Zoai:repositorio.utfpr.edu.br:1/5050Repositório InstitucionalPUBhttp://repositorio.utfpr.edu.br:8080/oai/requestriut@utfpr.edu.br || sibi@utfpr.edu.bropendoar:2020-07-02T06:01:21Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) - Universidade Tecnológica Federal do Paraná (UTFPR)false
dc.title.none.fl_str_mv Multiple testing correction over contrasts for brain imaging
Correção para o problema dos testes múltiplos em contraste aplicado a neuroimagem
title Multiple testing correction over contrasts for brain imaging
spellingShingle Multiple testing correction over contrasts for brain imaging
Alberton, Bianca Alessandra Visineski
Cérebro - Radiografia
Cérebro - Imagem - Testes
Cérebro - Doenças - Diagnóstico
Diagnóstico por imagem - Simulação por computador
Brain - Radiography
Brain - Imaging - Testing
Brain - Diseases - Diagnosis
Diagnostic imaging - Computer simulation
CNPQ::ENGENHARIAS::ENGENHARIA BIOMEDICA::BIOENGENHARIA::PROCESSAMENTO DE SINAIS BIOLOGICOS
Engenharia Elétrica
title_short Multiple testing correction over contrasts for brain imaging
title_full Multiple testing correction over contrasts for brain imaging
title_fullStr Multiple testing correction over contrasts for brain imaging
title_full_unstemmed Multiple testing correction over contrasts for brain imaging
title_sort Multiple testing correction over contrasts for brain imaging
author Alberton, Bianca Alessandra Visineski
author_facet Alberton, Bianca Alessandra Visineski
author_role author
dc.contributor.none.fl_str_mv Winkler, Anderson Marcelo
http://lattes.cnpq.br/3158613415305645
Gamba, Humberto Remigio
http://lattes.cnpq.br/9211006688316492
Gamba, Humberto Remigio
http://lattes.cnpq.br/9211006688316492
Sato, Joao Ricardo
http://lattes.cnpq.br/7913813209624175
Melo Jr, Luiz Ledo Mota
http://lattes.cnpq.br/6264380736822687
dc.contributor.author.fl_str_mv Alberton, Bianca Alessandra Visineski
dc.subject.por.fl_str_mv Cérebro - Radiografia
Cérebro - Imagem - Testes
Cérebro - Doenças - Diagnóstico
Diagnóstico por imagem - Simulação por computador
Brain - Radiography
Brain - Imaging - Testing
Brain - Diseases - Diagnosis
Diagnostic imaging - Computer simulation
CNPQ::ENGENHARIAS::ENGENHARIA BIOMEDICA::BIOENGENHARIA::PROCESSAMENTO DE SINAIS BIOLOGICOS
Engenharia Elétrica
topic Cérebro - Radiografia
Cérebro - Imagem - Testes
Cérebro - Doenças - Diagnóstico
Diagnóstico por imagem - Simulação por computador
Brain - Radiography
Brain - Imaging - Testing
Brain - Diseases - Diagnosis
Diagnostic imaging - Computer simulation
CNPQ::ENGENHARIAS::ENGENHARIA BIOMEDICA::BIOENGENHARIA::PROCESSAMENTO DE SINAIS BIOLOGICOS
Engenharia Elétrica
description The multiple testing problem appears in brain imaging in the context of the general linear model in two forms: a statistical test is performed at each voxel or vertex of the image, and multiple contrasts are tested over the same data. The first has been greatly studied and various different procedures have been proposed, e.g., Bonferroni, random field theory, non-parametric approaches and false discovery rate. The second arises when there are various hypotheses (contrasts) about the same model, or different models are analyzed using the same data. If left uncontrolled, such multiplicity can lead to an undesirably high false positive rate, and spurious effects can be interpreted as real. Even though a number of methods have been proposed for contrast correction in non-imaging fields, most of these have seen little use in brain imaging, and often the brain analyses are reported without such correction. Thus, in this work, I discuss and compare the correction performance from Bonferroni, Dunn–Šidák, Fisher’s lsd, Tukey, Scheffé, Fisher–Hayter, Wang–Cui and Westfall–Young permutation method using both simulated data and real data from imaging studies of the brain. Although some procedures had good performance in some simulation scenarios, permutation method was the most suitable method to correct for multiple testing: it can be used to correct across both contrasts and voxels (or vertices), showed a strong control of the fwer, can be used with balanced and unbalanced models, and held one of the highest power independently of the number of contrasts tested or their dependency structure. I also confirmed that Fisher’s lsd presents a weak control of the fwer for more than three groups and, therefore, is invalid. Using magnetic resonance images of the brain, I showed how these methods can be applied to different types of analysis, such that they can be used as guideline for anyone working with neuroimaging.
publishDate 2020
dc.date.none.fl_str_mv 2020-07-01T21:33:30Z
2020-07-01T21:33:30Z
2020-02-17
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv ALBERTON, Bianca Alessandra Visineski. Multiple testing correction over contrasts for brain imaging. 2020. Dissertação (Mestrado em Engenharia Elétrica e Informática Industrial) - Universidade Tecnológica Federal do Paraná, Curitiba, 2020.
http://repositorio.utfpr.edu.br/jspui/handle/1/5050
identifier_str_mv ALBERTON, Bianca Alessandra Visineski. Multiple testing correction over contrasts for brain imaging. 2020. Dissertação (Mestrado em Engenharia Elétrica e Informática Industrial) - Universidade Tecnológica Federal do Paraná, Curitiba, 2020.
url http://repositorio.utfpr.edu.br/jspui/handle/1/5050
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Tecnológica Federal do Paraná
Curitiba
Brasil
Programa de Pós-Graduação em Engenharia Elétrica e Informática Industrial
UTFPR
publisher.none.fl_str_mv Universidade Tecnológica Federal do Paraná
Curitiba
Brasil
Programa de Pós-Graduação em Engenharia Elétrica e Informática Industrial
UTFPR
dc.source.none.fl_str_mv reponame:Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
instname:Universidade Tecnológica Federal do Paraná (UTFPR)
instacron:UTFPR
instname_str Universidade Tecnológica Federal do Paraná (UTFPR)
instacron_str UTFPR
institution UTFPR
reponame_str Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
collection Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
repository.name.fl_str_mv Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) - Universidade Tecnológica Federal do Paraná (UTFPR)
repository.mail.fl_str_mv riut@utfpr.edu.br || sibi@utfpr.edu.br
_version_ 1850498284398837760