Multiple testing correction over contrasts for brain imaging
| Ano de defesa: | 2020 |
|---|---|
| Autor(a) principal: | |
| Orientador(a): | |
| Banca de defesa: | |
| Tipo de documento: | Dissertação |
| Tipo de acesso: | Acesso aberto |
| Idioma: | eng |
| Instituição de defesa: |
Universidade Tecnológica Federal do Paraná
Curitiba Brasil Programa de Pós-Graduação em Engenharia Elétrica e Informática Industrial UTFPR |
| Programa de Pós-Graduação: |
Não Informado pela instituição
|
| Departamento: |
Não Informado pela instituição
|
| País: |
Não Informado pela instituição
|
| Palavras-chave em Português: | |
| Link de acesso: | http://repositorio.utfpr.edu.br/jspui/handle/1/5050 |
Resumo: | The multiple testing problem appears in brain imaging in the context of the general linear model in two forms: a statistical test is performed at each voxel or vertex of the image, and multiple contrasts are tested over the same data. The first has been greatly studied and various different procedures have been proposed, e.g., Bonferroni, random field theory, non-parametric approaches and false discovery rate. The second arises when there are various hypotheses (contrasts) about the same model, or different models are analyzed using the same data. If left uncontrolled, such multiplicity can lead to an undesirably high false positive rate, and spurious effects can be interpreted as real. Even though a number of methods have been proposed for contrast correction in non-imaging fields, most of these have seen little use in brain imaging, and often the brain analyses are reported without such correction. Thus, in this work, I discuss and compare the correction performance from Bonferroni, Dunn–Šidák, Fisher’s lsd, Tukey, Scheffé, Fisher–Hayter, Wang–Cui and Westfall–Young permutation method using both simulated data and real data from imaging studies of the brain. Although some procedures had good performance in some simulation scenarios, permutation method was the most suitable method to correct for multiple testing: it can be used to correct across both contrasts and voxels (or vertices), showed a strong control of the fwer, can be used with balanced and unbalanced models, and held one of the highest power independently of the number of contrasts tested or their dependency structure. I also confirmed that Fisher’s lsd presents a weak control of the fwer for more than three groups and, therefore, is invalid. Using magnetic resonance images of the brain, I showed how these methods can be applied to different types of analysis, such that they can be used as guideline for anyone working with neuroimaging. |
| id |
UTFPR-12_c5fe89bd6805d59f4657b0db40d38a04 |
|---|---|
| oai_identifier_str |
oai:repositorio.utfpr.edu.br:1/5050 |
| network_acronym_str |
UTFPR-12 |
| network_name_str |
Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) |
| repository_id_str |
|
| spelling |
Multiple testing correction over contrasts for brain imagingCorreção para o problema dos testes múltiplos em contraste aplicado a neuroimagemCérebro - RadiografiaCérebro - Imagem - TestesCérebro - Doenças - DiagnósticoDiagnóstico por imagem - Simulação por computadorBrain - RadiographyBrain - Imaging - TestingBrain - Diseases - DiagnosisDiagnostic imaging - Computer simulationCNPQ::ENGENHARIAS::ENGENHARIA BIOMEDICA::BIOENGENHARIA::PROCESSAMENTO DE SINAIS BIOLOGICOSEngenharia ElétricaThe multiple testing problem appears in brain imaging in the context of the general linear model in two forms: a statistical test is performed at each voxel or vertex of the image, and multiple contrasts are tested over the same data. The first has been greatly studied and various different procedures have been proposed, e.g., Bonferroni, random field theory, non-parametric approaches and false discovery rate. The second arises when there are various hypotheses (contrasts) about the same model, or different models are analyzed using the same data. If left uncontrolled, such multiplicity can lead to an undesirably high false positive rate, and spurious effects can be interpreted as real. Even though a number of methods have been proposed for contrast correction in non-imaging fields, most of these have seen little use in brain imaging, and often the brain analyses are reported without such correction. Thus, in this work, I discuss and compare the correction performance from Bonferroni, Dunn–Šidák, Fisher’s lsd, Tukey, Scheffé, Fisher–Hayter, Wang–Cui and Westfall–Young permutation method using both simulated data and real data from imaging studies of the brain. Although some procedures had good performance in some simulation scenarios, permutation method was the most suitable method to correct for multiple testing: it can be used to correct across both contrasts and voxels (or vertices), showed a strong control of the fwer, can be used with balanced and unbalanced models, and held one of the highest power independently of the number of contrasts tested or their dependency structure. I also confirmed that Fisher’s lsd presents a weak control of the fwer for more than three groups and, therefore, is invalid. Using magnetic resonance images of the brain, I showed how these methods can be applied to different types of analysis, such that they can be used as guideline for anyone working with neuroimaging.Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES)O problema dos testes múltiplos aparece em neuroimagem de duas formas no contexto do modelo linear general: um teste estatístico é realizado em cada voxel ou vértice da imagem, ou vários contrastes são testados utilizando os mesmos dados. Para o primeiro, diversos procedimentos para correção foram propostos, como por exemplo, Bonferroni, teoria dos campos aleatórios, testes não paramétricos e taxa de falsas descobertas. O segundo surge quando existem várias hipóteses (contrastes) sobre o mesmo modelo ou diversos modelos são testados usando os mesmos dados. Se não for controlada, essa multiplicidade de testes pode levar a uma taxa de falsos positivos acima do desejável e efeitos espúrios podem ser interpretados como reais. Embora vários métodos tenham sido propostos para correção de testes múltiplos em contrastes em outros campos do conhecimento, muitos são pouco conhecidos na área de neuroimagens e muitas vezes os estudos de imagens do cérebro são relatadas sem essa correção. Portanto, neste trabalho, são avaliados diversos métodos para correção dos testes múltiplos em contrastes, especificamente os métodos de Bonferroni, Dunn–Šidák, Fisher’s lsd, Tukey, Scheffé, Fisher–Hayter, Wang–Cui e Westfall–Young. O desempenho de cada método foi analisado usando tanto dados simulados, como imagens reais de ressonância magnética do cérebro. De maneira geral, o único método com bom desempenho em todos os cenários considerados foi o proposto por Westfall–Young, o qual efetua a correção analisando a distribuição do máximo obtida por meio de permutações. Verificou-se que este método apresenta controle do tipo forte sobre a taxa de erros na família de testes, pode ser usado com modelos balanceados e desbalanceados, e que é um dos procedimentos com maior poder, independentemente do número de contrastes testados ou de sua estrutura de dependência. O método de Westfall–Young também tem a vantagem de poder ser usado para corrigir simultaneamente contrastes, voxels (ou vértices) e modalidades, além de poder ser aplicado a estudos que envolvem regressores contínuos e discretos. Também foi confirmado que o método lsd apresenta um controle fraco da taxa de erros na família de testes quando há mais de três grupos e, portanto, é inválido.Universidade Tecnológica Federal do ParanáCuritibaBrasilPrograma de Pós-Graduação em Engenharia Elétrica e Informática IndustrialUTFPRWinkler, Anderson Marcelohttp://lattes.cnpq.br/3158613415305645Gamba, Humberto Remigiohttp://lattes.cnpq.br/9211006688316492Gamba, Humberto Remigiohttp://lattes.cnpq.br/9211006688316492Sato, Joao Ricardohttp://lattes.cnpq.br/7913813209624175Melo Jr, Luiz Ledo Motahttp://lattes.cnpq.br/6264380736822687Alberton, Bianca Alessandra Visineski2020-07-01T21:33:30Z2020-07-01T21:33:30Z2020-02-17info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfALBERTON, Bianca Alessandra Visineski. Multiple testing correction over contrasts for brain imaging. 2020. Dissertação (Mestrado em Engenharia Elétrica e Informática Industrial) - Universidade Tecnológica Federal do Paraná, Curitiba, 2020.http://repositorio.utfpr.edu.br/jspui/handle/1/5050enginfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))instname:Universidade Tecnológica Federal do Paraná (UTFPR)instacron:UTFPR2020-07-02T06:01:21Zoai:repositorio.utfpr.edu.br:1/5050Repositório InstitucionalPUBhttp://repositorio.utfpr.edu.br:8080/oai/requestriut@utfpr.edu.br || sibi@utfpr.edu.bropendoar:2020-07-02T06:01:21Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) - Universidade Tecnológica Federal do Paraná (UTFPR)false |
| dc.title.none.fl_str_mv |
Multiple testing correction over contrasts for brain imaging Correção para o problema dos testes múltiplos em contraste aplicado a neuroimagem |
| title |
Multiple testing correction over contrasts for brain imaging |
| spellingShingle |
Multiple testing correction over contrasts for brain imaging Alberton, Bianca Alessandra Visineski Cérebro - Radiografia Cérebro - Imagem - Testes Cérebro - Doenças - Diagnóstico Diagnóstico por imagem - Simulação por computador Brain - Radiography Brain - Imaging - Testing Brain - Diseases - Diagnosis Diagnostic imaging - Computer simulation CNPQ::ENGENHARIAS::ENGENHARIA BIOMEDICA::BIOENGENHARIA::PROCESSAMENTO DE SINAIS BIOLOGICOS Engenharia Elétrica |
| title_short |
Multiple testing correction over contrasts for brain imaging |
| title_full |
Multiple testing correction over contrasts for brain imaging |
| title_fullStr |
Multiple testing correction over contrasts for brain imaging |
| title_full_unstemmed |
Multiple testing correction over contrasts for brain imaging |
| title_sort |
Multiple testing correction over contrasts for brain imaging |
| author |
Alberton, Bianca Alessandra Visineski |
| author_facet |
Alberton, Bianca Alessandra Visineski |
| author_role |
author |
| dc.contributor.none.fl_str_mv |
Winkler, Anderson Marcelo http://lattes.cnpq.br/3158613415305645 Gamba, Humberto Remigio http://lattes.cnpq.br/9211006688316492 Gamba, Humberto Remigio http://lattes.cnpq.br/9211006688316492 Sato, Joao Ricardo http://lattes.cnpq.br/7913813209624175 Melo Jr, Luiz Ledo Mota http://lattes.cnpq.br/6264380736822687 |
| dc.contributor.author.fl_str_mv |
Alberton, Bianca Alessandra Visineski |
| dc.subject.por.fl_str_mv |
Cérebro - Radiografia Cérebro - Imagem - Testes Cérebro - Doenças - Diagnóstico Diagnóstico por imagem - Simulação por computador Brain - Radiography Brain - Imaging - Testing Brain - Diseases - Diagnosis Diagnostic imaging - Computer simulation CNPQ::ENGENHARIAS::ENGENHARIA BIOMEDICA::BIOENGENHARIA::PROCESSAMENTO DE SINAIS BIOLOGICOS Engenharia Elétrica |
| topic |
Cérebro - Radiografia Cérebro - Imagem - Testes Cérebro - Doenças - Diagnóstico Diagnóstico por imagem - Simulação por computador Brain - Radiography Brain - Imaging - Testing Brain - Diseases - Diagnosis Diagnostic imaging - Computer simulation CNPQ::ENGENHARIAS::ENGENHARIA BIOMEDICA::BIOENGENHARIA::PROCESSAMENTO DE SINAIS BIOLOGICOS Engenharia Elétrica |
| description |
The multiple testing problem appears in brain imaging in the context of the general linear model in two forms: a statistical test is performed at each voxel or vertex of the image, and multiple contrasts are tested over the same data. The first has been greatly studied and various different procedures have been proposed, e.g., Bonferroni, random field theory, non-parametric approaches and false discovery rate. The second arises when there are various hypotheses (contrasts) about the same model, or different models are analyzed using the same data. If left uncontrolled, such multiplicity can lead to an undesirably high false positive rate, and spurious effects can be interpreted as real. Even though a number of methods have been proposed for contrast correction in non-imaging fields, most of these have seen little use in brain imaging, and often the brain analyses are reported without such correction. Thus, in this work, I discuss and compare the correction performance from Bonferroni, Dunn–Šidák, Fisher’s lsd, Tukey, Scheffé, Fisher–Hayter, Wang–Cui and Westfall–Young permutation method using both simulated data and real data from imaging studies of the brain. Although some procedures had good performance in some simulation scenarios, permutation method was the most suitable method to correct for multiple testing: it can be used to correct across both contrasts and voxels (or vertices), showed a strong control of the fwer, can be used with balanced and unbalanced models, and held one of the highest power independently of the number of contrasts tested or their dependency structure. I also confirmed that Fisher’s lsd presents a weak control of the fwer for more than three groups and, therefore, is invalid. Using magnetic resonance images of the brain, I showed how these methods can be applied to different types of analysis, such that they can be used as guideline for anyone working with neuroimaging. |
| publishDate |
2020 |
| dc.date.none.fl_str_mv |
2020-07-01T21:33:30Z 2020-07-01T21:33:30Z 2020-02-17 |
| dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
| dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
| format |
masterThesis |
| status_str |
publishedVersion |
| dc.identifier.uri.fl_str_mv |
ALBERTON, Bianca Alessandra Visineski. Multiple testing correction over contrasts for brain imaging. 2020. Dissertação (Mestrado em Engenharia Elétrica e Informática Industrial) - Universidade Tecnológica Federal do Paraná, Curitiba, 2020. http://repositorio.utfpr.edu.br/jspui/handle/1/5050 |
| identifier_str_mv |
ALBERTON, Bianca Alessandra Visineski. Multiple testing correction over contrasts for brain imaging. 2020. Dissertação (Mestrado em Engenharia Elétrica e Informática Industrial) - Universidade Tecnológica Federal do Paraná, Curitiba, 2020. |
| url |
http://repositorio.utfpr.edu.br/jspui/handle/1/5050 |
| dc.language.iso.fl_str_mv |
eng |
| language |
eng |
| dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
| eu_rights_str_mv |
openAccess |
| dc.format.none.fl_str_mv |
application/pdf |
| dc.publisher.none.fl_str_mv |
Universidade Tecnológica Federal do Paraná Curitiba Brasil Programa de Pós-Graduação em Engenharia Elétrica e Informática Industrial UTFPR |
| publisher.none.fl_str_mv |
Universidade Tecnológica Federal do Paraná Curitiba Brasil Programa de Pós-Graduação em Engenharia Elétrica e Informática Industrial UTFPR |
| dc.source.none.fl_str_mv |
reponame:Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) instname:Universidade Tecnológica Federal do Paraná (UTFPR) instacron:UTFPR |
| instname_str |
Universidade Tecnológica Federal do Paraná (UTFPR) |
| instacron_str |
UTFPR |
| institution |
UTFPR |
| reponame_str |
Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) |
| collection |
Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) |
| repository.name.fl_str_mv |
Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) - Universidade Tecnológica Federal do Paraná (UTFPR) |
| repository.mail.fl_str_mv |
riut@utfpr.edu.br || sibi@utfpr.edu.br |
| _version_ |
1850498284398837760 |