Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas

Detalhes bibliográficos
Ano de defesa: 2010
Autor(a) principal: Soares, Sófacles Figueiredo Carreiro lattes
Orientador(a): Araújo, Mário César Ugulino de lattes
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Universidade Federal da Paraí­ba
Programa de Pós-Graduação: Programa de Pós-Graduação em Química
Departamento: Química
País: BR
Palavras-chave em Português:
Palavras-chave em Inglês:
Área do conhecimento CNPq:
Link de acesso: https://repositorio.ufpb.br/jspui/handle/tede/7184
Resumo: This study proposes a modification in the Successive Projections Algorithm (SPA), that makes models of Multiple Linear Regression (MLR) more robust in terms of interference. In SPA, subsets of variables are compared based on their root mean square errors for the validation set. By taking into account the statistical prediction error obtained for the calibration set, and dividing by the statistical prediction error obtained for the prediction set, SPA can be improved. Also taken into account is the leverage associated with each sample. Three case studies involving; simulated analytic determinations, food colorants (UV-VIS spectrometry), and ethanol in gasoline (NIR spectrometry) are discussed. The results were evaluated using the root mean square error for an independent prediction set (Root Mean Square Error of Prediction - RMSEP), graphs of the variables, and the statistical tests t and F. The MLR models obtained by the selection using the new function were called SPE-SPA-MLR. When an interferent was present in the prediction spectra, almost all of the models performed better than both SPA-MLR and PLS. The models when compared to SPA-MLR showed that the change promoted better models in all cases giving smaller RMSEPs and variable numbers. The SPE-SPA-MLR was not better in some cases, than PLS models. The variables selected by SPA-SPE-MLR when observed in the spectra were detected in regions where interference was the at its smallest, revealing great potential. The modifications presented here make a useful tool for the basic formulation of the SPA.
id UFPB-2_b8819119ca2a2296e6efbc8ca5ce1812
oai_identifier_str oai:repositorio.ufpb.br:tede/7184
network_acronym_str UFPB-2
network_name_str Repositório Institucional da UFPB
repository_id_str
spelling 2015-05-14T13:21:51Z2018-07-21T00:29:58Z2011-01-042018-07-21T00:29:58Z2010-09-22SOARES, Sófacles Figueiredo Carreiro. Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas. 2010. 108 f. Dissertação (Mestrado em Química) - Universidade Federal da Paraí­ba, João Pessoa, 2010.https://repositorio.ufpb.br/jspui/handle/tede/7184This study proposes a modification in the Successive Projections Algorithm (SPA), that makes models of Multiple Linear Regression (MLR) more robust in terms of interference. In SPA, subsets of variables are compared based on their root mean square errors for the validation set. By taking into account the statistical prediction error obtained for the calibration set, and dividing by the statistical prediction error obtained for the prediction set, SPA can be improved. Also taken into account is the leverage associated with each sample. Three case studies involving; simulated analytic determinations, food colorants (UV-VIS spectrometry), and ethanol in gasoline (NIR spectrometry) are discussed. The results were evaluated using the root mean square error for an independent prediction set (Root Mean Square Error of Prediction - RMSEP), graphs of the variables, and the statistical tests t and F. The MLR models obtained by the selection using the new function were called SPE-SPA-MLR. When an interferent was present in the prediction spectra, almost all of the models performed better than both SPA-MLR and PLS. The models when compared to SPA-MLR showed that the change promoted better models in all cases giving smaller RMSEPs and variable numbers. The SPE-SPA-MLR was not better in some cases, than PLS models. The variables selected by SPA-SPE-MLR when observed in the spectra were detected in regions where interference was the at its smallest, revealing great potential. The modifications presented here make a useful tool for the basic formulation of the SPA.Este trabalho propõe uma modificação no Algoritmo das Projeções Sucessivas (Sucessive Projection Algorithm - SPA), com objetivo de aumentar a robustez a interferentes nos modelos de Regressão Linear Múltipla (Multiple Linear Regression - MLR) construídos. Na formulação original do SPA, subconjuntos de variáveis são comparados entre si com base na raiz do erro quadrático médio obtido em um conjunto de validação. De acordo com o critério aqui proposto, a comparação é feita também levando em conta o erro estatístico de previsão (Statistical Prediction Error SPE) obtido para o conjunto de calibração dividido pelo erro estatístico de previsão obtido para o conjunto de previsão. Tal métrica leva em conta a leverage associada a cada amostra. Três estudos de caso envolvendo a determinação de analitos simulados, corantes alimentícios por espectrometria UV-VIS e álcool em gasolinas por espectrometria NIR são discutidos. Os resultados são avaliados em termos da raiz do erro quadrático médio em um conjunto de previsão independente (Root Mean Square Error of Prediction - RMSEP), dos gráficos das variáveis selecionadas e através do testes estatísticos t e F. Os modelos MLR obtidos a partir da seleção usando a nova função custo foram chamados aqui de SPA-SPE-MLR. Estes modelos foram comparados com o SPA-MLR e PLS. Os desempenhos de previsão do SPA-SPEMLR apresentados foram melhores em quase todos os modelos construídos quando algum interferente estava presente nos espectros de previsão. Estes modelos quando comparados ao SPA-MLR, revelou que a mudança promoveu melhorias em todos os casos fornecendo RMSEPs e números de variáveis menores. O SPA-SPE-MLR só não foi melhor que alguns modelos PLS. As variáveis selecionadas pelo SPA-SPE-MLR quando observadas nos espectros se mostraram em regiões onde a ação do interferente foi à menor possível revelando o grande potencial que tal mudança provocou. Desta forma a modificação aqui apresentada pode ser considerada como uma ferramenta útil para a formulação básica do SPA.Made available in DSpace on 2015-05-14T13:21:51Z (GMT). No. of bitstreams: 1 arquivototal.pdf: 2432134 bytes, checksum: aeda44e0d999a92b980354a5ea66ce01 (MD5) Previous issue date: 2010-09-22Made available in DSpace on 2018-07-21T00:29:58Z (GMT). No. of bitstreams: 2 arquivototal.pdf: 2432134 bytes, checksum: aeda44e0d999a92b980354a5ea66ce01 (MD5) arquivototal.pdf.jpg: 3323 bytes, checksum: f6101db6a5da0fab93a8af549bce0c6d (MD5) Previous issue date: 2010-09-22Coordenação de Aperfeiçoamento de Pessoal de Nível Superior - CAPESapplication/pdfporUniversidade Federal da Paraí­baPrograma de Pós-Graduação em QuímicaUFPBBRQuímicaRegressão linear múltiplaSeleção de variáveisAlgoritmo das projeções sucessivas e calibração multivariadaMultiple linear regressionVariable selectionSuccessive projections algorithm and multivariate calibrationCIENCIAS EXATAS E DA TERRA::QUIMICAUm novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivasinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisAraújo, Mário César Ugulino deCPF:16075056491http://lattes.cnpq.br/7281739070942782Galvão, Roberto Kawakami HarropCPF:88061698404http://lattes.cnpq.br/2331014850737529CPF:01058943383http://lattes.cnpq.br/7653207334385666Soares, Sófacles Figueiredo Carreirohttp://tede.biblioteca.ufpb.br:8080/retrieve/18237/arquivototal.pdf.jpginfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UFPBinstname:Universidade Federal da Paraíba (UFPB)instacron:UFPBTEXTarquivototal.pdf.txtarquivototal.pdf.txtExtracted texttext/plain177778https://repositorio.ufpb.br/jspui/bitstream/tede/7184/4/arquivototal.pdf.txtca8781c3ebcde7e9a9c33df6910f56b1MD54LICENSElicense.txtlicense.txttext/plain; charset=utf-81867https://repositorio.ufpb.br/jspui/bitstream/tede/7184/3/license.txt07956d2f9f6879bad6c75289be248398MD53THUMBNAILarquivototal.pdf.jpgarquivototal.pdf.jpgIM Thumbnailimage/jpeg4083https://repositorio.ufpb.br/jspui/bitstream/tede/7184/5/arquivototal.pdf.jpgd19f7397a7e14f95850447a87fc1bbeeMD55ORIGINALarquivototal.pdfapplication/pdf2432134https://repositorio.ufpb.br/jspui/bitstream/tede/7184/1/arquivototal.pdfaeda44e0d999a92b980354a5ea66ce01MD51tede/71842018-09-05 23:05:18.725oai:repositorio.ufpb.br:tede/7184TElDRU7Dh0EgREUgRElTVFJJQlVJw4fDg08gTsODTy1FWENMVVNJVkEKCkNvbSBhIGFwcmVzZW50YcOnw6NvIGRlc3RhIGxpY2Vuw6dhLCB2b2PDqiAobyBhdXRvciAoZXMpIG91IG8gdGl0dWxhciBkb3MgZGlyZWl0b3MgZGUgYXV0b3IpIGNvbmNlZGUgw6AgVW5pdmVyc2lkYWRlIApGZWRlcmFsIGRhIFBhcmHDrWJhIChVRlBCKSBvIGRpcmVpdG8gbsOjby1leGNsdXNpdm8gZGUgcmVwcm9kdXppciwgIHRyYWR1emlyIChjb25mb3JtZSBkZWZpbmlkbyBhYmFpeG8pLCBlL291IGRpc3RyaWJ1aXIgYSAKc3VhIHB1YmxpY2HDp8OjbyAoaW5jbHVpbmRvIG8gcmVzdW1vKSBwb3IgdG9kbyBvIG11bmRvIG5vIGZvcm1hdG8gaW1wcmVzc28gZSBlbGV0csO0bmljbyBlIGVtIHF1YWxxdWVyIG1laW8sIGluY2x1aW5kbyBvcyAKZm9ybWF0b3Mgw6F1ZGlvIG91IHbDrWRlby4KClZvY8OqIGNvbmNvcmRhIHF1ZSBhIFVGUEIgcG9kZSwgc2VtIGFsdGVyYXIgbyBjb250ZcO6ZG8sIHRyYW5zcG9yIGEgc3VhIHB1YmxpY2HDp8OjbyBwYXJhIHF1YWxxdWVyIG1laW8gb3UgZm9ybWF0byAKcGFyYSBmaW5zIGRlIHByZXNlcnZhw6fDo28uCgpWb2PDqiB0YW1iw6ltIGNvbmNvcmRhIHF1ZSBhIFVGUEIgcG9kZSBtYW50ZXIgbWFpcyBkZSB1bWEgY8OzcGlhIGRlIHN1YSBwdWJsaWNhw6fDo28gcGFyYSBmaW5zIGRlIHNlZ3VyYW7Dp2EsIGJhY2stdXAgCmUgcHJlc2VydmHDp8Ojby4KClZvY8OqIGRlY2xhcmEgcXVlIGEgc3VhIHB1YmxpY2HDp8OjbyDDqSBvcmlnaW5hbCBlIHF1ZSB2b2PDqiB0ZW0gbyBwb2RlciBkZSBjb25jZWRlciBvcyBkaXJlaXRvcyBjb250aWRvcyBuZXN0YSBsaWNlbsOnYS4gClZvY8OqIHRhbWLDqW0gZGVjbGFyYSBxdWUgbyBkZXDDs3NpdG8gZGEgc3VhIHB1YmxpY2HDp8OjbyBuw6NvLCBxdWUgc2VqYSBkZSBzZXUgY29uaGVjaW1lbnRvLCBpbmZyaW5nZSBkaXJlaXRvcyBhdXRvcmFpcyAKZGUgbmluZ3XDqW0uCgpDYXNvIGEgc3VhIHB1YmxpY2HDp8OjbyBjb250ZW5oYSBtYXRlcmlhbCBxdWUgdm9jw6ogbsOjbyBwb3NzdWkgYSB0aXR1bGFyaWRhZGUgZG9zIGRpcmVpdG9zIGF1dG9yYWlzLCB2b2PDqiBkZWNsYXJhIHF1ZSAKb2J0ZXZlIGEgcGVybWlzc8OjbyBpcnJlc3RyaXRhIGRvIGRldGVudG9yIGRvcyBkaXJlaXRvcyBhdXRvcmFpcyBwYXJhIGNvbmNlZGVyIGFvIERlcG9zaXRhIG9zIGRpcmVpdG9zIGFwcmVzZW50YWRvcyAKbmVzdGEgbGljZW7Dp2EsIGUgcXVlIGVzc2UgbWF0ZXJpYWwgZGUgcHJvcHJpZWRhZGUgZGUgdGVyY2Vpcm9zIGVzdMOhIGNsYXJhbWVudGUgaWRlbnRpZmljYWRvIGUgcmVjb25oZWNpZG8gbm8gdGV4dG8gCm91IG5vIGNvbnRlw7pkbyBkYSBwdWJsaWNhw6fDo28gb3JhIGRlcG9zaXRhZGEuCgpDQVNPIEEgUFVCTElDQcOHw4NPIE9SQSBERVBPU0lUQURBIFRFTkhBIFNJRE8gUkVTVUxUQURPIERFIFVNIFBBVFJPQ8ONTklPIE9VIEFQT0lPIERFIFVNQSBBR8OKTkNJQSBERSBGT01FTlRPIE9VIE9VVFJPIApPUkdBTklTTU8sIFZPQ8OKIERFQ0xBUkEgUVVFIFJFU1BFSVRPVSBUT0RPUyBFIFFVQUlTUVVFUiBESVJFSVRPUyBERSBSRVZJU8ODTyBDT01PIFRBTULDiU0gQVMgREVNQUlTIE9CUklHQcOHw5VFUyAKRVhJR0lEQVMgUE9SIENPTlRSQVRPIE9VIEFDT1JETy4KCkEgVUZQQiBzZSBjb21wcm9tZXRlIGEgaWRlbnRpZmljYXIgY2xhcmFtZW50ZSBvIHNldSBub21lIChzKSBvdSBvKHMpIG5vbWUocykgZG8ocykgZGV0ZW50b3IoZXMpIGRvcyBkaXJlaXRvcyAKYXV0b3JhaXMgZGEgcHVibGljYcOnw6NvLCBlIG7Do28gZmFyw6EgcXVhbHF1ZXIgYWx0ZXJhw6fDo28sIGFsw6ltIGRhcXVlbGFzIGNvbmNlZGlkYXMgcG9yIGVzdGEgbGljZW7Dp2EuCg==Repositório InstitucionalPUBhttps://repositorio.ufpb.br/oai/requestdiretoria@ufpb.br||bdtd@biblioteca.ufpb.bropendoar:25462018-09-06T02:05:18Repositório Institucional da UFPB - Universidade Federal da Paraíba (UFPB)false
dc.title.por.fl_str_mv Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas
title Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas
spellingShingle Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas
Soares, Sófacles Figueiredo Carreiro
Regressão linear múltipla
Seleção de variáveis
Algoritmo das projeções sucessivas e calibração multivariada
Multiple linear regression
Variable selection
Successive projections algorithm and multivariate calibration
CIENCIAS EXATAS E DA TERRA::QUIMICA
title_short Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas
title_full Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas
title_fullStr Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas
title_full_unstemmed Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas
title_sort Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas
author Soares, Sófacles Figueiredo Carreiro
author_facet Soares, Sófacles Figueiredo Carreiro
author_role author
dc.contributor.advisor1.fl_str_mv Araújo, Mário César Ugulino de
dc.contributor.advisor1ID.fl_str_mv CPF:16075056491
dc.contributor.advisor1Lattes.fl_str_mv http://lattes.cnpq.br/7281739070942782
dc.contributor.advisor-co1.fl_str_mv Galvão, Roberto Kawakami Harrop
dc.contributor.advisor-co1ID.fl_str_mv CPF:88061698404
dc.contributor.advisor-co1Lattes.fl_str_mv http://lattes.cnpq.br/2331014850737529
dc.contributor.authorID.fl_str_mv CPF:01058943383
dc.contributor.authorLattes.fl_str_mv http://lattes.cnpq.br/7653207334385666
dc.contributor.author.fl_str_mv Soares, Sófacles Figueiredo Carreiro
contributor_str_mv Araújo, Mário César Ugulino de
Galvão, Roberto Kawakami Harrop
dc.subject.por.fl_str_mv Regressão linear múltipla
Seleção de variáveis
Algoritmo das projeções sucessivas e calibração multivariada
topic Regressão linear múltipla
Seleção de variáveis
Algoritmo das projeções sucessivas e calibração multivariada
Multiple linear regression
Variable selection
Successive projections algorithm and multivariate calibration
CIENCIAS EXATAS E DA TERRA::QUIMICA
dc.subject.eng.fl_str_mv Multiple linear regression
Variable selection
Successive projections algorithm and multivariate calibration
dc.subject.cnpq.fl_str_mv CIENCIAS EXATAS E DA TERRA::QUIMICA
description This study proposes a modification in the Successive Projections Algorithm (SPA), that makes models of Multiple Linear Regression (MLR) more robust in terms of interference. In SPA, subsets of variables are compared based on their root mean square errors for the validation set. By taking into account the statistical prediction error obtained for the calibration set, and dividing by the statistical prediction error obtained for the prediction set, SPA can be improved. Also taken into account is the leverage associated with each sample. Three case studies involving; simulated analytic determinations, food colorants (UV-VIS spectrometry), and ethanol in gasoline (NIR spectrometry) are discussed. The results were evaluated using the root mean square error for an independent prediction set (Root Mean Square Error of Prediction - RMSEP), graphs of the variables, and the statistical tests t and F. The MLR models obtained by the selection using the new function were called SPE-SPA-MLR. When an interferent was present in the prediction spectra, almost all of the models performed better than both SPA-MLR and PLS. The models when compared to SPA-MLR showed that the change promoted better models in all cases giving smaller RMSEPs and variable numbers. The SPE-SPA-MLR was not better in some cases, than PLS models. The variables selected by SPA-SPE-MLR when observed in the spectra were detected in regions where interference was the at its smallest, revealing great potential. The modifications presented here make a useful tool for the basic formulation of the SPA.
publishDate 2010
dc.date.issued.fl_str_mv 2010-09-22
dc.date.available.fl_str_mv 2011-01-04
2018-07-21T00:29:58Z
dc.date.accessioned.fl_str_mv 2015-05-14T13:21:51Z
2018-07-21T00:29:58Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv SOARES, Sófacles Figueiredo Carreiro. Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas. 2010. 108 f. Dissertação (Mestrado em Química) - Universidade Federal da Paraí­ba, João Pessoa, 2010.
dc.identifier.uri.fl_str_mv https://repositorio.ufpb.br/jspui/handle/tede/7184
identifier_str_mv SOARES, Sófacles Figueiredo Carreiro. Um novo critério para seleção de variáveis usando o Algoritmo das Projeções Sucessivas. 2010. 108 f. Dissertação (Mestrado em Química) - Universidade Federal da Paraí­ba, João Pessoa, 2010.
url https://repositorio.ufpb.br/jspui/handle/tede/7184
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Federal da Paraí­ba
dc.publisher.program.fl_str_mv Programa de Pós-Graduação em Química
dc.publisher.initials.fl_str_mv UFPB
dc.publisher.country.fl_str_mv BR
dc.publisher.department.fl_str_mv Química
publisher.none.fl_str_mv Universidade Federal da Paraí­ba
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFPB
instname:Universidade Federal da Paraíba (UFPB)
instacron:UFPB
instname_str Universidade Federal da Paraíba (UFPB)
instacron_str UFPB
institution UFPB
reponame_str Repositório Institucional da UFPB
collection Repositório Institucional da UFPB
bitstream.url.fl_str_mv https://repositorio.ufpb.br/jspui/bitstream/tede/7184/4/arquivototal.pdf.txt
https://repositorio.ufpb.br/jspui/bitstream/tede/7184/3/license.txt
https://repositorio.ufpb.br/jspui/bitstream/tede/7184/5/arquivototal.pdf.jpg
https://repositorio.ufpb.br/jspui/bitstream/tede/7184/1/arquivototal.pdf
bitstream.checksum.fl_str_mv ca8781c3ebcde7e9a9c33df6910f56b1
07956d2f9f6879bad6c75289be248398
d19f7397a7e14f95850447a87fc1bbee
aeda44e0d999a92b980354a5ea66ce01
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UFPB - Universidade Federal da Paraíba (UFPB)
repository.mail.fl_str_mv diretoria@ufpb.br||bdtd@biblioteca.ufpb.br
_version_ 1877597326772535296