DISSERTAÇÃO Alyson Barros | Bancos de dados | Dados\nSalvarSalvar DISSERTAÇÃO Alyson Barros para ler mais tarde\n109 visualizações119 páginas\n2406_Banco de Dados\nPL - Hortifruti Venteu\nConse Que Nci As\nAula Extra Psicologia STJ\nAlyson Barros - Curso de Gestão de Pessoas e Comportamento Organizacional para o BNDES - 00\nVALIDADE E CONFIABILIDADE DA VERSÃO INFORMATIZADA DO INVENTÁRIO MILLON DE ESTILOS DE PERSONALIDADE\nDissertação elaborada sob orientação do\nProfº. Drº. João Carlos Alchieri e\napresentada ao Programa de Pós-\nGraduação em Psicologia da Universidade\nFederal do Rio Grande do Norte, como\nrequisito parcial à obtenção do título de\nA dissertação “Validade e Confiabilidade da Versão Informatizada do Inventário Millon de Estilos de Personalidade” elaborada por Alyson Canindé Macêdo de Barros foi considerada aprovada por todos os membros da Banca Examinadora e aceita pelo Programa de Pós- Graduação em Psicologia, como requisito parcial à obtenção do título de Mestre em Psicologia.\nNatal (RN), 30 de Julho de 2008.\nProf. Dr. João Carlos Alchieri (UFRN, Orientador)\nProf. Dr. Valdiney Gouveia (UFPB, Membro Externo)\nProf. Dr. Jorge Falcão (UFRN, Membro Interno)\n“Always look on the bright side of life ”\nÀ minha mãe Zildalte, fonte de fé e segurança. À minha noiva Zaissa pelo sincero amor.\nAgradeço a todos os que possibilitaram este sonho metodológico possível através de palavras de conforto e carinho e, também desafio. Diante dos percalços de vidas pessoais e profissionais, concluir o mestrado seria tão somente uma regalia senão fosse uma paixão estóica pelo conhecimento. Diante destes realizei-me como Newton, só que pulando sobre o ombro de um gigante para ver mais longe. Agradeço ao meu orientador João Carlos Alchieri pela paciência e dedicação neste projeto alcançado e nas orientações seguidas.\nAgradeço a todas as minhas hipóteses de Deuses que desenharam este processo como proposta\nde realização e, principalmente, aprendizado.\nAgradeço o apoio de Hugo C. R. Câmara, um futuro grande professor e atual grande homem, pelos seus valiosos conhecimentos e exemplo de vida.\nA Anderson Sousa, amigo de determinação obstinada pela felicidade, agradeço as horas\ndespendidas em lições de inglês.\nÀ minha noiva, Zaissa Macêdo que sempre entendeu o tempo investido neste mestrado, assim como compreendeu as dificuldades do mesmo.\nAgradeço aos meus pais, irmãos e familiares pelos anos de educação e aprimoramento de meus valores humanos, pelos quais reverencio imensa estimação. Hoje, o eficaz TDAH é um presente poderoso para poder dar conta de tantas competências ao mesmo tempo.\nRESUMO: Atualmente encontramos numerosos testes psicológicos e não psicológicos publicados sem procedimentos em diferentes áreas, como inteligência, estados emocionais, atitudes, comportamento socialmente habilidoso, vocação, preferências e outros. A testagem psicológica informatizada é uma extensão das práticas psicológicas de testagem tradicionais, no entanto caracteriza-se por qualidades psicométricas próprias, seja pela adequação ao ambiente informatizado como também pela extensão de funções que pode adquirir. A presente pesquisa, originada através da necessidade de estudar os processos de validade e confiabilidade de um instrumento informatizado, delineou uma metodologia de aplicações paralelas em vários tipos de grupos operacionais, a partir do tempo e da forma de aplicação, intuindo discutir os aspectos relativos ao processo de informatização. Esta validação refere-se tanto aos valores dos grupos normativos quanto a reprodutibilidade informatizada dos processos de aplicação e tratamento dos dados. Escolhemos o Inventário Millon de Estilos de Personalidade, de Theodore Millon,para o processo de informatização e estudos de validade e confiabilidade. Para fundamentar a pesquisa abordou-se o tema através da contextualização do panorama brasileiro em testes psicológicos, foram discutidas as vantagens e desvantagens de tal prática e foram avaliadas as formas de informatização de testes através das aplicações de um teste on-line. Disponibilizou-se o inventário em um site especialmente preparado para a pesquisa (http://www.planetapsi.com), por oito meses. Foi realizada uma aplicação do teste em modo linear e em escala nacional em todas as regiões brasileiras, obtendo 1508 aplicações. Em seguida, organizamos nove grupos, totalizando 180 sujeitos nas aplicações de teste e reteste, onde foram separadas três faixas de tempo e três formas de retestes para estudos dos testes on- line. Paralelo a isso, compomos ainda um grupo de aplicação multisessão off-line de 20 sujeitos que receberam seus testes por e-mail. Os sujeitos deste estudo estavam distribuídos pelas cinco regiões brasileiras e tomaram conhecimento do teste via internet. Com o desempenho dos testados nas aplicações tradicionais e nos grupos on-line tivemos subsídios para concluir que a aplicação on-line apresenta consistência significativamente boa em todos os critérios de validade estudados. Esta validade justifica a sua utilização, assim como estudos subseqüentes. Os resultados dos testes on-line não só foram correlatos entre si como também foram semelhantes aos das testagens tradicionais (0,89) feitas em lápis e papel. Os retestes demonstraram correlação entre si, variando entre 0,92 e 1, enquanto que as multisessões apresentaram bom resultado nestas comparações (0,72). Além disso, foram avaliados que os critérios logísticos de adequação na forma informatizada, como a segurança, o desempenho dos usuários, as características ambientais, a organização do banco de dados, os custos operacionais e as limitações do inventário on-line, foram bastante satisfatórios, concluindo que há viabilidade de um teste informatizado on-line com auto-aplicação. Os resultados obtidos por este trabalho podem ser de utilidade para nortear ulteriores estudos, aprofundando tanto o estabelecimento de metodologias de informatização de testes psicológicos no país, quanto o papel do psicólogo diante de novas tecnologias.\nValidade – Confiabilidade - Testes Informatizados – MIPS – Teste on-line\nVALIDITY AND RELIABILITY IN COMPUTERIZED MILLON INDEX OF PERSONALITY STYLES\nCurrently, several psychological and non-psychological tests can be found in publishes without standardization on procedures set in different psychological areas, like intelligence, emotional states, attitudes, social skills, vocation, preferences and others. The computerized psychological testing is a extension of traditional testing psychological practices. However, it has own psychometrics qualities, either by its matching in a computerized environment or by the extension that can be developed in it. The current research, developed from a necessity to study process of validity and reliability on a computerized test, drew a methodological structure to provide parallel applications in numerous kinds of operational groups, evaluating the influences of the time and approach in the computerization process. This validity refers to normative values groups, reproducibility in computerized applications process and data processing. Not every psychological test can be computerized. Therefore, our need to find a good test, with quality and plausible properties to transform in computerized application, leaded us to use The Millon Personality Inventory, created by Theodore Millon. This Inventory assesses personality according to 12 bipolarities distributed in 24 factors, distributed in categories motivational styles, cognitive targets and interpersonal relations. This instrument doesn’t diagnose pathological features, but test normal and non adaptive aspects in human personality, comparing with Theodore Millon theory of personality. In oder to support this research in a Brazilian context in psychological testing, we discuss the theme, evaluating the advantages and disadvantages of such practices. Also we discuss the current forms in computerization of psychological testing and the main specific criteria in this psychometric specialized area of knowledge. The test was on-line, hosted in the site http://www.planetapsi.com, during the years of 2007 and 2008, which was available a questionnaire to describe social characteristics before test. A report was generated from the data entry of each user. An application of this test was conducted in a linear way through a national coverage in all Brazil regions, getting 1508 applications. Were organized nine groups, reaching 180 applications in test and retest subject, where three periods of time and three forms of retests for studies of on-line tests were separated. Parallel to this, we organized multi- application session offline group, 20 subjects who received tests by email. The subjects of this study were generally distributed by the five Brazilian regions, and were noticed about the test via the Internet. The performance application in traditional and on-line tested groups subsidies us to conclude that on-line application provides significantly consistency in all criteria for validity studied and justifies its use. The on-line test results were related not only among themselves but were similar to those data of tests done on pencil and paper (0,82). The retests results demonstrated correlation, between 0,92 and, 1 while multisessions had a good correlation in these comparisons. Moreover, were assessed the adequacy of operational criteria used, such as security, the performance of users, the environmental characteristics, the organization of the database, operational costs and limitations in this on-line inventory. In all these five items, there were excellent performances, concluding, also, that it’s possible a self- applied psychometric test. The results of this work are a guide to question and establish of methodologies studies for computerization psychological testing software in the country.\nKey-words: Validity – Reliability - Computerized Tests – MIPS – On-line Test\nCAPÍTULO I – O panorama dos Testes Psicológicos Informatizados\n1.1. Características dos instrumentos informatizados\n1.2. A perspectiva Brasileira de Testagem Informatizada diante do cenário\nmundial e regulamentações deste processo\nCAPÍTULO II – CARACTERÍSTICAS LOGÍSTICAS DO PROCESSO DE TESTAGEM ON-LINE\n2.1. Custos Operacionais\nCAPÍTULO III – MÉTODO\n3.1. O Instrumento: Inventário Millon de Estilos de\n3.1.1. Conceitos Gerais e perspectivas teóricas\n3.1.2. Características do Instrumento\n3.1.3. A validade e confiabilidade do MIPS original\nMétodo para Informatização do Inventário\nMillon de Personalidade\n3.2.1. Parâmetros Psicométricos e desenho das\nAdaptação para a interface on-line\nAnálise empírica e definição da amostra\nCAPÍTULO IV – RESULTADOS\n4.1. Padrões psicométricos do grupo de aplicação on-line\n4.2. Padrões psicométricos dos grupos de retestagem\n4.3. Padrões psicométricos da aplicação em multisessão\nCAPÍTULO V – DISCUSSÃO\n5.1. Validade e confiabilidade do Inventário Millon de Estilos de\nPersonalidade em sua versão on-line\n5.2. Características logísticas do Inventário Millon de Estilos de\nCustos Operacionais do Inventário Millon de\nEstilos de Personalidade on-line\nBanco de Dados do Inventário Millon de Estilos de\nSegurança do Inventário Millon de Estilos\nde Personalidade on-line\nCaracterísticas Ambientais e Acessibilidade do Inventário\nMillon de Estilos de Personalidade on-line\n5.2.5. Desempenho dos usuários no Inventário Millon de Estilos de\nLimitações do Inventário Millon de Estilos de Personalidade on-\n5.3. A perspectiva dos retestes e das multisessões na validade e\nInventário Millon de Estilos de\nCAPÍTULO VI – CONCLUSÕES\nCAPÍTULO VII – REFERÊNCIAS\nQuadro 1: Normas estabelecidas para a correção de dados\nFigura 1: Tela de cadastro no site\nFigura 2: Instruções do Site\nFigura 3: Tela de Perguntas no Site\nFigura 4: Primeira tela de Apresentação do teste Multisessão\nTabela 1: Bipolaridades e os estilos de personalidade\nTabela 2: Distribuição de itens pelas Polaridades\nTabela 3: Distribuição das aplicações de acordo com a faixa etária\nTabela 4: Distribuição das aplicações de acordo com o gênero\nTabela 5: Distribuição das aplicações de acordo com a Escolaridade\nTabela 6: Distribuição das aplicações de acordo com as Regiões\nTabela 7: Grupos de aplicação de teste e reteste\nTabela 8: Definição dos grupos de aplicação\nTabela 9: Comparações entre os Alphas da amostra americana e brasileira\nTabela 10: ANOVA das Metas Motivacionais versus região\nTabela 11: ANOVA dos Estilos cognitivos versus região\nTabela 12: ANOVA Relações Interpessoais versus região\nTabela 13: ANOVA das Metas Motivacionais versus gênero\nTabela 14: ANOVA dos Estilos cognitivos versus gênero\nTabela 15: ANOVA Relações Interpessoais versus gênero\nTabela 16: ANOVA das Metas Motivacionais versus escolaridade\nTabela 17: ANOVA dos Estilos cognitivos versus escolaridade\nTabela 18: ANOVA Relações Interpessoais versus escolaridade\nTabela 19: ANOVA das Metas Motivacionais versus faixa etária\nTabela 20: ANOVA dos Estilos cognitivos versus faixa etária\nTabela 21: ANOVA Relações Interpessoais versus faixa etária\nTabela 22: Média dos fatores da adaptação do MIPS no Brasil (n=6)\nTabela 23: Média dos fatores da aplicação on-line (n=6)\nTabela 24: Médias dos Fatores da adaptação do MIPS no Brasil (n=8182)\nTabela 25: Média dos Fatores da Amostra on-line (n=1508)\nTabela 26: Índice de correlação entre itens\nTabela 27: Médias dos fatores nos grupos de teste on-line e reteste lápis e papel (A, B e C) _74\nTabela 28: Médias dos fatores nos grupos de teste lápis e papel e reteste on-line (D, E e F)_76\nTabela 29: Médias dos fatores nos grupos de teste e reteste on-line (G, H e I)\nTabela 30: Correlações entre grupos de retestes\nTabela 31: Média dos Fatores da Amostra Multisessão (n=20)\nA Avaliação psicológica é um campo da ciência psicológica fundamentada em métodos\ne técnicas de identificação de similaridades e diferenças entre características pessoais e grupos\nnormativos. Para esta comparação é fundamental a utilização de ferramentas que garantam\numa testagem apropriada e uma comparação com um grupo normativo adequado. No Brasil,\nos testes psicológicos, de acordo com a lei n°4.119, de 1962, são de uso exclusivo dos\npsicólogos, definidos, de acordo com a Resolução 02/2003 do Conselho Federal de Psicologia,\ncomo procedimentos sistemáticos de observação e registro de amostras de comportamentos\nrespostas de indivíduos com o objetivo de descrever e/ou mensurar características e processos\npsicológicos, compreendidos tradicionalmente nas áreas emoção/afeto, cognição/inteligência,\nmotivação, personalidade, psicomotricidade, atenção, memória, percepção, dentre outras, nas\nsuas mais diversas formas de expressão, segundo padrões definidos pela construção dos\ninstrumentos (Art.1º, parágrafo único).\nA atuação do psicólogo diante destas avaliações depende em parte da qualidade do\ninstrumento ou da técnica utilizada. Neste sentido, ainda são poucas as variedades e números\nde instrumentos que o psicólogo pode dispor para a realização de suas intervenções de\ntestagem, ainda mais se compararmos o desempenho do cenário brasileiro com de outros\npaíses como dos Estados Unidos e de parte da Europa (Central Test, 2008).\nEsta utilização de testes psicológicos é feita, tradicionalmente através de testes de lápis\ne papel, no entanto após o aprimoramento de novas tecnologias, a intermediação dos processos\nprofissionais psicológicos por meio de computadores e da internet pode ser estudada. Os\nprimeiros testes informatizados surgiram na década de 1940, mas é só a partir da década de\n1980 que houve um grande desenvolvimento dos testes informatizados através de adaptações\ndos testes lápis e papel (Joly, Welter, Martins, Marini, Montiel, Lopes & Carvalho, 2005). Os\ntestes informatizados são instrumentos mediados, em sua aplicação, por um computador, e esta\naplicação pode ser realizada on-line, através de um teste desenvolvido apenas para ambientes\nde internet, ou off-line, através de programas instalados no computador usado para a testagem.\ngerenciamento de recursos humanos (seleção e pesquisas organizacionais). Fora do Brasil\ndiversos sites trabalham com o desenvolvimento de novos testes e a adaptação de testes\ntradicionais para a forma on-line. Podem-se encontrar exemplos destas práticas em empresas\ncomo o Queendom (2008), o Multi-Health Systems Inc. (2008), Harcourt Assessment (2008),\nPerformance (2008), todas apresentam instrumentos considerados pelos mesmos, como sendo\npsicométricos, disponibilizados em áreas de testagem gratuita, enquanto outros exibem áreas\npagas para o acesso ao teste a ao relatório. Estudar este manejo de dados on-line, os recursos\nde desenvolvimento de ferramentas on-line e, principalmente, pesquisar a viabilidade de tal\nprocesso a partir de parâmetros da psicometria é importante para o questionamento atualização\ndo psicólogo diante de novas tecnologias e ferramentas.\nDiante do exposto, a presente dissertação foi organizada em seis capítulos. No\nCapítulo I apresenta-se a história e desenvolvimento da testagem informatizada, bem como\nsuas características e aspectos mais estudados. Também é discutido o panorama atual no\ncenário Brasileiro comparado com o contexto mundial. No Capítulo II apresentam-se os\nprocessos logísticos do processo de testagem on-line, onde são discutidas as dimensões mais\ncomumente descritas de outros testes informatizados: custos operacionais, banco de dados,\nsegurança, características ambientais e acessibilidade, desempenho do usuário e limitações.\nO Capítulo III é dedicado ao método, o qual engloba o delineamento do estudo a\npartir da escolha do instrumento e desenho dos procedimentos para a adaptação. Neste\ncapítulo, expõem-se também os objetivos da presente dissertação e é detalhada a metodologia\nutilizada para o estudo e os conceitos psicométricos utilizados para embasar os estudos.\nApresenta-se a amostra, os instrumentos e procedimentos para a coleta dos dados empregados,\nbem como uma breve exposição das análises estatísticas realizadas. No Capítulo IV são\napresentados os resultados obtidos. Primeiramente os resultados da aplicação on-line simples e\nem seguida são apresentados os resultados dos grupos de retestagem e da multisessão.\nAs discussões dos resultados obtidos são apresentadas no Capítulo V onde são\ndiscutidos os resultados dos estudos na confiabilidade e validade do informatizado de testagem\ninformatização. Finalmente, no Capítulo VI figuram as conclusões. Neste momento, são\napresentadas as perspectivas do estudo assim como as principais contribuições para a ciência\nda psicometria e ainda as possibilidades de estudos futuros, indicando questões que podem\nmerecer a atenção de pesquisadores.\nO uso do computador dentro da psicologia remonta quase ao mesmo tempo a o\ndesenvolvimento computadores (Olea, Ponsoda & Prieto, 1999). A informática avançou desde\na correção de cartões, fichas ópticas e trouxe o desenvolvimento na área educacional, clínica\nmédica, industrial e na psicologia em si. Esse desenvolvimento ocorre através da utilização e\naprimoramento de programas de computadores trabalhando com sistemas de apoio a decisões\nclínicas, auxiliando no atendimento clínico para coletar dados, aplicação de instrumentos para\nfazer diagnósticos, guias de programas terapêuticos e como programas de auto-ajuda (Trabin\napud Prado, 1996).\nAtualmente encontramos em português alguns testes psicológicos não validados para a\ninternet, como o Teste de Rorschach (2008), Zulliger (2008) e o Teste Palográfico (2008),\nmesmo com reações contrárias por parte da comunidade profissional. Um problema comum\naos testes informatizados, contudo, é falta de estudos adequados estatisticamente ou até\nmetodologicamente visando a mensuração de suas propriedades psicométricas (Luetch, 2005).\nEm duas das maiores editoras de materiais psicológicos do Brasil (Casa do Psicólogo e a Vetor\nEditora) encontramos instrumentos como: Sistema Multimídia de Habilidades da Criança, G-\n36, G-38, R-1, R-4, CPS, QUATI, QVI, LIP, que são validados e chancelados pelo Conselho\nFederal de Psicologia, porém ainda não encontramos na atualidade nenhum teste on-line com\no status de validado.\nPara Andriola (2003), existem posições antagônicas com relação aos testes, e estas são\ncompostas por uma corrente que recusa qualquer intervenção dos computadores no processo\nde avaliação psicológica, e outra, que ressalta suas vantagens e potencialidades. Sugere ainda\no autor que deva haver duas fases necessárias para a utilização adequada de computadores\ndentro da psicologia. A primeira seria de utilizar o computador para a rapidez, a precisão e\nnormatização dos escores brutos. A segunda fase seria a de análise e descrição dos resultados,\ngerando relatórios a partir destes.\nInstrumentos organizados em formas semelhantes a exibição de dados, como é o caso\ndas escalas e inventários, são os que mais têm facilidade de construções informatizadas. Esta\ncompatibilidade acontece, também, devido a que geralmente avaliam valores estudados\ndiretamente através de seus critérios. Já as técnicas como o Rorschach ou o Zulliger\nnecessitariam de dispositivos e ferramentas em sua interface que permitissem circunscrever\nadequadamente o processo de avaliação. Esta adaptação, provavelmente, necessitaria de\nestudos metodológicos a partir de vieses diferentes, como a análise do comportamento\nmanifesto do cliente, por exemplo, (Andriola, 2003; Berguer, 2006).\nO processo de informatização de testes apresenta, segundo Bunderson, Inouyo e Olsen\ninformatizada, a elaboração automática de laudos, os testes adaptativos computadorizados e a\nconstrução automatizada dos testes. Estas quatro fases da evolução da testagem psicológica\nmediada por computadores são encontradas com freqüência.\nAtualmente encontramos dois modelos de apresentação de testes informatizados: os\nTestes Computadorizados Fixos e os Testes Adaptativos (Olea, Revuelta & Ximenéz, 2000).\nOs Testes Computadorizados Fixos são testes, em sua maioria de análise linear, pré-\nconstruídos e de formas intactas que são administrados em uma ou mais sessões e são\nComputadorizados (TAC) são os instrumentos que variam sua forma de exibição de acordo\ncom os algoritmos do programa em questão. Nos TACs os itens são selecionados de acordo\ncom a resposta prévia do usuário avaliado e associados a escores provisórios e novos\nalgoritmos para a sucessão de novos itens (Revuelta & Ponsoda, 199; Tejada, 2001). Este\nprocesso repete-se até que o examinando chegue ao fim do teste e seja levado a outro teste,\natinja um padrão de escore estatisticamente adequado ao seu desempenho ou a proficiência do\nexaminando esteja acima ou abaixo probabilisticamente das especificações do teste (Luecht,\n1.1 Características dos instrumentos informatizados\nNão há uma forma universal aceita de conversão do teste tradicional de lápis e papel\npara a versão informatizada. No entanto dois diferentes modelos têm sido mais utilizados nos\núltimos anos (Olea, Ponsoda & Prieto, 1999). O primeiro refere-se à tradução literal dos\nprincípios e organizações do instrumento para a versão informatizada. Preservando a estrutura\nde exibição de itens, o tempo de resposta, as cores, a forma de responder, etc. Como o teste de\nliteralmente, o teste para as condições informatizadas seja construindo ele totalmente dentro da\nambiente informatizado ou alterando-lhe as características inerentes a sua interface tradicional,\ncomo adicionando um cronômetro, exibindo um item por vez, alterando a ordem de exibição\ndas perguntas, etc.\nOs testes na internet podem ser classificados de acordo com três tipos de categorias, de\nacordo com seus propósitos (Naglieri, Drasgow, Schimit, Handler, Prifitera, Margolis &\nNovas escalas e surveys desenvolvidos para uso pessoal ou em pequena escala através\nde novas escalas para mensurar características de personalidade, atribuições, etc.\nTestes de psicodiagnóstico tradicionais, como o MMPI, MMPI-2 e as escalas Beck de\ndepressão, adaptadas para a internet.\nTestes cognitivos de habilidades, testes de certificação e licenciamento, e exames\naplicados na internet com o propósito de identificar os melhores candidatos em\nA testagem informatizada tem sido utilizada em suas várias formas por mais de quatro\ndécadas e não foi apenas a área de psicologia que integrou suas formas de testes à informática,\norganizacional/administrativa (Lievens, 2006). Os computadores são, hoje em dia, ferramentas\nsignificantes da interação social humana, e o que décadas atrás servia apenas para testagem em\ncontextos industriais, hoje tem uma ampla aplicação e modelos de avaliação, ampliando esta\nárea de avaliação e expandindo um mercado que antes era dominado pelos tradicionais testes\nde lápis e papel (Wainer, 2000). Estima-se que quase um bilhão de pessoas no planeta teve\nacesso a internet em 2005 e que em 2010 este valor deva chegar a 1,8 bilhão (Computer\nIndustry Almanac, 2004). O ambiente informatizado pode se configurar como mais uma\nferramenta de trabalho psicológico, e em especial, nas avaliações psicológicas. Atualmente,\naproximadamente um milhão de testes são aplicados por mês através da internet (Prometric,\n2004) e muitos conceitos éticos sobre estas aplicações são discutidos (Sayeg, 2000, Bennett,\n2001). Torna-se importante, então, uma avaliação das vantagens e desvantagens deste\nprocedimento de informatização, assim como a validação dos princípios psicométricos\naplicados aos testes informatizados. Questionamentos surgiram no sentido de descobrir se os\ntestes informatizados são contingenciados pelos mesmos princípios psicométricos de aplicação\ndos tradicionais testes de lápis e papel ou se adquirem novas contingências e atribuições que\nnecessitem de novas formas de pesquisar e construir neste ambiente computadorizado (Luetch,\n2005). Mas apesar das respostas na literatura não serem unânimes (Olea, Ponsoda & Prieto,\n1999) a diretriz para a busca destes dados é clara há algumas décadas para os psicometristas e\nnecessariamente, o desenvolvimento dos princípios tradicionais da psicometria na concepção\nda forma da testagem psicológica.\n1.2 A perspectiva Brasileira de Testagem Informatizada diante do cenário mundial e\nregulamentações deste processo\nNa testagem psicológica, os estudos das áreas de escalas de personalidade, escalas de\natitudes no trabalho, funcionamento cognitivo estão entre os diversos tipos de instrumentos\nque foram convertidos para a versão informatizada (Richman, Kiesler, Weisband & Drasgow,\n1999). No entanto, este grande avanço pertence prioritariamente aos EUA, a Inglaterra e\noutros poucos países da Europa. No Brasil, apesar das iniciativas na área de informática e\ntestagem, como a Sociedade Brasileira de Informática em Saúde (Lima, 2005) poucos testes\ninformatizados obtiveram publicação em periódicos ou são comercializados pelas editoras\ncom a chancela do Conselho Federal de Psicologia (CFP). Pelo Sistema de Avaliação de\nTestes Psicológicos do CFP, apenas o TCA Visual (Teste Computadorizado de Atenção) da\nEditora Cognição está com parecer favorável para a comercialização (SATEPSI, 2007).\nApesar da pouca produção brasileira na área de testes informatizados e de estudos nesta área\n(Alchieri & Nachtigall, 2003), existe um instrumento construído para avaliação de testes\ninformatizados: o SAPI (Sistema de Avaliação para Testes Informatizados). Uma escala que\nfoi validada através da avaliação de peritos na área de construção de testes e de sistemas em\ninformática (Joly et al., 2005). Esta escala foi a primeira no país a organizar-se a partir das\ndiretrizes da International Test Comission, Conselho Federal de Psicologia e várias produções\nreconhecidas nesta área. O SAPI não será objeto de parâmetro de comparação para este estudo\nem função do mesmo se limitar mais nos aspectos classificatórios de um teste informatizado\ndo que no conjunto de instruções objetivas para informatizar testes.\nNo entanto, da década de 1990 para os dias atuais os debates sobre as aplicações e\nformas de fazer tais procedimentos têm-se aprimorado. Em 1999 foi publicado o Standards for\nEducational and Psychological Testing, um documento adotado pela American Psychological\nAssociation (APA) e pela American Educational Research Association (AERA). O propósito\nda publicação foi fornecer padrões para aprimorar e regulamentar a avaliação de testes, as\nprocedimentos na seleção e administração de itens, determinação de condições e validade,\ntestagens individuais em contextos especiais e diferenças lingüísticas. Fornecendo orientações,\npor exemplo, para as instruções presentes no teste e na oportunidade de resolução de exemplos\nantes do teste em si. O Conselho Federal de Psicologia, através de duas resoluções, 25/2001 e\n02/2003 (CFP, 2001, 2003) definiu critérios para a elaboração, comercialização e uso de\ninstrumentos de medida, tendo como referência os padrões difundidos pela International Test\nCommission e American Psychological Association.\nEm fevereiro de 2003, um levantamento internacional foi realizado em vários países\nem busca das produções publicadas na área da testagem psicológica informatizada (Coyne &\nBartram, 2004). Este levantamento foi feito pela International Test Commission, ligada a\nAmerican Psychological Association e constatou quatro principais dimensões das publicações:\ntecnologia, qualidade, controle e segurança. A partir deste levantamento foram organizadas\nbases pra que fossem elaboradas linhas gerais de orientação deste novo mercado de trabalho e\npesquisa da psicologia. Em 2003, todos os pesquisadores e instituições que participaram da\nConferência da International Test Commission, receberam e discutiram os dados preliminares\ndeste levantamento, assim como as organizações representantes de 8 países (Austrália,\nCanadá, Estônia, Holanda, Eslovênia, África do Sul Reino Unido e Estados Unidos). Ao\nmesmo tempo, a Força Tarefa sobre Internet da Associação Americana de Psicologia refinava\nsuas guias para elaboração de pesquisas e instrumentalizações na Internet e via Computadores\n(Naglieri et al., 2004). A partir de então, foi elaborado um dos documentos mais importantes\nda testagem via computadores: Psychological Testing on the Internet: New problems, old\nissues. Este documento orienta os princípios psicométricos, éticos, legais e discute as\nimplicações práticas deste método de testagem (Naglieri et al, 2004).\nNo Brasil a Resolução do CFP Nº 006/2000 instituiu a Comissão Nacional de\nCredenciamento e Fiscalização dos Serviços de Psicologia pela Internet (Bock, 2000). De\nacordo com esta resolução o Conselho Federal de Psicologia possui as atribuições de\ndesenvolver critérios para avaliar a qualidade dos serviços psicológicos oferecidos pela\nInternet, acompanhar o credenciamento e fiscalizar os sites de atendimento psicoterapêutico\nmediado pelo computador, acompanhar a certificação dos sites de pesquisa sobre atendimento\natendimento psicológico através da internet, no entanto isto é reflexo da pouca produção.\ndeliberações da ITC (Lievens, 2006).\nCARACTERÍSTICAS LOGÍSTICAS DO PROCESSO DE TESTAGEM ON-LINE\nO aprimoramento de ferramentas informatizadas de testagem psicológica pode auxiliar\no desempenho do psicólogo, assim como elencar um rol de vantagens para interação com os\nsujeitos avaliados, no entanto devem-se ressaltar as vantagens e desvantagens dos processos de\ntestagem on-line diante dos processos de testagem lápis e papel. Optamos, então, pela\ndemonstração destas frente aos testes tradicionais através da análise dos quesitos: custos\ndesempenho dos usuários e as limitações. Este modelo foi desenvolvido a partir da estrutura de\navaliação adotada pela American Psychological Association em seu documento de orientação\naos estudos dos testes informatizados Psychological Testing on the Internet: New Problems,\nOld Issues (Naglieri et al., 2004).\n2.1 Custos Operacionais\nA partir da perspectiva psicométrica de realização de testagem informatizada quase\nsempre encontramos argumentações sobre o custo reduzido da produção e do trabalho com\ntestes informatizados frente aos tradicionais testes de lápis e papel (Ponsoda, Hontangas, Olea,\nRevuelta, Abad & Ximénez, 2004; Joly, 2005; Prado, 2005; ITC, 2005). Apesar deste\nconsenso entre a grande maioria dos pesquisadores desta área, o trabalho de Luetch (2005)\nprediz que na realidade dos testes informatizados são, em média de 200 a 500 por cento mais\ncaros do que os tradicionais testes de lápis e papel. Luetch (2005) postula que este custo\nreduzido é irreal posto que nestes cálculos valorativos o que deixa de ser gasto com impressão\ne distribuição é superado com a estrutura operacional que leva o teste até o usuário,\natualizações de sistema, manutenção do software ou página on-line e, além, disso, manutenção\ne gerenciamento com os bancos de dados.\nSegundo Prado (Ballone, 2003) os programas para psicologia podem requerer um alto\ngrau de investimento financeiro e administrativo por parte de uma equipe especifica com\nconhecimentos técnicos. Estas competências geralmente não são encontradas dentro da\npsicologia. Por outro lado, com o processo de testagem sendo informatizado há, também, a\nredução no custo de formação do psicólogo aplicador.\nUtilizar uma ferramenta de testagem informatizada também pode significar redução de\ncustos das Editoras de Testes. Além deste fato, um processo avaliativo que use instrumentos\ncomputadorizados fora dos estados das editoras pode obter maior autonomia de material para\ngerenciar o processo. Como o processo pode ser autenticado através de aplicativos on-line, por\nexemplo, há a menor possibilidade de cópia (Kingsburry & Houser, 1999).\n2.2 Banco de Dados\nA variação entre grupos testados em ambientes informatizados e em ambientes\ntradicionais caracterizaria a formação de novas tabelas e pesos utilizados na correção de testes\ninformatizados. E uma importante diferença que confere aos testes informatizados amplas\nvantagens diante dos tradicionais lápis e papel, é a capacidade de gerenciar dados, articulando\ninstantaneamente vários campos de dados de centenas de questionários entre si e oferecendo a\nsaída das análises. Os bancos de dados para testes informatizados geralmente são pequenos em\nespaço, e não necessitam de hardwares muito avançados serem acessados (Prometric, 2004).\nQuando comparamos a organização e a acessibilidade dos bancos de dados dos dois\ntipos de testes, as diferenças terminam por caracterizar-se em função de suas naturezas. O\nacesso ao banco de dados do teste informatizado após a sua realização e o cruzamento de\ndados com o banco de dados já existente é notavelmente mais rápida. O que permite realizar,\nem segundos, operações que manualmente poderiam demorar dias ou até meses. Este banco de\ndados não necessita de espaço físico real, uma vez que está formatado virtualmente, assim, por\ntradicionais necessitam de grandes espaços para armazenamento de dados, e como os dados\nnecessitam ser guardados por aproximadamente cinco anos (Furtado, 2003), a facilidade de\norganização de dados fica comprometida se comparada com os testes informatizados.\nOs resultados dos testes e outros dados provenientes da aplicação (tempo de realização,\ndata, observações, etc.) são transmitidos e recuperados com segurança se bem armazenados,\ntantas vezes quantas forem necessárias. Na versão tradicional a armazenagem dos dados é\nmais susceptível ao erro humano, bem como aos efeitos do tempo. Outra vantagem da versão\ninformatizada diante da versão tradicional é que se pode conseguir uma maior quantidade de\ndados em menos tempo e é possível fornecer mais dados sobre o cliente estudado no mesmo\nespaço de tempo que o teste tradicional. Além disso, a atualização das informações e banco de\ndados mais rápido (Naglieri et al., 2004).\nNa versão informatizada existe a possibilidade de uma rápida análise das respostas,\nonde o avaliado pode receber quase instantaneamente um laudo contendo o resultado de sua\ntestagem. Este documento pode ser entregue diretamente ao usuário para impressão imediata,\nconferência na tela do computador ou também ter a chancela com outras formas de avaliação\njunto a um profissional competente. Esta avaliação de Testes Computadorizados traz como\nvantagens: a economia no processo e o uso mais efetivo dos profissionais envolvidos em\noutras funções; precisão e consistência da correção dos dados e das decisões tomadas a partir\ndos mesmos, capacidade virtual quase ilimitada para armazenagem e estocagem destas\ninterpretações, possibilidade de comparação com outras bases de dados de outros testes ou do\npróprio paciente em momentos diferentes (Snyder, Widiger & Hoover, 1990).\ninformatizadas, é que os mesmos apresentam boa eficácia na análise de dados de modelos\nestatísticos, como o MMPI-2 (Tanner, 2007), Teste Benton de Retenção Visual (Thompson,\nEnnis, Coffin & Farman, 2007), mas deixam a desejar em modelos narrativos de avaliações\n(Snyder, Widger & Hoover, 1990). Esta aparente desvantagem não seria decorrente das\nlimitações das testagens e interpretações através dos computadores, e sim da má utilização e\norganização destes processos interpretativos (Butcher, Perry & Atlis, 2000). Esta organização\nde processos interpretativos parte da competência de um hábil programador em conseguir\nconstruir narrativas precisas apenas com a inserção de dados através dos computadores,\ndesprezando, por exemplo, aspectos não-verbais de desempenho dos usuários. Uma sugestão é\na de utilizar o computador para a avaliação e comparação dos escores com banco de dados\njunto com o psicólogo responsável nas avaliações. Mas é possível que em algumas décadas\nadiante, os modelos narrativos que trabalhem integrando grandes bases de dados integradas\n(com históricos de saúde, atividades sociais, competências pregressas, por exemplo) sejam\nmais precisos em constituir tais narrativas.\npossibilidade de uma ampliação de amostra mais rápida e têm a capacidade de armazenar\ninformações automaticamente em diferentes bancos de dados. Esta captação de dados, além de\npoder ser mais ampla, também pode ser mais rica em detalhes de um mesmo testando (Berger,\n2006), através de outros dados do processo, como impressão digital e foto do testando. Além\ndisso, a própria aplicação pode servir para atualizar posteriormente, ou automaticamente, o\nbanco de dados referencial do sistema normativo do teste, caso se trate de um aplicativo on-\nline e/ou que faça atualizações (International Test Comission, 2005).\nNo momento da aplicação e no momento da análise de dados o teste informatizado\ndeve garantir o mesmo sigilo que o teste tradicional. Tanto em aplicações on-line e off-line\nfaz-se necessário o desenvolvimento de ambientes seguros de aplicações e criptografias que\ngarantam o maior sigilo possível. Medidas Biométricas como fotografia e digitais dos\nadicionais e aumentando a autenticação do processo. No entanto, quanto maiores forem os\nitens de segurança adicionados, maiores podem ser os custos de elaboração do sistema.\nProporcionar um ambiente seguro para troca de dados é uma exigência de outros sistemas de\ntráfego de dados, e esta necessidade, através da sofisticação dos sistemas de segurança, atinge\num patamar satisfatório na proteção destes dados (Rosen, 2000).\n2.4 Características Ambientais e Acessibilidade\nO ambiente informatizado confere algumas vantagens diante da versão tradicional\nquando discutimos a dimensão da multimídia. As propriedades do ambiente informatizado\npodem exibir uma variedade de formas de apresentar seu conteúdo, adicionando características\npossíveis no próprio computador, como sons, imagens, movimentos e gravações. Em 2005 foi\ndesenvolvido, por exemplo, um sistema digital de análise de leitura a partir da gravação de\ndetectados. (Lima, 2005). Na área de testagem dentro da fonoaudiologia encontramos o Avalie\n3.0, o FonoFlex, que faz avaliações fonoaudiológicas e de desenvolvimento através de jogos, o\nAudioReport, que desempenha avaliações audiométricas, o FonoView, para avaliação e\nfala oral e o VoiceReport (Book Toy Livraria, 2007)\nDentro da psicologia uma das vantagens que um instrumento computadorizado pode ter\ndiante dos testes tradicionais é a de exibir as questões de modo randômico ou aleatório com\nfacilidade. Esta proposta subsidia os Testes Adaptativos Computadorizados (TAC). Os TAC\nsão procedimentos que se reorganizam sua exibição para adaptarem-se ao usuário a partir de\nseu nível de dificuldade atendido precedentemente (Revuelta e Ponsoda, 1998). A versão\ninformatizada pode apresentar uma interface onde usuário pode focar, por exemplo, em uma\nquestão de cada vez, facilitando seu julgamento e discriminação de respostas, ou ainda,\nfacilitando o re-teste ao fornecer o escore final de seu primeiro teste e já agendar o re-teste. Se\na exibição de itens for feita uma de cada vez, o teste informatizado pode proporcionar uma\nredução de erros por parte da atenção do cliente avaliado, pois o mesmo poderá focar-se em\num de cada vez. Além disso, o resultado imediato do teste, a utilização de perguntas aleatórias\ne a medição de tempo por questão e algoritmos de exibição de itens desestimulam manobras\nescusas e o efeito da familiaridade na execução dos testes informatizados (International Test\nComission, 2005). De acordo com Kingsburry e Houser (1999) os testes informatizados, de\numa forma geral, requerem menos tempo para aplicação, têm menor possibilidade de cópia,\nproporcionam condições semelhantes de aplicação a todos os avaliados.\ncomportamentos e descrições inverossímeis, como a mentira e o engano é fundamental na área\njurídica (Rovinski, 2005). A possibilidade de se ter mais dados por item além da própria\nresposta, a sua posição no processo adaptativo de teste (Prometric, 2004), identificação da\nquestão que foi alterada, seu tempo de execução e o número de vezes em que esta questão foi\nalterada ou alternada com outras proporcionam maior riqueza na análise de dados que seriam\npertinentes na área forense, indicando rupturas de respostas e a intenção de falsear resultados\nrespostas. Além disso, com a possibilidade de controle de tempo, é possível inferir quando\naleatoriamente (Stange, 2001).\nNa versão tradicional o recebimento dos testes via correio e a atualização dos testes\npode demorar dias, e há o gasto com manuais, crivos e testes impressos (Naglieri et al., 2004),\nmas na interface computadorizada estas dificuldades são anuladas frente às facilidades\nconferidas pela tecnologia e pela troca de dados instantânea. A avaliação e a descrição dos\nresultados dos testes podem sair tão logo a última questão seja respondida (Naglieri et al.,\n2004). Na saída de dados para compor o resultado, a forma informatizada pode oferecer\nformas diferentes na exibição dos escores e da descrição das respostas corrigidas, além de\nindicações e encaminhamentos. Porém há um ponto de divergência entre os autores quanto a\nveracidade das respostas dos usuários que fazem testes informatizados. É possível que os\nsintomas quando percebem que suas respostas podem não ser checadas (Richman et al.,1999).\nJá Olea e Hontangas (1999) argumentam que os testandos tendem a exibir maior ansiedade\nquando estão realizando um teste informatizado e ao mesmo tempo argumentam que os\nmesmos tendem a ser mais honestos e sinceros. Não existem estudos conclusivos sobre esta\nsuposta distorção, e nem se a versão lápis e papel está livre deste aspecto de auto-imagem.\nEste nível de distorção afetaria a média dos resultados, ocasionando uma\ninterpretação dos dados errônea. Richman et al. (1999) organizaram uma meta-análise de 61\nestudos publicados sobre estudos informatizados entre 1967 e 1997 e concluíram que os testes\ninformatizados, com raras exceções, apresentam menos distorções de auto descrição que os\ntradicionais testes de lápis e papel, ainda mais quando é possível responder ao teste sozinho e\nretornar as respostas. Outro ponto que a tecnologia pode oferecer para reduzir o índice de\ndistorções nas auto-avaliações é a aplicação dos testes informatizados em paralelo com o\nacompanhamento via áudio, mantendo o nível de anonimato e aumentando a segurança do\ntestando no processo (Parshall & Balizet, 2001).\nA testagem via internet expande as possibilidades do psicometrista em atuar, visto que\nele não precisa estar no ambiente físico de aplicação do teste, logo, em ambientes onde não\nexistem psicólogos é possível que a testagem esteja possível. Esta facilidade no acesso\ninterativo ajuda a pessoas que necessitam da testagem e não podem se locomover ao\nconsultório do psicólogo ou local de aplicação. (Naglieri et al., 2004). Nas versões tradicionais\nsão raros os instrumentos somente verbais ou que não utilizem lápis para a marcação das\nrespostas. Na versão informatizada através de periféricos como o mouse, “telas de pressão”\nsensores de movimento e de som podem ajudar deficientes físicos e pessoas com problemas\nmotores a serem avaliadas para o levantamento de dados neuropsicológicos, auxiliando,\ntambém, no processo de reabilitação (Silva & Oliveira, 2003).\ninformatizados. É possível programar o dia, a hora e o local da aplicação do teste, e a\naplicação pode ser feita sem a presença de um psicólogo. Logo, em populações mais\nabrangentes e longas distâncias é mais indicado a avaliação de testes informatizados para o\nlevantamento de dados. E em tese o que fosse investido em salas apropriadas para a aplicação\ndos tradicionais testes de lápis e papel poderia ser remanejado para uma pequena sala com\ncomputadores que realizariam a ampla testagem em várias sessões (Luetch, 2005).\nTer um instrumento informatizado também facilita o processo de re-teste, que pode\ninclusive ser agendado, pois é mais fácil assegurar e reproduzir as mesmas condições de\naplicação do teste. Estas condições dependem prioritariamente de um ambiente calmo,\ndistância adequada de leitura do monitor, fácil manuseio dos periféricos do computador,\ntempo para execução do teste, um computador acessando a Internet e a página do teste\ndisponível (quando o teste for on-line). Outra vantagem é que o tempo é rigidamente\ncontrolado nos testes informatizados, logo todo candidato tem exatamente o mesmo tempo real\nde acesso ao teste (Internet Test Comission, 2005).\n2.5 Desempenho do usuário\nAssim como na aplicação tradicional, onde o testado pode apagar e refazer as\nquestões, no teste informatizado além de ter essa possibilidade de mudança de resposta,\ntambém é possível mensurar qual foi a seqüência de respostas dadas para o mesmo item e o\ntempo de mudança de cada item, o que oferece dados importantes para a clareza\nconfiabilidade do item e dados para pesquisas forenses do testado, por exemplo. Ainda na\nleitura óptica de cartões de resposta, há o empecilho de respostas mal marcadas e do tempo\ngasto na inserção dos cartões no leitor (Naglieri et al., 2004). Na versão informatizada é\npossível que o usuário mude de alternativa sem que comprometa o padrão desejado de\nrespostas. O MMPI é um dos testes que mais tem artigos publicados na área de informatização\nde testes psicológicos, e a sua informatização permite concluir que além de ser possível este\nprocesso, os avaliados se sentem mais à vontade e menos ansiosos (Butler, 2003).\nÉ possível que os testes aplicados pela internet sejam inapropriados para alguns grupos,\nestatisticamente falhos ou pobremente traduzidos para outras línguas (Naglieri et al., 2004),\neste é o erro de aplicação que também tem efeito sobre os testes tradicionais. É importante\npsicológica, e sim ao levantamento de dados obtidos na atuação psicológica. Logo, perdem-se\nalguns dados qualitativos em detrimento de outros ganhos no processo de avaliação através de\ncomputadores (Naglieri et al., 2004). A observação do comportamento não verbal da pessoa\ntestada deixa de ser uma fonte de dados,\nporém, com o controle do tempo do teste\ninformatizado, é necessário saber quando a pessoa testada respondeu a alguma questão do\ninventário sem ter deliberado o suficiente. Diante destas formas de planejar a construção de\ninstrumentos informatizados, torna-se mais objetivo o estudo destes instrumentos durante a\ninformatizados, dos problemas de controle de ambiente e indefinições de conceitos de validade\nem alguns testes propomos um estudo sobre os parâmetros psicométricos de testes de\naplicação on-line. Trabalhamos com o questionamento da possibilidade real, através da\nadequada válida e confiabilidade, da adaptação de um teste lápis e papel para uma versão on-\nline. Logo nossa hipótese se define como: é possível adaptar um teste psicológico para a\ninterface on-line mantendo a validade e a confiabilidade?\nConsiderando que nosso objetivo é avaliar a validade e confiabilidade de uma escala\nem ambiente informatizado, partimos da premissa de trabalho de que é possível adaptar um\nteste para uso seguro e válido na internet, bem como manter a validade e a confiabilidade na\namostra obtida. E com a intenção de responder se os princípios psicométricos, referidos\nanteriormente quanto ao uso em aplicações de lápis e papel, são aplicáveis também a uma\nescala informatizada que elaboramos como objetivo geral: avaliar a validade e confiabilidade\nde uma escala em ambiente informatizado. Para isso definimos procedimentos para o processo\nde re-construção de um instrumento psicológico linear on-line e estudamos este diante do\nimpacto sobre as questões relativas aos custos operacionais, banco de dados, segurança,\ncaracterísticas ambientais e acessibilidade, desempenho dos usuários e limitações.\nLogo, o processo geral que norteia este trabalho é o de verificar, dentro de um\ninstrumento informatizado, os parâmetros psicométricos de validade e confiabilidade. Para\nisso forem escolhidos procedimentos interligados e adequados às possibilidades reais de uso.\nUma melhor descrição dos procedimentos utilizados é realizada a seguir:\n3.1 O Instrumento: Inventário Millon de Estilos de Personalidade\nPara corresponder adequadamente a tais objetivos seguimos uma linha lógica de\nprocedimentos que permitisse adequar viabilidades de informatizar um teste psicológico e que\nfosse acessível ao maior número de pessoas. O primeiro passo foi optar por um instrumento\nque pudesse ter a sua interface adaptada para o ambiente informatizado, que já tivesse estudos\nna área da informatização, que fosse bem conceitualizado no meio científico e que não\nperdesse, aparentemente, a sua funcionalidade. Optamos pelo Inventário Millon de Estilos de\nPersonalidade (MIPS), por ser um teste organizado em forma de inventário com respostas do\ntipo “verdadeiro” ou “falso”, pela facilidade de manuseio de seu banco de dados já constituído\nna sua versão lápis e papel e pelo mesmo apresentar uma coerência na organização de\ninformações com sua proposta avaliativa de personalidade. Trata-se, portanto de uma escolha\nbaseada em critérios técnicos de adaptabilidade e de conceitualização teórica.\nTheodore Millon desenvolveu sua teoria em um cenário americano que estava em\nfranca busca das bases da compreensão e classificação da psicopatologia humana e dos\npadrões de normalidade humana. Mesmo tendo ajudado a organizar o Manual de Diagnóstico\nde Doenças Mentais (Institute for Advanced Studies in Personality and Psychopathology,\n2008) foi através de deduções formais que Millon constituiu sua base epistêmica para a\nconstrução do conceito de personalidade. Originando, também em paralelo, uma teoria de\naprendizagem biopsicossocial, de patologia de personalidade e vários testes para avaliar esta\npersonalidade. Segundo Millon, “personalidade” é a resultante de um padrão complexo de\ninconscientes, automaticamente expressas através da conduta (Sánchez, 2003). Seus traços e\ncaracterísticas são oriundos de uma complexa matriz, onde as disposições biológicas e de\naprendizagem, apresentam-se relativamente estáveis nas relações com as pessoas e objetos, e\ndificuldades (Millon, 1990).\nLogo, sua construção teórica postula a existência de padrões normais e anormais de\nreação e adaptação da personalidade, baseando-se em um continuum, onde enquanto a\npersonalidade normal reflete desta maneira as formas específicas de adaptação eficazes em\nambientes previsíveis (Millon, 1990), a personalidade anormal reflete a dificuldade de\nadaptação deste indivíduo em várias possíveis combinações de estilos de personalidade. Os\nprocessos da personalidade são fenômenos relativamente estáveis e constantes, porém não são\nabsolutamente estáticos, pois comportam uma perspectiva de padrões consistentes de mudança\n(García & Sánchez-López, 1999). Esta concepção da personalidade através do constructo\nteórico dos Estilos Psicológicos tem algumas vantagens frente ao modelo tradicional e estático\nno estudo da personalidade, pois enfatiza uma perspectiva mais dinâmica do comportamento\nhumano, fornecendo informações sobre a qualidade e o desenvolvimento das diferenças\nindividuais e os aspectos individuais.\nA vantagem desta teoria integradora não é só a interpretação da personalidade como\numa configuração de estratégias e táticas de onde o indivíduo seleciona cada técnica de\nterapêuticos no qual uma técnica não é mais que uma parte desta (Millon, Everly & Davis,\n1995). Concebida desta maneira, a personalidade normal reflete os modos específicos de\nadaptação pelos quais um membro da sociedade utiliza em ambientes previsíveis. Nesta\nconcepção, os transtornos de personalidade representam diferentes estilos de funcionamento\nmal-adaptativos atribuídos a deficiências, desequilíbrios ou conflitos na capacidade de um\nmembro para relacionar-se com os ambientes que enfrenta (García & Sánchez-López, 1999).\nDentro desta proposta Theodore Millon desenhou, no decorrer de sua carreira, vários\ninstrumentos para o estudo e avaliação da personalidade humana, como o Millon Personality\nType Questionnaire, o Millon Personality Disorder Checklist, o Millon Clinical Multiaxial\nInventory e o Inventário Millon de Estilos de Personalidade (Millon, 1997), dentre outros.\nEm função das vantagens conferidas por esta construção de personalidade, assim como\na variedade de instrumentos validados em diferentes contextos pelo próprio Millon (1997)\nbuscamos um de seus instrumentos de mensuração dos aspectos da personalidade humana que\nrespondesse a um modelo de Estilos de Personalidade e que pudesse ser adaptado para\ncomputadores. Optamos então pelo Inventário Millon de Estilos de Personalidade (MIPS) em\nfunção de sua boa consistência teórica, praticidade, atualidade e quantidade de estudos no\nBrasil a partir do MIPS tradicional (lápis e papel).\nO MIPS é um inventário composto de 180 itens, para os quais o individuo responde\nassertivas com “verdadeiro” ou “falso”. Seu objetivo é avaliar a personalidade de indivíduos\ncom funcionamento normal, para idades acima de 18 anos, com um tempo médio de 30\nminutos para concluí-lo. Os itens abordam situações que as pessoas comumente vivenciam,\nevidenciando sua maneira de perceber, sentir e agir perante o mundo que as rodeia. O\nmotivacionais, estilos cognitivos e relações interpessoais. Avaliando estilos de funcionamento\ndo sujeito dentro de cada uma de suas competências nestas três dimensões, obtém-se uma\napurada avaliação do funcionamento da personalidade avaliada (Strack, 1999).\nnormais podem ser caracterizadas na presença de um sujeito que demonstra capacidade de se\nrelacionar com seu meio, de maneira flexível e adaptada, com percepções sobre si mesmo e\nsuas meio, manifestadas, essencialmente, de forma construtiva, com vistas à satisfação\npessoal, e tendo padrões de conduta considerados como promotores de saúde (Weiss, 1997).\nSeguem abaixo os eixos principais avaliados pelo MIPS.\n1. Metas motivacionais (MM) - Refere-se a busca de sobrevivência e as experiências\nde prazer e evitação da dor, seu equilíbrio compreende a saúde psíquica, pois tanto as\n2. Estilos cognitivos (EC) - Refere-se a forma com que o indivíduo processa as\ninformações, originando sua forma de sentir, avaliar e formar juízo crítico de\n3. Relações interpessoais (RI) – Referem-se a capacidade das pessoas em estabelecer\nrelações interpessoais como uma necessidade constante de suporte social.\nAs metas Motivacionais possibilitam verificar a orientação do sujeito em relação ao\nmeio, Os Estilos Cognitivos avaliam a orientação do sujeito visando os reforços do meio e as\nfundamentação teórica das Metas Motivacionais, segundo o próprio Theodore Millon (1997),\nestá relacionada aos antecedentes conceituais da teoria ecológica, evolucionista e suas\nvinculações através de três formulações: existência, adaptação e replicação. A partir do\nprosseguimento de seus estudos na definição de critérios coerentes com o entendimento da\npersonalidade, Millon elaborou as seguintes polaridades definidas pelo MIPS: Abertura-\nPreservação, Modificação-Acomodação e Individualismo-Proteção (Millon, 1997; Alchieri,\nAs quatro bipolaridades dos Estilos Cognitivos se baseiam na perspectiva evolucionista\ne nas contribuições de Jung e Myers (Strack, 1999). Os Estilos Cognitivos referem-se á forma\nem que os organismos abordam sua realidade. Buscando avaliar os estilos ou modos de\nprocessamento da informação. Jung propõe uma orientação cognitiva em uma tipologia que\nSensação/Intuição. Millon elabora um modelo que agrupa as atividades cognitivas levando em\nconta duas funções superiores. Uma relacionada com a origem dos dados recolhidos e outra\ncom os métodos utilizados para o indivíduo para reconstruir estes dados. Cada uma destas\nfunções foi dividida em duas polaridades. As fontes de informação foram divididas em Interna\nvs. Externa e Tangível vs. Intangível. Os processos de transformação foram divididos em\nAfetivo vs. Intelectivo e Assimilativos vs. Imaginativos. As polaridades definitivas são:\nExtrovertido-Introvertido, Sensitivo-Intuitivo, Reflexivo-Afetivo, e Sistematizador-Inovador\n(Millon, 1997; Alchieri, 2004).\nAs cinco bipolaridades das Relações Interpessoais (Retraimento, Comunicatividade,\nConcordância) estão relacionadas com as contribuições de Sullivan, Leary e o modelo dos\nCinco Grandes Fatores. Estes modelos estão orientados por uma perspectiva que caracterizam\ncognitivamente. Para Millon, nenhum dos modelos anteriores introduziu o componente\ninterpessoal. Propôs, então, a avaliação destes estilos na relação com os demais. Utilizando\npara isso cinco bipolaridades que se cruzam com as estratégias ativas e passivas: Retraimento-\n(Millon, 1997; Alchieri, 2004), exemplificados na tabela 1.\nTabela 1. Bipolaridades e os estilos de personalidade do MIPS\nFonte: Millon (1997)\nCom esta teoria, Millon elaborou um questionário com 180 itens com assertivas que devem\nser respondidas com “Verdadeiro” ou “Falso”, distribuídas em questões objetivas da seguinte\nExtroversão x Introversão\nRetraimento x Comunicatividade\nSensação x Intuição\nDúvida x Segurança\nReflexão x Afetividade\nDiscrepância x Conformismo\nSubmissão x Controle\nFonte. Alchieri (2004)\nNo Anexo 2 encontram-se as descrições de Alchieri (2004) sobre as 24 polaridades\ndentro da versão brasileira do MIPS.\nA data de publicação deste teste nos E.U.A. é de 1994 e é de autoria de Theodore\nMillon, Lawrence Weiss, Carrie Millon e Roger Davis. O teste foi desenhado para que o\navaliado, em suas respostas de “verdadeiro” ou “falso” nas assertivas, some pontos nos escores\nde cada uma das 24 dimensões, podendo ter um elevado desempenho, desempenho moderado\nacomodação (Strack, 1999). A validação do MIPS americano deu-se através da verificação da\nconsistência interna dos itens, confiabilidade do teste re-teste em dois meses, e como critério\nexterno, a comparação com seis outros testes usados freqüentemente pelos psicólogos norte-\nSegundo os próprios autores\ndo teste, escores\nna escala de\nconsistência indicam que o examinado respondeu consistentemente aos vários itens do\nquestionário. Um escore de 3 pode representar alguma dificuldade comum de interpretação\ndos dados, porém, qualquer escore abaixo de 3 reflete dificuldades significantes de atenção ou\nfalta de seriedade na submissão ao teste. Questionários com consistência abaixo de 3 não\ndevem ser válidos. O MIPS contém, também, uma composição de todos os ajustamentos\nintitulada “Escala de Ajustamento” (Adjustment Index) e três indicadores de validade:\nimpressão positiva e impressão negativa representam a extensão pela qual o examinado se\nenquadra em um perfil positivo ou negativo das características dicotômicas do teste.\n3.2. Método para Informatização do Inventário Millon de Estilos de Personalidade\nConsiderando os atuais estudos dos testes psicológicos informatizados, foi necessário\nConfiabilidade, além de tornar adequada a leitura nas telas.\n3.2.1. Parâmetros Psicométricos e desenho das aplicações\nPara Pasquali (2001), os dois parâmetros psicométricos utilizados para a análise\nestatística dos dados são a validade e a precisão. Validade é a propriedade do teste de medir o\nque ele realmente se propõe a medir. Esta validade será estabelecida pela testagem empírica e\nanálise criteriosa dos dados. Para a análise da validade foram desenvolvidas metodologias na\npsicologia para suprir erros de análises estatísticas distorcidas e incompletas em psicometria.\nFundamentalmente é trabalhada a validade do constructo, validade do conteúdo e validado do\ncritério (APA, 1954).\nCronbach e Meehl (1955) definem a validade do constructo como a dimensão\ncaracterística do teste em mensurar um atributo ou qualidade que ainda não tenha sido definida\noperacionalmente. A validade do constructo refere-se, então, a capacidade do teste em medir\no quanto que a sua representação pode ser uma expressão legítima e adequada do constructo\nestabelecido. Uma das maneiras de proceder nesta análise é a de estudar os dados obtidos\natravés da análise fatorial de seus itens e da análise da consistência interna.\nOutra técnica utilizada para analisar a validade de constructo estudado é a de usar a\ntécnica de validação convergente-discriminante. Esta técnica visa demonstrar a validade do\nteste fazendo a correlação significativa com outras variáveis que o teste deveria estar\nrelacionado (validade convergente) e não estar relacionada com variáveis com variáveis\nquantitativas estão relacionadas. Esta correlação ou associação pode ser verificada através do\ndiagrama de dispersão e medida através do coeficiente de correlação (Levin, 1987).\nA Validade do Critério, por sua vez, refere-se ao grau de eficácia com que o teste é\ncapaz de predizer um desempenho específico de um sujeito. Esta validade do critério acontece\natravés de dois critérios: a validade preditiva e a validade concorrente. Tanto a validade\nconcorrente como a preditiva podem ser avaliadas quantitativamente, através de coeficientes\nnuméricos e o conceito de validade concorrente refere-se a relação entre o desempenho do\ninstrumento de interesse e o desempenho de outro instrumento semelhante e que já tenha sua\nvalidade conhecida. Essa validade concorrente é praticamente imediata a aplicação do\ninstrumento. Porém em função da pouca viabilidade operacional das aplicações on-line do\nteste associada à aplicação de outros testes, optou-se por não estudar a validade de constructo\natravés da técnica de validação convergente-divergente. Já a validade preditiva refere-se a\nhabilidade de um teste ou medida em predizer o desempenho numa área de interesse. Porém,\ncom a coleta de dados após um intervalo de tempo. Ou seja, representa o tempo mínimo pelo\nqual o teste é válido. Para isso as técnicas de reteste se apresentam como estratégias\nmetodológicas úteis da validade preditiva (Barros & Nahas, 2000).\ncontemplados no estudo de Alchieri (2004), que comparou o desempenho de sujeitos testados\nno MIPS em sua versão lápis e papel para avaliar a validade convergente através do Inventário\nFatorial de Personalidade (IFP) e as Escalas de Personalidade de Comrey. Enquanto que a\nvalidade divergente foi estudada a partir do Questionário de Saúde Geral de Goldberg (QSG) e\no Inventário Beck de Depressão.\nA validade de conteúdo é o grau em que os itens do teste representam a área de\ninteresse. Representando a compreensão e a proporção razoável dos itens. Esta validade\ndepende da perícia de especialistas na área de testagem em questão, e este estudo de validade\nde conteúdo do Inventário Millon de Estilos de Personalidade também já foi realizado\nJá a precisão de um teste, também conhecida como critério de fidedignidade, refere-se\na quanto os dados de um sujeito tendem a mudar de acordo com o tempo. Este conceito está\nintimamente relacionado ao conceito de variância erro, logo, quanto menor o erro medido por\nesta variância, maior a calibração do teste. Estatisticamente a fidedignidade é analisada através\nda correlação dos escores dos dois momentos de aplicação. Existem metodologias para avaliar\nesta precisão, como o teste-reteste e o cálculo da consistência interna. A consistência interna é\navaliada neste banco de dados através da técnica de Alpha de Cronbach, em função da\nresposta aos itens serem dicotômicas (verdadeiro ou falso). Varia de zero a um, medindo a\ncapacidade do instrumento de diferenciar aplicações. Matematicamente, o Alpha de Cronbach,\ncorresponde ao quociente da variabilidade entre as aplicações individual de cada usuário em\nrelação à variabilidade total, entre aplicações gerais e erro sistemático (Streiner & Norma,\n3.2.2. Adaptação para a interface on-line\nFoi realizado o registro do domínio http://www.planetapsi.com, e com o intuito de\nfazer a transposição do teste lápis e papel para a página registrada, foi criada uma página\ninicial exibindo informações sobre o processo de testagem, o espaço para o login do usuário e\no link para o cadastro de novos usuários. A página que utilizada para apresentar o site\nencontrou-se disponível on-line a partir de setembro de 2007 e encerrou suas atividades em\nmaio de 2008. A partir da primeira página o usuário era levado, após clicar em “cadastro”\nIdentificação, Gênero, Sexo, Escolaridade e Profissão, conforme demonstrado na figura 1.\nFonte: Site Http://www.planetapsi.com\nApós esta etapa o usuário registrava novamente com o seu login e senha o acesso a\numa breve explicação da pesquisa e um termo de uso dos procedimentos a seguir. Após a\naceitação do termo havia a exibição da primeira página do instrumento.\nAs questões foram linearmente distribuídas em seis páginas com 30 questões cada,\nassemelhando-se a interface tradicional de lápis e papel. Nos estudos piloto foi verificado que\no tempo médio de aplicação por usuário era de aproximadamente 20 min. O intervalo de\n“Personal Home Pages” (PHP), foi escolhida para organizar esta interface. Além da facilidade\nde manuseio do banco de dados, há uma ampla aceitação dos navegadores atualmente\nadministração de informações foi rápido o suficiente para o conteúdo ser sido exibido com\nvelocidade considerável, mesmo por conexões atuais mais lentas, como a de 52kbps.\nAo final os dados do usuário eram adicionados ao banco de dados geral da página. O\nsistema gerava um relatório com o desempenho de cada candidato quando ultrapassava a\nquestão 180 e clicava em “Prosseguir”. Este relatório era gerado a partir das estatísticas de\ngrupos normativos obtidos em estudos anteriores (Alchieri, 2004; Alchieri, Nuñes, Cervo &\nHutz, 2004 e 2008) constituída de aplicações do MIPS em sua versão lápis e papel no Brasil.\nPara maior aproveitamento dos dados em questão, foram tabulados os dados de 1032\naplicações, separados em categorias de sexo e em cinco faixas etárias diferentes.\nQuadro 1. Normas estabelecidas para a correção de dados\n66 ou mais\nFonte: Alchieri (2004)\nO usuário teve seus escores calculados e o texto devolutivo da pesquisa foi constituído\npara cada polaridade em três níveis possíveis dentro das Metas Motivacionais, Estilos\nCognitivos e Relações Interpessoais de acordo com seus níveis de desempenho:\n- Desempenho Inferior: quando o desempenho do sujeito é inferior a um desvio padrão\nem função do grupo normativo.\n- Desempenho Médio: quando o desempenho do sujeito avaliado está entre ou igual a\nmenos um desvio padrão e mais um desvio padrão em função do grupo normativo.\n- Desempenho Superior: quando o desempenho do sujeito avaliado encontra-se acima\nde um desvio padrão em função do grupo normativo.\n3.3. Análise empírica e definição da amostra\nPara a realização da análise empírica dos itens, foram avaliados os 2000 primeiros\nregistros de aplicação única na página on-line, e sobre os quais se validou somente aqueles que\nestavam devidamente completados, 1508 participantes. As outras aplicações (492) foram\ndescartadas em função de não atenderem aos conceitos básicos de aplicação (estavam em\nbranco ou incompletas). Para realizar estas aplicações on-line foram distribuídos e-mails para\nimportantes grupos de comunicação, como jornais, revistas, sites, e e-mails individuais obtidos\natravés da rede de relacionamentos Orkut.com, além de sites de lista de e-mails. Supõe-se que\no resultado mais significativo tenha sido advindo dos e-mails diretos, em função do não\nretorno de interessados a partir das agências de comunicação. Considerando as abrangências\ndos sistemas virtuais, e em especial a propagação de informações, não sabíamos precisamente\nque tipo de população acessaria a página e realizaria até o final o teste. Ou seja, mesmo tendo\no controle do processo de testagem, não tínhamos o controle do grupo amostral desta\ntestagem. Apesar do risco presumindo de falsos usuários ou erros no preenchimento dos dados\ncadastrais, e da efetiva busca de falhas no banco de dados pelos organizadores deste estudo,\nesta primeira etapa durou aproximadamente 7 meses, e obteve os seguintes resultados:\nTabela 3 - Distribuição das aplicações de acordo com a faixa etária\nNesta tabela notamos uma maior concentração de pessoas na segunda e na terceira\nfaixa etária, e esta concentração, de quase 60% da amostra deve ter sido devido a maior\nfamiliaridade e disponibilidade destas idades que as demais nas oito faixas.\nTabela 4 - Distribuição das aplicações de acordo com o sexo\nA distribuição do grupo amostral de acordo com o sexo demonstra uma prevalência do\ngênero feminino diante do masculino.\nTabela 5 - Distribuição das aplicações de acordo com a Escolaridade\nA tabela 5 demonstra uma maior concentração de pessoas que responderam ao teste on-\nline como sendo graduandos ou graduados de cursos universitários, poucas foram às pessoas\nque, nesta proposta livre de acesso e de participação no processo da dissertação, encontravam-\nse apenas com o ensino fundamental ou ainda em conclusão deste.\nTabela 6 - Distribuição das aplicações de acordo com as Regiões\nApesar de um número razoável de aplicações oriundas da região Sul e Centro-Oeste,\nhouve uma maior contribuição de usuários\nProvavelmente isso se deveu pela maior quantidade de informações geradas a partir da cidade\nonde este estudo se originou.\nPara os estudos da confiabilidade do teste e comparação de desempenho no teste lápis e\npapel, utilizamos a técnica de teste-reteste do instrumento com associações de aplicações lápis\ne papel. A técnica de teste-reteste consiste em comparar os escores de um sujeito através de\nduas testagens distintas com o mesmo instrumento. Nesta dissertação de mestrado optou-se\npor apresentar aos sujeitos três modalidades de teste-reteste.\nNa primeira modalidade houve a aplicação lápis e papel e posteriormente a aplicação\non-line a partir de três grupos com intervalos diferentes de aplicação. Na segunda modalidade\nhouve a aplicação do teste on-line e posteriormente aplicação da versão lápis e papel a partir\nde três grupos com intervalos diferentes de aplicação. Por fim, houve a aplicação de uma\nterceira modalidade onde o teste-reteste foi executado somente em forma on-line em dois\nmomentos distintos a partir de três grupos com intervalos diferentes de aplicação. Ao total\ntivemos nove grupos de aplicação teste-reteste diferindo entre si pela disposição do intervalo\nde tempo (dois meses, quatro meses e seis meses para o reteste) e as modalidades de aplicação\n(on-line/ lápis e papel, lápis e papel/on-line e on-line/on-line).\nEstes grupos de teste-reteste representam uma forma de validade alternativa de calcular\nos coeficientes de precisão dos itens. Dentro de cada uma destas modalidades separamos três\nsubcategorias de acordo com o tempo de testagem. Obtivemos nove grupos compostos por 20\npessoas cada um, e neles foram analisadas duas variáveis: a questão do intervalo entre as\naplicações e a influência nas respostas na forma da aplicação da seqüência teste reteste (lápis e\npapel ou on-line), assim:\nTabela 7 - Grupos de aplicação de teste e reteste\nAplicação lápis e papel\nde 61 a 120 dias\nde 121 a 180 dias\nreteste lápis e papel\nF Aplicação on-line\nG Aplicação on-line\nH Aplicação on-line\nI Aplicação on-line\nE, por fim, foi realizada a composição de um último grupo de aplicações contendo 20\nparticipantes que realizaram a aplicação on-line em quatro segmentos iguais, do MIPS off-line\nfundamentou o cálculo da confiabilidade do teste e avaliou a capacidade do instrumento em\nser dividido, sem que perdesse a qualidade de testagem. Para a testagem optamos pela\nreconstrução do teste, com a mesma interface da versão on-line, porém, construído em Excel\nrespondidos nos dias especificados e remetidos de volta. Ao total participaram deste processo\nde testagem 50 pessoas, porém 21 delas não remeteram de volta os e-mails com as testagens.\nOs outros 9 testados não respeitaram o intervalo de tempo estabelecido para a testagem, de\numa semana, e foram excluídos do processo antes da quarta parte do teste.\nFigura 4- Primeira tela de Apresentação do teste Multisessão\nTeste de Personalidade Multisessão¹\nO teste a seguir faz parte de uma pesquisa de mestrado e consiste na validação dos critérios\npsicométricos do Inventário Millon de Estilos de Personalidade On -Line . Esta pesquisa é realizada pelo\npsicólogo Alyson Barros a partir do Programa de Pós Graduação em Psicologia. O sigilo das informações\naqui contidas serão respeitados, assim como quaisquer aspectos éticos descritos no site\nwww.planetapsi.com. Quaisquer dúvidas ou informações adicionais podem ser remetidas a\n1 - Você deve preencher os dados de cadastro abaixo e clicar em INICIAR;\n2 - Em seguida deve responder as 45 questões apresentadas. Caso concorde com a afirmação\ndeve marcar com um "X" a opção "V", caso discorde da afirmativa marque a opção "F";\n3 - Ao final, salve-o com suas iniciais e remeta-o para o e-mail psicologia@planetapsi.com;\n4 - Aguarde a 2º, 3º e 4º parte do teste, você os receberá via e-mail e após a resolução do\nmesmo, receberá um relatório contendo a análise dos dados aqui estudados.\n¹Este é o estudo para validação de um teste informatizado, o mesmo não pode ser considerado\nteste psicológico e tampouco substitui a necessidade de um psicólogo.\nFonte: arquivo enviado aos sujeitos da aplicação\nLogo, para estudarmos a validade e a confiabilidade, foram desenhados 11 grupos de\naplicação, onde cada um possuía uma peculiaridade de procedimento e uma finalidade de\nTabela 8 - Definição total dos grupos de aplicação\nAplicação Simples on-line\nAplicação Multisessão off-line\nAo total, participaram deste estudo 1708 pessoas divididas em 11 grupos de aplicação.\nHouve 492 aplicações invalidadas na aplicação Simples on-line enquanto que na multisessão\noff-line foram 30 aplicações invalidadas. Totalizamos, ao final do processo, 522 aplicações\n4.1. Padrões Psicométricos do grupo de aplicação on-line simples\nApresentam-se os resultados quanto as médias e desvios padrões de acordo com cada\num dos 24 itens do teste e da comparação do alpha de Cronbach dos 1508 participantes através\ndo com a amostra da versão lápis e papel e, também, a comparação com a versão americana\n(Alchieri, Nuñes, Cervo & Hutz, 2008).\nTabela 9 - Comparações entre os alphas da amostra americana e brasileira\nalpha Brasil adultos\nalpha EUA adultos\nRealizamos as análises de variância univariada (Anova) para as variáveis da região,\ngênero, escolaridade e faixa de idade para avaliarmos a existência homogeneidade nas\ncategorias encontradas ou de diferenças significantes entre os mesmos. Estas variáveis foram\ncalculadas e separadas de acordo com as três dimensões do MIPS: Metas Motivacionais,\nEstilos Cognitivos e Relações Interpessoais. Com isso buscamos estudar a existência ou não\nde diferenças significativas dentro das três dimensões do MIPS (Metas Motivacionais, Estilos\nCognitivos e Relações Interpessoais) associadas a região, gênero, faixa etária e escolaridade. É\nrejeitada a noção de inexistência de diferenças entre as amostras caso o Valor-P estudado seja\nmenor que 5%, em caso contrário confirmamos que existem diferenças significativas entre os\nsubgrupos que justifiquem os estudos em separado para o estabelecimento de normas de\nanálise do teste.\nTabela 10 - ANOVA das Metas Motivacionais versus região


Qual será a equivalência de 123 rial QR (QAR) a $ (HKD) à taxa atual\nPágina principal/Conversor/QAR/123 Rial catarense para Dólar de Honguecongue\n123 rial para o dólar de honguecongue à taxa do dia\nVocê acabou de converter cem and vinte-três rial para a moeda da dólar de honguecongue à taxa de câmbiointernacional atual de 2.12876383. Hoje, cem and vinte-três rial equivale aos 261 dólares 83 céntimos. Se houver alguma alteração na taxa de referência da QR em relação ao $,os valores serão automaticamente recalculadosao reiniciara página. Se precisar de saber a equivalência de 123 rial à moeda de qualquer outro país do mundo –quiera usar o Conversor Online que opera com 96 moedas diferentes.\nResultado de conversão 123 QAR em HKD


Boadica - Notícias - Contra apagão, Campus Party pode se dividir entre Rio e São Paulo\nCONTRA APAGÃO, CAMPUS PARTY PODE SE DIVIDIR ENTRE RIO E SÃO PAULO\nCom cerca de 6.800 participantes interessados por tecnologia, internet e entretenimento, a Campus Party termina hoje em São Paulo.\nA feira, que teve sua quarta edição realizada no país, teve como saldo crescimento do público presente, melhoria de conteúdo das palestras --com mais espaço para temas como empreendedorismo e robótica--, mas também registrou muitas reclamações dos campuseiros quanto a infraestrutura.\nFalhas de internet e energia elétrica marcam maior evento de tecnologia do país\nAs quedas de energia --foram três só na sexta-feira-- e oscilações da internet foram alguns dos problemas relatados, além da falta de internet sem fio.\nO estudante Mateus Rocha, 22, elaborou uma lista com nove problemas principais e propôs sugestões para discutir com a organização.\nEntre elas estão melhorias no credenciamento para evitar filas, câmeras de segurança para evitar furtos de equipamentos e também melhor sistema de ventilação para a plateia das palestras.\nJá o professor paulista Luiz Angelo de Oliveira, 34, sugeriu, entre as melhorias, nova estrutura para as caravanas, como melhor distribuição das barracas para manter os grupos unidos. Muitos dos 4.500 acampados ficaram separados de seus grupos por problemas na distribuição da localização das barracas no primeiro dia de evento.\nEm entrevista a Folha, Mario Teza, diretor da Futura Networks, que organiza o evento, afirmou que a estrutura foi dimensionada com base nos resultados dos anos anteriores, mas o número de participantes foi além do esperado.\nOs dois geradores que faziam parte da estrutura para suportar as oscilações no período de chuvas não foram suficientes e no segundo dia de evento, a organização contratou outros dez.\nSobre as oscilações na internet, Teza afirmou que com as chuvas fortes que caíram na capital paulista, muitos equipamentos de rede queimaram e precisaram ser substituídos, gerando momentos sem conexão em algumas partes da arena.\nSobre a falta de uma conexão sem fio, Teza afirmou que nenhuma infraestrutura de Wi-Fi seria capaz de suportar o número de participantes.\n"Fizemos três reuniões com as caravanas e vamos discutir todas as sugestões para a melhoria do evento no ano que vem", disse.\nUma das alternativas seria realizar o evento simultaneamente em duas cidades para dividir o público, como São Paulo e Rio. "Hoje 60% dos participantes são de fora da capital".\nCentenas de campuseiros utilizaram a rede para baixar programas, músicas e vídeos. Um grupo de três amigos de Aracaju que preferiu não divulgar seus nomes declarou à reportagem que baixou três temporadas da série Lost ao longo da semana.\nA organização afirma que não controla o movimento, mas declara que 60% da rede de 10 GB oferecida pela Telefônica foi usada para a publicação (upload) de conteúdo próprio, como vídeos ou fotos.


2 Samuel 15:15 Responderam-lhe prontamente todos os oficiais do rei: “Qualquer que seja a decisão do senhor nosso rei, eis que aqui estamos leais a ti e prontos para servir-te!”\nBíblia > 2 Samuel > Capítulo 15 > Verso 15\n◄ 2 Samuel 15:15 ►\n2 Samuel 15:15 Interlinear • 2 Samuel 15:15 Multilíngue • 2 Samuel 15:15 Espanhol • 2 Samuel 15:15 Francês • 2 Samuel 15:15 Alemão • 2 Samuel 15:15 Chinês • 2 Samuel 15:15 Inglês • Bible Apps • Bible Hub\n…14Diante desta notícia Davi declarou a todos os seus anciãos e oficiais em Jerusalém: “Levantemo-nos, pois, e fujamos! Doutra maneira, certamente, não escaparemos da fúria de Absalão! Apressai-vos em partir, para que não aconteça que seja ele mais ligeiro e nos ataque, nos destrua e passe a cidade toda ao fio da espada!” 15Responderam-lhe prontamente todos os oficiais do rei: “Qualquer que seja a decisão do senhor nosso rei, eis que aqui estamos leais a ti e prontos para servir-te!” 16O rei decidiu partir a pé, com toda a sua família, mas deixou no palácio dez concubinas para cuidarem do palácio.…


A sucessão empresarial em razão do objeto social e as dívidas contraídas e não pagas Voltar\nA doutrina e a jurisprudência pátria tratam da desconsideração da personalidade jurídica de forma nítida: pode ocorrer sempre que esta venha a ser utilizada para fins fraudulentos ou diversos daqueles para os quais foi constituída, permitindo que o credor da obrigação assumida pela pessoa jurídica alcance o patrimônio particular de seus sócios ou administradores para a satisfação do seu crédito.\nCom certa frequência temos visto empresas fraudando credores a torto e a direito a partir do instante em que suas dívidas acabam se avolumando a um nível desproporcional ao poder de solvência do devedor, ocasião em que acabam serrando suas portas e transferindo seu parque produtivo a um terceiro estranho à relação societária. Entretanto, por vezes essas acabam mantendo a mesma clientela, representação comercial, produtos e até vendas atreladas ao mesmo canal de expansão. A diferenciação acaba se resumindo, quase sempre, na localização de seu parque produtivo e na figura do sócio, distinto da empresa anterior.\nMas a dificuldade maior cinge-se a comprovação de que a empresa “nova”, no fundo, é a mesma da “velha”, situação em que esbarra no quase instransponível fato relativo ao quadro societário, às vezes marca e em igual proporção localização do parque industrial, todos distintos da anterior empresa. E quando isso ocorre, infelizmente, dificulta-se em demasia a comprovação da fraude aos credores.\nUm dos fatos que podem decisivamente corroborar a causa em favor do credor que busca seu crédito está ligado à atividade da sociedade fraudulenta. Se tal atividade for mal administrada, dando azo ao seu encerramento irregular – logicamente, através das provas carreadas aos autos – a finalidade de fraudar credores fica evidente, razão pela qual a personalidade jurídica fica desconsiderada, o que inexoravelmente alçará a divida no patrimônio do devedor.\nEntretanto, mesmo com essa medida, em nada garante que o patrimônio do devedor tenha bens suficientes para saldar a dívida, transpassada agora, em seu nome. Para os fins desejados, pode o devedor não ter bens para o pagamento da dívida e tal situação não resolve efetivamente o crédito buscado pelo (talvez impaciente) credor.\nA possibilidade de solvência do crédito reclamado teria lugar, nesse caso, na comprovação nítida da sucessão empresarial, pois será naquela “nova” empresa que o crédito deverá recair e a obrigação por lá persistir. Mas para isso a matéria de prova nos autos deve ser inconteste, não guardando a mínima dúvida ao julgador.\nE foi isso que recentemente ocorreu num processo de execução decidido no Poder Judiciário paulista, em favor de cliente de nossa Banca.\nUma empresa firmou com outra um termo de confissão de dívida e plano de pagamento em doze parcelas mensais. Acabou solvendo apenas duas. A credora manejou ação de execução por quantia certa contra o devedor. Após sucessivas investidas contra o devedor, todas infrutíferas, a execução foi remanejada para o sócio da nova empresa, tendo sido devidamente citada. O executado não ofereceu sequer embargos – muito provavelmente em razão do estado de insolvência de seu patrimônio pessoal ,no qual sequer um bem existia.\nDessa forma, parece ter sido aquilo o “fim” anunciado do dilema do credor, que havia confiado seu negócio a um parceiro, agora, quedado inerte. Em considerável parte das vezes tais créditos acabam caindo na vala comum da “provisão para os devedores duvidosos”, conta que as empresas conhecem muito bem.\nMas não foi esse o fim esperado. O credor não se deu por vencido e conseguiu provar nos autos que havia ocorrido, posteriormente à assunção da dívida através do termo de confissã, a transferência do parque fabril da empresa “velha” para a “nova”. Mais, a “nova” empresa possui até o mesmo representante comercial da anterior, fabricava os mesmos produtos para os mesmos clientes, tendo, inclusive, os mesmos fornecedores. Tal circunstância criteriosamente foi comprovada nos autos, tendo assim o juiz de direito decidido:\nTrata-se de pedido de reconhecimento de sucessão de empresas, bem como declaração da desconsideração inversa da personalidade jurídica, pleiteado pela Exequente (...).\nSustenta, em apertada síntese, que as atividades da empresa executada (...) foi transferido para outra empresa denominada (...), que tem como titularidade a esposa do responsável pela Executada, Sra. (...), que tem como objeto social a mesma atividade da Executada e endereço vizinho. Face a esses aspectos fáticos, requereu tal reconhecimento da sucessão entre as empresas.\nCom efeito, a sucessão de empresas ocorre quando há transferência do estabelecimento empresarial, entendido como o conjunto de bens materiais, como mercadorias, máquinas, imóveis etc., bem como, imateriais, como marcas, patentes e ponto comercial, organizados para a exploração da mesma atividade econômica, nos termos do art. 1.142 do Código Civil. Admite-se sua presunção quando os elementos indiquem a mesma exploração da atividade econômica, com o mesmo objeto social etc., atingindo, inclusive, a mesma clientela já consolidada pela empresa sucedida. No caso em tela se verifica a ocorrência da sucessão das empresas, senão vejamos. É que, pelas tentativas de bloqueio "on line" tanto pelo CNPJ da empresa (...), como pelo CPF do sócio (...), não se obteve êxito, o que comprova que empresa e empresário não possuem ativos financeiros a movimentar, o que causa, no mínimo, estranheza já que por instrumento de confissão de dívida acostado a fls.14/16, a executada confessou dívida e comprometeu ao pagamento mensal na faixa média de R$ (...).\nDe outra feita, a própria empresa (...), por ocasião da manifestação e documentos apresentados a fls.110/136, confirma que sua proprietária (...) é casada com o proprietário da empresa Executada desde 23.11.2002. Nota-se que, embora negado pela referida empresa a sucessão, confirma que os objetos dos contratos sociais são os mesmos, quais sejam, a indústria e comércio de calçados, portanto, mesma finalidade. Não é só, conforme manifestado a fls.114/115 a empresa também confessa que o Sr. (...) prestou serviços como representante comercial para as empresas, confirmando a declaração de fls.80.\nOs termos da declaração de fls.80, não rechaçada, deixa claro que as atividades das empresas são as mesmas, com mesmos objetivos, tanto que possuíam o mesmo representante comercial. Nesse contexto acolho o pleito de fls.66/70 de modo a reconhecer a sucessão das empresas e, em consequência, declaro a desconsideração inversa da personalidade jurídica para determinar a penhora em bens pertencentes a empresa (....), inscrita no CNPJ (....), com endereço a fls.70.\nDefiro a inclusão desta empresa no polo passivo da ação.\nDefiro ainda a penhora da ordem de 20% (vinte por cento) do faturamento dessa empresa.\nNomeio como administrador para elaborar um formato de administração, esquematizar os pagamentos ao credor e prestar contas periodicamente a respeito dos procedimentos e resultados do exercício de sua incumbência, nos termos dos artigos 678, parágrafo único, primeira parte, 148 a 150 e 728, I e III, do Código de Processo Civil, o Sr. Perito contábil (...), o qual deverá estimar seus honorários periciais. Pela presente, fica autorizado o perito a entrar e permanecer no interior da empresa para os fins da perícia, bem como ter acesso aos livros necessários para o desempenho de seu mister.\nO mais interessante nesse caso foi o fato de que, independentemente da distinção do quadro societário, a sócia da nova empresa era casada com o executado da “velha” bem como a circunstância relativa ao objeto social: ambas fabricavam calçados. O juiz inclusive desprezou outras provas que poderiam ter sido avaliadas, eis que devidamente comprovadas nos autos, tais como: fotos dos produtos com as características muito parecidas em ambas as empresas; mesma identidade de clientela e fornecedores. Todas essas provas corroboraram para a desconsideração inversa da personalidade, fato que ensejou na penhora de 20% do faturamento mensal da empresa sucessora.\n Código Civil Comentado | Nelson Nery Junior, Rosa Maria de Andrade Nery – 6ª Edição, nota 2, art. 50, página 249.\n TJSP – RT 711/117.\n Processo nº 0018065-23.2012.8.26.0196.


Contraculturalmente: Discos: Elliott Smith\nQuem me conhece pessoalmente, já esperava por este post. Ainda assim, não deixa de ser particularmente difícil para mim escrever sobre um dos meus tesouros mais bem guardados, a música de Elliott Smith...\nNascido Steven Paul Smith em 1969, Elliott foi um dos mais acarinhados cantores folk do século XX, e ao mesmo tempo o mais injustamente esquecido. A sua carreira musical começou nos Heatmiser, uma banda pós-grunge com forte incidência na distorção e nas guitarras eléctricas. Daí que o primeiro album a solo de Elliott Smith (intitulado Roman Candle) tenha causado alguma surpresa entre os seguidores daquela banda, por trocar a electricidade pela velhinha guitarra acústica. O Lo-Fi e a candura na sua voz representam os primeiros albuns do cantor, verdadeiros diamantes escondidos numa produção deficiente.\nElliott Smith saiu da obscuridade mais ou menos em 1997, quando o realizador Gus Van Sant resolveu incluir algumas das composições no filme O Bom Rebelde, valendo a Smith o reconhecimento internacional e a nomeação para um Oscar pela música Miss Misery.\nSeguiu-se um contrato com a Dreamworks, do qual resultaram albuns mais ambiciosos, ultra-produzidos e belíssimos, ainda que um bocadinho difíceis de apreciar para alguém com o ouvido destreinado. Elliott Smith entrava numa fase infantil, de um músico a transbordar de talento com uma guitarra de caixa a cair de podre que se deixa deslumbrar por um estúdio cheio de instrumentos, e que não descansa enquanto não os experimentar a todos. Oiçam a Waltz #2, do album XO, e observem como se transforma uma valsa numa canção pop sem mácula, por exemplo.\nQuer os seus primeiros albuns, quase totalmente acústicos, quer os seus mais recentes trabalhos, mais orquestrais, valem a escuta atenta. Porém, não podendo dar especial destaque a todos os 6, saliento o Either/Or, aquele que considero o album introdutório perfeito para um ouvinte novo de Elliott Smith.\nEither/Or, o terceiro registo, é uma album de transição. A guitarra acústica está lá, mas já se começam a ouvir guitarras eléctricas, baixo e bateria nalguns temas. A postura recatada encontra-se presente, a delicadeza da sua melodiosa voz é algo de outro mundo e Elliott Smith prova aqui de uma vez por todas o seu valor como escritor de canções! Quase todos os dias oiço este album, e continuo sem me cansar dele... Destaque para Say Yes, Angeles e aquela que considero a minha música preferida de todos os tempos (por várias razões que não mencionarei aqui), Between The Bars...\nA maior parte dos trabalhos de Elliott Smith podem ser encontrados na Fnac. Ironicamente, a sua obra mais recente, From A Basement on a Hill, provavelmente será a mais difícil de encontrar. Mas ela anda por aí. Procurem-na bem.\nElliott Smith faleceu precisamente há 2 anos, nesta data. Foi genuinamente uma boa pessoa, para além de um excelente músico. Espero ter conseguido homenageá-lo decentemente. Rest peacefully, old friend...\nPublicada por Carca à(s) 12:31\nsaviol 21 de outubro de 2005 às 16:30\nfiquei com curiosidade suficiente para ir procurar alguma coisa pela mula...\nVamos lá a ver se tenho alguma sorte...\nAdrian L. 25 de setembro de 2007 às 18:29\nSuper Elliott Smith


Polícia Militar de Pindamonhangaba realizou Operação Saturação\nVocê está aqui: Home Policial Polícia Militar de Pindamonhangaba realizou Operação Saturação\nEscrito por Redação - com informações da Polícia Militar\tCompartilhar 0 Entre 16h e 20h desta quinta-feira (12), a Polícia Militar de Pindamonhangaba realizou a Operação Saturação, em diversos pontos da cidade.\n(Foto: divulgação/Polícia Militar)A operação contou com policiais da Força Tática, ROCAM (Ronda Ostensiva com Apoio de Motocicletas), além de outras modalidades de policiamento. As equipes atuaram em pontos estratégicos, realizando bloqueios e saturações pelos bairros que foram selecionados previamente, conforme indicadores criminais.\nCom a duração de quatro horas, a Operação Saturação teve como objetivo, intensificar as ações preventivas e também coibir o tráfico de drogas, roubos e furtos, intensificando o combate à criminalidade na cidade, aumentando a sensação de segurança do cidadão pindamonhangabense.\nDurante a Operação Saturação 40 pessoas foram abordas. Das 5 motos e 4 carros fiscalizados uma autuação foi elaborada.\nA operação atuou também em bares, sendo dois fiscalizados. Uma pessoa foi presa em flagrante e encaminhada para a delegacia. Ela vai responder pela lei Maria da Penha.\nSegundo o Capitão Ricardo Prolungatti, choveu na maior parte da operação, prejudicando uma efetividade maior das ações policiais. Prolungatti disse tembém que não houve delitos de roubos e furtos durante o período da operação.Compartilhar 0 Facebook Social Comments\nnotícia policial pinda,\tpolícia militar pinda\toperação saturação pinda\toperação saturação\tConheça o Vale News


Chegou Bio Extratus Homem para cabelos & barbas\n0 Carla Paredes em Beleza/ Destaque/ Patrocinador no dia 02.01.2018\nAgora realmente eu posso falar que Bio Extratus está cuidando da minha família inteira! Depois do último post, onde eu contei um pouco da linha Kids, hoje eu venho aqui contar sobre a linha para homens, o mais novo lançamento e a mais nova aposta da marca.\nAproveitei que estaria com meu pai e meu marido nesse período de Natal/Ano Novo e pedi para eles experimentarem a linha feita para cuidar dos cabelos e barbas. Ela conta com shampoo, condicionador, balm pós barba, gel fixador e pomada modeladora. Por aqui, a única coisa que não foi usada foi o gel fixador, já que meu pai tem o cabelo bem curtinho e meu marido prefere a pomada de fixação para manter o cabelo no lugar, mas ela também pode ser usada para modelar bigodes ou barbas.\nO diferencial dessa marca é que ela é feita para ser usada tanto nos cabelos quanto na barba. Seu principal ativo é o oxigreen, uma tecnologia exclusiva da Bio Extratus que forma uma película protetora e condicionante e na pele tem um efeito calmante e adstringente. O shampoo, por exemplo, é feito para quem gosta de se barbear durante o banho, deixando a pele macia e sem irritações.\nA única coisa que eu posso afirmar é que a linha é super cheirosa, marcante e refrescante. Então vou deixar vocês com as impressões que eles tiveram ao usar Bio Extratus Homem Cabelo & Barba.\nSegundo meu marido, ele não acreditou muito em mim quando eu disse que o shampoo também podia ser usado para se barbear. Ele jurava que era brincadeira. Depois do banho que ele testou pela primeira vez, ele veio me contar que realmente a lâmina de barbear desliza bem fácil e ajuda bastante depois que você passa o shampoo na barba, inclusive nas áreas com menos pelos, como o pescoço. Foi uma experiência bem prática que deu muito certo e eu estou esperançosa, porque se ele realmente continuar usando, é provável que ele vá fazer a barba mais vezes. Inclusive eu fiquei toda feliz que ele passou o ano novo sem barba nenhuma – e eu sou time pouca ou nenhuma barba. rs Outro produto que eu to vendo ele usando desde que eu apresentei foi a pomada modeladora. Segundo ele, ela modela e fixa muito bem mas de uma forma discreta. Como o acabamento é matte, parece que o cabelo ficou do jeito que ele queria naturalmente.\nJá meu pai adorou o balm pós barba. É um creme não muito espesso que desliza fácil na pele. Ele, que faz barba quase todo dia, investe mesmo nessa categoria de produtos e adorou a novidade. Tanto que assim que eu mostrei esse lançamento foi a primeira coisa que ele pediu para experimentar. A proposta desse balm é acalmar e amaciar a pele e ele disse que de fato sentiu a diferença, além de uma sensação refrescante bem gostosa. O cheirinho que fica também é uma delícia.\nComo nosso público é majoritariamente feminino, vou falar para vocês, tá? Mas homens que leem o Futi, sintam-se contemplados também. Só digo que quem tem alguém, seja pai, namorado, marido ou irmão, que realmente gosta de cuidar dos cabelos e da barba, vale a pena procurar a linha Bio Extratus Homem para eles experimentarem.\nFiquei feliz de saber que agora existe uma opção de Bio Extratus para eles também (e confesso que estou feliz de também não precisar mais dividir meus shampoos e condicionadores rsrs). Aqui foi um sucesso, acho que aí será também! :) Para saber onde achar a linha, é só clicar aqui.\nbalm pós barbabelezabio extratuscabelos e barbashomempomada modeladorashampoo cabelos e barbas\nBeleza: Depoimento sobre plástica (4)\nRotina da minha pele (oleosa)