A BSTRACT
This research had as a main objective to test a model of Training Impact Evaluation at Work. Three stages were accomplished: (1) the construction and validation of a scale of Training Instrumental Value; (2) the improvement and validation of the scales of Motivation to Learn, Motivation to Transfer and Support Before Training; and (3) the investigation of the relationship among the characteristics of the training participants (Motivation to Learn, Motivation to Transfer and Training Instrumental Value), Reactions and Support to the Transfer of Training; as independent variables, and Impact of Training at Work, as dependent variable. The answers of the participants of 28 courses to the scales were submitted to exploratory data analysis, principal components analysis, factor analysis, reliability analysis and standard multiple regression. The results of the stages 1 and 2 showed valid and accurate one factor scales. In the stage 3, the standard multiple regression analysis showed only three explained variable of self-evaluation of Impact of Training at Work: Manager and Social Support, Training Instrumental Value and Reaction of the Participant to the Instructor. Some theoretical and practical implications of those discoveries are discussed. Key words: training impact; characteristics of the training participants; motivation; training instrumental value; manager and social support.
RAC, v. 7, n. 4, Out./Dez. 2003: 77-96
77
INTRODUO
As organizaes tm questionado a eficcia das aes de treinamento, buscando avaliar o retorno de seus investimentos nessa rea. No entanto, o uso do treinamento uma importante alternativa para a mudana de atitudes, conhecimentos ou habilidades necessrias ao desempenho adequado do capital humano na empresa. H, nas empresas, poucos estudos demonstrando resultados palpveis das aes de treinamento, as quais, muitas vezes, so compradas como pacotes e aplicadas sem estudo sistemtico de necessidades reais de treinamento. Tais pacotes evidenciam modismos que prometem revolucionar a produtividade nas reas e a motivao dos funcionrios, mas no demonstram confirmao emprica da efetividade de suas aes. Borges-Andrade e Abbad (1996) apontaram os riscos associados s polticas de importao de pacotes de treinamento, j que o Brasil possui suas prprias especificidades culturais e requer a introduo de novas tecnologias, a elaborao de treinamentos eficazes e de linhas de pesquisa que facilitem o desenvolvimento social e econmico brasileiro. H avanos nas pesquisas sobre treinamento. Um deles diz respeito identificao de fatores que afetam a eficcia de treinamentos em ambientes organizacionais. No entanto, so poucas as evidncias de que as organizaes estejam realmente aplicando os resultados de pesquisas cientficas na elaborao de seus programas de treinamento. Salas e Cannon-Bowers (2001) acreditam na chegada de uma nova era na rea de Treinamento e Desenvolvimento, na qual haveria maiores trocas entre pesquisas empricas e sua aplicao nas organizaes(1).
D EFINIES
Goldstein (1991) definiu treinamento como uma aquisio sistemtica de atitudes, conceitos, conhecimentos, regras ou habilidades que resultem na melhoria do desempenho no trabalho, obtidos por meio da anlise de tarefas e princpios da tecnologia instrucional. Para Wexley (1984) treinamento visto como um esforo planejado de uma organizao para facilitar a aprendizagem de comportamentos exigidos pelo trabalho.
78
O treinamento apenas uma das intervenes que afetam desempenho no trabalho. , portanto, somente uma das tentativas formais de garantir a aquisio de novos conhecimentos, habilidades e maior compreenso da tarefa, no afetando, necessariamente, condies organizacionais (materiais e sociais) relacionadas ao desempenho. A teoria de sistemas tem sido utilizada para a compreenso do processo de treinamento. Borges-Andrade (1982) entende treinamento como um conjunto de atividades interdependentes ou como um subsistema organizacional, no qual o levantamento das necessidades de treinamento fornece informaes que viabilizam o planejamento, que, por sua vez, orientar a execuo e a avaliao do evento instrucional. Este ltimo fornecer dados para a avaliao, que retroalimentar os demais componentes do sistema, sugerindo ajustes em cada um deles. Os pesquisadores concordam que a avaliao uma importante parte do sistema de treinamento. Segundo Goldstein (1991), avaliao de treinamento uma coleta sistemtica de informaes descritivas e valorativas necessrias para tornar eficazes as decises relacionadas seleo, adoo, valorizao e modificao de vrias atividades instrucionais.
79
compreende o conceito de transferncia de treinamento, que se refere aplicao correta, no ambiente de trabalho, de conhecimentos, habilidades ou atitudes adquiridas em situaes de treinamento. Hamblin (1978) adaptou o modelo de Kirkpatrick (1976), composto de quatro nveis (Reao, Aprendizagem, Comportamento no Cargo e Resultados), desdobrando o quarto nvel em dois outros: Mudana Organizacional e Valor Final; ele concebeu tambm esses nveis como seqenciais, lineares e correlacionados entre si. Alliger e Janak (1989) criticaram o modelo de critrios de avaliao de treinamento utilizado por Kirkpatrick (1976), afirmando que os relacionamentos entre os nveis de avaliao tendem a ser fracamente correlacionados entre si. Esses autores basearam-se nos trs pressupostos de Kirkpatrick (1976) para tecer suas crticas. No Brasil, at 1996, o nvel de avaliao mais relatado nos artigos era o de aprendizagem. Esse quadro mudou. A ltima reviso de Borges-Andrade (2000) sobre medidas demonstra que outros estudos comearam a enfocar o terceiro nvel de avaliao integrado ao segundo e, em alguns casos, ao primeiro nvel. Os modelos de Kirkpatrick (1976) e Hamblin (1978) no tm possibilitado o entendimento das relaes entre os nveis e as variveis que os afetam. Modelos de avaliao de sistemas instrucionais mais abrangentes passaram a incluir, alm dos critrios de eficcia, variveis relacionadas ao ambiente, s clientelas e aos procedimentos instrucionais. Entre estes modelos, destaca-se o de Borges-Andrade (1982), que desenvolveu o Modelo de Avaliao Integrado e Somativo de Sistemas Instrucionais (MAIS), e o de Abbad (1999), que construiu o Modelo Integrado de Avaliao de Impacto do Treinamento no Trabalho (IMPACT), inspirado principalmente no modelo MAIS de Borges-Andrade (1982). Abbad (1999) identificou que as principais variveis preditoras de Impacto do Treinamento no Trabalho pertenciam aos componentes Suporte Transferncia e Reaes. Alm disso, entre as variveis do componente Caractersticas da Clientela, mereceram destaque na pesquisa as variveis motivacionais, as quais explicaram uma poro significativa de quase todas as variveis critrio estudadas. A autora salienta que as relaes entre Reao, Aprendizagem e Impacto no so conclusivas, havendo, ainda, poucas tentativas de identificao das variveis preditoras de cada um desses nveis de avaliao (Abbad, 1999, p.37).
80
81
82
Expectncia. Os trs componentes do modelo multiplicativo medem a fora motivacional, mas so considerados construtos distintos. A valncia significa o quanto um indivduo deseja uma recompensa ou uma escolha em relao a um resultado particular. A instrumentalidade diz respeito estimativa de que determinado desempenho seja um caminho adequado para chegar a uma recompensa. Rgis (2000) salienta que o desempenho pode estar relacionado, por exemplo, ao envolvimento com um programa de treinamento e no necessariamente a resultados relativos s suas tarefas no trabalho. J a expectncia se refere estimativa de que o esforo de um indivduo resultar em um desempenho bem-sucedido ou a chance de que esse desempenho produza o resultado esperado. Neste trabalho, utilizou-se um conceito bidimensional de Valor Instrumental do Treinamento, abrangendo as definies de duas variveis da teoria de expectncia de Vroom (1964): Instrumentalidade e Valncia. Dessa maneira, Valor Instrumental do Treinamento definido como a crena do indivduo de que as novas habilidades por ele adquiridas em um curso lhe sero teis para atingir recompensas de vrias naturezas (instrumentalidade), bem como a importncia ou o valor que esse indivduo atribui a cada uma dessas recompensas (valncia). Portanto esse conceito diz respeito s escolhas particulares do indivduo e aos benefcios do programa de treinamento para o treinando, relacionados a resultados futuros. Abbad, Pantoja e Pilati (2001, p.9), em sua recente reviso de literatura, analisaram artigos publicados entre os anos de 1998 e 2001 e observaram que as pesquisas brasileiras e estrangeiras sobre caractersticas individuais, de forma geral, indicaram ainda que motivao para o treinamento est relacionada com os trs nveis individuais de avaliao. Esses autores tambm observaram que as variveis motivacionais mostraram-se mais fortes preditoras de sucesso individual em treinamento do que capacidades cognitivas e caractersticas demogrficas da clientela, na amostra de artigos estrangeiros. Embora a literatura em geral seja clara a respeito da influncia de Motivao para Aprender sobre resultados de aprendizagem, h necessidade de tornar mais precisos alguns conceitos, conforme indicaram Salas e Cannon-Bowers (2001). Esses autores tambm afirmam que Motivao para Aprender, Auto-Eficcia, Aprendizagem e Transferncia da Aprendizagem so as variveis que necessitam de maior ateno dos pesquisadores nos prximos anos. O presente estudo utilizar o conceito de Motivao para Aprender como o interesse do treinando em aprender o contedo do programa de treinamento e Motivao para Transferir como o grau de interesse do treinando em aplicar no trabalho os contedos aprendidos no treinamento.
RAC, v. 7, n. 4, Out./Dez. 2003
83
Em suma, os poucos dados empricos disponveis na literatura especializada mostram que os nveis de avaliao parecem depender de certas caractersticas motivacionais dos participantes de treinamentos. Alm disso, na literatura revisada, h poucos investimentos na produo de instrumentos para os construtos de Motivao para Aprender, Motivao para Transferir e Valor Instrumental do Treinamento, entre eles os instrumentos produzidos por Noe e Schmitt (1986) e Abbad (1999).
Contexto de Treinamento
Outra linha de pesquisa da rea de avaliao refere-se influncia exercida pelo contexto organizacional nos resultados de treinamento. Os trabalhos dessa linha investigam o relacionamento entre fatores ambientais e eficcia de programas de treinamento, ou seja, examinam se a eficcia de programas de treinamento pode ser influenciada por variveis como suporte e clima organizacionais. Para Abbad (1999) os termos Suporte, Clima para Transferncia, Contexto Funcional e Ambiente tm sido usados como sinnimos, o que pode causar confuses tericas e metodolgicas para a rea. Neste estudo, sero utilizados os conceitos de apoio ou suporte ao treinamento. Um dos conceitos relativos ao ambiente organizacional a percepo do apoio gerencial ao treinamento. Esse conceito, segundo Abbad (1999), refere-se opinio do participante do treinamento a respeito do empenho demonstrado pelas chefias para viabilizar a sua participao em eventos instrucionais. Refere-se, portanto, a certas condies do ambiente pr-treinamento e ao nvel de apoio recebido pelo treinando para participar efetivamente de todas as sesses de treinamento. Neste trabalho, ser denominado Suporte Pr-Treinamento. O segundo conceito referente organizao o Suporte Transferncia de treinamento, que compreende suporte material e psicossocial (fatores situacionais de apoio e conseqncias associadas ao uso das novas habilidades) aplicao no trabalho de novas habilidades. Alguns estudos indicam que variveis psicossociais de apoio ao uso de novas habilidades no trabalho so importantes preditoras de Transferncia de Treinamento, de acordo com Abbad (1999), Abbad, Pantoja e Pilati (2001) e Salas e Cannon-Bowers (2001). Roullier e Goldstein (1993), por exemplo, definiram, construram e validaram uma medida de Clima, demonstrando que mais da metade da variabilidade da transferncia de treinamento era explicada por variveis relacionadas ao Clima para Transferncia. O Suporte Psicossocial Transferncia ou Clima para Transferncia tambm apareceu como forte preditor de Impacto do Treinamento no Trabalho em pesquisas nacionais (Abbad et al., 1999; Pantoja, Lima e Borges-Andrade, 1999).
84
Borges-Andrade e Abbad (1996) verificaram que os empregados cujos chefes forneciam apoio para que participassem dos treinamentos, possuam atitudes favorveis em relao ao curso. Aes gerenciais, de colegas ou da prpria poltica organizacional proporcionam sugestes e sinais que influenciam a motivao dos empregados. Supervisores podem demonstrar apoio a um treinamento por meio de discusses com o empregado, estabelecimento de metas de trabalho a partir do treinamento, liberao de tempo para preparao e encorajamento do trabalhador a engajar-se com o treinamento. Para Abbad (1999) Suporte Transferncia de treinamento um componente crtico no estudo das variveis que afetam a eficcia dos eventos instrucionais. Estudos referentes a contextos de treinamento demonstram a influncia das variveis do nvel gerencial e organizacional sobre a Transferncia de Treinamento, Reao e Motivao para Aprender (ver Abbad, Pantoja e Pilati, 2001; Salas e Cannon-Bowers, 2001). A anlise da literatura apresentada neste estudo mostra que as variveis motivacionais precisam de melhorias em suas medidas e a relao entre os nveis de avaliao ainda no conclusiva. Alm disso, so poucos os estudos que procuram identificar as variveis explicativas de cada um desses nveis de avaliao. Os resultados das pesquisas analisadas sugerem ainda que variveis motivacionais, tais como Motivao para Aprender, Motivao para Transferir e Valor Instrumental do Treinamento so correlacionadas positivamente com Impacto do Treinamento no Trabalho. Espera-se tambm que variveis relativas organizao, como Suporte Pr-Treinamento e Suporte Transferncia, sejam preditoras da varivel Impacto citada. Abbad (1999) sugeriu vrias providncias para o aperfeioamento do Modelo Integrado de Avaliao de Impacto do Treinamento no Trabalho. Entre elas, pretende-se, neste trabalho, atender, em parte, s seguintes: (1) definir motivao para o treinamento e para transferncia e construir uma escala de avaliao desses construtos [e (2)] definir melhor o conceito de Valor Instrumental do Treinamento (Abbad,1999, p. 250, 242). Essa autora tambm salientou que necessrio analisar de que modo se articulam essas motivaes com os planos profissionais do participante (Abbad, 1999, p.242). Alm disso, Abbad (1999, p.236) sugeriu a diminuio do nmero de variveis independentes nos modelos de regresso, para garantir explicaes mais parcimoniosas e evitar as chances de erro Tipo I, que poderiam ocorrer no caso da incluso de muitas variveis independentes nos modelos de regresso mltipla. Foram definidos os seguintes objetivos para este trabalho, a partir do exame da literatura: (1) construir e validar a escala de Valor Instrumental do Treinamento; (2) aperfeioar e validar as escalas de Motivao para Aprender e Motivao
RAC, v. 7, n. 4, Out./Dez. 2003
85
para Transferir, adaptadas de Warr, Allan e Birdi (1999), e de Suporte PrTreinamento, adaptada da escala de apoio gerencial ao treinamento de Abbad (1999); e (3) investigar as variveis preditoras de Impacto do Treinamento no Trabalho de cursos de uma organizao pblica do Distrito Federal, DF, no contexto de treinamentos presenciais, baseado principalmente no Modelo IMPACT de Abbad (1999). Nesse ltimo objetivo, espera-se que Motivao para Aprender, Motivao para Transferir, Valor Instrumental do Treinamento, Suporte PrTreinamento, Suporte Psicossocial Transferncia, Suporte Material Transferncia, Reao ao Programa e Reao ao Desempenho do Instrutor expliquem uma poro significativa de variabilidade das respostas dos participantes escala de Impacto do Treinamento no Trabalho.
Mtodo
A presente pesquisa foi realizada no perodo de abril a outubro de 2001 no Instituto Serzedllo Corra (ISC), rgo do Tribunal de Contas da Unio (TCU), sediado em Braslia, DF. Ao todo, foram avaliados 28 cursos oferecidos pelo ISC, perfazendo uma carga horria total de 635 horas. O presente trabalho foi realizado em trs etapas, conforme os objetivos citados anteriormente. A etapa 1 refere-se construo e validao da escala de Valor Instrumental do Treinamento; a etapa 2 diz respeito ao aperfeioamento e validao das escalas de Motivao para Aprender, Motivao para Transferir e de Suporte Pr-Treinamento; e a ltima visa investigao das variveis preditoras de Impacto do Treinamento no Trabalho, de acordo com o modelo de avaliao proposto na Figura 1. Figura 1: Modelo de Lacerda
86
87
Cronbach - ), para validar as escalas. Anlises de regresso mltipla padro foram utilizadas para verificar as variveis preditoras de Impacto do Treinamento no Trabalho. Para otimizar o aproveitamento dos casos, adotou-se o tratamento pairwise para os dados omissos em todas as anlises.
R ESULTADOS
Na anlise exploratria dos dados, aps a localizao dos casos extremos, foram utilizados os critrios para sua retirada, conforme citado anteriormente (37 univariados e 202 multivariados), o que resultou no aproveitamento de 284 casos para as etapas 1 e 2 e 95 casos para a terceira etapa. Alm disso, o nmero de casos omissos no chegou a 5%. As anlises fatoriais mostraram que as escalas estudadas na primeira etapa so unidimensionais, conforme descrio apresentada na Tabela 1. Tabela 1: Estrutura Emprica das Escalas dos Estudos 1 e 2
Todas as escalas contm apenas um fator, uma vez que os valores prprios, a porcentagem da varincia total explicada pelo segundo fator (menor do que 3%, conforme critrio de Harman, sugerido por Pasquali [2000]) e o teste do scree plot sugeriam a existncia de estruturas unifatoriais para as 4 escalas. A anlise de regresso mltipla padro mostrou-se a mais adequada para testar o modelo de avaliao de Impacto do Treinamento no Trabalho, de acordo com a orientao de Tabachnick e Fidell (1996). Essa tcnica requer um nmero de respondentes por varivel inferior ao exigido por outras estratgias como a regresso mltipla stepwise, por exemplo. Na primeira anlise de regresso mltipla efetuada, houve sinais de redundncia com o fator Suporte PrTreinamento. Dessa maneira, ele foi retirado do modelo, j que sua permanncia demandaria anlises mais complexas, o que fugiria ao escopo deste trabalho. Uma nova anlise padro foi efetuada sem essa varivel. Os resultados da regresso mltipla padro so apresentados na Tabela 2.
88
Tabela 2: Modelo de Regresso Mltipla para a Varivel Critrio Impacto do Treinamento no Trabalho
Nota: **p < 0,01; * p < 0,05; Variabilidade singular = 0,58; Variabilidade compartilhada = 0,03.
A Tabela 2 demonstra que apenas trs variveis das sete includas na anlise entraram na equao de regresso como preditoras de Impacto do Treinamento no Trabalho. So elas: Suporte Psicossocial (Sr2 = 0,23), Valor Instrumental do Treinamento (Sr2 = 0,19) e Reao ao Desempenho do Instrutor (Sr2 = 0,16). Juntas, essas trs variveis explicam aproximadamente 61% (58% ajustado) da variabilidade no Impacto do Treinamento no Trabalho. Verifica-se que o valor da correlao mltipla (R) alto e significativamente diferente de zero. Na Figura 2, o Modelo Preditivo de Impacto do Treinamento no Trabalho (45 dias aps o trmino do treinamento) esquematizado, apresentando as trs variveis explicativas de Impacto do Treinamento no Trabalho. Figura 2: Modelo Obtido de Impacto do Treinamento no Trabalho
89
DISCUSSO
Os resultados da etapa 1 demonstraram que a escala construda Valor Instrumental do Treinamento mostrou ndices psicomtricos adequados s exigncias da rea. Essa escala apresentou alto ndice de consistncia interna ( = 0,94). Assim uma importante implicao dos resultados dessa validao foi a melhoria da definio do conceito de Valor Instrumental do Treinamento, atendendo a uma solicitao de Abbad (1999). Colquitt, LePine e Noe (2000) abordaram apenas o conceito de valncia em seu modelo da teoria integrativa de motivao para o treinamento. No presente trabalho, o termo passa a possuir maior abrangncia em termos conceituais, envolvendo duas variveis da Teoria da Expectncia de Vroom (1964): valncia e instrumentalidade de um indivduo em relao a eventos de treinamento. Dessa maneira, as teorias de processo sugeridas por Vroom (1964) demonstram que a motivao de uma pessoa com relao a determinado treinamento, baseada na crena de que ela pode atingir resultados importantes, teis e valorizados, melhorar sua atuao em outras tarefas, elevar suas chances de ascenso na carreira, aumentar sua empregabilidade ou atingir suas aspiraes profissionais. Os conceitos de motivao para aprender e motivao para transferir, utilizados na literatura da rea, limitam-se a investigar o interesse genrico do treinando em relao ao curso. Sugere-se, em futuros estudos, incluir nos modelos motivacionais de avaliao de treinamento o conceito de expectncia ou expectativa apresentado por Vroom (1964), no utilizado neste trabalho, de modo a abranger os trs conceitos propostos por ele: valncia, instrumentalidade e expectncia. Uma importante questo prtica deste estudo diz respeito atribuio de conseqncias, pelos indivduos, na participao em treinamentos por eles valorizados. Desta maneira, relevante apresentar aos treinandos o valor dos programas instrucionais (que ganhos se pode obter deles) para que eles se sintam motivados a participar dos programas de treinamento. Programas no relacionados a resultados futuros, desejados pelo indivduo, podero no alcanar seus objetivos. Por essa razo, necessrio que os gestores da organizao identifiquem os planos e as aspiraes profissionais dos participantes de treinamentos, por exemplo, criando um banco de talentos ou competncias e, com essas informaes, viabilizando a programao de aes de educao continuada (oportunidades para que o trabalhador invista em sua formao acadmica/profissional, evitando a obsolescncia). Com relao aos resultados obtidos na etapa 2, a escala de Motivao para
90
Transferir obteve um ndice de consistncia interna de = 0,86, maior que o encontrado por Warr, Allan e Birdi (1999): = 0,79. A escala de Suporte PrTreinamento obteve = 0,85, um pouco maior que o encontrado por Abbad (1999): = 0,82. Essas escalas obtiveram melhoria razovel em relao s que as originaram, no que se refere s caractersticas psicomtricas analisadas. J a escala de Motivao para Aprender obteve = 0,75, um pouco menor que o encontrado por Warr, Allan e Birdi (1999): = 0,76. Sugere-se, em futuras pesquisas, que seja dada maior ateno s variveis de processo para a melhoria de escalas que envolvem conceitos motivacionais, conforme mencionado anteriormente, visto que as escalas de Motivao para Aprender e Motivao para Transferir necessitam ser aperfeioadas. De modo geral, os instrumentos de medida construdos e validados por Abbad (1999), utilizados nesta pesquisa, mantm-se estveis e altamente confiveis. Os resultados da terceira etapa indicaram que trs variveis so explicativas de Impacto do Treinamento no Trabalho: (1) Suporte Psicossocial; (2) Valor Instrumental do Treinamento; e (3) Reao ao Desempenho do Instrutor. Suporte Psicossocial, como forte varivel preditora de Impacto do Treinamento no Trabalho, corrobora os achados da rea (Roullier e Goldstein, 1993; Abbad et al., 1999; Pantoja, Lima e Borges-Andrade, 1999; Colquitt, Lepine e Noe, 2000; Salas e Cannon-Bowers, 2001). Valor Instrumental do Treinamento, a segunda varivel explicativa de Impacto do Treinamento no Trabalho no modelo deste estudo, apresentou resultado indito na literatura. Seu poder explicativo talvez possa ser explicado por estar relacionado com a atual conjuntura de Treinamento e Desenvolvimento, na qual os trabalhadores se vem diante de grandes exigncias no mercado de trabalho, que busca colaboradores cada vez mais qualificados e preparados. Assim a motivao de um indivduo para determinado curso e o seu conseqente impacto no trabalho podem estar vinculados aos ganhos secundrios associados ao treinamento, tal como medidos pela escala de Valor Instrumental. A entrada de Valor Instrumental do Treinamento como uma varivel motivacional explicativa de impacto no modelo estudado, corrobora resultados obtidos por pesquisas sobre a relao positiva entre motivao e resultados do treinamento (Warr e Bunce, 1995; Abbad, 1999; Colquitt, Lepine e Noe, 2000). necessrio que a varivel Valor Instrumental do Treinamento seja investigada em futuras pesquisas, diversificando organizaes, amostras de cursos e participantes, a fim de avaliar a generalidade dos resultados desta pesquisa. As outras variveis motivacionais utilizadas nesse estudo, Motivao para
RAC, v. 7, n. 4, Out./Dez. 2003
91
Aprender e Motivao para Transferir, no foram explicativas de Impacto do Treinamento no Trabalho, contrariando resultados de pesquisas nacionais e estrangeiras. Uma possvel explicao para a excluso dessas variveis no modelo de predio de Impacto do Treinamento no Trabalho se refere a problemas de qualidade dos instrumentos de medida, que, conforme j citado, devero ser aprimorados em estudos posteriores. A terceira varivel preditora de impacto, Reao ao Desempenho do Instrutor, corrobora os achados de Abbad (1999), Warr, Allan e Birdi (1999) e Abbad, Gama e Borges-Andrade (2000) e refuta os de Alliger et al. (1997). Deve-se, entretanto, evitar generalizaes desse resultado, pois a organizao estudada nesta pesquisa foi a mesma utilizada nos trabalhos de Abbad (1999). Isso poderia indicar uma caracterstica prpria da organizao, uma tendncia dos servidores em considerar mais sua satisfao com o desempenho do instrutor que com outros aspectos do programa do treinamento, e esse fator influenciar no Impacto do Treinamento no Trabalho. Talvez isso possa explicar a no entrada da varivel Reao ao Programa no modelo estudado. Por essa razo, altamente indicado que o modelo de avaliao de Impacto do Treinamento no Trabalho proposto neste estudo, seja replicado por futuros pesquisadores em diferentes organizaes para comparar seus resultados.
C ONCLUSES
C ONSIDERAES F INAIS
Os resultados obtidos com a varivel Suporte Psicossocial como a melhor preditora de Impacto do Treinamento no Trabalho neste estudo, podem ser um indcio de generalidade, conforme salientaram Abbad, Pantoja e Pilati (2001) e Salas e Cannon-Bowers (2001). Os resultados referentes ao poder explicativo de Valor Instrumental do Treinamento e Reao ao Instrutor sobre impacto ainda no so generalizveis. Sugere-se, diante disto, a realizao de novos estudos que os integrem como preditores da varivel critrio aqui tratada. As contribuies mais relevantes deste trabalho referem-se boa qualidade psicomtrica da escala construda de Valor Instrumental do Treinamento e ao fato de essa varivel ter sido explicativa de impacto. Acrescentam-se ainda as implicaes tericas e prticas decorrentes desses resultados, j citadas anteriormente. As limitaes desta pesquisa foram: (1) a restrio da amostra de participantes de uma organizao apenas, o que reduz a generalidade dos resultados; (2) a impossibilidade de aplicao de questionrios de heteroavaliao de Impacto do
92
Treinamento no Trabalho, que poderiam gerar resultados comparativos com os de auto-avaliao; (3) a baixa devoluo de questionrios de Impacto do Treinamento no Trabalho e a no avaliao do padro de no devoluo; (4) a inexistncia de pr e ps-testagem de habilidades treinadas para anlise do relacionamento entre Aprendizagem, Reaes e Impacto do Treinamento no Trabalho; (5) a falta de treinamentos destinados a desenvolver as habilidades psicomotoras; e (6) a pequena participao de treinandos com baixa escolaridade. De acordo com os resultados apresentados e discutidos, prope-se a seguinte agenda de pesquisa para futuros estudos: (1) aperfeioar e aplicar os instrumentos construdos e validados neste estudo em novas organizaes, cursos e metodologias, em treinamentos presenciais e distncia, utilizando diferentes variveis critrio, de modo a confirmar sua confiabilidade e replicao; (2) utilizar medidas de impacto em profundidade, baseadas em objetivos de treinamento; (3) ampliar o modelo terico proposto com a incluso do nvel Aprendizagem (pr e ps-testagem); (4) analisar a relao das variveis Suporte Pr-Treinamento e Motivao para Aprender, de preferncia utilizando anlises mais complexas como equao estrutural, para investigar relacionamentos diretos e indiretos entre as variveis estudadas; (5) verificar as Caractersticas da Clientela e os possveis fatores associados aos participantes que no devolveram o questionrio, de maneira a estudar estratgias para aumentar a participao das pessoas na devoluo desse instrumento devidamente preenchido; (6) continuar investigando o poder preditivo das variveis motivacionais, no somente no Impacto do Treinamento no Trabalho, mas em outros nveis de avaliao de resultados, como Reao e Aprendizagem; e (7) identificar a relao entre os trs nveis de avaliao de resultados de treinamento, ainda no conclusiva na literatura.
N OTA
1
A primeira verso deste artigo foi premiada com meno honrosa no ENANPAD 2002.
R EFERNCIAS B IBLIOGRFICAS
93
ABBAD, G. et al. Preditores de impacto do treinamento no trabalho o caso do TCU. In: REUNIO ANUAL DE PSICOLOGIA, 29., 1999, Ribeiro Preto. Anais Ribeiro Preto: Sociedade Brasileira de Psicologia, 1999. p. 53. Resumo. ABBAD, G.; GAMA, A. L. G.; BORGES-ANDRADE, J. E. Treinamento: anlise do relacionamento da avaliao nos nveis de reao, aprendizagem e impacto no trabalho. Revista de Administrao Contempornea, v. 4, n. 3, p. 25-45, 2000. ABBAD, G.; PANTOJA, M. J.; PILATI, R. Avaliao de treinamento: o estado da arte e o futuro necessrio. In: ENCONTRO ANUAL DA ANPAD, 25., 2001, Campinas. Anais Rio de Janeiro: ANPAD, 2001. 1 CDROM. ALLIGER, G. M. et al. A meta-analysis of the relations among training criteria. Personnel Psychology, v. 50, p. 341-358, 1997. ALLIGER, G. M.; JANAK, E. A. Kirkpatricks levels of training criteria: thirty years later. Personnel Psychology, v. 42, n. 2, p. 331-342, 1989.
BORGES-ANDRADE, J. E. Avaliao somativa de sistemas instrucionais: integrao de trs propostas. Tecnologia Educacional, v. 11, n. 46, p. 2939, 1982. Desenvolvimento de medidas em avaliao de treinamento. In: ENCONTRO ANUAL DA ANPAD, 24., 2000, Florianpolis. Anais Rio de Janeiro: ANPAD, 2000. 1 CD-ROM. BORGES-ANDRADE, J. E; ABBAD, G. Treinamento no Brasil: reflexes sobre suas pesquisas. Revista de Administrao, v. 31, n. 2, p. 112125, 1996. COLQUITT, J. A.; LEPINE, J. A.; NOE, R. N. Toward an integrative theory of training motivation: a meta-analytic path analysis of 20 years of research. Journal of Applied Psychology, v. 85, n. 5, p. 678707, 2000. COLQUITT, J. A.; SIMMERING, M. J. Conscientiousness, goal orientation and motivation to learn during the learning process: a longitudinal study. Journal of Applied Psychology, v. 83, n. 4, p. 654665, 1998.
94
GOLDSTEIN, I. L. Training in work organizations. In: DUNNET; HOUGH (Orgs). Handbook of industrial and organizational psychology. 2. ed. California: Consulting Psychology Press, 1991. p. 507-619. HAMBLIN, A. C. Avaliao e controle de treinamento. So Paulo: McGraw-Hill, 1978. KIRKPATRICK, D. L. Evaluation of training. In: CRAIG, R. L. Training and development handbook. 2. ed. New York: McGraw-Hill, 1976. p. 18.1-18.27. LACERDA, E. R. M. Impacto do treinamento no trabalho: investigando variveis motivacionais e organizacionais como suas preditoras. Braslia, 2002. Dissertao (Mestrado) Instituto de Psicologia, Universidade de Braslia. NOE, R. A.; SCHMITT, N. The influence of trainee attitudes on training effectiveness: test of a model. Personnel Psychology, v. 39, p. 497-523, 1986. PANTOJA, M. J.; LIMA, S .M. V.; BORGES-ANDRADE, J. E. Avaliao de impacto treinamento na rea
RAC, v. 7, n. 4, Out./Dez. 2003
reabilitao: preditores individuais e situacionais. In: ENCONTRO ANUAL DA ANPAD, 23., 1999, Foz do Iguau. Anais Rio de Janeiro: ANPAD, 1999. 1 CDROM. PASQUALI, L. Anlise fatorial para pesquisadores. Braslia: LabPAM, 2000. RGIS, H. P. A motivao dos professores do Centro Federal de Educao Tecnolgica da Paraba para participarem do programa de qualidade: um exame com base na teoria da expectncia. Recife, 2000. Dissertao (Mestrado) - Centro de Cincias Sociais Aplicadas, Universidade Federal de Pernambuco. ROULLIER, J. Z.; GOLDSTEIN, I. L. The relationship between organizational transfer climate and positive transfer of training. Human Resource Development Quarterly, v. 4, n. 4, p. 377-390, 1993. SALAS, E.; CANNON-BOWERS, J. The science of training: a decade of progress. Annual Review of Psychology, v. 52, p. 471-499, 2001.
de de
95
TABACHNICK, B. G.; FIDELL, L. S. Using multivariate statistics. 3. ed. New York: Harper & Row, 1996. VROOM, V. H. Work and motivation. New York: John Wiley & Sons, 1964. WARR, P.; ALLAN, C.; BIRDI, K. Predicting three levels of training outcome. Journal of Occupational
and Organizational Psychology, v. 72, n. 3, p. 351-375, 1999. WARR, P.; BUNCE, D. Trainee characteristics and outcomes of open learning. Personnel Psychology, v. 48, p. 347-375, 1995. WEXLEY, K. N. Personnel training. Annual Review of Psychology, v. 35, p. 519-51, 1984.
96