Anlise do Mercado de Seguros no Brasil: uma viso do desempenho organizacional das seguradoras no ano de 2003 Autores MARCELO ALVARO

DA SILVA MACEDO UNIVERSIDADE FEDERAL RURAL DO RIO DE JANEIRO FABRICIA DE FARIAS DA SILVA UNIVERSIDADE FEDERAL RURAL DO RIO DE JANEIRO RODRIGO MELO SANTOS UNIVERSIDADE FEDERAL RURAL DO RIO DE JANEIRO A anlise de desempenho de uma organizao sempre algo passivo de muitas discusses. Questionamentos sobre quais indicadores utilizar e como consolid-los de forma a estabelecer um critrio justo de avaliao de performance esto presentes em vrios estudos e no dia a dia das empresas. neste sentido, que apresenta-se este trabalho como uma proposta de modelagem deste problema, atravs da utilizao da Anlise Envoltria de Dados (DEA). Busca-se um ndice de performance relativa que seja capaz de conjugar indicadores financeiros de lucratividade e de risco na anlise de desempenho organizacional. Em outras palavras, o ndice de cada empresa uma combinao integrada de vrios vetores de desempenho e funo no s de sua performance, mas tambm do desempenho das outras empresas analisadas. Fizeram parte da amostra desta pesquisa, seguradoras de quatro segmentos: 25 de autos, 10 de sade, 13 de vida e previdncia e 18 de coberturas diversas, que estavam em operao no Brasil em 2003, listados no ranking da Revista Balano Financeiro da Gazeta Mercantil (2004), a cerca do desempenho das melhores seguradoras e outras instituies financeiras. 1. Introduo De acordo com Barr et al (2002), nas indstrias competitivas, as unidades de produo podem ser separadas em dois grupos distintos, sendo eles, eficientes e ineficientes, obedecendo a um padro de avaliao de desempenho. Essas informaes podem auxiliar numa anlise de performance, pois so capazes de identificar melhores e piores prticas, que esto relacionadas com alta e baixa eficincia. Segundo Meimand et al (2002) na anlise de desempenho organizacional comum o uso de uma grande variedade de indicadores e mtricas de eficincia, que de uma forma geral dificultam uma avaliao final, visto que falham em prover aos decisores de uma medida singular, porm multicriterial. Isso traz tona a questo de que utilizar mltiplos critrios no necessariamente gera uma viso multidimensional, que s alcanada quando da utilizao de uma ferramenta de consolidao dos vetores de desempenho que gere uma mtrica nica, capaz de representar a complexidade da anlise. A Anlise Envoltria de Dados (DEA), que consiste em uma tcnica de programao matemtica, pode ser uma soluo para este tipo de problema. Magalhes da Silva et al (2003) esclarecem que o mercado de seguros no Brasil possui um incrvel potencial de crescimento. Eles caracterizam a indstria de seguros como sendo um investimento destinado a um investidor que possui caractersticas de investimentos de longo prazo .

Contador et al (2000) ressaltam que a concorrncia nesta indstria apresenta-se em transformao, onde percebe-se que as mudanas no mercado ocasionam mudanas tambm nas empresas do setor, ou seja, quando havia altas taxas de inflao a seleo de riscos tornava-se menos rigorosa pois as aplicaes no mercado financeiro podiam gerar lucros altssimos. Porm quando a inflao est em baixa os ganhos financeiros no compensam prejuzos decorrentes da m seleo de riscos. Com isso, no atual contexto de concorrncia do setor de seguros, as empresas devem estar em constante aperfeioamento de seus modelos gerenciais e qualidade da seleo de riscos. Para atender as necessidades impostas pelo ambiente competitivo, ressaltam Soteriou e Zenios (1999), necessrio a utilizao de alguma modelagem para o problema de desempenho organizacional. Neste sentido, pode ser usada uma tcnica no-paramtrica de benchmarking conhecida como Anlise Envoltria de Dados (DEA), que tem sido aplicada satisfatoriamente no setor financeiro. Segundo Zhu (2000) a Anlise Envoltria de Dados (DEA) uma tcnica baseada em programao linear projetada para estabelecer uma medida de eficincia relativa entre diferentes entidades de um gnero comum. Ainda para o autor, a medida de eficincia DEA contabiliza explicitamente o mix de entradas e sadas de cada unidade analisada. neste contexto que se insere este trabalho, que aplica a Anlise Envoltria de Dados (DEA) na avaliao do desempenho de seguradoras em operao no Brasil em 2003. A partir de informaes sobre rentabilidade do patrimnio lquido (RPL), margem operacional (MOP) e sinistralidade (SIN) de seguradoras de quatro segmentos, de autos, de sade, de vida e previdncia e de diversos outros segmentos, busca-se discutir a performance relativa destas empresas, bem como a utilidade da modelagem apresentada. O artigo em questo se prope, ainda, a apresentar o mtodo DEA (Anlise Envoltria de Dados) como uma ferramenta moderna e eficaz para avaliar os resultados das estratgias traadas por determinada empresa, inclusive seguradoras. 2. Anlise Envoltria de Dados (DEA) De acordo com Meimand et al (2002), na literatura de gesto o desempenho organizacional convencionalmente definido em termos de suas caractersticas de output (produo, vendas etc.) ou de input (custos, gastos etc.) ou ainda como uma relao entre outputs e inputs (eficincia, produtividade etc,). No caso de DEA, ainda segundo os autores, considera-se o desempenho como sendo a razo entre outputs e inputs, ou seja, o que tem sido produzido por unidade do que tem sido consumido no processo de transformao de insumos em produtos. Definido como ser feita a medida tem-se o foco, ento, em como mensurar os diversos vetores de desempenho, sejam inputs ou outputs, relevantes no processo de anlise e avaliao do desempenho organizacional. Contador et al (2000) explicam que o mtodo DEA teve origem no trabalho de Farrell (1957), onde este subdividiu a eficincia global em eficincia tcnica (que diz respeito maximizao de outputs dado um nmero restrito de inputs) e eficincia alocativa (que visa uma combinao perfeita de inputs dadas as restries de preo e tecnologia), e cuja combinao das duas gerar a eficincia econmica (que poder ser focada na reduo de insumos (inputs) ou na maximizao dos produtos (outputs). Segundo Magalhes da Silva et al (2003) a metodologia DEA caracteriza-se como uma tcnica no paramtrica que permite lidar com vrias sadas (outputs) e entradas (inputs),

cujo objetivo analisar, comparativamente, unidades independentes no que se refere ao seu desempenho, ou seja, eficincia de cada unidade. Para Oliveira Pereira (2002) o modelo matemtico do DEA foi proposto inicialmente por Charnes, Cooper e Rhodes (1978) e permite avaliar a eficincia relativa de unidades homogneas (DMU`s - Decision Making Units) com base na transformao de recursos (inputs) em produtos ou resultados (outputs). O resultado de eficincia relativa, obtido atravs dessa avaliao, varia dentro da faixa de 0 a 100% para cada uma das DMUs, indicando quais unidades possuem uma eficincia inferior e quais so aquelas em posio de benchmarking. De acordo com Magalhes da Silva (2000) o modelo DEA pode ser visto como uma ferramenta para o Benchmarking, j que pode ser definido como um dos modernos instrumentos de gerencia que possibilita a melhoria do desempenho tcnico-econmico das empresas de forma comparativa. Segundo o autor, algumas empresas conseguem combinar melhor os seus insumos, utilizando processos e tcnicas de gesto aprimorados e gerando produtos (outputs) com maior eficincia, sendo estas empresas referncias para as demais que buscam melhorar seu desempenho. So vrias as formulaes dos modelos de DEA encontradas na literatura, conforme dizem Charnes et al (1994), entretanto dois modelos bsicos DEA so geralmente usados nas aplicaes. O primeiro modelo chamado de CCR (CHARNES, COOPER e RHODES, 1978), tambm conhecido como CRS (Constant Returns to Scale), avalia a eficincia total, identifica as DMUs eficientes e ineficientes e determina a que distncia da fronteira de eficincia esto s unidades ineficientes. O segundo chamado de modelo BCC (BANKER, CHARNES e COOPER, 1984), tambm conhecido como VRS (Variable Returns to Scale), utiliza uma formulao que permite a projeo de cada DMU ineficiente sobre a superfcie de fronteira (envoltria) determinada pelas DMUs eficientes de tamanho compatvel. No caso das formulaes, alm das da escolha entre CRS e VRS (neste estudo estaremos trabalhando com a formulao DEA-CRS) existe a necessidade de fixao da tica de anlise (orientao input ou orientao output). Segundo Lins e Meza (2000) alguns analistas tendem a selecionar modelos com orientao input porque em muitos casos tem-se outputs estabelecidos para se alcanar e, portanto, as quantidades de inputs apresentam-se como variveis de deciso primria. Porm existem outras situaes em que se poderia ter uma quantidade fixada de inputs (inalterados) e poder-se-ia estar procurando como produzir mais outputs. Neste caso, uma orientao output poderia ser mais apropriada, onde o objetivo maximizar os produtos obtidos sem alterar o nvel atual dos inputs. Para Oliveira Pereira (2002) atravs de um modelo matemtico, os scores de eficincia do DEA so calculados com base na projeo das unidades ineficientes na fronteira, levando em considerao que existe dois modelos clssicos de projeo: Modelo orientado para a reduo mxima do nvel de input para uma mesma produo de output; Modelo orientado para elevao do output para um mesmo nvel de input. Outro ponto importante, de acordo com o autor, a ser observador que o DEA no indica apenas a classificao das unidades em eficientes e ineficientes, mas fornece um parmetro para o aumento do desempenho das unidades ineficientes, ou seja, o quanto essas unidades devem evoluir para alcanar o desempenho das unidades benchmarking do mercado. De acordo com Macedo (2004a), os modelos utilizados, desenvolvidos a partir do DEA, so capazes de conjugar em um nico ndice vrios indicadores de natureza diferentes

para a anlise do desempenho organizacional. Pode-se perceber, ento, que a modelagem possui as caractersticas de trabalhar diversas variveis sem a necessidade de convert-las para um padro comum de unidade e de apoiar o processo decisrio com uma tcnica de natureza multicritrio e, portanto, mais capaz de modelar a complexidade do mundo real. De acordo com Coelli et al (1998), Charnes, Cooper e Rhodes (1978) propuseram um modelo que tinha uma orientao input e assumia retornos constantes de escala (CRS). Artigos subseqentes tm considerado vrias alternativas, dentre elas as de Banker, Charnes e Cooper (1984), em que o modelo de retorno varivel de escala (VRS) foi proposto. Assim, ainda segundo Coelli et al (1998), um caminho intuitivo para introduzir DEA por meio de forma de razo. Para cada DMU, gostaramos de obter uma medida de razo de todos os outputs sobre todos os inputs, ou seja, os pesos timos uj e vi so obtidos pela resoluo do seguinte problema de programao matemtica:
Max Ec =

u y
j

jc

v x
i i =1

j =1 m

ic

u y
j

jk

S.a.:

v x
i i =1

j =1 m

1, k = 1,2,..., c,..., n

ik

uj 0, j, vi 0, i

Neste modelo c a unidade (DMU) que est sendo avaliada. O problema acima envolve a procura de valores para u e v, que so os pesos, de modo que maximize a soma ponderada dos outputs (output virtual) dividida pela soma ponderada dos inputs (input virtual) da DMU em estudo, sujeita a restrio de que esse quociente seja menor ou igual a um, para todas as DMUs. Esta funo est sujeita restrio de que, quando o mesmo conjunto de coeficientes de entrada e sada (os vrios vi e uj) for aplicado a todas as outras unidades de servios que esto sendo comparadas, nenhuma unidade exceder 100% de eficincia ou uma razo de 1,00. De acordo com Macedo (2004b) o Problema de Programao Linear (PPL) acima apresentado tem orientao input (I) que procurara identificar ineficincia como uma reduo proporcional em inputs usados, com nveis dados de output. Uma orientao output teria como o objetivo obter o mximo de outputs com os inputs dados. O modelo para este propsito se obtm invertendo o quociente do modelo apresentado inicialmente, na qual obtemos:
Min

v x u y v x S.a.: u y
i j i j

ic jc

ik jk

1, k = 1,2, ..., c,..., n

uj, vi 0 , x, y

Assim, a eficincia pela tica dos outputs calculada pelo inverso da funo objetivo, ou seja , eficincia = 1/Ec. Este problema define a relao dos inputs sobre os outputs, onde c o ndice da unidade que est sendo avaliada. Para Macedo (2004a) o modelo original CCR, tambm conhecido como CRS (Constant Returns to Scale) segundo a tica dos multiplicadores, pode ter um ndice de eficincia definido, ento, como a combinao linear dos outputs dividida pela combinao linear dos inputs de determinada DMU. Porm, um problema como este, de formulao fracionria, possui infinitas solues timas.

Para evitar isto, segundo Coelli et al (1998), uma possvel imposio seria vi xic = 1, pois, alm disto, queremos linearizar as restries do problema, de modo a transform-lo em um Problema de Programao Linear (PPL). Ento introduzindo a transformao linear desenvolvida por Charnes e Cooper (1962) obtemos:
Max Ec = S.a.:

u
j =1 m i i =1 s

yjc

v u
j =1

xic = 1 yjk - vi xik 0 , k = 1,2, ...,c,..., n

i =1 m

uj, vi 0, x, y.

Esta forma do problema conhecida como problema dos multiplicadores, como tambm so chamados os pesos, uj e vi. Denotamos este PPL por CRS/M/I. Entretanto, uma orientao output procura modelar o problema utilizando-se do PPL a seguir, denominado CRS/M/O:
Min

v x
i i =1 s j =1 m

ic

S .a. : uj yjc = 1

v
i =1

xik uj yjk 0, k = 1,..., c,..., n

j =1

uj , vi 0, x, y

Este modelo utilizado para a anlise dos dados, pois se tem um input e dois outputs. Macedo (2004b) dizem que quanto menor a relao inputs / outputs maior a eficincia. Para cada DMU a ser analisada, formula-se um problema de otimizao com o objetivo de determinar os valores que esta DMU atribuiria aos multiplicadores u e v de modo a aparecer com a maior eficincia possvel. importante ressaltar tambm a caracterstica no-paramtrica da metodologia DEA em que os parmetros de eficincia so reais e estabelecidos dentro da amostra dentre as instituies que apresentaram melhor performance. Isso no significa que as DMUs mais eficientes de determinada amostra sejam as mais eficientes da populao ou ainda, que no possam aumentar ainda mais seu nvel de eficincia. Essas DMUs simplesmente apresentaram o maior nvel de eficincia em relao s demais DMUs da amostra, dentro dos insumos e produtos utilizados, assumindo assim o maior escore possvel. Em linhas gerais, caso o indicador de eficincia de uma determinada DMU seja igual a um, esta estar operando em escala tima. 3. Desempenho Organizacional em Instituies Financeiras: o caso das seguradoras De acordo com Antunes de Oliveira e Tabak (2004), com a globalizao da competio, a indstria financeira tem experimentado uma nova maneira de pensar suas atividades, com conseqente reflexo em seu nvel de eficincia, principalmente com o uso de novas tecnologias no processamento da informao e no gerenciamento do risco. Assim sendo, mensurar a eficincia passa a ser um conceito chave e neste contexto destaca-se a modelagem DEA. Segundo Sathye (2002) a literatura sobre eficincia e produtividade em instituies financeiras vasta. Em termos gerais, h duas metodologias para mensurar mudanas de produtividade: os economtricos (paramtricos) e os nmero-ndices (no-paramtricos). A metodologia DEA considerada como no-paramtrica, j que esta no requer a priori uma forma funcional da estrutura da tecnologia de produo.

A eficincia das instituies financeiras, para Al-Shammari e Salimi (1998), tem sido avaliada por meio das tradicionais ferramentas de anlise financeira, como a anlise de ndices contbil-financeiros. Entretanto, tem se tornado freqente a utilizao da tcnica noparamtrica conhecida como Anlise Envoltria de Dados (DEA), devido sua capacidade de prover dados de grande fidedignidade, realizar comparaes com outras instituies e fornecer aos seus stakeholders informaes confiveis sobre o desempenho organizacional. Barr et al (2002) enfatizam que durante as duas ltimas dcadas, muitos estudos foram realizados com o intuito de avaliar a eficincia das mais variadas instituies financeiras. No mera coincidncia que estes estudos tenham se expandido exatamente num momento em que os mercados financeiros mundiais tm passado por muitas mudanas. A dissertao de Magalhes da Silva (2000) tem como objetivo medir a eficincia das 25 maiores instituies financeiras brasileiras (em termos de Ativos Totais em maro de 2000). Para isso o trabalho prope a aplicao da metodologia DEA , em conjunto com a tcnica I-O Stepwise para seleo de variveis, que busca identificar quais so os fatores que mais influenciam os outputs. Segundo o autor, os procedimentos para a aplicao do mtodo so as seguintes: identificar cada varivel como input ou output; calcular todas as correlaes de todas as variveis presentes no modelo; escolher o par inicial com maior correlao existente; o par inicial escolhido identifica as duas primeiras variveis que faro parte do modelo; se a varivel for input deve estar correlacionada de forma positiva com o ndice de eficincia encontrado, do mesmo modo, se for output deve estar correlacionado de forma negativa; a cada nova varivel no modelo, calculada a eficincia, na forma do modelo DEA bem como a correlao desta eficincia com as demais variveis; finalmente, adotado um critrio de eficincia mdia, que seja considerado aceitvel para a eliminao das demais variveis que no entraram no modelo (90% p.ex.). As variveis, ento, selecionadas foram: Inputs Despesas Administrativas, Volume de Operaes, Nmero de Funcionrios, Ativo Total, Ativo Permanente e Volume de operaes de Credito e Outputs Receitas de Operaes de Crdito, Resultado Operacional, Receita de Prestao de Servios, Alavancagem e Rentabilidade (sendo que as duas ltimas no foram inseridas na metodologia I-O Stewise). A partir deste ponto, foi aplicado o Modelo DEA-BCC, que segundo o autor mais robusto e geral , privilegiando a anlise dos resultados encontrados, com orientao voltada para maximizao dos outputs. Como resultado, foram obtidas seis instituies ineficientes, das 25 analisadas. Atravs de uma anlise complementar destas instituies concluiu-se como fatores de ineficincia problemas de carteira de credito, alm de incorporaes no finalizadas, demonstrando que a instituio incorporadora demora para usufruir de resultados de sua incorporada. O artigo de Gules e Zanine (2002) vem a ser um estudo que compara um grupo de seguradoras com controle de Capital Nacional e outro de Capital Estrangeiro, levando em conta seus indicadores econmico-financeiros, utilizando os principais ndices para uma anlise das seguradoras: ndices econmicos Margem Bruta, Margem Operacional, Margem Lquida, Taxa de Retorno do Capital Prprio, Reteno Prpria, Reteno de Terceiros, Sinistralidade, Custo de Comercializao, Custo de Administrao, Prmio Margem, ndice Combinado e ndice Combinado Ampliado e ndices financeiros Liquidez Geral, Liquidez corrente, Liquidez Seca, Solvncia Geral, Endividamento, Garantia de Capital de Terceiros, Imobilizao do Capital prprio, Independncia Financeira, Liquidez operacional, Cobertura Vinculada.

Aps o clculo dos referidos ndices, realizou-se uma comparao visando determinar diferenas e/ou semelhanas destes indicadores entre as dez seguradoras estudadas: cinco de capital nacional (Aliana do Brasil, Minas Brasil, Porto Seguro, Sul Amrica e Unibanco AIG) e cinco de capital estrangeiro (AGF Brasil, Generali, Liberty Paulista, Royal & Sulliance e Yasuda). importante destacar que as dez empresas possuem uma participao no mercado segurador brasileiro de aproximadamente 47%. Para realizar a comparao citada anteriormente, os autores, realizaram um teste estatstico de diferenas entre mdias das duas amostras, para verificar se a mdia de duas populaes, em cada indicador, igual, determinando assim, a homogeneidade. Para concretizao dos testes foram considerada as seguintes hipteses: H0 - as mdias entre os ndices no so significativamente diferentes entre si; H1 - as mdias so significativamente diferentes entre si. Como resultado obteve-se que em doze, dentre os vinte e dois ndices comparados, a hiptese de igualdade entre as mdias foi confirmada. Em outros dois ndices o resultado demonstra a existncia de diferenas, porm como se tratam de ndices de Reteno (Prpria e de Terceiros) no h como atribuir um conceito de desempenho mais ou menos favorvel, pois trata-se de polticas de estratgia, portanto os resultados foram considerados neutros. Os demais 8 ndices apresentam um melhor desempenho para o Grupo I, composto pelas seguradoras de Capital Nacional. Porm o autor ressalta que as concluses no podem generalizadas, devendo ficar restritas ao grupo de empresas estudado. O artigo de Contador et al (2000) trata da avaliao de seguradoras que atuam no Brasil procurando destacar a maior eficincia em subscrio de riscos, aplicando para isso o mtodo da Anlise Envoltria de Dados (DEA). Para colocar em prtica os conceitos, o artigo baseou-se no Boletim Estatstico da SUSEP (Superintendncia de Seguros Privados) do primeiro semestre de 1999 para selecionar um grupo de 52 seguradoras com vendas superiores a R$ 5 milhes no perodo. As variveis foram escolhidas de forma a valorizar o processo de comercializao de seguros, foram elas: Inputs - Sinistro Retido (gastos com pagamentos de indenizaes, excludos os valores de recuperao de sinistros obtidos junto ao ressegurador), Despesa Comercial (ilustra o poder de barganha dos corretores em negociao com as seguradoras); Output - Prmio Ganho (montante das vendas excluindo a parcela paga ao ressegurador). importante destacar que a orientao utilizada foi a maximizao de output e a escala a VRS (Retorno Varivel de Escala). Como resultado, os autores obtiveram somente 10 das empresas estudadas como eficientes. Pode-se perceber que destas dez, cinco pertenciam a conglomerados bancrios, que dispe de uma boa rede de distribuio dos produtos, as agncias bancrias, deixando claro a dominao da venda casada. O trabalho de Meimand et al (2002) descreve uma modelagem DEA aplicada a filiais de uma Cia de Seguro, que operava basicamente com seguro residencial, na Nova Zelndia, onde o desempenho mensurado em termos de consecuo dos objetivos organizacionais. Para anlise foram considerados inputs, tais como custos e satisfao do cliente (nmero de reclamaes). Como outputs foram consideradas variveis do nvel de servio ao cliente, tais como rapidez, resposividade etc. O estudo concluiu que a utilizao de DEA viabilizou uma viso gerencial do desempenho organizacional, j que promoveu uma mtrica multicriterial capaz de capturar a consecuo dos objetivos organizacionais.

O artigo destaca a posio do Brasil em relao ao mercado internacional, e que segundo os autores, mostra-se na contramo, j que na maioria dos pases o seguro no est relacionado s redes bancrias, o que acarreta uma viso voltada para melhor seleo de riscos e no para aplicaes de recursos no mercado financeiro. Magalhes da Silva et al (2003) em seu artigo objetivam avaliar o setor segurador brasileiro, atravs de um estudo comparativo entre as maiores seguradoras do pas no ano de 2002, empregando a tcnica da Anlise Envoltria de Dados, a qual permite estabelecer um benchmark de eficincia. Para isso, foram escolhidas as 11 maiores seguradoras (em termos de Patrimnio Lquido), de acordo com o descrito junto ao Boletim Estatstico da Susep 2002 (perodo de Janeiro a Novembro de 2002). O Modelo DEA-BCC foi o escolhido para calcular os nveis de eficincia relativa. As seguintes variveis foram selecionadas, em funo de sua importncia na busca de resultados: Despesas Comerciais, Despesas Administrativas, Prmios de Seguros e ndices de Sinistralidade (relao percentual entre sinistros pagos e os prmios recebidos), sendo as duas primeiras inputs e os dois ltimos outputs. importante destacar que a orientao foi dada a maximizao dos outputs, ou seja, optou-se pela determinao dos recursos existentes para a obteno do maior nvel possvel de outputs. Antes de realizar a modelagem com os dados foram retiradas 3 unidades das 11 escolhidas, por conta de problemas nos dados apresentados. As empresas estudadas no foram identificadas pelos autores, devido ao carter estritamente acadmico do trabalho, segundo suas palavras. O resultado apresentou duas unidades com eficincia mxima (100%). possvel tambm identificar o percentual de ineficincia em cada varivel no tocante s seguradoras que no atingiram a eficincia plena. Alm disso, foi percebido que das oito empresas testadas, as cinco mais eficientes so pertencentes a conglomerados financeiros concluindo os autores o ganho de escala existente para estas empresas no segmento de seguro, j que utilizam o canal de distribuio das agncias para vender seus produtos. Os autores chegaram ainda concluso de que a Anlise Envoltria de Dados um processo de extrema valia para a avaliao dos produtos, servios e prticas em relao aos competidores, visto que, o conhecimento da posio relativa de uma certa unidade em relao s outras ir fornecer os dados necessrios para o desenvolvimento dos planos estratgicos da empresa em questo. 4. Metodologia e Apresentao dos Dados Esta pesquisa pode ser caracterizada, de acordo com o exposto por Vergara (2004), como sendo descritiva e quantitativa, pois procura-se atravs da aplicao da anlise envoltria de dados s informaes das seguradoras de autos, de sade, de vida e previdncia e de outros segmentos que fazem parte da amostra, expor caractersticas a respeito da performance destas. O processo de amostragem no probabilstico, pois parte-se de um universo naturalmente restrito, pois as seguradoras foram escolhidas a partir das que constavam na publicao utilizada. Isso traz algumas limitaes de inferncia, mas no invalida os resultados da pesquisa, j que as seguradoras desta listagem so, assumidamente, representativas de boas prticas gerenciais. Esta pesquisa foi feita a partir de dados secundrios colhidos na edio de junho de 2004 da Revista Balano Financeiro da Gazeta Mercantil, sobre o desempenho das melhores seguradoras e outras instituies financeiras. A pesquisa partiu das seguradoras disponveis na

publicao, classificadas em quatro tipos: de autos, de sade, de vida e previdncia e de outros segmentos. De posse destas informaes retirou-se aquelas seguradoras que j eram ineficientes de incio, pois tinham rentabilidade negativa. Por fim, a amostra foi composta por 25 seguradoras de autos, 10 de sade, 13 de vida e previdncia e 18 de seguros diversos. Esta diviso por segmento se faz necessria por conta das diferentes atividades, em virtude do foco do negcio, exercidas pelas seguradoras de cada um destes. Isso ajuda a homogeneizar a amostra e fortalece assim a modelagem. Mesmo assim, um ltimo grupo formado por diversos segmentos, tais como: patrimonial, habitacional, transportes etc. De cada uma das seguradoras selecionadas, foram coletadas informaes disponveis referentes aos seguintes indicadores: rentabilidade do patrimnio lquido, margem operacional e sinistralidade. A seguir tem-se uma descrio sucinta de cada ndice: Rentabilidade do Patrimnio Lquido (RPL): Representa o output 01 e mede, em percentual, o retorno dos recursos investidos pelos acionistas aps a apurao do lucro lquido. um ndice do tipo quanto maior melhor o desempenho. Margem Operacional (MOP): Representa o output 02 e mede, em percentual, a representatividade do resultado operacional em relao aos prmios retidos. um ndice do tipo quanto maior melhor o desempenho. Sinistralidade (SIN): Representa o nico input desta anlise e mede, em percentual, o nvel de comprometimento dos prmios ganhos com os sinistros ocorridos. um ndice do tipo quanto menor melhor o desempenho. Cada um destes indicadores representa um vetor de desempenho, j que possvel hierarquizar cada uma das instituies em relao a cada um destes individualmente. Estes seriam modelos de avaliao de performance monocriteriais. O que busca-se neste artigo apresentar uma metodologia multidimensional, baseada em DEA, na qual seja possvel avaliar o desempenho de cada seguradora de modo multicriterial, ou seja, considerando de maneira integrada todos os vetores de desempenho apresentados. Em linhas gerais, neste trabalho se est propondo uma abordagem que, a partir de informaes sobre rentabilidade do patrimnio lquido, margem operacional e sinistralidade de seguradoras em operao no Brasil, divididas em quatro segmentos distintos, procura medir a eficincia de cada seguradora em relao s outras que fazem parte do mesmo segmento e que fazem parte da amostra. Isto feito atravs da utilizao da Anlise Envoltria de Dados (DEA), que mostra o quo uma seguradora eficiente, no tratamento de seu input (sinistralidade) e outputs (rentabilidade do patrimnio lquido e margem operacional), em relao s outras. Esta anlise fornece um indicador que varia de 0 a 1 ou de 0 % a 100 %, sendo que somente as seguradoras que obtm ndice de eficincia igual a um que so efetivamente eficientes, ou seja, fazem parte da fronteira eficiente. Em termos prticos, o modelo procura identificar a eficincia de uma seguradora comparando-a com os melhores desempenhos observados em seu nvel de operao e segmento. Em virtude da limitao de pginas no foi possvel apresentar todos os dados coletados. Porm, o quadro 01 mostra um resumo das informaes pertinentes s seguradoras, que fizeram parte da amostra final, por segmento: Quadro 01 Resumo das Informaes por Segmento

Segmentos / ndices Mdia Maior Autos Menor Mediana DP Mdia Maior Sade Menor Mediana DP

RPL 14,00 34,98 0,21 13,16 9,08 13,33 31,64 0,11 12,24 10,13

MOP 12,37 75,10 0,31 7,28 16,10 6,42 16,48 0,36 5,06 4,74

SIN Segmentos / ndices 62,67 Mdia 77,18 Maior Vida e 29,10 Menor Previdncia 65,88 Mediana 10,70 DP 83,05 Mdia 105,43 Maior 71,38 Diversos Menor 79,82 Mediana 8,87 DP

RPL 36,18 105,33 2,20 31,87 26,37 17,03 49,82 1,49 15,48 12,65

MOP 25,74 138,27 1,70 18,29 34,08 54,66 322,73 1,55 15,40 79,43

SIN 7,81 27,34 0,87 3,61 8,95 68,77 447,22 18,20 50,34 92,88

Pode-se perceber que o segmento de diversos apresenta, de forma geral, uma disperso maior em relao a todas as variveis. Isto pode estar acontecendo devido a termos uma segmentao ruim neste setor, ou seja, termos seguradoras com atividades diferentes. A maior sinistralidade mdia foi encontrada no setor de sade, que tambm o segmento com menores RPL e MOP mdios. Isso que dizer que este segmento, em mdia, o mais complicado de atuar. J o setor de Vida e Previdncia parece ser o mais atrativo, j que apresenta RPL e MOP mdios interessantes e SIN mdia muito baixa. Em relao s variveis percebe-se que a mediana sempre apresenta valores menores que a mdia (exceto a SIN no segmento de autos). Isso quer dizer que as empresas que esto acima do percentil 50 % apresentam valores maiores que aquelas que esto abaixo, fazendo assim que a mdia seja elevada. Isso pode at representar uma discrepncia grande entre empresas de grande e pequeno portes. No quadro 02 tem-se uma listagem das instituies, por segmento, que fizeram parte da amostra analisada: Quadro 02 Seguradoras Analisadas em cada Segmento
AUTOS Bradesco Seguros Ita Seguros HSBC Seguros Porto Seguro APS Seguradora Real Seguros Aliana da Bahia Conapp Seguros Kyoei do Brasil Sulina Axa Seguros Banestes Martima Tquio Marine Yasuda Nobre Vera Cruz Sul Amrica Cia Seguros AUTOS QBE Brasil Seguros Alfa Seguros Confiana Generali do Brasil Gente AGF Brasil Hannover Internacional SADE Martima Sade AGF Sade Unibanco AIG Sade Porto Seguro - Sade Unimed Sade Notre Dame Sul Amrica Cia de Sade Bradesco Sade Salutar Sade Brasilsade VIDA E PREVIDNCIA Bradesco Vida Unibanco AIG Prev Ita Vida Santander Seguros Brasil Prev Caixa Vida Real Vida Safra Vida Icatu Hartford Sudameris Generali AGF Vida Cigna Seguradora Amil Seguradora DIVERSOS Caixa Seguradora J. Malucelli Panamericana AIG Brasil DIVERSOS Unibanco AIG Ace SBCE XL Insurance UBF Garantias Unimed Excelsior Seguros Zurich Brasil Royal & Sunalliance Sabemi Roma Santos Cia Seguros urea Companhia Mutual

5. Apresentao e Anlise dos Resultados

Com base nas informaes das seguradoras sob anlise montou-se o modelo de avaliao de eficincia, para cada segmento. Em todas as anlises utilizou-se uma orientao output e o modelo CRS. Nestas quatro anlises estimou-se a eficincia de cada seguradora, em relao s outras de seu segmento. Para obter-se a eficincia de cada DMU utilizou-se um software de DEA, apresentado por Meza et al (2003), denominado SIAD (Sistema Integrado de Apoio Deciso). Os quadros 03 a 06 mostram os resultados obtidos nesta anlise para cada segmento. Alm disso, analisou-se as mudanas nos nveis de inputs e outputs nas seguradoras ineficientes para que as mesmas se tornem eficientes. Com base nas informaes do quadro 03 pode-se verificar, quanto ao desempenho, que apenas a seguradora Aliana da Bahia foi eficiente. Na verdade esta seguradora de autos foi a que melhor combinou os inputs (menores) e outputs (maiores). No caso do segmento de autos, seguradoras como a Alfa Seguros e Gente, que so aquelas com menor desempenho, necessitam de mudanas radicais nos nveis de inputs e outputs em relao aos valores atuais. J em instituies tais como a HSBC Seguros e a Ita Seguros as mudanas so mnimas, pois estes tm altos nveis de eficincia. Quadro 03 Eficincia das Seguradoras de Autos SEGUROS/AUTOS Seguradoras EFF Seguradoras EFF Bradesco Seguros 0,4338 Tquio Marine 0,3432 Ita Seguros 0,8061 Yasuda 0,3306 HSBC Seguros 0,9611 Nobre 0,7959 Porto Seguro 0,6423 Vera Cruz 0,2793 APS Seguradora 0,3882 Sul Amrica Cia Seguros 0,1293 Real Seguros 0,5901 QBE Brasil Seguros 0,1169 Aliana da Bahia 1,0000 Alfa Seguros 0,0048 Conapp Seguros 0,4161 Confiana 0,1975 Kyoei do Brasil 0,1335 Generali do Brasil 0,2141 Sulina 0,2622 Gente 0,0587 Axa Seguros 0,5954 AGF Brasil 0,1409 Banestes 0,5203 Hannover Internacional 0,1634 Martima 0,5608 Com base nas informaes do quadro 04 pode-se verificar, quanto ao desempenho, que apenas Martima Sade, AGF Sade, Unibanco AIG Sade e Salutar Sade foram eficientes. Na verdade estas seguradoras de sade foram as que melhor combinaram os inputs (menores) e outputs (maiores). No segmento de sade, seguradoras como Bradesco Sade e Brasilsade, que possuem ndices de eficincia baixssimos, necessitam de mudanas radicais. Percebe-se neste setor uma disparidade muito grande, nos ndices de eficincia, entre as eficientes e as ineficientes. O segundo maior indicador de apenas 0,5145. Isto quer dizer que de forma geral, as seguradoras que no so eficientes precisam de mudanas relativamente grandes, para se tornarem eficientes. Quadro 04 Eficincia das Seguradoras de Sade

SEGUROS/SADE Seguradoras EFF Seguradoras EFF Martima Sade 1,0000 Notre Dame 0,4894 AGF Sade 1,0000 Sul Amrica Cia de Sade 0,3707 Unibanco AIG Sade 1,0000 Bradesco Sade 0,0590 Porto Seguro - Sade 0,3965 Salutar Sade 1,0000 Unimed Sade 0,5145 Brasilsade 0,0303 Com base nas informaes do quadro 05 pode-se verificar, quanto ao desempenho, que apenas a Caixa Vida e a Safra Vida foram eficientes. Na verdade estas segurados de vida e previdncia foram as que melhor combinaram os inputs (menores) e outputs (maiores).

No caso das seguradoras de vida e previdncia, como a Sudameris Generali, que possui o maior desempenho diferente de 100 %, no existe a necessidade de grandes transformaes para que esta passe a fazer parte da fronteira de eficincia. Porm seguradoras, tais como Real Vida, Bradesco Vida, Unibanco AIG Prev e Amil Seguradora, necessitam de grande esforo no sentido de reduzir seus inputs e aumentar seus outputs para se tornarem 100 % eficientes. Quadro 05 Eficincia das Seguradoras de Vida e Previdncia VIDA E PREVIDENCIA Seguradoras EFF Seguradoras EFF Bradesco Vida 0,0296 Safra Vida 1,0000 Unibanco AIG Prev 0,0211 Icatu Hartford 0,0937 Ita Vida 0,1735 Sudameris Generali 0,9944 Santander Seguros 0,5975 AGF Vida 0,2048 Brasil Prev 0,0896 Cigna Seguradora 0,3197 Caixa Vida 1,0000 Amil Seguradora 0,0304 Real Vida 0,0035 Com base nas informaes do quadro 06 pode-se verificar, quanto ao desempenho, que apenas a SBCE foi eficiente. Na verdade esta seguradora foi a que melhor combinou os inputs (menores) e outputs (maiores). Nestas seguradoras observou-se o mesmo comportamento j comentado nos outros segmentos. A Companhia Mutual, a urea, a Santos Cia Seguros e a Roma, por serem as de menores ndices de eficincia, necessitam de grandes mudanas em seus vetores de desempenho para se tornarem eficiente. J a seguradora Excelsior Seguros, possui ndice prximo de 100 % e, por conta disso, no precisa de alteraes profundas em seus atuais nveis de inputs e outputs. Quadro 06 Eficincia das Seguradoras dos Outros Segmentos (Diversos)

SEGUROS DIVERSOS Seguradoras EFF Seguradoras EFF Caixa Seguradora 0,5082 Unimed 0,1251 J. Malucelli 0,5852 Excelsior Seguros 0,8340 Panamericana 0,2188 Zurich Brasil 0,2870 AIG Brasil 0,2793 Royal & Sunalliance 0,2224 Unibanco AIG 0,2456 Sabemi 0,1681 Ace 0,5371 Roma 0,0936 SBCE 1,0000 Santos Cia Seguros 0,0815 XL Insurance 0,5179 urea 0,0575 UBF Garantias 0,2801 Companhia Mutual 0,0399 Em cada um dos segmentos pde-se perceber que as melhores seguradoras so aquelas que possuem um desempenho multicriterial superior. Numa anlise complementar procurouse verificar os ndices ideais para cada seguradora no eficiente para que a mesma pudesse atingir eficincia de 100 %. Ou seja, uma anlise que mostrasse a reduo de inputs e/ou o incremento dos outputs necessrios para que cada DMU se tornasse eficiente. A lgica diminuir a sinistralidade e/ou aumentar a rentabilidade do patrimnio lquido e a margem operacional.

O que est exposto acima coloca a idia de benchmarking, ou seja, a tentativa de tornar as DMUs ineficientes em eficientes usando estas ltimas como referncia para as primeiras. Pde-se verificar que algumas seguradoras necessitam de grandes transformaes no que tange aos inputs e outputs. Porm algumas outras, para se tornarem eficientes necessitam to somente de pequenas alteraes no que diz respeito a seus inputs e/ou outputs. Nota-se que vrias seguradoras precisam melhorar bastante, estas so exatamente aquelas que obtiveram os menores ndices de eficincia. Porm as seguradoras com maiores eficincias (diferentes de 100 %) necessitam de pequenas alteraes em seus indicadores para atingirem a performance mxima. Por ltimo, procedeu-se uma anlise dos pesos atribudos aos vetores de desempenho, para saber com base em pesos iguais a zero as variveis que estavam sendo desprezadas na anlise de desempenho. Em linhas gerais, quando uma varivel tem peso (u ou v) igual a zero, isto representa que estas variveis so naturalmente problemticas na obteno dos ndices de eficincia. Como a modelagem procura os melhores ndices de desempenho, dadas as caractersticas de inputs e outputs, para cada DMU, esta atribui zero a toda varivel que possa atrapalhar o objetivo de maximizar a eficincia. Tendo esta abordagem como referncia percebeu-se que a varivel margem operacional (output) era a que mais aparecia com pesos zeros nos segmentos de autos e diversos. J nos segmentos de Sade e Vida e Previdncia o nmero de pesos zero muito pequeno. Isso significa que a margem operacional, em autos e diversos, uma varivel que pode ser melhorada em todas as instituies e que esta no est contribuindo objetivamente para a eficincia da grande maioria destas. No caso das seguradoras de Sade e de Vida e Previdncia a contribuio das variveis RPL e MOP, para o desempenho organizacional, idntica. 6. Concluses e Consideraes Finais

A eficincia um dos aspectos que vm governando, em maior ou menor grau, dependendo da organizao, a atuao de seguradoras e outras instituies financeiras no Brasil nos ltimos anos. Numa anlise dos vrios segmentos de seguro, percebe-se que os grandes conglomerados financeiros no conseguem necessariamente obter maiores desempenho. Isto pode mostrar que para competir neste mercado pode ser necessrio um foco operacional cada vez maior. Isso traz para o setor uma nova perspectiva competitiva, pois os ganhos financeiros, que estes grandes conglomerados poderiam obter, se mostram cada vez menos eficientes, passando assim a competio a ser centrada numa disputa operacional, focada por exemplo numa gesto eficiente do risco (sinistralidade). Isto quer dizer que instituies de pequeno e mdio porte possuem totais condies de sobrevivncia e de competio neste setor, nos diversos segmentos. Este o caso, por exemplo, da Salutar Sade, que um dos lderes do ranking de sade, e da Sudameris Generali, que possui uma das maiores eficincias no segmento de vida e previdncia. Isso ressalta o fato de que no o tamanho que gera a competitividade, mas sim o desempenho superior. Numa anlise geral, notamos que os modelos de DEA possibilitam realizar a mensurao da eficincia de unidades similares. Neste estudo utilizou-se o modelo para avaliao da eficincia de seguradoras dos segmentos de autos, sade, vida e previdncia e outros em operao no Brasil em 2003. Os resultados desse estudo propem uma nova percepo sobre a performance financeira de seguradoras que no se encontra disponvel aos gestores e ao mercado em geral atravs dos balanos e tradicionais anlises de ndices financeiros. Observa-se que a metodologia DEA capaz de munir a alta administrao das seguradoras de informaes adicionais sobre os maiores determinantes de eficincia ou ineficincia, partindo-se de variveis pr-selecionadas, pois oferece uma anlise de benchmarking, onde o gestor pode avaliar as alteraes necessrias para que a instituio possa se tornar eficiente em termos competitivos. Ou seja, a partir de informaes que no estariam disponveis pelas tcnicas convencionais, os resultados da anlise envoltria de dados podem proporcionar melhores condies de competitividade s seguradoras, principalmente quando interpretadas e usadas com os conhecimentos e julgamentos prprios da alta administrao sobre as operaes de suas instituies. Atravs da aplicao da Anlise Envoltria de Dados so identificadas as unidades eficientes e ineficientes dentro de um conjunto de dados homogneo, alm da possibilidade de obter ndices capazes de indicar quanto as unidades ineficientes precisam melhorar para se tornarem unidades eficientes. A taxa de eficincia no fornece apenas a ordenao das seguradoras num ranking, mas tambm sugere o grau de ineficincia de uma seguradora quando comparado com a unidade referencial de eficincia (benchmark). Os modelos aplicados e discutidos possibilitam a comparao, em um sentido multidimensional, da capacidade com que cada unidade (DMU) transforma seus insumos em produtos e, ainda, informam alteraes que devem ser realizadas no nvel de utilizao de insumos e de produtos, para tornar unidades ineficientes em eficientes. De posse dos dados apresentados pode-se criar um ranking, entre estas seguradoras analisadas, levando em considerao uma situao de anlise que pondera simultaneamente mltiplos elementos importantes do desempenho organizacional.

Numa comparao entre a anlise de desempenho feita pela Gazeta Mercantil e pelo DEA neste artigo, percebe-se que em todos os segmentos os primeiros colocados do ranking da Gazeta no obtiveram necessariamente ndice de eficincia igual a 100 % ou prximos a este valor. A exceo foi o segmento de sade. Alm disso, observou-se uma correlao relativamente pequena e no significativa entre os ndices de desempenho obtidos pelos dois modelos. A ttulo de ilustrao a revista utiliza uma metodologia baseada em pesos pr-estabelecidos, que so atribudos aos ndices para encontrar o total de pontos de cada seguradora. Este assunto no se encontra encerrado, pois ainda h muito a ser explorado desta metodologia em gesto de instituies financeiras. Este mesmo trabalho deve ter continuidade atravs de uma melhor viso dos vetores de desempenho que mais contribuem para uma mensurao mais apurada da eficincia organizacional. 7. Referncia Bibliogrfica AL-SHAMMARI, M.; SALIMI, A. Modeling the Operating Efficiency of Banks. Logistics Information Management. v. 11, n. 1, p. 5-17, 1998. ANTUNES DE OLIVEIRA; C. V.; TABAK, B. M. Comparativo da Eficincia Bancria utilizando Data Envelopment Analysis (DEA). In: ENCONTRO NORTE-NORDESTE DE FINANAS, 1, 2004, Recife. Anais do I ENEFIN. Recife: FIR, 2004. 1 CD. BARR, R. S.; KILLGO, K. A.; SIEMS, T. F.; ZIMMEL, S. Evaluating the Productive Efficiency and Performance of U.S. Commercial Banks. Managerial Finance. v. 28, n. 8, p. 3-25, 2002. CAMARGO Jr., A. S.; MATIAS, A. B.; MARQUES, F. T. Desempenho dos Bancos Comerciais e Mltiplos de Grande Porte no Brasil. In: CONGRESSO LATINOAMERICANO DE ESCOLAS DE ADMINISTRAO, 39, 2004, San Domingo, Repblica Dominicana. Anais do XXXIX CLADEA. San Domingo/Repblica Dominicana: CLADEA, 2004. 1 CD. CHARNES, A.; COOPER, W. W.; LEWIN, A. Y.; SEIFORD, L. M. Data Envelopment Analysis. 2. ed. Boston: KAP, 1994. COELLI, T.; RAO, D. S. P.; BALTESE, G. E. An Introduction to Efficiency and Productivity Analysis. Boston: KAP, 1998. CONTADOR, C. R.; COSENZA, C. A. N.; LINS, M. E.; GONALVES NETO, A. C. Avaliao da Performence do Mercado Segurador Brasileiro atravs do mtodo DEA (Data Envelopment Analysis) no primeiro semestre de 1999. In: SIMPSIO BRASILEIRO DE PESQUISA OPERACIONAL, 32, 2000, Viosa/MG. Anais do XXXII SBPO. Viosa: SOBRAPO, 2000. 1 CD. GULES, M. A.; ZANINI, F. A. M. Anlise Econmico-financeira de Seguradoras: um estudo no Mercado brasileiro. In: CONGRESSO LATINO-AMERICANO DE ESCOLAS DE ADMINISTRAO, 37, 2002, Porto Alegre/RS. Anais do XXXVII CLADEA. Porto Alegre: CLADEA, 2002. 1 CD. LINS, M. P. E.; MEZA, L. . Anlise Envoltria de Dados e Perspectivas de Integrao no Ambiente de Apoio Deciso. Rio de Janeiro: COPPE/UFRJ, 2000. MACEDO, M. A. S. A Utilizao da Anlise Envoltria de Dados (DEA) na Consolidao de Medidas de Desempenho Organizacional. In: CONGRESSO BRASILEIRO DE CUSTOS, 11, 2004, Porto Seguro. Anais do XI Congresso Brasileiro de Custos. Porto Seguro: ABC, 2004a. 1 CD. MACEDO, M. A. S. Indicadores de Desempenho: Uma Contribuio para o Monitoramento Estratgico atravs do Uso de Anlise Envoltria de Dados (DEA). In: SIMPSIO DE ADMINISTRAO DA PRODUO, LOGSTICA E OPERAES

INTERNACIONAIS, 7, 2004, So Paulo. Anais do VII SIMPOI. So Paulo: FGVSP, 2004b. 1 CD. MAGALHES DA SILVA, A. C. Anlise de Eficincia de Instituies Financeiras Brasileiras, segundo a metodologia de Data Envelpoment Analysis (DEA). 2000. 130 f. Dissertao (Mestrado em Administrao) COPPEAD, UFRJ, Rio de Janeiro. MAGALHES DA SILVA, A. C.; NEVES, C.; GONALVES NETO, A. C. Avaliao da Eficincia das Companhias de Seguro no ano de 2002: uma abordagem atravs da Anlise Envoltria de Dados. In: CONGRESSO BRASILEIRO DE CUSTOS, 10, 2003, Guarapari/ES. Anais do X Congresso Brasileiro de Custos. Guarapari: ABC, 2003. 1 CD. MEIMAND, M.; CAVANA, R. Y.; LAKING, R. Using DEA and Survival Analysis for Measuring Performance of Branches in New Zealands Accident Compensation Corporation. Journal of Operational Research Society. v. 53, n. 3, p. 303-313, 2002. MEZA, L. A.; BIONDI NETO, L; SOARES DE MELLO, J. C. C. B.; GOMES. E. G.; COELHO, P. H. G. SIAD Sistema Integrado de Apoio Deciso: uma implementao computacional de modelos de anlise de envoltria de dados. In: SIMPSIO DE PESQUISA OPERACIONAL DA MARINHA, 6, 2003, Rio de Janeiro. Anais do VI SPOLM. Rio de Janeiro: CASNAV, 2003. 1 CD. OLIVEIRA PEREIRA, R.O. Avaliao da Eficincia de Instituies Microfinanceiras. Informe-se/BNDES. n. 43, 2002, 6 p. REVISTA BALANO FINANCEIRO. So Paulo: Gazeta Mercantil, 2004. Anual. O Desempenho dos Melhores: o ranking dos 400 maiores. SATHYE, M. Measuring Productivity Changes in Australian Banking: an application of Malmquist ndices. Managerial Finance. v. 28, n. 9, p. 48-59, 2002. SOTERIOU, A. C.; ZENIOS, S. A. Using Data Envelopment Analysis for Costing Bank Products. European Journal of Operational Research. v. 114, n. 2, p. 234-248, 1999. VERGARA, S. C. Projetos e Relatrios de Pesquisa em Administrao. 5. ed. So Paulo: Atlas, 2004. ZHU, J. Multi-factor Performance Measure Model with Application to Fortune 500 Companies. European Journal of Operational Research. n. 123, n. 1, p. 105-124, 2000.