AVALIAO DE
AVALIAO DE IMPACTO NA SADE DAS AES DE SANEAMENTO: marco conceitual e estratgia metodolgica
IMPACTO NA SADE
DAS AES DE SANEAMENTO:
marco conceitual e estratgia metodolgica
S A LU
O T
PR
O P
A
P H
S O
O
V I M U ND
N
I
Ministrio da Sade
Representao da OPAS/OMS no Brasil
Braslia, 2004
Copyright 2004 OPAS - Organizao Pan-Americana da Sade
1a edio - 2004
Ministrio da Sade
Esplanada dos Ministrios, Bloco C
70.058-900 - Braslia - DF - Brasil
www.saude.gov.br
ISBN 85-87943-37-5
NLM: WA 540
Ministrio da Sade
Ministro Humberto Costa
Secretaria de Vigilncia em Sade
Secretrio Jarbas Barbosa da Silva Jnior
Fundao Nacional de Sade
Presidente Valdi Camarcio Bezerra
Organizao Pan-Americana de Sade
Representante Antonio Horacio Toro Ocampo
Equipes Cientficas
Saneamento Epidemiologia
Ricardo Silveira Bernardes (UnB) - Coordenador Maria da Glria Teixeira (ISC/UFBA) - Coordenadora
Andr Monteiro da Costa (CPAgM/FIOCRUZ) Agostino Strina (ISC/UFBA)
Carlos Antonio Alves Pontes (CPAgM/FIOCRUZ) Craig Milroy (ISC/UFBA)
Cristina Clia Silveira Brando (UnB) Delsuc Evangelista (ISC/UFBA)
Eudemberg Pinheiro da Silva (UnB) Maria da Conceio Nascimento Costa (ISC/UFBA)
Lo Heller (UFMG) Maurcio Barreto (ISC/UFBA)
Martin Alberto Ibez-Novion (UnB) in memorian
Patrcia Campos Borja (UFBA)
Srgio Rodrigues Ayrimoraes Soares (UnB)
Silvano Silvrio da Costa (SAAE/Guarulhos-SP)
Antropologia Economia da Sade
Carla Costa Teixeira (UnB) - Coordenadora Sebastio Loureiro (ISC/UFBA) - Coordenador
Anna Davidson (UnB) Alex Santos Fernandez (ISC/UFBA)
Carla Coelho de Andrade (UnB) Edson Correia (ISC/UFBA
Jacques de Novion (UnB) Flvio Fontanelli (ISC/UFBA
Lus Cludio Moura (UnB) Luciano Damasceno Santos (ISC/UFBA)
Martiniano Neto (UnB)
Colaboradores
Adriana Rodrigues Cabral (FUNASA/MS)
Carmem Priscila Bocchi (SCTIE/MS)
Dariush Akhavan (OPAS/OMS-Brasil)
Elisabeth Duarte (SVS/MS)
Ftima Marinho (SVS/MS)
Isabella Samico (SVS/MS)
Jose Boaventura Teixeira (FUNASA/MS)
Katia Ern (FUNASA/MS)
Luiz Roberto Santos Moraes (UFBA)
Marta Helena Dantas (SVS/MS)
Ricardo Vidal (SCTIE/MS)
Diagramao
Edite Damsio da Silva
Maria Clia de Souza
Capa
Gyl Munhoz
Reviso Redacional
Alberico Buzn
APRESENTAO
Colaborar na diminuio dos riscos ambientais sade, constitui-se uma das misses fundamentais do
Sistema nico de Sade do Brasil (SUS), coerente com o princpio constitucional de que todos os cidados
tm direito a acesso igualitrio s aes que visem proteo sade. Os esforos do governo brasileiro,
desde a criao do SUS, tm possibilitado importantes avanos nessa rea, por meio do apoio, tcnico e
econmico, s aes de promoo da sade.
A avaliao destes programas um instrumento fundamental no processo de formulao e aperfeio-
amento das intervenes no campo da sade coletiva, representando um desafio tanto para as instituies de
pesquisa como para os responsveis pela formulao das polticas de sade. A avaliao envolve a anlise dos
processos de formulao, desenvolvimento, aes implementadas, resultados e impactos obtidos, compreen-
dendo ainda a anlise do contexto histrico e social em que estes programas so concebidos.
A avaliao do impacto na sade das aes de saneamento tem como principal objetivo contribuir para
o processo de tomada de decises relativo s polticas pblicas para esses setores. A proposta metodolgica
de Avaliao do impacto na sade das aes de saneamento resultado de intenso trabalho de parceria
entre instituies acadmicas do pas, o Ministrio de Sade e a Representao da Organizao Pan-America-
na da Sade no Brasil/Organizao Mundial da Sade (OPAS/OMS). Foi gerada a partir de uma srie de
oficinas de trabalho, nas quais participaram pesquisadores, gestores e consultores altamente qualificados.
Esta uma iniciativa singular na medida em que desde o incio incluiu um componente de avaliao no
escopo de uma ampla poltica pblica de saneamento, visando particularmente aferir a sua efetividade no que
diz respeito a mudanas no estado de sade da populao. Para dar conta desta singularidade, fez-se neces-
srio a articulao de vrios campos do conhecimento, o que permitiu a produo de informaes e de uma
proposta metodolgica, que subsidiaro a avaliao dos componentes epidemiolgico, econmico,
sociocultural, tecnolgico e de gesto, das aes de saneamento.
Para a Representao da OPAS/OMS no Brasil importante que o Ministrio da Sade desenvolva
materiais que apoiem as avaliaes de campo, de modo que permita orientar o desenvolvimento de aes
considerando as realidades. Este esforo de elaborao da metodologia se realizou durante a gesto do Dr.
Jacobo Finkelman como Representante no Brasil desta Organizao.
Ao divulgar esta proposta, o Ministrio da Sade e a OPAS procuram contribuir para estabelecer um
dilogo produtivo com gestores, tcnicos e pesquisadores, na perspectiva de colher subsdios ao aperfeioa-
mento do processo de execuo deste projeto.
CAPTULO 2
OBJETIVOS ................................................................................................................................. 11
CAPTULO 3
ANTECEDENTES ............................................................................................................................ 13
CAPTULO 4
O PROGRAMA DE SANEAMENTO ........................................................................................................ 15
CAPTULO 5
MARCO CONCEITUAL ..................................................................................................................... 17
INTRODUO ...................................................................................................................................... 17
AVALIAO DE POLTICAS PBLICAS .............................................................................................................. 18
COMPLEXIDADE DOS OBJETOS DESTE ESTUDO: SADE E SANEAMENTO ....................................................................... 19
AVALIAO EM SADE E SANEAMENTO ............................................................................................................ 21
EIXOS E DIMENSES DA AVALIAO .............................................................................................................. 22
MODELO EXPLICATIVO DE CAUSA E EFEITO ...................................................................................................... 24
REFERNCIAS BIBLIOGRFICAS ................................................................................................................... 26
CAPTULO 6
ESTRATGIA DA AVALIAO .............................................................................................................. 29
CONCEPO DA METODOLOGIA DA AVALIAO .................................................................................................. 29
DESCRIO DO MODELO GERAL DE AVALIAO .................................................................................................. 30
TEMPORALIDADE .................................................................................................................................. 30
NVEIS DA AVALIAO .............................................................................................................................. 31
APLICAO DO MODELO FPEEEA ............................................................................................................ 33
CAPTULO 7
PROCEDIMENTOS PARA DEFINIO E SELEO DA POPULAO, AMOSTRA E CASOS PARA ESTUDO ......................... 37
TCNICAS PARA AGRUPAMENTO DOS MUNICPIOS DO ESTUDO ................................................................................. 40
DEFINIO DA AMOSTRA .......................................................................................................................... 42
SELEO DOS MUNICPIOS PARA ESTUDOS DE CASO ............................................................................................ 48
REFERNCIAS BIBLIOGRFICAS ................................................................................................................... 48
CAPTULO 8
EIXO SANEAMENTO ....................................................................................................................... 49
OBJETIVOS ......................................................................................................................................... 49
PRINCPIOS DE UMA POLTICA PBLICA DE SANEAMENTO ...................................................................................... 50
EFETIVIDADE, EFICCIA E EFICINCIA DE AES DE SANEAMENTO .............................................................................. 51
DIMENSES DA AVALIAO DO EIXO SANEAMENTO ............................................................................................ 52
METODOLOGIA .................................................................................................................................... 55
ESTRATGIA DE TRABALHO DE CAMPO ........................................................................................................... 58
INDICADORES DE SANEAMENTO AMBIENTAL ..................................................................................................... 63
CONSIDERAES FINAIS .......................................................................................................................... 68
REFERNCIAS BIBLIOGRFICAS ................................................................................................................... 68
CAPTULO 9
EIXO ANTROPOLGICO ................................................................................................................... 71
OBJETIVOS ......................................................................................................................................... 71
CONSIDERAES SOBRE A DIMENSO SOCIOCULTURAL ........................................................................................ 72
METODOLOGIA .................................................................................................................................... 74
CONSIDERAES FINAIS .......................................................................................................................... 78
REFERNCIAS BIBLIOGRFICAS ................................................................................................................... 79
CAPTULO 10
EIXO EPIDEMIOLGICO ................................................................................................................... 83
OBJETIVOS ......................................................................................................................................... 83
AVALIAO DE IMPACTO EPIDEMIOLGICO: ASPECTOS METODOLGICOS ..................................................................... 84
METODOLOGIA .................................................................................................................................... 87
CONSIDERAES TICAS .......................................................................................................................... 94
REFERNCIAS BIBLIOGRFICAS ................................................................................................................... 95
CAPTULO 11
EIXO ECONMICO ........................................................................................................................ 97
OBJETIVOS ......................................................................................................................................... 98
PRINCIPAIS CONCEITOS EM AVALIAO ECONMICA ............................................................................................. 98
METODOLOGIA .................................................................................................................................... 99
DEFINIO DOS BENEFCIOS E CUSTOS A SEREM INCLUDOS NA ANLISE ..................................................................... 100
METODOLOGIA PARA ESTIMAO DE CUSTOS ................................................................................................... 101
METODOLOGIA DE AVALIAO DOS BENEFCIOS ................................................................................................ 109
AVALIAO DE EQIDADE ......................................................................................................................... 112
CONSIDERAES FINAIS .......................................................................................................................... 112
REFERNCIAS BIBLIOGRFICAS ................................................................................................................... 113
CAPTULO 12
CONCLUSES ............................................................................................................................... 115
CAPTULO 1
INTRODUO
9
Ministrio da Sade / Representao da OPAS/OMS no Brasil
10
CAPTULO 2
OBJETIVOS
O objetivo geral desta proposta metodolgica avaliar as aes de saneamento desenvolvidas pelo
Ministrio da Sade/Fundao Nacional de Sade (MS/FUNASA) e seus impactos na sade das popula-
es dos municpios beneficiados.
O objetivo geral se desdobra nos seguintes objetivos especficos:
Avaliar a implementao das aes intersetoriais de saneamento com enfoque na gesto dos
servios, nas condies sanitrias das localidades em que as aes sero implementadas e nos
aspectos tecnolgicos dos sistemas de abastecimento de gua, das melhorias sanitrias
domiciliares e dos sistemas de esgotamento sanitrio;
Compreender as aes de saneamento ambiental em suas conexes e seus desdobramentos
no modo de vida e nas condies de sade das populaes envolvidas;
Avaliar o impacto produzido pelas intervenes de saneamento na morbidade e mortalidade
por algumas doenas que tm sua ocorrncia relacionada com o saneamento;
Avaliar o custo-benefcio e o custo-efetividade das aes de saneamento.
11
CAPITULO 3
ANTECEDENTES
Em 2001, o governo brasileiro instituiu um extenso programa social denominado Projeto Alvora-
da, que previa investimentos em quinze diferentes campos de aes, dentre os quais destacava-se a ampli-
ao da infra-estrutura de saneamento disponvel nos municpios que apresentavam ndice de Desenvol-
vimento Humano (IDH) igual ou menor que 0,500. As aes programticas incluam sistemas de abaste-
cimento de gua, sistemas de esgotamento sanitrio e melhorias sanitrias domiciliares (MSD).
Embora o fomento a essas aes seja feito baseado na estrutura legal que serviu de arcabouo para
o Sistema nico de Sade (SUS) com nfase na Constituio Federal e na Lei no 8.080, as obras
financiadas dentro desse projeto no esto sob a gesto deste sistema. Durante a execuo, o Ministrio da
Sade, por intermdio da Fundao Nacional de Sade (MS-FUNASA), supervisionava a implantao dos
sistemas de saneamento. Aps a entrega da obra, a gesto ficava a cargo do rgo responsvel pelo
saneamento no municpio. Ademais, os financiamentos das atividades de operao e manuteno dessas
aes no contam com fontes permanentes de recursos, ficando em sua maioria condicionados articu-
lao institucional de servios estaduais e municipais de saneamento, alm da cobrana de tarifas.
A complexidade desse cenrio de investimento, que envolve a questo intersetorial e de entrelaa-
mento de polticas pblicas especficas, apontava para a necessidade de realizao de um estudo sistmico
com base cientfica para a avaliao dessas aes de saneamento, razo pela qual o ento Centro Nacional
de Epidemiologia (CENEPI), da FUNASA, solicitou Organizao Pan-Americana da Sade (OPAS) que
coordenasse o desenvolvimento de um projeto de avaliao, tendo como principal objetivo avaliar as
aes de saneamento e seus impactos na sade das populaes dos municpios beneficiados.
Logo de incio, constatou-se que no existia na literatura cientfica avaliao de impacto
epidemiolgico de aes de saneamento no cenrio apresentado diversidade geogrfica, populacional
e cultural e que abrangia trs tipos de interveno e combinaes entre as mesmas.
Esta constatao apontou para a necessidade de ampliao da discusso, com o propsito de
reunir experincias e contedos de diferentes reas do conhecimento, com vistas elaborao de um
projeto que atendesse solicitao do CENEPI-FUNASA. Assim, a OPAS organizou um Grupo Tarefa com-
posto por seus consultores, tcnicos e dirigentes do Ministrio da Sade, alm de pesquisadores de vrias
instituies de ensino e pesquisa do pas.
Este grupo, entre maio de 2001 e agosto de 2002, promoveu vrios seminrios para a troca de
experincia e discusso da concepo terica, metodolgica e estratgica desta avaliao, com a partici-
pao de consultores nacionais e internacionais. Como resultado desses eventos e das reunies e ativida-
des do Grupo Tarefa, optou-se por uma avaliao que envolvesse quatro eixos, quais sejam: (a) Sanea-
mento; (b) Epidemiologia; (c) Antropologia; e, (d) Economia da Sade.
13
Ministrio da Sade / Representao da OPAS/OMS no Brasil
O processo de seleo das instituies para elaborao e execuo do projeto nos quatro eixos
referidos foi feito por meio de Edital Pblico da OPAS. Foram selecionadas as propostas das seguintes institui-
es: (a) Departamento de Engenharia Civil e Ambiental da Universidade de Braslia, para o Eixo Saneamento;
(b) Departamento de Antropologia da Universidade de Braslia, para o Eixo Antropologia; (c) Instituto de
Sade Coletiva da Universidade Federal da Bahia, para os Eixos Epidemiologia e Economia da Sade.
O Projeto de Avaliao apresentado neste documento foi desenvolvido pelas equipes cientficas dessas
duas instituies, juntamente com o referido Grupo Tarefa.
14
CAPTULO 4
O PROGRAMA DE SANEAMENTO
15
Ministrio da Sade / Representao da OPAS/OMS no Brasil
de Engenharia de Sade Pblica DENSP), que detm toda a experincia acumulada pelos profissionais
oriundos da FSESP, com a responsabilidade de cumprir o disposto no inciso II do artigo 6, Captulo I da Lei
Orgnica da Sade. Assim, as responsabilidades de formulao da poltica e gesto dos recursos para a rea
de saneamento alocados no oramento do Ministrio da Sade, com vistas a atender aos princpios e diretrizes
do SUS, so do DENSP-FUNASA.
No mbito do Ministrio da Sade, a poltica de governo definida nos ltimos anos para a aplicao dos
recursos destinados ao saneamento est voltada para a reduo de algumas doenas infecciosas e parasitri-
as, e compreende, dentre outras, as seguintes aes:
Abastecimento de gua (AA) ao que compreende a implementao, ampliao e
estruturao de sistemas pblicos de abastecimento de gua;
Melhorias Sanitrias Domiciliares (MSD) ao que visa controlar doenas evitveis mediante
medidas de saneamento nos domiclios, envolvendo a construo de banheiros, privadas, fossas
spticas, vasos sanitrios, pias de cozinha, lavatrios, tanques, reservatrios de gua e filtros etc.;
Esgotamento Sanitrio (ES) ao que procura contribuir para o controle de doenas parasitrias
transmissveis pelos dejetos humanos e para a melhoria da qualidade de vida das populaes, mediante
a construo, a ampliao e a estruturao de servios de coleta e tratamento de esgotos sanitrios.
O universo dos municpios integrantes dessa proposta de avaliao foi determinado a partir do extinto
Projeto Alvorada. Para efeito de seleo dos municpios a serem atendidos com os recursos disponveis, neste
projeto, foi utilizado o ndice de Desenvolvimento Humano (IDH) inferior a 0,500. Para efeito de priorizao
alguns critrios epidemiolgicos foram previamente definidos e estabelecidos na Portaria n 176, de 22/03/00
(mortalidade infantil maior que 40/1000 e ocorrncia de doenas especficas de interesse para a Sade
Pblica, a exemplo da clera, tracoma, esquistossomose, dentre outras). Vale apontar que esses critrios
foram posteriormente reformulados nas Portarias no 01 (02.01.02), n 225 (15.05.03) e n 106 (08.03.04),
passando a ser vlidos para novos aportes de recursos.
Simultaneamente execuo das aes de saneamento, cada municpio desenvolve o Programa de
Educao em Sade e Mobilizao Social (PESMS). Este programa tem por finalidade fomentar a participao
e a organizao comunitria, por intermdio de aes permanentes de Educao em Sade, quando da
implantao das diversas aes de saneamento, proporcionando o acesso da populao a instalaes, habi-
taes e sistemas de saneamento ambiental saudveis, alm de contribuir para a sustentabilidade dessas
aes. Esta atividade de educao em sade no mbito deste programa de saneamento tem previso de ser
financiada com recursos da contrapartida de estados e municpios.
Observou-se que ao se considerar, como proposto no referido Projeto Alvorada, IDH igual ou
menor que 0,500, praticamente todos os municpios que atendiam aos critrios referidos nas citadas
Portarias estariam contemplados. Assim, no perodo 2001/2002, o DENSP-FUNASA repassou parte dos
seus recursos para os municpios que atenderam a esses critrios, por meio de convnios que previam o
desenvolvimento dos trs tipos de aes referidas, tanto de forma isolada como combinadas. Para esses
convnios foi destinado o valor global da ordem de R$ 1,3 bilho, que dever beneficiar 1,5 milho de
famlias. At abril de 2004, foram repassados recursos da ordem de R$ 950 milhes. Os municpios que
tiveram seus convnios firmados at julho de 2002, referentes ao desenvolvimento de aes de saneamen-
to, foram includos nesta avaliao.
16
CAPTULO 5
MARCO CONCEITUAL
INTRODUO
A avaliao institucional e de polticas pblicas tem se tornado um instrumento fundamental e
imprescindvel no processo de formulao e aperfeioamento das aes do Estado no campo das polticas
sociais. Apesar do consenso quanto necessidade de se promover tais avaliaes, o arcabouo conceitual
e metodolgico que fundamenta essa atividade ainda muito incipiente (Belonni et al., 2000). Para Rico
et al. (1998) a avaliao de polticas e programas sociais tornou-se um desafio tanto para os centros de
pesquisa como para os governos, em face da necessidade de se inovar conceitos e metodologias avaliativas
devido rejeio aos modelos tradicionais que no conseguem apreender, na sua totalidade, os
fluxos e nexos entre a tomada de deciso, sua implementao, execuo, resultados e impactos
produzidos. Em face da escassez de literatura terica e de experincias avaliativas, Belonni et al. (2000)
recomendam uma criteriosa discusso conceitual e metodolgica quando da elaborao de instrumentos
avaliativos. Por outro lado, a complexidade dos fenmenos polticos e sociais contemporneos tem exigi-
do uma abordagem interdisciplinar no processo de avaliao de polticas pblicas.
Essas avaliaes envolvem a anlise dos processos de formulao, do desenvolvimento, das aes
implementadas ou dos fatos ocorridos, resultados e impactos obtidos e, ainda, a anlise do contexto
histrico e social em que concebida. No se restringe, portanto, ao exame comparativo entre o proposto
e o alcanado (Belonni et al., 2000). Um processo de avaliao envolve um julgamento, diz respeito
atribuio de um valor a uma determinada poltica ou programa governamental (Contandriopoulos,
1994; Hartz, 1998). Para Arretche (1998), a avaliao uma medida de aprovao ou desaprovao de
uma poltica ou programa pblico, segundo uma certa concepo de justia.
Figueiredo & Figueiredo (1986) fazem uma distino entre avaliao poltica e avaliao de
poltica. A primeira tem por objetivo analisar e elucidar os critrios que fundamentam uma poltica, as
razes que a tornam prefervel em relao a outra, sendo que a mesma deve contribuir para o bem-estar
da populao. Esse tipo de avaliao no entra no mrito da apropriao dos benefcios da poltica pela
populao. Alm disso, a avaliao examina o carter poltico do processo decisrio que levou adoo
de uma determinada poltica, como tambm os valores e critrios polticos que a orientam, independente
da engenharia institucional e de seus resultados (Rico et al., 1998).
Por outro lado, a avaliao de poltica busca examinar a engenharia institucional e os traos
constitutivos dos programas (Rico et al., 1998). Esse tipo de avaliao busca elucidar se a poltica est
condizente com princpios de justia poltica e social minimamente aceitos e sobre os quais existe um consen-
so mnimo e, ainda, se houve a efetiva apropriao dos benefcios (Figueiredo & Figueiredo, 1986).
17
Ministrio da Sade / Representao da OPAS/OMS no Brasil
Assim, um modelo de avaliao deve sustentar-se em um paradigma de sociedade que esteja articulado
com a dinmica de produo da realidade, indo alm da simples coleta de dados. Tal paradigma deve acompa-
nhar as mudanas dos processos sociais e urbanos e as mudanas mais profundas de concepo da sociedade
e do estilo de desenvolvimento (Borja, 1997). Ao referir-se construo de um modelo de sistema de indicado-
res para avaliao da realidade, Pfaff (1975) defende que o mesmo deve ser definido de forma mais ampla como
um modelo de controle, com um conjunto de metas, opes, parmetros, variveis, entre outros.
18
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
19
Ministrio da Sade / Representao da OPAS/OMS no Brasil
habita este espao. Essas aes, se adequadamente implementadas, podem produzir uma srie de efeitos
positivos sobre o bem-estar e a sade das populaes beneficiadas. Porm, mais do que isto e em conse-
qncia dos diferentes efeitos que proporciona, o saneamento ambiental adequado considerado parte
constituinte do modo moderno de viver e um dos direitos fundamentais dos cidados das sociedades
contemporneas.
Nas sociedades hoje ditas desenvolvidas, as melhorias das condies ambientais em que viviam suas
populaes evoluram em paralelo com o intenso desenvolvimento social e econmico observado a partir
do final do sculo XIX, estando, portanto, intrnseca e inseparavelmente interligados a este processo inten-
so de transformaes ocorridas em tais sociedades desde aquele momento at os dias atuais. J as socieda-
des ditas em desenvolvimento tiveram seus processos de transformao bastante diferenciados daquelas
anteriormente referidas, tendo-se gerado como conseqncia o que na atualidade se constitui em uma das
suas principais caractersticas: a manuteno de parcelas significativas das suas populaes sem acesso a
bens e servios que so considerados direitos fundamentais no modo moderno de viver. Alm de todos os
efeitos negativos, o fato de parcelas da populao nesse grupo de sociedades terem paulatinamente obtido
acesso a esses bens e servios, cria novas situaes, em que iniqidades que j existiam entre naes,
passem a existir no interior de cada sociedade. Tornando, em conseqncia, cada vez menos tolervel o
no acesso de amplas parcelas da populao a tais bens e servios. Como conseqncia, os governos
desses pases so permanentemente pressionados a implementar polticas e aes especficas que propici-
em ambientes adequadamente saneados a parcelas importantes das suas populaes e, desta forma, con-
tribuam para reduzir as iniqidades existentes.
O Brasil apresenta imensos dficits nessa rea, pois parcelas significativas da sua populao no tm
acesso aos benefcios do saneamento ambiental. Essa situao visvel tanto quando se comparam as regies
do pas ou quando se comparam reas da maioria das grandes cidades, e est na base dos grandes diferenci-
ais inter e intra-regionais, intra-urbanos e urbano-rural observado nas condies de vida e de sade. No por
acaso, polticas de saneamento vm sendo identificadas como prioridades que poderiam reduzir esses imen-
sos diferenciais, constituindo-se em um importante fator de eqidade.
A Figura 5.1 revela a acentuada diferena existente na difuso espacial das redes de saneamento no
territrio brasileiro, com destaque para a presena de rede de abastecimento de gua e dos servios de coleta
de lixo e limpeza urbana na maioria dos municpios brasileiros, em contraste com a concentrao espacial da
rede de esgotos sanitrios, cuja presena continua restrita Regio Sudeste e s reas mais urbanizadas das
demais regies do Pas.
Este tema aprofunda a questo em torno da desigualdade espacial verificada na distribuio dos
servios de saneamento, apontando na direo do acesso diferenciado s redes por parte da populao,
uma vez que a existncia da rede nem sempre significa um amplo atendimento da populao, dada sua
pequena extenso face ao nmero de domiclios atendidos. Nesse contexto, a universalizao dos servios
de saneamento a grande meta a ser alcanada no Pas. O programa de saneamento, objeto desta proposta
de avaliao, apesar de sua magnitude e diversidade, envolvendo municpios de todas as regies do pas,
no preenche os enormes dficits acumulados do setor, principalmente no que se refere ao esgotamento
sanitrio.
20
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
100 %
90
80
70
60
50
40
30
20
10
0
Norte Nordeste Sudeste Sul Centro-Oeste
Rede geral de abastecimento de gua Rede coletora de esgto
Limpeza urbana e coleta de lixo Drenagem urbana
Fonte: IBGE
Figura 5.1. Proporo de municpios com servios de saneamento bsico, por tipo de servio, segundo as
Grandes Regies, 2000
21
Ministrio da Sade / Representao da OPAS/OMS no Brasil
Uma pesquisa avaliativa deve ampliar a base de evidncias existentes sobre a questo e fornecer expli-
caes plausveis acerca dos resultados encontrados, examinando procedimentos de implementao e inves-
tigando fatores mediatos contextuais. Por no se conhecer precedente na literatura de avaliao de um
programa de saneamento desta amplitude e implementado em um perodo de tempo relativamente curto, e
que, alm disso, se prope abordar tantos aspectos, fica evidente que o esforo para superar as dificuldades
de sua realizao ter que ser enfrentado pela incluso de diversos eixos que utilizaro diferentes recursos
metodolgicos, mas que se espera que os resultados finais propiciem um conjunto integrado de conhecimen-
tos teis.
Desse modo, esta avaliao no deve ser considerada como um nico estudo, mas como um conjunto
organizado de estudos, e a complexidade do seu objeto exige a anlise de diversos eixos e o envolvimento de
diferentes disciplinas e estratgias, com vistas obteno de resultados consistentes e confiveis.
22
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Condies
sanitrias
Aspectos
tecnolgicos
Aspectos
socioculturais
Gesto de servios de
saneamento
Impacto
epidemiolgico Avaliao econmica
23
Ministrio da Sade / Representao da OPAS/OMS no Brasil
DIMENSO ECONMICA
Esta dimenso busca avaliar a eficincia das intervenes em saneamento no que se refere ao alcance
e aos resultados das aes implementadas, principalmente em termos de melhorias nos indicadores
epidemiolgicos e sanitrios. Possibilita, tambm, verificar se os benefcios gerados pelas medidas implementadas
se distribuem de forma eqitativa entre a populao.
A realizao de avaliaes econmicas, por sua vez, exige a seleo de instrumentos objetivos que
fundamentem e orientem decises de investimentos sociais. Nesse sentido, a escolha das tcnicas disponveis
de avaliao econmica requer um conhecimento ntido do fenmeno em questo e o desenho metodolgico
mais pertinente depender em grande parte do que a investigao deseja identificar.
O MODELO FPEEEA
A Organizao Mundial da Sade (OMS), preocupada com os reflexos do comprometimento da salu-
bridade ambiental na sade humana tem promovido estudos para o melhor entendimento da relao meio
ambiente sade, de forma a subsidiar a definio de polticas e estratgias para esses setores. Dentro desse
esforo, situa-se o projeto HEALDLAMP (Health and Environment Analysis for Decision-making Anlise
da Sade e do Meio Ambiente para a Tomada de Deciso), que tem por objetivo a melhoria do apoio
informao para as polticas de sade ambiental e a disponibilizao de informaes sobre os impactos da
24
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
sade ambiental em vrios nveis aos responsveis pela deciso, profissionais de sade e ao pblico (Briggs
et al, 1996).
A partir da adaptao da estrutura Presso - Estado - Resposta, utilizada na construo de sistemas
de indicadores da Organization for Economic Cooperation and Development - OECD (baseada em
trabalho desenvolvido pelo governo do Canad), a OMS props a estrutura conceitual para indicadores de
sade ambiental. O modelo FPEEEA (Foras Motrizes, Presses, Estados, Exposies, Efeitos e Aes)
busca explicar a maneira como vrias foras motrizes geram presses que afetam o estado do meio ambi-
ente que expe a populao a riscos e afetam a sade humana (OECD, 1993).
A matriz de causa e efeito proposta pela OMS representada por uma cadeia intitulada Desenvolvimen-
to - Meio Ambiente - Sade, que revela o entendimento de que a sade o resultado da interao entre
desenvolvimento e meio ambiente. Assim, por exemplo, as foras motrizes do desenvolvimento, represen-
tado pela urbanizao e a industrializao, geram presses sobre o meio ambiente que deterioram o seu
estado e expe a populao riscos, que podem gerar efeitos negativos para a sade humana.
O Ministrio da Sade, responsvel pela implementao do Sistema nico de Sade (SUS), tem como uma
das suas responsabilidades proteger a populao de danos sade. Nessa perspectiva, vem financiando aes de
saneamento em larga escala com o propsito de reduzir riscos decorrentes da deteriorao do meio ambiente
urbano. O modelo FPEEEA adequa-se ao objetivo principal deste projeto que o de mensurar os efeitos destas
intervenes sobre a sade das populaes beneficiadas, razo pela qual foi adotado nesta avaliao.
Os componentes previstos no modelo FPEEEA proposto pela OMS (Corvaln, 1996) so apresentados
na Figura 5.3. Ressalta-se que essa metodologia prev a definio de indicadores nos vrios pontos da
cadeia.
Conforme j explicitado, existe um alto grau de complexidade na relao sade e ambiente. Alm disso,
todo modelo traz em si limitaes, pois se constitui em uma tentativa de aproximao e explicao da realidade.
Ou seja, qualquer que seja o modelo adotado no possvel apreender a realidade em sua totalidade, pois a
mesma produto de um processo histrico, econmico e social complexo. A cadeia de causa e efeito adotada
cumpre em parte este papel, pois tem se mostrado til na tentativa de explicar a relao sade e ambiente.
Em face da complexidade dos fenmenos que envolvem esta avaliao e, ainda, considerando que nem
todos os fenmenos podem ser mensurados atravs de indicadores, pretende-se privilegiar no seu modelo as
aes de saneamento e alguns efeitos em detrimento de outros. Em princpio, devido ao objetivo principal
desta avaliao, privilegiou-se o efeito na sade humana, embora considerando-se, tambm, os efeitos no
meio ambiente, na excluso social e na cidadania. O desenvolvimento conceitual da cadeia de causa e efeito
ser apresentado no Captulo 6.
25
Ministrio da Sade / Representao da OPAS/OMS no Brasil
Crescimento da Desenvolvimento
Foras motrizes Tecnologia
populao econmico
Disponibilidade de
Estado Riscos naturais Nveis de poluio
recursos
Ao
Figura 5.3. Modelo FPEEEA: cadeia de Desenvolvimento - Meio Ambiente - Sade (Corvaln et al., 1996)
REFERNCIAS BIBLIOGRFICAS
Arretche, Marta T. S. Tendncias no Estudo sobre Avaliao. In: Rico, Elizabetth M., Saul, Ana Maria, Fonseca,
Ana Maria M., Fagnani, E., Perez, Jos R. R., Melo, Marcus A., Carvalho, Maria do Carmo B., Pestana, Maria
Ins G. de S., Arretche, Marta T., Faria, Regina M., Rios, Terezinha A., Lobo, Thereza. Avaliao de Polticas
Sociais: Uma Questo em Debate. So Paulo: Cortez: Instituto de Estudos Especiais, 1998.
Belonni I, Magalhes H, Sousa L, 2000. Metodologia de Avaliao em Polticas Pblicas. Uma experincia em
educao profissional. Cortez, So Paulo.
Borja, P.C, 1997. Avaliao da Qualidade Ambiental Urbana Uma contribuio metodolgica. UFBA, Disser-
tao de Mestrado em Arquitetura e Urbanismo.
Briggs, D., Corvaln, C. and Nurminen. 1996. Linkage Methods for Environmental and Health Analysis: General
Guidelines. Geneva: UNEP, USEPA and WHO.
Contandriopoulos, AP, Champagne, F., Potvin, L., Denis, J.-L, Boyle, P. 1994. Saber Preparar uma Pesquisa. So
Paulo-Rio de Janeiro, Hucitec/Abrasco pp: 35-55; 79-86.
26
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Contandriopoulos, A., Champagne, F., Denis, J. Avargues, M. 2000. Levaluation dans le domaine de la sant:
concepts et mthodes. Revue Epidemiologie et Sant Publique (48): 517-539.
Corvaln, C., Briggs, D. and Kjellstrm, T. 1996. Development of Environmental Health Indicators. In: Linkage
Methods for Environmental and Health Analysis: General Guidelines. Geneva: UNEP, USEPA and WHO. Pp.
19-53.
Figueiredo, M. & Figueiredo, A, 1986. Avaliao poltica e avaliao de polticas: um quadro de referncia
terica. Anlise e Conjuntura. Fundao Joo Pinheiro, Belo Horizonte.
Hartz, ZA. & Pouvourville, G.1998. Avaliao dos programas de sade: a eficincia em questo. Cincia &
Sade Coletiva 3(1): 68-82.
OECD. OECD core set of indicators for environmental performance reviews. 1993. Environmental Monograph.
N 83, Paris: OECD.
Pfaff, M, 1975. Supervisin y Evaluacin del Proceso de Crecimiento y Desarrollo Urbanos. In: Naciones
Unidas. Indicadores de La Calidad del Desarrollo Urbano. Informe de la Reunin del Grupo Especial de
Expertos. Departamento de Asuntos Econmicos y Sociales, Nova York, USA.
Rico EM, Saul AM, Fonseca, AMM, Fagnanini E, Perez JR., Melo MA., Carvalho, M.C.B., Pestana, M.I.G.S.,
Arretche, M.T., Faria, R.M. Rios, T., e LoboT,1998. Avaliao de Polticas Sociais: Uma Questo em Debate.
Cortez: Instituto de Estudos Especiais, So Paulo.
Santana, VS, Teixeira MG, Santos CCP, 1997. Avaliao das aes de controle da infeco esquistossomtica
nas localidades de Cahoeira-Bahia, Bacia do Paraguau, 1982-1992. Revista da Sociedade Brasileira de
Medicina Tropical, 29(2):185-195.
Vieira-da-Silva, LM & Formigli, V L A, 1994, Avaliao em Sade: Limites e Perspectivas. Cadernos de Sade
Pblica 10(1): 80-91.
27
CAPTULO 6
ESTRATGIA DA AVALIAO
Nas ltimas dcadas, vrias aes e atividades vm sendo desenvolvidas no Brasil, em decorrncia
da adoo de polticas pblicas direcionadas para a reduo das acentuadas desigualdades sociais e,
principalmente, para compensar efeitos adversos decorrentes das vrias crises econmicas que o pas tem
enfrentado. Todavia, a aferio do cumprimento dos objetivos propostos por essas polticas no tem se
constitudo em uma prtica comum.
No se tm dvidas quanto ao papel que desempenha um adequado sistema de saneamento para a
melhoria da qualidade de vida das populaes, principalmente, pelo seu potencial em evitar a ocorrncia de
doenas infecciosas e parasitrias e a convivncia com animais nocivos sade. Sabe-se que os benefcios
dessas intervenes dependem, por um lado, da sua implantao e operao plena, no se restringindo
disponibilizao de recursos financeiros pois esto na dependncia da capacidade de gesto do poder
municipal e, por outro, do nvel educacional dos usurios, para que possam ser utilizados adequadamente.
Ao propor esta avaliao, o Ministrio da Sade centrava-se em mensurar o impacto epidemiolgico
sobre a sade das populaes beneficiadas pelas extensas aes de saneamento que estavam sendo
implementadas. Entretanto, no decorrer dos vrios seminrios realizados para se definir a concepo e a
metodologia da avaliao, entendeu-se que outras dimenses, alm da epidemiolgica, deveriam ser
contempladas, com vistas a no somente obter uma maior compreenso das mudanas que estas interven-
es produziriam sobre a sade, como tambm sobre as tecnologias envolvidas na implementao das
aes, sobre a forma que a populao percebia esta interveno e seus benefcios, alm de mensurar o
custo-benefcio e o custo-efetividade.
Deste modo, esta proposta de avaliao foi ampliada no seu escopo, necessitando para sua concep-
o do esforo e articulao de equipes multidisciplinares, com o propsito comum de conceber projetos
que atendessem aos objetivos especficos relacionados aos diferentes campos de conhecimento e, ao mesmo
tempo, atendessem aos objetivos gerais e comuns da avaliao. Para facilitar o entendimento dos diversos
eixos desta avaliao e suas intrincadas relaes, apresenta-se esquematicamente, na Figura 6.1 e nos demais
tens deste captulo, a sntese da proposta com os seus diferentes nveis e momentos de coleta de dados, e, nos
Captulos 8 a 11 encontram-se detalhadas as metodologias especficas de cada um deles.
29
Ministrio da Sade / Representao da OPAS/OMS no Brasil
TEMPORALIDADE
De acordo com o desenho apresentado (Figura 6.1), para que a avaliao contemple a evoluo
temporal da interveno o modelo estratgico adotado inclui trs estgios bem definidos em funo do
cronograma de execuo das obras, a saber: (a) Estgio inicial; (b) Estgio intermedirio; e, (c) Estgio final.
Estgio inicial - refere-se ao perodo em que as intervenes ainda no ocorreram;
Estgio intermedirio - refere-se ao perodo em que as aes de saneamento esto sendo
implantadas e as informaes devem ser levantadas, prioritariamente, por meio de dados primrios;
Estgio final - refere-se ao perodo em que as obras de saneamento j esto finalizadas.
30
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
COMUNIDADE
AO DE
Cenrio de SANEAMENTO Cenrio de
atendimento antes atendimento
das aes de modificado aps as
saneamento aes de
(Figura 5.2) saneamento
Estgio durante a ao
de saneamento
Os estgios descritos caracterizam a situao da ao de saneamento, tendo incio e fim bem definidos.
Por outro lado, o incio e durao dos marcos temporais da avaliao (t0,t1 e t2), para os diferentes eixos, so
variveis, em funo da estratgia metodolgica a ser adotada. Porm, ressalta-se que esses marcos temporais
devem ser localizados dentro dos referidos estgios. A localizao dos marcos temporais da avaliao de cada
eixo ser apresentada nos captulos especficos (Captulos 8 a 11).
NVEIS DA AVALIAO
Uma importante dificuldade em avaliaes dessa natureza reside na necessria conciliao entre
abrangncia e profundidade das informaes geradas, de forma a garantir que a avaliao realizada refira-se
efetivamente ao universo de aes avaliadas e que possa ser extrapolada a outras intervenes da mesma
natureza. Por outro lado, a avaliao deve incluir indicadores que assegurem informaes precisas, consis-
tentes e confiveis. Para contemplar os dois mbitos de necessidades, idealizou-se uma avaliao em trs
nveis, nos quais abrangncia e profundidade se completam sucessivamente:
Estudos no total dos 1.846 municpios que tiveram programas de saneamento contratados pelo
DENSP/FUNASA, entre janeiro de 2001 e julho de 2002;
Estudos em uma amostra, composta por cerca de 30 municpios selecionados segundo uma
adequada representatividade do universo; e,
31
Ministrio da Sade / Representao da OPAS/OMS no Brasil
ABRANGNCIA PROFUNDIDADE
Populao do estudo
Amostra
Estudo de caso
32
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Entende-se que, no obstante a grande complexidade inerente magnitude desta avaliao, esta estra-
tgia metodolgica tornar possvel que os resultados gerados pelos seus diferentes eixos sejam analisados em
conjunto, visando fornecer um quadro mais claro das intervenes e dos seus efeitos sobre as condies de
vida, bem-estar e sade das populaes beneficiadas. Por outro lado, tambm possibilitar que, paralelamen-
te, cada um dos eixos da avaliao realize os seus projetos e anlises de interesse especfico.
A concepo e a elaborao deste modelo de avaliao demandou um perodo de tempo relativamente
longo e um esforo tcnico-cientfico que mobilizou profissionais de distintas reas do conhecimento que
atuam em servios e em instituies de ensino e pesquisa. Todavia, em paralelo, houve o esforo para que
grande parte da estratgia metodolgica desenvolvida venha a ser facilmente reproduzida pelos servios de
sade, sem prejuzo do seu rigor cientfico.
33
Modelo de
Desenvolvimento,
34
Modelo de desenvolvimento Ausncia ou Poltica de
Foras Processo difuso e Transparncia
desenvolvimento socialmente inadequao de Indefinio marco Financiamento desenvolvimentode Precariedade da
Motrizes ambientalmente exclud. e poltica e politicas pblicas legal para o setor pblico instvel e acelerado de apropriao insuficiente e
recursoshumanos tecnolgica democracia
insustentvel economicamente de saneamento de saneamento insuficiente urbanizao corrupo
inadequada insuficiente
subordinado
Morbi-mortalidade
ampliada devido
Efeito inadequao de
saneamento
ambiental
Figura 6.3. Modelo FPEEEA para as aes de saneamento considerando apenas o efeito sobre a sade
Modelo de Mod. de desenvolv. Ausncia ou Poltica de Desenvolvimento,
Foras socialmente Indefinio marco Financiamento Processo difuso e Transparncia
desenvolvimento inadequao de desenvolvimentode Precariedade da
Motrizes ambientalmente excludente e polit. legal para o setor pblico instvel e acelerado de apropriao insuficiente e
e economicamente politicas pblicas recursoshumanos tecnolgica democracia
insustentvel de saneamento insuficiente urbanizao corrupo
subordinado de saneamento inadequada insuficiente
Ambientes Comprometimento
Estado Esgoto e lixo nas Esgoto e lixo no da disponibilidade
aquticos Degradao de
colees hdricas solo dos recursos ecossistemas
contaminados
naturais
Figura 6.4. Modelo FPEEEA para as aes de saneamento considerando apenas o efeito sobre o meio ambiente
35
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Modelo de Mod. de desenvolv. Ausncia ou Poltica de Desenvolvimento,
36
Foras socialmente Indefinio marco Financiamento Processo difuso e Transparncia
desenvolvimento inadequao de desenvolvimentode Precariedade da
Motrizes legal para o setor pblico instvel e acelerado de apropriao insuficiente e
ambientalmente excludente e polit. politicas pblicas
e economicamente recursoshumanos tecnolgica democracia
insustentvel de saneamento insuficiente urbanizao corrupo
subordinado de saneamento inadequada insuficiente
Figura 6.5. Modelo FPEEEA para as aes de saneamento considerando apenas o efeito sobre a cidadania e excluso social
CAPTULO 7
PROCEDIMENTOS PARA DEFINIO E SELEO DA POPULAO,
AMOSTRA E CASOS PARA ESTUDO
Em 2001, todos os 2.318 municpios que apresentavam ndice de Desenvolvimento Humano (IDH)
menor ou igual a 0,500 foram considerados elegveis para receber financiamento do Ministrio da Sade/
FUNASA destinado a intervenes de saneamento, sendo que para serem atendidos, os governos munici-
pais interessados deveriam apresentar suas propostas e projetos ao DENSP/FUNASA. Devido limitao de
recursos, a FUNASA precisou priorizar o atendimento a esses municpios, usando para isso os critrios
epidemiolgicos dispostos na Portaria n 176, de 22/03/00, razo pela qual nem todos os municpios que
atendiam ao critrio relativo ao IDH foram contemplados.
Deste modo, foram includos neste projeto de avaliao todos os 1846 municpios, que haviam
firmado Convnio com a FUNASA entre janeiro de 2001 at julho de 2002, para programas de saneamento
(abastecimento de gua, melhorias sanitrias domiciliares e esgotamento sanitrio). Esses municpios
esto distribudos por 21 estados, situados em todas as regies do Brasil, porm com maior concentrao
na Regio Nordeste (75,3%), seguida da Regio Norte (12,9%), como pode ser visto na Figura 7.1.Essa
situao j era esperada, visto serem estas as regies mais pobres do pas e que, portanto, possuem maior
nmero de municpios que apresentavam nvel de IDH menor ou igual a 0,500.
Centro-Oeste Sudeste
Regies Brasileiras
Sul
Nordeste (75,3%)
Norte (12,9%)
Norte
Centro-Oeste (1,0%)
Sul (1,0%)
37
Ministrio da Sade / Representao da OPAS/OMS no Brasil
350
300
250
Nmero de Municpios
200
150
100
50
Sergipe
Amazonas
Roraima
Esprito Santo
Mato Grosso
R. Gde do Norte
Pernambuco
Paraba
So Paulo
Acre
Bahia
Rondnia
Piau
Tocantins
Par
Paran
Cear
Maranho
Gois
Minas Gerais
Alagoas
Unidades da Federao
38
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
500
24,2%
400
18,7%
Nmero de Municpios
15,3% 14,6%
300
13,5%
200
7,1%
4,1%
100
1,6% 0,6% 0,4%
0
At 2 2a5 5 a 10 10 a 15 15 a 20 20 a 30 30 a 50 50 a 100 100 a Acima
150 de 150
Populao (hab. x 1.000)
A Tabela 7.1 apresenta os extremos do indicador investimento per capita para cada uma das
combinaes das aes de saneamento apresentadas anteriormente. A combinao de gua + Esgoto +
Melhorias Sanitrias Domiciliares apresentou a maior variao do investimento per capita (R$ 3,00 a R$
954,00) e o mais elevado valor de mediana (R$ 155,50), enquanto a menor mediana era apresentada pelas
Melhorias Sanitrias Domiciliares e a menor variao pela combinao gua + Esgoto.
Tabela 7.1. Nmero de municpios e valores per capita de investimento segundo tipo de interveno de
saneamento
39
Ministrio da Sade / Representao da OPAS/OMS no Brasil
40
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
41
Ministrio da Sade / Representao da OPAS/OMS no Brasil
A representao grfica segundo este critrio indicou que os municpios eram bastante semelhantes no
que dizia respeito aos escores relativos aos fatores de educao e renda, diferenciando-se apenas quanto aos
de saneamento (esgotamento sanitrio e canalizao de gua e sanitrio no domiclio).
Decidiu-se ento por realizar as anlises para avaliao das intervenes considerando os municpios
distribudos nos trs grupos apresentados na Tabela 7.2 segundo os escores (ndices sintticos produzidos
pela Anlise de Componentes principais) relativos situao de saneamento no ano 2000 (Figura 7.4).
Distribuio dos municpios a partir dos fatores selecionados*
1,5
1
Esgotamento sanitrio
0,5
-0,5
-1
-1,5
N=1.846
-2
-2,5
-3
-3,5
-4
-4 -3,5 -3 -2,5 -2 -1,5 -1 -0,5 0 0,5 1 1,5 2 2,5 3
gua canalizada e sanitrios no domiclio
* % domicliosligados rede de esgotamento sanitrio (ES), com instalaes sanitrias e gua canalizada dentro da residncia (gua e instalaes sanitrias)
Figura 7.4. Distribuio dos municpios includos no estudo segundo os escores produzidos pela anlise de
componentes principais a partir de fatores selecionados* (Brasil, 2000)
DEFINIO DA AMOSTRA
Uma das estratgias do desenho metodolgico dos diferentes eixos desta avaliao envolve coleta de
dados primrios em municpios selecionados dentre os 1.846 includos neste estudo. Esse levantamento de
dados visa desenvolver anlise mais aprofundada dos efeitos sobre a sade e sobre o meio ambiente das
intervenes implementadas, bem como para acompanhar e avaliar o processo de implantao das obras
efetivamente realizadas.
Ao se analisar o indicador de investimento per capita, verificou-se que a grande maioria dos
municpios seria beneficiada com recursos de pequena monta, o que resultaria em intervenes pontuais
dentro de cada cidade ou localidade. Esta constatao apontou para a inadequao de uma seleo por meio
42
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
de sorteio aleatrio simples, por partilha proporcional ou mesmo de modo estratificado, por ser bem maior
a probabilidade de serem includos estes pequenos projetos, o que tornaria mais difcil captar e mensurar os
efeitos das intervenes ao nvel populacional. Deste modo, optou-se por definir critrios de excluso e
seleo dos municpios para esta amostra.
Partiu-se do princpio de que para atender ao principal objetivo do projeto, qual seja, avaliar o impacto
das aes de saneamento na sade, seria necessrio maximizar os efeitos de interesse. Conseqentemente,
para contemplar este pressuposto dever-se-ia considerar municpios que iriam sofrer intervenes de sanea-
mento mais expressivas. Nesta lgica, dois critrios foram logo de incio observados:
I) Tipo de interveno de saneamento que os municpios iriam desenvolver; e
II) Estabelecimento de um valor mnimo do repasse de recursos que seria transferido da FUNASA para
os municpios.
Os trabalhos para determinao da amostra foram desenvolvidos em etapas, nomeadas de 1, 2, 3 e 4,
cujos procedimentos encontram-se detalhados nos itens a seguir.
43
Ministrio da Sade / Representao da OPAS/OMS no Brasil
As informaes registradas nos Termos de Convnios firmados entre os 1.846 municpios e a FUNASA,
condensadas na Tabela 7.3, mostram que mais de 40% dos municpios iriam investir em sistemas de
abastecimento de gua e melhorias sanitrias domiciliares, seguido daqueles com propostas de realizar
unicamente melhorias sanitrias domiciliares (31,8% dos municpios). Em seguida, 11,1% dos municpios
tinham previso de investimentos unicamente em sistemas de abastecimento de gua e 5,6% dos municpi-
os previa investimentos em sistemas de abastecimento de gua e de esgotamento sanitrio e melhorias
sanitrias domiciliares.
Como era apenas um total de 142 os municpios com investimentos nas outras trs combinaes de
interveno, representando, no total, apenas 7,8% da populao do estudo, optou-se por exclu-los, o que
resultou em um n =1.704 municpios.
44
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
gua gua+MSD
300 800
R$/habitante
R$/habitante
600
200
400
100
200
0 0
0 50 100 150 200 0 200 400 600 800
Nmero de municpios Nmero de municpios
MSD gua+Esgoto+MSD
200 1200
1000
150
R$/habitante
800
R$/habitante
100 600
50 400
200
0
0
0 200 400 0 20 40 60 80 100
Nmero de municpios Nmero de municpios
Figura 7.5. Distribuio dos municpios segundo tipo de interveno e investimento per capita.
Tabela 7.4. Nmero de municpios selecionados de acordo com o menor valor per capita de investimento
por tipo de interveno
gua 36 R$ 54/hab.
Esgoto 6 R$ 60/hab.
MSD 97 R$ 35/hab.
gua + Esgoto 8 R$ 50/hab.
gua + MSD 129 R$ 89/hab.
Esgoto + MSD 15 R$ 85/hab.
gua+Esgoto+MSD 23 R$ 300/hab.
Total 314 -
45
Ministrio da Sade / Representao da OPAS/OMS no Brasil
c) Faixa populacional dos municpios, segundo Censo Demogrfico de 2000 (IBGE, 2002):
Municpios com at 10 mil habitantes;
Municpios com populao entre 10 e 20 mil habitantes; e
Municpios com mais de 20 mil habitantes.
A combinao dos trs critrios acima referidos resultou em um total de 24 grupos. Nesta etapa, para
maior garantia de que os investimentos eram expressivos frente populao a ser beneficiada, tornou-se
necessria a anlise mais detalhada dos planos de trabalho dos convnios. Visando otimizar a anlise desses
planos de trabalho que ficam nas Coordenaes Regionais da FUNASA, optou-se por solicitar seis represen-
tantes para cada um dos 24 grupos. Dessa forma, dos municpios que compunham cada um destes grupos
foram sorteados seis, excluindo-se os outros. Alguns dos 24 grupos no continham seis municpios, deste
modo, ao invs de 144 foram selecionados 132 municpios.
Ao se utilizar estes critrios, os municpios selecionados apresentaram distribuio muito semelhante
aos 1.846 quando considerados os fatores 2 (% de domiclios ligados rede de esgotamento sanitrio) e 4 (%
de domiclios com gua e instalaes sanitrias), que foram utilizados na anlise de componentes principais,
como pode ser observado na Figura 7.6. Ademais, esto geograficamente distribudos em quatro das cinco
regies brasileiras e a freqncia dos tipos de aes de saneamento a seguinte:
a) abastecimento de gua, 77%;
b) MSD, 77%;
c) esgotamento sanitrio, 27%.
Observe-se que o mesmo municpio pode ter sido contemplado com mais de uma ao, conforme as
combinaes descritas anteriormente (somente AA, somente MSD, AA+MSD e AA+MSD+ES). Estes achados
revelam que os 132 municpios, embora no tenham sido selecionados de forma aleatria, guardam caracte-
rsticas bastante semelhantes com a populao do estudo.
46
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
1,5
0,5
Distribuio dos municpios a partir dos fatores selecionados*
0
Esgotamento sanitrio
-0,5
-1
-1,5
N=1.846
-2
-2,5
-3
-3,5
-4
-4 -3,5 -3 -2,5 -2 -1,5 -1 -0,5 0 0,5 1 1,5 2 2,5 3
gua canalizada e sanitrios no domiclio
2
1,5
0,5
Esgotamento sanitrio
-0,5
-1
N=132
-1,5
-2
-2,5
-3
-3,5
-4
-4 -3,5 -3 -2,5 -2 -1,5 -1 -0,5 0 0,5 1 1,5 2 2,5 3
gua canalizada e sanitrios no domiclio
* % domiclios ligados rede de esgotamento sanitrio (ES), com instalaes sanitrias e gua canalizada dentro da residncia (gua e instalaes sanitrias)
Figura 7.6. Distribuio dos municpios includos no estudo e dos municpios selecionados na Etapa 3 segundo os
escores produzidos pela anlise de componentes principais a partir de fatores selecionados* (Brasil, 2000)
A sistematizao dos Planos de Trabalho foi realizada considerando-se os principais itens que descre-
vem a obra, organizados em um cadastro com a identificao do municpio (nome, cdigo, populao e aes
previstas) e do programa (ao a ser financiada, descrio sinttica do objeto e plano de aplicao, indicando
as especificaes e custo das obras). Foi possvel ento identificar os municpios em que ocorreram as aes
mais significativas em abastecimento de gua, MSD e esgotamento sanitrio.
47
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Merece destaque que a triagem considerou o critrio da temporalidade. Tendo em vista que a abordagem
metodolgica prev levantamentos antes, durante e aps a ao de saneamento (Figura 6.1), priorizou-se para
incluso nos grupos os municpios que ainda no haviam iniciado e/ou executado intervenes de saneamento.
Fez-se o possvel para que os 24 grupos que compem a amostra estivessem representados por pelo
menos um municpio na amostra reduzida. Todavia, um dos grupos, formado por um s municpio com
nica interveno em Abastecimento de gua, gesto estadual e populao maior que 20 mil habitantes no
foi julgado interessante por apresentar classificao A3 (somente tratamento) e pendncias na prestao de
contas, que fizeram com que sua obra no tivesse sido iniciada at janeiro de 2004. Assim sendo, restaram 23
grupos representados na amostra por 33 municpios.
Esses 33 municpios foram reavaliados de forma que somente um de cada grupo compusesse a amos-
tra reduzida final. Essa discusso priorizou as aes em Abastecimento de gua mais favorveis ao estudo, a
melhores situaes da obra e as localizaes geogrficas acessveis ao grupo de pesquisa do levantamento
primrio.
Este processo permitiu identificar 23 municpios com aes de saneamento mais significativas, repre-
sentando 23 grupos dentre os 24 diferentes grupos definidos na Etapa 3.
REFERNCIAS BIBLIOGRFICAS
IBGE - Instituto Brasileiro de Geografia e Estatstica. (2002). Censo Demogrfico - 2000. Rio de Janeiro, RJ.
Mainly BFJ 1989. Component analysis. Chapter five, p.59-71. In: Multivariate statistical methods: a primer.
London. New York. Chapman and Hill., 159p.
48
CAPTULO 8
EIXO SANEAMENTO
A avaliao do Eixo Saneamento compreende trs dimenses de anlise, que abordam a gesto dos
servios, as condies sanitrias e os aspectos tecnolgicos das aes implementadas. No mbito
dessas dimenses, sero avaliados os seguintes componentes: abastecimento de gua (AA), esgotamento
sanitrio (ES) e melhorias sanitrias domiciliares (MSD). Apesar de no contemplados no Programa de
Saneamento, tambm sero avaliados, em menor grau de profundidade, os componentes: resduos slidos
(RS) e drenagem pluvial (DP), por apresentarem estreita relao com as outras aes de saneamento.
Para subsidiar a proposta metodolgica, foi necessrio definir um conjunto de princpios que
deveriam nortear e conduzir o processo de avaliao. Desse modo, so apresentados os princpios de
uma poltica pblica de saneamento, alm dos conceitos de efetividade, eficcia e eficincia das aes de
saneamento, necessrios para a avaliao nas trs dimenses citadas.
A caracterizao que subsidiar a pesquisa na populao de estudo e na amostra de municpios
dever ser efetuada a partir de um conjunto de indicadores que possa traduzir a situao de tais aes
de saneamento e dimenses de anlise. Os indicadores selecionados foram definidos a partir da adapta-
o do Modelo FPEEEA apresentado no Captulo 5. Para cada campo de anlise do referido modelo,
buscar-se- descrever suas condies por meio dos indicadores mencionados. Nos municpios que cons-
tituem a populao do estudo, as variveis que comporo o banco de dados sero obtidas a partir de
dados secundrios, enquanto que nos municpios da amostra sero utilizados dados primrios.
importante frisar, ainda, que a avaliao ser baseada na comparao das condies tecnolgicas,
sanitrias e de gesto dos servios de saneamento, antes e depois da implementao das intervenes nos
municpios, comparando-as tambm a um padro considerado timo, para que as metas do Programa de
Saneamento possam ser aferidas.
OBJETIVOS
O Eixo Saneamento tem como objetivo geral avaliar a implementao das aes intersetoriais
de saneamento com enfoque na gesto dos servios, nas condies sanitrias da localidade em que as
aes sero implementadas e nos aspectos tecnolgicos dos sistemas de abastecimento de gua, das
melhorias sanitrias domiciliares e dos sistemas de esgotamento sanitrio.
Para tanto, os seguintes objetivos especficos devero ser alcanados:
Definio e seleo de indicadores especficos para cada dimenso de anlise: gesto dos
servios, condies sanitrias e aspectos tecnolgicos;
Elaborao de metodologia para avaliao integrada das aes de saneamento.
49
Ministrio da Sade / Representao da OPAS/OMS no Brasil
A promoo das aes de saneamento deve ter uma abordagem pblica, o que resulta no
fortalecimento do papel do Estado.
Considerando os contedos que vm norteando a defesa de uma poltica pblica de saneamento para
o Brasil, pontuam-se alguns princpios que vm sendo defendidos em vrios fruns (Brasil, 2000; Moraes e
Oliveira, 2000; Moraes e Borja, 2001; Montenegro et al., 2001):
Universalidade - atendimento universal da populao alvo das aes de saneamento;
Eqidade - equivalncia na qualidade sanitria dos servios, independente das condies scio-
econmicas do usurio e da realidade urbanstica de onde vive;
Integralidade - atendimento pelos servios de saneamento com uma viso que entenda o
saneamento como um conjunto de aes, envolvendo pelo menos o abastecimento de gua, o
esgotamento sanitrio, a limpeza pblica, a drenagem pluvial e o controle de vetores;
Titularidade municipal - reconhecimento e respeito autonomia municipal, em coerncia com
o preceito constitucional;
Participao e controle social - como requisito indispensvel para tornar visvel e legitimada a
diversidade de interesses, bem como para a apropriao dos equipamentos de saneamento pela
populao;
Intersetorialidade - integrao com o desenvolvimento urbano, a sade pblica e com as reas
ambiental e de recursos hdricos, entendida como indispensvel para se atingir o pleno xito das
aes, por natureza, complexas;
Qualidade dos servios - incluindo a regularidade, a continuidade, a eficincia, a segurana, a
atualidade, a cortesia e a modicidade dos custos;
Acesso - compatibilizao da poltica tarifria com o poder aquisitivo do usurio, mediante a
prtica da modicidade dos preos.
Dessas consideraes, entende-se que os servios de saneamento devem ter como meta atender a esses
princpios fundamentais. Uma vez que esses princpios sejam atendidos, temos a situao onde o servio de
saneamento atingiu o padro timo. Esse conceito de padro timo ser importante no processo de avaliao
e seu emprego indica a necessidade de se estabelecer uma metodologia para a definio desse padro timo.
50
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
EFETIVIDADE
No campo das polticas pblicas, a avaliao de efetividade envolve o exame da relao entre a
implementao de um determinado programa e seus impactos e resultados, isto , o sucesso ou o
fracasso em termos de uma efetiva mudana nas condies sociais prvias da vida das populaes
atingidas pelo programa sob avaliao (Figueiredo e Figueiredo, 1986).
A efetividade de uma poltica pblica est fortemente relacionada a determinados ideais de igualdade e
justia social. na avaliao da efetividade que se deve demonstrar que uma determinada realidade social tem
uma relao de causalidade com uma poltica em particular. Nesse ponto, reside a maior dificuldade
metodolgica da avaliao de efetividade, uma vez que se deve demonstrar que os resultados esto relaciona-
dos aos produtos oferecidos por uma dada poltica sob anlise.
Assim, a efetividade ser avaliada a partir de trs questes bsicas:
Em que medida ocorreu a efetiva mudana nas condies de saneamento das populaes
beneficiadas pelo Programa de Saneamento?
Em que medida essas mudanas tm relao com o Programa de Saneamento?
Em que medida os resultados do Programa de Saneamento se afastaram ou se aproximaram dos
princpios de uma poltica pblica de saneamento que promova a justia social e ambiental?
EFICCIA
No campo das polticas pblicas, a avaliao de eficcia usualmente mais aplicada por ser mais
factvel e de menor custo. Essa avaliao refere-se ao estudo da verificao dos objetivos e instrumentos
explcitos de um determinado programa e seus resultados efetivos (Figueiredo e Figueiredo, 1986). Nesse tipo
de avaliao, podem ser verificados as metas ou instrumentos propostos e os efetivamente atingidos ou
empregados. Segundo Rico et al. (1998), o avaliador compara, por exemplo, as metas propostas e as atingi-
das, com base nas informaes disponveis, e conclui pelo sucesso ou fracasso da poltica.
A eficcia ser avaliada a partir da seguinte questo:
Os objetivos e metas propostos pelo Programa de Saneamento foram atingidos?
EFICINCIA
No campo das polticas pblicas, a avaliao da eficincia envolve o estudo da relao entre o esforo
empregado na implementao de uma dada poltica e os seus resultados alcanados (Figueiredo e
51
Ministrio da Sade / Representao da OPAS/OMS no Brasil
Figueiredo, 1986). Para Rico et al. (1998), a avaliao de eficincia hoje a mais necessria e urgente em face
da escassez de recursos pblicos que exige maior racionalizao de gastos. Alm disso, os autores acreditam
que esses estudos so importantes porque paralelamente escassez de recursos existe uma ampliao das
populaes que necessitam ser atingidas pelas polticas sociais.
Finalmente, Rico et al. (1998) ressaltam que a avaliao de eficincia atende a princpios democrti-
cos, pois a utilizao de recursos pblicos na implementao de polticas envolve a necessidade de se garantir
a probidade, competncia e eficincia no uso dos mesmos, sendo uma condio para a confiana pblica no
Estado e nas suas instituies. Os autores alertam para o fato de que necessrio fazer uma distino entre os
conceitos de eficincia do setor pblico e do setor privado. Enquanto o setor privado busca custos mais
reduzidos e os melhores resultados, o setor pblico no pode trabalhar apenas com essa lgica. Rico et al.
(1998) citam, como exemplo:
(...) dado o objetivo de reduo de desigualdades, justifica-se uma poltica de subsdios, o que
no est de acordo com uma concepo de eficincia que busca apenas minimizar custos. No
entanto, este instrumento no elimina a necessidade de aplicar uma poltica de subsdios com o
maior grau de eficincia possvel, eliminando custos desnecessrios e no condizentes com o
princpio da equidade.
A eficincia ser avaliada considerando-se as seguintes questes:
O Programa de Saneamento foi implementado segundo princpios de justia social, de moralidade
e de probidade administrativa?
Durante a execuo do Programa de Saneamento ocorreu uma aplicao criteriosa dos recursos
financeiros e humanos?
O processo de implementao do Programa de Saneamento atendeu a um cronograma fsico de
execuo factvel?
52
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
53
Ministrio da Sade / Representao da OPAS/OMS no Brasil
Com base nesses enfoques, essa dimenso consistir da avaliao dos indicadores que caracterizam
a realidade sanitria da populao, buscando identificar o papel da interveno nessa evoluo. Compara-
r os indicadores com a condio sanitria ideal, conforme definido, embora tambm deva observar a
evoluo dos indicadores antes e depois, dessa forma verificando o impacto (a efetividade) do Programa
de Saneamento.
54
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
METODOLOGIA
O desenvolvimento, no Captulo 5, das questes a serem investigadas na avaliao conduziu formu-
lao da seguinte questo geral em que se estrutura o projeto de avaliao:
Para o equacionamento dessa questo, que procura explorar o conceito de xito e identificar o padro
de xito a ser buscado e o paradigma da situao de saneamento adequado, deve-se levar em considerao os
princpios enunciados de uma poltica pblica de saneamento: universalidade, eqidade, integralidade,
titularidade municipal, gesto pblica, participao e controle social, intersetorialidade, qualidade
dos servios e acesso.
Nesse contexto, para cada dimenso de anlise proposta pelo Eixo Saneamento, a questo geral se
desdobra da seguinte forma:
Em que grau o modelo de gesto se aproxima do modelo de gesto dos servios de saneamento?
Em que grau as condies sanitrias das populaes das localidades de interveno se aproximam
das ideais?
Em que grau a concepo e a prtica tecnolgicas se aproximam do ideal?
Para se avaliar o grau de xito, apontam-se, basicamente, duas estratgias: (a) verificao das transfor-
maes nos municpios em anlise, comparando as realidades antes e depois das intervenes previstas pelo
Programa de Saneamento; e (b) comparao da realidade verificada aps a interveno de saneamento e um
padro timo, a ser definido.
Para a pesquisa na populao de estudo, entende-se ser mais apropriado estabelecer a avaliao para
as duas alternativas, ao passo que na amostra imagina-se ser mais razovel a comparao da realidade aps a
ao de saneamento com um padro timo. Tal deciso se ampara no fato de que, na populao de estudo,
preponderantemente ser possvel obter as informaes antes e depois, ao passo que, na amostra, essa
possibilidade talvez no seja vivel para a maioria das informaes. Ressalta-se, ainda, que a pesquisa na
populao de estudo considerar o municpio como base espacial de avaliao, enquanto a pesquisa na
amostra dever priorizar a localidade objeto das aes de saneamento.
Esse desenho metodolgico encontra-se apresentado na Figura 8.1.
A deciso de utilizar a comparao da realidade aps a ao de saneamento com um padro timo
remete necessidade de se estabelecer uma metodologia para a definio desse padro timo. O
padro timo pode ser definido para cada indicador por um processo de consulta amplo, envolvendo uma
tcnica de consenso. Os quesitos apontados anteriormente que compem a presente avaliao (universalida-
de, eqidade, dentre outros) sero a base para essa definio. A base legal tambm fundamental, citando-se,
como exemplo, as Normas Brasileiras sobre sistemas de saneamento, editadas pela ABNT, resolues do
CONAMA Conselho Nacional de Meio Ambiente e Portarias do Ministrio da Sade.
55
Ministrio da Sade / Representao da OPAS/OMS no Brasil
to t1 t2
Estgio antes da Estgio durante a Estgio aps a
Dimenso da Mtodo de
interveno interveno interveno
avaliao avaliao
Populao Populao Populao
Amostra Amostra Amostra
do estudo do estudo do estudo
Coleta de Coleta de Coleta de Comparao com
Gesto dos dados dados dados padro timo e
- - -
servios secundrios secundrios primrios antes/depois
Avaliao da
Aspectos Anlise dos Avaliao da O&M e Comparao com
- execuo das apropriao
tecnolgicos projetos padro timo
obras pela
populao
56
Poltica de Ausncia de Poltica de
Foras saneamento programa de incluso social
Motrizes inxistente ou educao sanitria inexistente ou
(FM) inadequada e ambiental inadequada
(FM1) (FM2) (FM3)
Populao Populao
Populao exposta Populao residente
consumindo gua consumindo gua Populao exposta
Exposio a ambiente em domiclio
em quantidade de qualidade a vetores
(Ex) insalubre insalubre
insuficiente inadequada (Ex5)
(Ex3) (Ex4)
(Ex1) (Ex2)
57
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Ministrio da Sade / Representao da OPAS/OMS no Brasil
A partir da Figura 8.2, foram definidos indicadores para representar os campos de anlise relativos
Presso, Estado e Exposio. Cada campo de anlise recebeu um cdigo para ser correlacionado posterior-
mente aos respectivos indicadores. importante frisar que as alteraes foram realizadas de modo a garantir
que a nova conformao do Modelo FPEEEA no comprometeria o desenvolvimento da cadeia de causa e
efeito empregada na elaborao do modelo original.
58
Tabela 8.1. Relao de fontes de dados secundrios
59
internacionais de interesse entre essas instituies e os municpios de interesse
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Ministrio da Sade / Representao da OPAS/OMS no Brasil
APOIO LOGSTICO
Uma das tarefas de planejamento mais importante para a execuo do trabalho de campo aquela
responsvel pelo apoio logstico. Nessa etapa, deve-se municiar o pesquisador com equipamentos e instru-
mentos de coleta de dados, alm da organizao quanto viagem, hospedagem, deslocamentos e contatos
prvios com as Coordenaes Regionais da FUNASA.
60
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
61
Ministrio da Sade / Representao da OPAS/OMS no Brasil
62
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Quantidade de domiclios com coleta % da rea (mancha) urbana atendida Quantidade de domiclios situados em
at 2 vezes por semana por MacroDrenagem rea de preservao permanente APP
Quantidade de domiclios com coleta 3 Total de ruas (CONAMA 303)
vezes ou mais por semana Quantidade de ruas pavimentadas Quantidade de domiclios situados em
Quantidade de domiclios com coleta (asfalto/ paraleleppedo/ blocket) rea de preservao permanente APP
direta
Quantidade de ruas com sarjeta/ guia (encosta) acima de declividade limite
Quantidade de domiclios com coleta
indireta Quantidade de ruas com galerias Quantidade de domiclios situados em
Quantidade de domiclios com coleta Quantidade de pessoas (ou domiclios) unidades de conservao
pblica de lixo expostas a inundaes e empoamentos Quantidade de domiclios situados em
Quantidade de domiclios com lixo Quantidade de pessoas (ou domiclios) rea de proteo de manancial
jogado no solo ou em cursos de gua que ocupam reas abaixo da cota de
Quantidade de domiclios prximos a inundamento
vala negra e lixo/terreno baldio/rea Domiclios localizados em rua com
despejo (condies insalubres) microdrenagem
Quantidade de domiclios que Quantidade de ruas sujeitas a
despejam lixo em coleo hdrica
empoamentos
Populao (ou domiclios) que se utiliza
de ambientes aquticos
Quantidade de pessoas (ou domiclios)
em contato com esgoto e lixo
Quantidade de pessoas <5anos em
contato com esgoto e lixo
63
Ministrio da Sade / Representao da OPAS/OMS no Brasil
continua
64
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
65
Ministrio da Sade / Representao da OPAS/OMS no Brasil
66
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
67
Ministrio da Sade / Representao da OPAS/OMS no Brasil
CONSIDERAES FINAIS
Uma ltima definio metodolgica importante diz respeito a como se dar a avaliao aps a confor-
mao do banco de dados com os indicadores e variveis definidos a partir do Modelo FPEEEA. Algumas
dvidas se colocam. Sero utilizados ndices compostos ou buscar-se- interpretar cada indicador isolada-
mente?
A construo de ndices compostos contm algumas fragilidades. Um dado municpio ou localidade
pode apresentar, por exemplo, um ndice de condies sanitrias extraordinrias, no entanto determinado
indicador que compe tal ndice pode apresentar fragilidades graves. Os ndices so mais apropriados para
avaliar melhor uns componentes e dimenses do que outros. Os ndices so mais apropriados para comparar
municpios, o que no o caso dessa avaliao.
Entretanto, mesmo considerando tais fragilidades, julga-se conveniente adotar ndices compostos de
indicadores, com as seguintes observaes:
Definir ndices por campo de anlise, por dimenso e por componente;
Utilizar os ndices para subsidiar um julgamento mais amplo, pois somente o indicador isolado
pode avaliar detalhadamente os pontos que merecem ser melhorados ou corrigidos;
Adotar pesos por cada indicador para compor o ndice, considerando as condies em que as
situaes extremas se reflitam no ndice.
Para a anlise das dimenses sanitrias e de gesto, pode-se almejar a construo de um ndice de
Desenvolvimento Sanitrio IDS composto para cada municpio, a partir de outros indicadores, tambm
compostos, de abastecimento de gua, de esgotamento sanitrio e de instalaes sanitrias domiciliares, por
exemplo, conforme procedimento proposto por Borja e Moraes (2000). Aps o clculo dos indicadores, os
dados podem ser uniformizados pela mesma metodologia utilizada em outros estudos, como o desenvolvido
pelo PNUD na construo do IDH.
REFERNCIAS BIBLIOGRFICAS
Belloni, I., Magalhes, H., Sousa, L.C. Metodologia de Avaliao em Polticas Pblicas. Uma experincia em
educao profissional. Cortez, So Paulo.
Borja, P.C. e Moraes, L.R.S. (2000). Indicadores de Sade Ambiental - Saneamento em polticas Pblicas:
Anlise Crtica e Proposta. In: XXVII Congreso Interamericano de Ingenieria Sanitaria y Ambiental, Porto
Alegre.
Brasil. (2002). Diagnstico dos servios de gua e esgotos - SNIS 2001. SEDU/PR - IPEA, Braslia, Brasil.
Ferreira, A. (2000). Dicionrio da Lngua Portuguesa. Editora Nova Fronteira, Rio de Janeiro.
Figueiredo, M. e Figueiredo, A. (1986). Avaliao poltica e avaliao de polticas: um quadro de referncia
terica. Anlise e Conjuntura. Fundao Joo Pinheiro, Belo Horizonte.
Hartz, Z.M.A. (1997). Avaliao em sade dos modelos conceituais prtica na anlise da implantao de
programas. FIOCRUZ, Rio de Janeiro, RJ, 131p.
68
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
IBGE - Instituto Brasileiro de Geografia e Estatstica. (2002). Censo Demogrfico - 2000. Rio de Janeiro, RJ.
IBGE - Instituto Brasileiro de Geografia e Estatstica. (2002). Pesquisa Nacional de Saneamento Bsico - 2000.
IBGE, Rio de Janeiro, RJ, 487p.
Montenegro, M.H.F., Aguiar, A.M.S., Andrade, I., Souza, J.A. de, Henriques, M.M. (2001). Plano de gesto: A
regulao do operador pblico dos servios de gua e esgotos. In: 21 Congresso Brasileiro de Engenharia
Sanitaria e Ambiental, Joo Pessoa,17p.
Moraes, L.R.S. e Borja, P.C. (2001). Poltica e Regulamentao do Saneamento na Bahia: situao atual e
necessidade de arcabouo jurdico-institucional. In: 21 Congresso Brasileiro de Engenharia Sanitria e
Ambiental, Joo Pessoa, 20p.
Moraes, L.R.S. e Oliveira Filho, A. (2000). Poltica e Regulamentao do Saneamento no Brasil: Anlise
Contempornea e Perspectivas. In: IX SIMPSIO LUSO BRASILEIRO DE ENGENHARIA SANITRIA E
AMBIENTAL, Porto Seguro, 1848-1859.
Rico, E.M., Saul, A.M., Fonseca, A.M.M., Fagnani, E., Perez, J.R.R., Melo, M.A., Carvalho, M.C.B., Pestana,
M.I.G.S., Arretche, M.T., Faria, R.M. Rios, T., e Lobo, T. (1998). Avaliao de Polticas Sociais: Uma Questo
em Debate. Cortez: Instituto de Estudos Especiais, So Paulo.
69
CAPTULO 9
EIXO ANTROPOLGICO
OBJETIVOS
Este eixo tem como objetivo geral compreender as aes de saneamento ambiental em suas conexes
e seus desdobramentos no modo de vida e nas condies de sade das populaes envolvidas. Visa, ainda,
a contribuir para a crtica qualitativa dos indicadores quantitativos, usualmente presentes nas avaliaes das
polticas de saneamento. Para tanto, buscar-se- investigar as seguintes dimenses especficas:
1. Representaes sobre doenas e prticas de cura, focalizando as doenas oriundas do ambiente
contaminado;
2. Percepes e atitudes em relao gua e a seus usos;
71
Ministrio da Sade / Representao da OPAS/OMS no Brasil
72
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
corretas, as obras de esgotamento sanitrio e de abastecimento de gua, por exemplo, nem sempre so
eficazes na diminuio da incidncia de doenas oriundas de um ambiente contaminado.
Em recente estudo na localidade de So Sebastio (DF), Rissoli (2001) verificou que no houve a
interrupo do ciclo de contaminao da populao no que se refere gua e ao esgoto, mesmo aps os
investimentos pblicos em sistemas de abastecimento de gua e de esgotamento sanitrio. Uma parcela signi-
ficativa da populao de So Sebastio continuava consumindo a gua dos poos, em detrimento da gua
disponibilizada pela Companhia de Saneamento do DF (CAESB). As alegaes apresentadas para esta escolha
foram, entre outras, a qualidade da gua da CAESB (tem gosto ruim, tem muito cloro, parece leite,
salobra, quando cozinha a panela fica preta etc.) e o preo da gua. Diagnsticos deste tipo vieram a
revelar a importncia da dimenso no tcnica no planejamento das aes em saneamento. Conhecer o modo
de vida e os valores da populao a ser contemplada revelou-se to importante quanto a definio da obra de
engenharia a ser realizada.
Por tal mudana de concepo, a populao a ser beneficiada vem sendo reconsiderada em sua
condio de sujeito ativo que deve interagir e se apropriar das diferentes aes de saneamento a partir de seu
horizonte cultural, tanto nos momentos de concepo, planejamento, execuo e gesto das polticas pbli-
cas, quanto no que concerne ao modo como as compreende e delas se utiliza na sua vida cotidiana. Sendo
longa a tradio dos estudos antropolgicos na investigao da diversidade cultural e social dos grupos
humanos, a antropologia dispe de um rico arsenal terico e metodolgico para a orientao de pesquisas no
mbito das representaes e interaes sociais em suas mltiplas dimenses. No que se refere ao contedo
especfico deste eixo sade e saneamento na vida cotidiana e da perspectiva da participao e controle social
das polticas pblicas , destacam-se os trabalhos produzidos em: (1) antropologia da sade, (2) antropo-
logia da poltica e (3) nos chamados estudos de comunidade.
A preocupao com a temtica da sade, embora tenha ganhado impulso nos anos 1970, est
presente desde os primeiros trabalhos antropolgicos. Os estudos de W.H.R. Rivers, datados da segunda
dcada do sculo passado, representam iniciativa pioneira no campo da antropologia mdica. Rivers
antroplogo, mdico e psiclogo constatou, a partir de seu contato com povos ento ditos primitivos, que as
elaboraes culturais sobre a causao da doena seriam a principal chave para a compreenso das
distintas noes de doena, diagnstico, prognstico e cura (Rivers, 1924). Tal diversidade de causas foi por
ele classificada em trs categorias:
1) a da ao humana, traduzida na crena de que a doena ocorre devido ao levada a cabo por
um ser humano (feitio, bruxaria e outras formas de magia);
2) a da ao espiritual ou sobrenatural, que atribui a causa da doena ao de algum agente no
humano (espritos, divindades e outras formas de personificao do sobrenatural);
3) a das foras naturais, que engloba a crena nas causas naturais como fator provocador da doena
(ao de organismos vivos, do fogo, do calor e do frio, entre outras).
Assim, Rivers verificou que as explicaes sobre os fenmenos que levam perda das foras vitais e
morte, embora no orientadas pela racionalidade do saber mdico, revelam-se sempre portadoras de um
esquema lgico se consideradas no contexto social no qual se manifestam. Ainda hoje, o campo da reflexo
sobre as interfaces entre a ordem biolgica e a ordem cultural mantm conexes de continuidade com as
linhas estabelecidas por Rivers, enveredando por investigaes em torno de, por um lado, formas de
73
Ministrio da Sade / Representao da OPAS/OMS no Brasil
METODOLOGIA
O mtodo de pesquisa de campo intensiva, prprio da tradio antropolgica, o parmetro desta
avaliao sociocultural. Inspira-se nos estudos de pequenas formaes sociais grafas que caracterizaram os
primeiros trabalhos da disciplina. Nestes, o levantamento de informaes dava-se prioritariamente por meio
do contato ntimo e prolongado com os grupos investigados, envolvendo o aprendizado dos cdigos e lingua-
gem locais. O que inicialmente poderia parecer uma imposio do objeto em si, revelou-se uma concepo
74
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
metodolgica eficaz para a compreenso de universos humanos de natureza bastante diversificada. Assim, o
desenvolvimento de tcnicas especficas de coleta de dados deu-se no mbito da construo dessa abordagem
que busca apreender o modo de vida dos grupos, englobando, a partir do olhar dos sujeitos, trs dimenses
principais: relaes e prticas cotidianas, instituies sociais e vises de mundo. Na metfora utilizada pelo
autor que considerado o paradigma da moderna pesquisa de campo, tais dimenses seriam a carne e o
sangue, o esqueleto e o esprito da existncia social (Malinowski, 1922).
Da perspectiva do marco conceitual especfico que orienta o projeto Avaliao de Impacto na Sade
das Aes de Saneamento, a pesquisa de campo intensiva reafirma a considerao do universo investigado
em sua totalidade para:
1. a observncia das mltiplas cadeias de causalidades envolvidas, direta ou indiretamente, nas aes
de saneamento e seus impactos na sade;
2. a investigao das complexas redes de relaes locais e suas hierarquias (materiais e simblicas),
no contexto das quais as aes de polticas pblicas so implementadas, de modo a refinar, tanto
em dimenso micro quanto macro, a compreenso das possveis estratgias de atuao sobre a
realidade; e
3. a apreenso de trs diferentes momentos de implementao das aes de saneamento, a saber:
antes do incio da interveno (t0), durante a realizao da ao (t1) e aps a sua concluso (t2), de
modo a compreender a dinmica e os processos de produo e transformao da realidade
focalizada.
Buscar-se-, com a investigao aprofundada em poucos municpios, contribuir para o aprimoramen-
to dos indicadores de saneamento e sade inspirados no Modelo FPEEEA (Foras Motrizes, Presses, Esta-
dos, Exposies, Efeitos e Aes) proposto pela Organizao Mundial de Sade-OMS (Von Schirnding 1998;
Corvalan, C.; Briggs, D.; Zielhus, G.). Tais indicadores podem estar articulados, por exemplo, em torno dos
seguintes conjuntos de questes:
1. inexistncia ou inadequao de polticas pblicas (de saneamento; de sade; de meio ambiente; e
de incluso social);
2. acessibilidade, inadequao ou inexistncia dos servios (de atendimento comunitrio de sade;
de gua, de esgoto, de coleta e destino de lixo e de drenagem);
3. insalubridade do meio ambiente e higiene domiciliar e pessoal inadequadas;
4. exposio da populao a vetores e a condies ambientais e domiciliares inadequadas.
A anlise qualitativa de indicadores exige dos pesquisadores das cincias humanas e, em particular, da
antropologia, o desenvolvimento de estratgias metodolgicas que possibilitem apreender tanto as elabora-
es conscientes desenvolvidas pelos diferentes sujeitos acerca das aes de saneamento, quanto as dimen-
ses valorativas e vivenciadas no cotidiano, nem sempre conscientes. Se na abordagem qualitativa dificilmente
o universo investigado pode ser reduzido a modelos estatsticos/matemticos, tampouco a considerao de
um aspecto particular da realidade pode prescindir da percepo do conjunto de processos, dimenses e
temporalidades envolventes. Dessa forma, para alcanar os objetivos propostos compreender as interven-
es de saneamento e seus desdobramentos no modo de vida de grupos sociais; e contribuir para a crtica
qualitativa dos indicadores de saneamento e sade o desenho da pesquisa de campo requer a incorpora-
75
Ministrio da Sade / Representao da OPAS/OMS no Brasil
76
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
77
Ministrio da Sade / Representao da OPAS/OMS no Brasil
uma reflexo coletiva que transcende a soma das opinies individuais. Ser potencialmente utilizada para
investigao junto a moradores das reas objeto de intervenes, lideranas comunitrias, profissionais e
tcnicos dos servios de saneamento, sade e educao.
Procurar-se- abordar em especial as opinies sobre os servios em suas diferentes fases (planeja-
mento, implementao, manuteno e atendimento ao usurio): grau de satisfao, respostas s expectativas,
acesso s informaes, avaliao das tecnologias utilizadas, dos critrios de alocao de recursos e as mudan-
as ocorridas nas rotinas da vida local.
Entrevistas
Trata-se de levantar informaes por meio de entrevistas individuais, apoiadas por um roteiro
temtico aberto. As entrevistas seguem um esquema geral, mas podem incorporar temas adicionais que
paream pertinentes a cada um dos sujeitos em questo, prioritariamente, decisores e gestores em diferentes
nveis: prefeitos e vereadores, gerentes de servios, secretrios estaduais e municipais. Por tal procedimento
pretende-se levantar informaes concernentes existncia de participao e de controle social, de servios
de atendimento aos usurios, a relao entre partidos polticos e administrao pblica, aos critrios de
alocao dos recursos, s disponibilidade e acessibilidade das informaes, ao grau de desenvolvimento
institucional (integrao de servios e das administraes estadual e municipal, programas intersetoriais,
extenso das aes), s operacionalidade e manuteno dos servios.
2) Pesquisa em fontes secundrias
A pesquisa secundria implica na reorganizao dos dados disponveis, configurando-se numa etapa
importante da investigao. Sua contribuio se ordenar em complementaridade e em relao aos dados
colhidos em campo por meio da observao direta, grupos de discusso e entrevistas. Esta etapa pressupe:
levantamentos bibliogrficos e documentais (legislao, avaliaes e diagnsticos, peridicos);
pesquisa em banco de dados e sites (IBGE, CNBB, partidos polticos, rgos pblicos etc.);
levantamentos de dados obtidos junto aos rgos da administrao pblica estadual e municipal,
tais como secretarias de sade, de educao, de obras e de meio ambiente, e empresas prestadoras
de servios de saneamento; e
pesquisa histrica (arquivos municipais e estaduais, acervos dos Ministrios e da Biblioteca
Nacional).
Para assegurar uma eficcia mxima pesquisa de fontes secundrias, oportuno que a mesma se d
em absoluta complementaridade com as visitas a campo, que devem ser precedidas de uma minuciosa prepa-
rao bibliogrfica. O objetivo deste levantamento instrumentalizar os pesquisadores com as informaes j
disponveis sobre os municpios, devendo ter continuidade durante a pesquisa de campo no que se refere a
dados municipais em arquivos locais.
CONSIDERAES FINAIS
Uma ltima colocao terico-metodolgica deve ser feita com relao ao fato de que, embora os
pesquisadores envolvidos na investigao especfica do eixo antropolgico tenham questes muito definidas,
estas no devem configurar uma camisa de fora na realizao da pesquisa de campo. Os objetivos gerais e
78
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
REFERNCIAS BIBLIOGRFICAS
Bastide, Roger. 1971. Negros no Brasil: religio, medicina e magia. So Paulo: EdUSP.
Bernardes, Ricardo S. 2002. Proposta Metodolgica de Avaliao das Aes de Saneamento do Projeto Alvo-
rada. Braslia, novembro (Mimeo).
Bezerra, Marcos Otvio. 1995. Corrupo. Um estudo sobre poder pblico e relaes pessoais no Brasil. Rio
de Janeiro: ANPOCS/Relume Dumar.
Boltanski, L. 1979. As Classes Sociais e o Corpo. Rio de Janeiro: Graal.
Borja, Patrcia & Morais, Luiz Roberto S. 2003. Indicadores de Sade Ambiental com Enfoque para a rea de
Saneamento: aspectos conceituais e metodolgicos. Engenharia Sanitria e Ambiental, Vol. 8, n0 1 jan/
mar e n0 2 abr/jun, p. 13-25.
Douglas, Mary. 1976. Pureza e Perigo. So Paulo: Ed. Perspectiva.
Duarte, Luiz Fernando D. 1986. Da Vida Nervosa nas Classes Trabalhadoras Urbanas. Rio de Janeiro: Jorge
Zahar Ed.
Dumont, Louis. 1966. Homo Hierarchicus. Les systme des castes et ses implications. Paris: Gallimard.
Durkheim, Emile. 1983. Lies de Sociologia: a moral, o direito e o estado. So Paulo: T. A. Queiroz Editor/
EdUSP.
Evans-Pritchard, E. E. 1937. Witchcraft, Oracles and Magic among the Azande. Oxford: Claredon Press.
Fernandes, Rubem Csar. 1994, Privado porm Pblico. O terceiro setor na Amrica Latina. Rio de Janeiro:
Relume Dumar.
Galvo, Eduardo. 1955. Santos e Visagens: um estudo da vida religiosa de Ita, Amazonas. So Paulo: Cia.
Editora Nacional.
79
Ministrio da Sade / Representao da OPAS/OMS no Brasil
Harris, Marvin. 1953. Minas Velhas: a study of urbanism in the Mountains of Eastern Brazil. Ann Arbor: Univ.
Microfilms Int.
Ibaez-Novin, Martin A. 1978. O anatomista popular: um estudo de caso. Anurio Antropolgico 77. Rio
de Janeiro: Tempo Brasileiro.
Kleinman, Arthur. 1980. Patients and Healers in the Context of Culture: An exploration of the borderland
between anthropology, medicine, and psychiatry. Berkeley: Univ. of California press.
Knauth, D. 1991. Os caminhos da cura: sistema de representaes e prticas sociais sobre a doena em uma
vila de classes populares. Dissertao de Mestrado em Antropologia Social, Programa de Ps-Graduao
em Antropologia Social, Universidade Federal do Rio Grande do Sul, Porto Alegre (RS).
Landim, Leilah. 1993. A inveno das ONGs, do servio invisvel profisso sem nome. Tese de Doutorado,
Programa de Ps-Graduao em Antropologia Social, Museu Nacional, Universidade Federal do Rio de
Janeiro (RJ).
Leal, Ondina (org.). 1995. Corpo e Significado. Ensaios de Antropologia Social. Porto Alegre: Ed. da Universi-
dade/UFRGS.
Leal, Vitor Nunes. 1976. Coronelismo, Enxada e Voto. So Paulo: Ed. Alfa-Omega.
Lewis, Oscar. 1963. Life in a Mexican Village: Tepaztlan restudies. Urbana: Univ. of Illinois Press.
Loyola, M. A. 1984. Mdicos e Curandeiros. So Paulo: Difel.
Malinowiski, Bronislaw. 1978 [1922]. Argonautas do Pacfico Ocidental. So Paulo: Abril Cultural.
Marshal, T. H. 1967. Cidadania, Classe Social e Status. Rio de Janeiro: Zahar.
Mauss, Marcel. 1953-54. La Nation. LAne Sociologique, 3.
Moraes, Luiz R. S. 2003. A Necessidade de Formulao e Implementao, de Forma Democrtica e Integrada,
de polticas Pblicas de Saneamento Ambiental. 1a Conferncia das Cidades da Bahia. (mimeo).
Palmeira, Moacir & Heredia, Beatriz. 1995. Os Comcios e a Poltica de Faces. Anurio Antropolgico, 94.
Rio de Janeiro: Tempo Brasileiro.
Peirano, Mariza G. S. 1975. Proibies alimentares numa comunidade de pescadores. Dissertao de Mestrado
em Antropologia Social, Programa de Ps-Graduao em Antropologia Social, Universidade de Braslia
(DF).
Pierson , Donald. 1966. Cruz das Almas. Rio de Janeiro: Jos Olympio.
Reis, Elisa. 1981. Ruralismo e cidadania. Trabalho apresentado V Reunio da Associao Nacional de Ps-
Graduao e Pesquisa em Cincias Sociais (ANPOCS).
Rissoli, Cesar Augusto. 2001. Diagnstico participativo da situao de sade em So Sebastio-DF, com nfase
na questo do abastecimento de gua e o esgotamento sanitrio. Monografia de Especializao em Sade
Coletiva, Faculdade de Cincias da Sade, Dep. de Sade Coletiva, Universidade de Braslia (DF).
80
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
81
CAPTULO 10
EIXO EPIDEMIOLGICO
OBJETIVOS
O Eixo Epidemiolgico tem como objetivo geral avaliar o impacto produzido pelas interven-
es de saneamento na morbidade e mortalidade por algumas doenas que tm sua ocorrncia relacio-
nada com o saneamento.
O objetivo geral se desdobra nos seguintes objetivos especficos:
Analisar a tendncia da incidncia de febre tifide, hepatites virais e leptospirose;
Analisar a tendncia das taxas de internao por diarria em crianas menores de cinco anos;
Analisar a tendncia da mortalidade por diarria em crianas menores de um ano e menores
de cinco anos;
Analisar a tendncia das taxas de mortalidade infantil e de menores de cinco anos;
83
Ministrio da Sade / Representao da OPAS/OMS no Brasil
84
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
o meio ambiente na sade de populaes, como a proposta deste eixo do estudo, uma tarefa muito mais
complexa, por se tratar de uma interveno que tem efeitos inespecficos que, inclusive, extrapolam o campo
da sade, e confundem-se e interagem com uma srie de outros fatores e intervenes que influenciam, direta
e indiretamente, a determinao do processo sade-doena.
Qualquer que seja a estratgia de avaliao epidemiolgica adotada, no deve ser negligenciado, quer
no desenho do estudo ou na anlise de seus resultados, o fato de que os efeitos esperados podem ser
potencializados ou reduzidos em funo de outros programas sociais, padres de desenvolvimento social e
econmico de cada local, e da durao de exposio interveno de interesse da avaliao. No que diz
respeito a esta ltima, a sua cobertura, acesso e utilizao so elementos que tambm devem ser considerados,
ao lado da adequao das aes ao conhecimento tcnico e cientfico vigente (anlise de implantao). As
avaliaes de efetividade que ignoram estes e outros fatores apresentam resultados bastante diferenciados
com problemas para sua generalizao (Denis & Champagne, 1997; House, 2001). Deve tambm ser obser-
vada a fragilidade dos sistemas de informaes disponveis, particularmente nas reas menos desenvolvidas,
que afeta a disponibilidade, acesso, cobertura e qualidade da informao.
85
Ministrio da Sade / Representao da OPAS/OMS no Brasil
es que permitiu que se obtivesse uma expressiva reduo na mortalidade pelas doenas redutveis por
saneamento. Contudo, a extrema desigualdade social existente no pas, contribui para que permaneam ainda
extensas reas de pobreza e com precria infra-estrutura de saneamento e de sade, que se potencializam e
esto na base da persistncia, ndices relativamente elevados de mortalidade infantil e de morbidade e morta-
lidade por causas evitveis, a exemplo das doenas diarricas e das parasitoses intestinais.
86
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Estes conhecimentos resultam ser de grande relevncia no delineamento metodolgico, j que suge-
rem que em uma avaliao do impacto epidemiolgico de programas de saneamento, a unidade de estudo
seja menos o indivduo e mais a comunidade. (Esrey & Habicht, 1986; Bateman & Smith, 1991).
No se desconhece que atualmente, devido a outras intervenes, os indicadores de mortalidade relacio-
nados com as doenas redutveis por saneamento j se encontram em nveis reduzidos se comparados com os
valores que apresentavam na primeira metade do sculo passado. Entretanto, entende-se que o aporte de gua e
o esgotamento sanitrio ainda desempenham papel fundamental na melhoria do estado de sade das populaes
carentes, e que para mensur-los tem-se que se eleger alguns indicadores especficos de morbidade e mortalida-
de capazes de quantificar estas mudanas. Embora os efeitos resultantes desses benefcios no mais possam ser
facilmente captados pelos indicadores clssicos de mortalidade rotineiramente utilizados, existe uma morbidade
oculta que produz danos sade de indivduos e populaes e que tem sido negligenciada quando da escolha
dos indicadores construdos a partir de dados tradicionalmente coletados de modo sistemtico pelos servios de
sade. Para que a magnitude desta morbidade oculta possa ser estimada, faz-se necessrio buscar dados
primrios ou mesmo dados j disponveis nos servios de sade e que no so sistematicamente analisados para
ento se construir outros indicadores, que aliados aos tradicionais, possibilitem anlises mais completas e que
melhor expressem o impacto de aes sanitrias sobre a sade das comunidades.
A diarria infantil aguda um exemplo de morbidade que tem sua verdadeira magnitude oculta e
sobre a qual o saneamento ambiental tem um expressivo efeito. Se por um lado a mortalidade por esta causa
foi reduzida drasticamente com a implementao da terapia de reidratao oral (TRO), mesmo nas reas de
populaes carentes de saneamento bsico, por outro existem evidncias de limitada reduo na sua incidn-
cia. Episdios destas doenas quando freqentes, interferem no crescimento e desenvolvimento das crianas.
A prevalncia de parasitoses intestinais, ainda muito freqente nas populaes sem acesso ao sanea-
mento, pode revelar o grau de contaminao ambiental por agentes potencialmente patgenos para o ser
humano (Carneiro et al., 2002), alm de existirem evidncias de que estas infeces influenciam no cresci-
mento e desenvolvimento infantil (Kvalsvig, 1988; Kvalsvig et al., 1991). Alguns dos parasitas intestinais tm
seu ciclo biolgico estreitamente relacionado com a oferta da gua em quantidade e qualidade adequadas,
enquanto outros com o esgotamento sanitrio e a disposio de resduos slidos no meio ambiente.
Neste sentido, seguindo o modelo explicativo de causalidade entre saneamento ambiental e morbi-morta-
lidade adotado, optou-se por se empregar na presente avaliao indicadores de doenas infecciosas e parasit-
rias que sejam sensveis e apresentem viabilidade tcnica e operacional para sua obteno, relativos diarria
infantil aguda, parasitoses intestinais e algumas doenas especficas de veiculao hdrica (Figura 10.1).
METODOLOGIA
Como j acentuado no Captulo 5, o processo de avaliao e mensurao dos efeitos de aes de
saneamento na sade de uma populao defronta-se com dificuldades de ordem metodolgica, alm de
problemas conceituais. Os mtodos epidemiolgicos tm limitaes no que diz respeito a permitir ao investi-
gador atribuir, com certeza, s intervenes de saneamento, os possveis desfechos observados, pois uma
srie de outros fatores e intervenes atuando em paralelo tem efeitos sobre tais desfechos. Por sua vez, razes
de ordem operacional e tica descartam o emprego de desenho de estudo randomizado (Almeida Filho,
1999) que, teoricamente, daria mais certeza quanto inferncia de seus resultados.
87
Modelo de
88
Modelo de desenvolvimento Ausncia ou Poltica de Desenvolvimento,
Foras Processo difuso e Transparncia
desenvolvimento socialmente inadequao de Indefinio marco Financiamento desenvolvimentode Precariedade da
Motrizes ambientalmente exclud. e poltica e politicas pblicas legal para o setor pblico instvel e acelerado de apropriao insuficiente e
recursoshumanos tecnolgica democracia
insustentvel economicamente de saneamento de saneamento insuficiente urbanizao corrupo
inadequada insuficiente
subordinado
Figura10.1. Modelo FPEEEA para as aes de saneamento considerando apenas o efeito sobre a sade
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
To T2
1a Etapa (antes) I 2a Etapa (depois)
Levantamento de N
indicadores de sade/ T
saneamento/ E
socioeconmicos
R
V
Classificao e
agregao dos
E
municpios por situao N
de saneamento
O Levantamento de dados
Levantamento de dados Construo de Construo de
do SIM, SINAN e SIH do SIM, SINAN e SIH
indicadores indicadores
1991 - 2003 2004 - 2006 ...
To T1 T2
Anlise de srie temporal (Evoluo e comparao antes/depois)
Figura 10.2. Estratgia I
89
Ministrio da Sade / Representao da OPAS/OMS no Brasil
To
T2
1a Etapa (antes) I a
2 Etapa (depois)
Classificao e seleo N
dos municpios segundo T
tipologia E Inquritos
R coprolgicos
V Levantamento dos
Delimitao da indicadores do SIAB
populao beneficiada
E
Determinao do N
tamanho das amostras
O
Inquritos
coprolgicos Anlise dos dados Anlise dos dados
Levantamento dos (cortes transversais) (cortes transversais)
indicadores do SIAB
To T1 T2
De fato, quando na dinmica dos efeitos estudados possvel (como no caso das doenas transmissveis,
tais como diarria e enteroparasitoses) se identificar uma relao bidirecional entre prevalncia ou incidn-
cia, medidas no nvel coletivo e ocorrncia da doena no indivduo, o estudo ecolgico, acoplado captao
primria de dados individuais, permite detectar efeitos que possivelmente passariam despercebidos em qual-
quer uma das duas abordagens separadas (Susser, M. 1994a e 1994b).
ESTRATGIA I
DESENHO DO ESTUDO
Ser realizado um estudo do tipo ecolgico misto (espao-temporal), em que o agregado espacial
(municpio ou agregado de municpios) em um ano calendrio ser a unidade de anlise.
REA E POPULAO
Sero includos na presente investigao os municpios brasileiros que, em 1991, apresentavam
ndice de Desenvolvimento Humano/IDH inferior a 0,500 e que forem beneficiados pelas aes de saneamen-
to previstas pelo Projeto do MS/FUNASA.
Sero considerados os 1.846 municpios, que em julho de 2002, j haviam apresentado FUNASA
os respectivos Projetos e celebrado Convnio, especificando o tipo de interveno de saneamento que dever
ser executado.
90
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
FONTES DE DADOS/INDICADORES
Sistema de Informaes de Mortalidade (SIM)
- Taxa de mortalidade infantil
- Mortalidade infantil proporcional
- Mortalidade infantil proporcional por diarria
- Mortalidade infantil proporcional por causas mal definidas
- Taxa de mortalidade de menores de cinco anos
- Taxa de mortalidade de menores de cinco anos por diarria
- Mortalidade proporcional de menores de cinco anos por diarria
- Mortalidade proporcional de menores de cinco anos por causas mal definidas.
Sistema de Informaes de Agravos de Notificao (SINAN)
- Taxa de incidncia de febre tifide
- Taxa de incidncia de hepatites virais
- Taxa de incidncia de leptospirose
Sistema de Informaes Hospitalares (SIH)
- Taxa de internao por diarria em menores de cinco anos
PLANO DE ANLISE
Os 1.846 municpios includos no estudo foram classificados e reunidos em seis grupos diferenci-
ados segundo situao anterior de saneamento, a partir do emprego de tcnica estatstica classificatria
denominada Anlise de Componentes Principais conforme descrito no Captulo 7. Chama-se a ateno para
o fato de que esta tcnica classificatria indicou que todos os municpios eram semelhantes quanto s carac-
tersticas socioeconmicas (renda e educao), diferindo apenas quanto situao de saneamento. A seguir,
devero ser adotados os seguintes procedimentos:
a) Anlise da tendncia temporal de sries histricas de indicadores de sade dos grupos de
municpios por tipo de interveno de saneamento; e
b) Identificao e anlise das mudanas nos padres das sries histricas dos indicadores de
sade dos municpios, aps os diferentes tipos de interveno de saneamento, considerando os
grupos de municpios pr-estabelecidos no baseline (caractersticas socioeconmicas e de
saneamento).
A anlise das sries histricas incluir a anlise da tendncia, feita mediante descrio da evoluo
temporal dos indicadores de morbimortalidade selecionados, a partir da comparao da variao de sua
magnitude no perodo de estudo, bem como a inspeo visual das respectivas curvas de tendncia desde um
perodo anterior at alguns anos aps a interveno. Este procedimento aliado comparao, ano a ano, da
variao (em percentual) de cada indicador possibilitar a identificao de possveis mudanas na tendncia
desta curva no perodo posterior interveno. Caso seja observada irregularidade expressiva na evoluo
dos indicadores de sade que dificulte a identificao da tendncia, proceder-se- suavizao destas curvas,
91
Ministrio da Sade / Representao da OPAS/OMS no Brasil
mediante tcnica das mdias mveis com nmero de termos correspondente ao perodo identificado de
flutuao de srie ou, pelo menos, de ordem trs.
A modelagem das sries temporais, que podem ser descritas como sendo a soma dos componentes de
tendncia, sazonalidade, ciclicidade e termo aleatrio, levar em conta a violao da independncia dos
eventos que, nas anlises menos sofisticadas, representa um pressuposto bsico (o fato de, por exemplo, um
caso de doena ocorrer, em uma dada pessoa, independentemente da ocorrncia em outra). Na anlise de
indicadores ecolgicos ao longo do tempo, isso no verdade: a incidncia de uma doena em um determi-
nado dia, ms ou ano correlacionada com a ocorrncia no dia, ms ou ano anterior. Esta correlao,
expressa em uma funo denominada funo de autocorrelao, ser tratada com um modelo de mdia
mvel autoregressiva integrada (ARIMA).
Quanto anlise estatstica da tendncia, a mesma ser realizada mediante ajuste, com regresso de
Poisson (modelagem do erro adequada para eventos raros), dos indicadores correspondentes s sries
temporais relativas aos municpios dos respectivos grupos e tambm considerando todos os municpios,
adotando-se o nvel de significncia de 0,05.
Sero coletadas informaes acerca da existncia e ano de implantao de programas sociais e de
sade como o Programa de Agentes Comunitrios de Sade/Programa de Sade da Famlia, Fome Zero, alm
da cobertura de leitos hospitalares, mdico e de unidades de ateno sade (antes e aps a interveno),
entre outros, de modo a serem consideradas quando da interpretao dos resultados.
Ser tambm realizada a anlise geoestatstica dos eventos e a modelagem espacial propriamente dita,
utilizando um modelo de regresso (tal como SAR simultaneous autoregressive model, CAR conditional
autoregressive model ou MA moving average model) que inclua a dependncia espacial atravs da
especificao do vetor de erros U, com mdia zero, E(U)=0 e matriz de varincia-covarincia E(UUT)=C,
refletindo a dependncia entre as reas.
O processamento e a anlise dos dados sero efetuados com o uso dos pacotes estatsticos SPSS. 10 e
STATA 7.0 e, para ajustar os modelos de autocorrelao espacial, do mdulo espacial do pacote estatstico SPLUS.
ESTRATGIA II
DESENHO DO ESTUDO
Trata-se de uma pesquisa avaliativa do tipo quase-experimental utilizando dados secundrios e
primrios, para analisar em maior profundidade os efeitos das intervenes de saneamento sobre a sade da
populao de uma amostra de municpios beneficiados pelas aes de saneamento.
REAS DE ESTUDO
Sero 23 municpios selecionados conforme descrito no Captulo 7.
92
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
INQURITO DE DIARRIA
Definio de caso: diarria nos ltimos quinze dias referida pela me ou cuidador.
Populao/rea: crianas menores de 5 anos residentes nas reas beneficiadas pelas aes
de saneamento nos 23 municpios selecionados.
Procedimentos de Amostragem:
- Parmetros prevalncia semanal de diarria de 5,8% - valor encontrado em inquritos
anteriores (ISC/UFBA, 2003)
- Erro () amostral mximo igual a 30%.
- Significncia () de 5%.
Seleo das crianas: sorteio de rua e domiclio da rea beneficiada pelas aes de
saneamento, a partir do qual sero visitadas todas as casas at completar o tamanho da amostra.
INQURITO COPROSCPICO
Populao/rea: crianas de 5 a 9 anos residentes nas reas beneficiadas pelas aes de
saneamento nos 23 municpios selecionados.
Procedimentos de Amostragem:
- Parmetros prevalncia de parasitoses intestinais entre 20 a 30% (ISC/UFBA, 2003)
- Erro () amostral mximo igual a 30%.
- Significncia () de 5%.
Seleo das crianas: sorteio de rua e domiclio da rea beneficiada pelas aes de
saneamento, a partir do qual sero visitadas todas as casas at completar o tamanho da
amostra.
A determinao do tamanho da amostra ser efetuada empregando o software Epi Info 6
93
Ministrio da Sade / Representao da OPAS/OMS no Brasil
PLANO DE ANLISE
a) Anlise da variao da tendncia temporal das variveis/indicadores de resultado, considerando
o tipo e combinaes de intervenes, conforme descrito na estratgia I.
b) Clculo das medidas de efeito (Razes de Riscos) e de impacto (Risco Atribuvel/RA%) referentes
incidncia de episdios de diarria e prevalncia de parasitoses intestinais para grupos de
municpios, segundo tipo de interveno recebida. A Razo de Risco da diarria ser estimada
diretamente, como Razo de Incidncia, mediante regresso de Poisson que, no caso de evento
raro (no excedente a uma freqncia de 10%), constitui uma aproximao adequada da
distribuio binomial (que a prevalncia, em si, apresenta). Ser tambm aplicada a modelagem
linear multinvel, com 2 nveis, que envolve dados com estrutura hierrquica, representados, neste
caso, pelas informaes individuais (nvel micro) aninhadas dentro de um nvel superior (nvel
macro), que so as unidades municipais.
c) Anlise de Regresso Linear Mltipla para a quantificao da contribuio de cada tipo de
interveno de saneamento em grupos de municpios com caractersticas sociais e econmicas
similares. Para esta anlise, os indicadores de sade acima referidos sero considerados como
varivel dependente (efeito). Cada tipo de interveno bem como outros possveis fatores
confundidores ou modificadores de efeito sero as covariveis de interesse.
No tocante aos resultados dos inquritos parasitolgicos e da investigao sobre ocorrncia de diar-
ria, as anlises sero realizadas tanto em nvel ecolgico (municpios e agregados de municpios) quanto em
nvel individual, comparando-se grupos de indivduos cujos domiclios foram beneficiados em relao que-
les no beneficiados.
O processamento e a anlise dos dados sero efetuados com o uso dos pacotes estatsticos SPSS. 10 e
STATA 7.0.
CONSIDERAES TICAS
Por se tratar de pesquisa que utilizar material biolgico de seres humanos, o presente protocolo foi
submetido para avaliao do Comit de tica em Pesquisas (CEP) do ISC/UFBA.
94
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
REFERNCIAS BIBLIOGRFICAS
Almeida-Filho, N. & Rouquayrol, M. Z, 1999. Desenhos de Pesquisa em Epidemiologia. Epidemiologia & Sade.
Almeida-Filho, N. & Rouquayrol, MZ . So Paulo; Belo Horizonte, Editora Mdica e Cientifica Ltda. MEDSI.
Azurin J.C. & Alvero, M, 1974. Field evaluation of environmental sanitation measures against cholera. Bull Wld
Hlth Org, 51:19 26.
Baltazar, J., Briscoe, J., Mesola, V., Moe, C., Solon, F., Vanderslice, J. & Young, B. 1988. Can the case-control
method be used to assess the impact of water and sanitation on diarrhoea? study in the Philippines. Bull Wld
Hlth Org, 66(5):627-635.
Bateman, O.M. & Smith, S, 1991. A comparison of the health effects of water supply and sanitation in urban and
rural Guatemala. In: Proceedings of the Demographic and Health Surveys World Conference. Washington,
U.S.A., August 5-7 1991. Volume 2. Edited by Institute for Resource Development, Columbia, pp 1505-1524.
Bern, C., Martines, J., Zoysa, I. & Glass, R.I. The magnitude of the global problem of diarrhoeal diseases: a ten-
year update. Bull Wld Hlth Org, 1992; 70:705-714.
Carneiro, FF, Cifuentes E, Tellez-Rojo MM, Romieu I . The risk of Ascaris lumbricoides infection in children as
an environmental health indicator to guide preventive activities in Caparao and Alto Caparao , Brazil.
Bulletin of the World Health Organization 2002;80:40-46
Chen, H. (1990). Theory - Driven Evaluations. Newbury Park, Sage Publications.
Cvjetanovic, B. 1986.Health effects and impact of water supply and sanitation. World Health Stat Q, 39:105-117.
Denis, J. & Champagne, F. (1997). Anlise da implantao de programas. Avaliao em sade: dos modelos conceituais
prtica na anlise da implantao de programas. Hartz, ZA. (ed.). Rio de Janeiro, FIOCRUZ: 49 - 88.
Esrey, S.A. & Habicht, J.P, 1986. Epidemiologic Evidence for Health Benefits from Improved Water and Sanitation
in Developing Countries. Epidemiol Rev, 8:117 128.
Esrey, S.A., Feachem, R.G. & Hughes, J. Interventions for the control of diarrhoeal disease among young
children: improving water supplies and excreta disposal facilities. Bull Wld Hlth Org, 1985; 63:757 772.
Gross, R., Schell, B., Bisi Molina, M.C., Leo, M.A.C. & Strack, U. 1989. The impact of improvement of water
supply and sanitation facilities on diarrhoea and intestinal parasites: a Brazilian experience with children in
two low income urban communities. Revista de Sade Pblica, So Paulo,23(3):214 220.
Hartz, ZA. & Pouvourville, G, 1998. Avaliao dos programas de sade: a eficincia em questo-. Cincia &
Sade Coletiva 3(1): 68-82.
Hertz, E., Hebert, J.R. & Landon, J. 1994. Social and environmental factors and life expentancy, infant mortality
and maternal mortality rates: results of a cross-national comparison. Soc Sci Med, 39(1):105-114.
House, E. R, 2001. Unfinished Business: causes and values. American Journal of Evaluation 22(3): 309-315.
Huttly, S.R.A. 1990. The impact of inadequate sanitary conditions on health in developing countries. World
Health Stat Q, 43:118-126.
Instituto de Sade Coletiva/Universidade Federal da Bahia Avaliao do impacto epidemiolgico do Progra-
ma de Saneamento Ambiental da Baa de Todos os Santos (Bahia Azul). Salvador, 2002, 263 p.
95
Ministrio da Sade / Representao da OPAS/OMS no Brasil
Kvalsvig DJ (1988) The effects of Parasatic Infection on cognitive Performance. Parasitology Today , vol. 4 no 8,
206-208.
Kvalsvig DJ, Coopan MR, Connolly JK (1991). The effects of parasite infections on Cognitive processes in
Children. Annals of Tropical Medicine and Parasitology, vol 85, no. 5 551-568.
Moraes LRS. Avaliao do impacto sobre a sade das aes de saneamento ambiental em reas pauperizadas
de Salvador- Projeto AISAM. P-260-281. In: Heller L., Moraes LRS., Monteiro TCN., Salles, MJ., Almeida LM.,
Cancio J (Orgs). Saneamento e sade nos pases em desenvolvimento. 1997.
Patel M, 1980. Effects of the health service and environmental factors on infant mortality: the case of Sri Lanka.
J Epidemiol Community Health, 34(2):76-82.
Rosen, G. 1994. Uma histria da Sade Pblica. So Paulo: UNESP/Hucitec/ABRASCO.
Rothman KJ, 1986. Modern Epidemiology. New York:Little Brown.
Santana, VS, Teixeira MG, Santos CCP, 1997. Avaliao das aes de controle da infeco esquistossomtica
nas localidades de Cachoeira-Bahia, Bacia do Paraguau, 1982-1992. Revista da Sociedade Brasileira de
Medicina Tropical, 29(2):185-195.
Sastry, N. 1997. What explains rural-urban differentials in child mortality in Brazil. Soc Sci Med, 44(7):989-1002.
Smith N, 1980. The feasibility and desirability of experimental methods in evaluation. Evaluation and Program
Planning (3):251-256.
Susser M. (1994a). The logic in ecological: I the logical in analyses. American Journal of Public Health, 84:825-829.
Susser M. (1994b). The logic in ecological: II the logical of design. American Journal of Public Health, 84:830-835.
Vctora, C.G., Smith, P.G., Vaughan, J.P., Nobre, L.C., Lombardi, C., Teixeira, A.M.B., Fuchs, S.C., Moreira, L.B.,
Gigante, L.P. & Barros, F.C, 1988. Water supply, sanitation and housing in relation to the risk of infant
mortality from diarrhoea. Int J Epidemiol,17(3):651-654.
Vieira-da-Silva, LM, Formigli VLA,1994. Avaliao em sade: limites e perspectivas. Cadernos de Sade Pblica,
10:80-91.
Vieira-da-Silva, LM, 2003. Conceitos, abordagens e estratgias para a avaliao em sade (documento no
publicado).
Waxler NE, Morrison BM, Sirisena WM & Pinnaduwage S. 1985. Infant mortality in Sri Lankan households: a
causal model. Soc Sci Med; 20(4):381-392.
WHO. Environmental Health in Urban Development. Geneva: WHO, 1991 (Technical Report Series No. 807).
Wibowo, D. & Tisdell, C. 1993. Health, safe water and sanitation: a cross-sectional health production function
for Central Java, Indonesia. Bull Wld Hlth Org, 1993; 71(2):237-245.
Wolman, A, 1975. Importancia del saneamiento ambiental en las zonas urbanas y rurales para el control de las
infecciones entricas. Bol Of Sanit Panam; 78(4):343-345.
96
CAPTULO 11
EIXO ECONMICO
As avaliaes econmicas buscam, de forma geral, medir a eficincia das intervenes, com vistas
a melhorar as chances de que as decises e as opes adotadas alcancem os resultados mais eficientes.
Possibilitam tambm verificar se os benefcios gerados pelas medidas implementadas se distribuem de
forma equitativa entre a populao.
Dito de outra forma, as avaliaes econmicas medem se os recursos sociais esto sendo bem
aplicados, seja no sentido de que a sociedade recebe em benefcios mais do que os recursos que sacrifica
no empreendimento, seja no sentido de que a opo adotada a mais efetiva dentre as disponveis.
A realizao de avaliaes econmicas consome recursos quase sempre escassos e para justific-
las, portanto, necessrio que os resultados obtidos tornem-se instrumentais no sentido de orientar
decises e corrigir os rumos dos investimentos sociais. Para a seleo das tcnicas disponveis de avalia-
o econmica, torna-se necessrio um conhecimento prvio do fenmeno em questo, pois o desenho
metodolgico mais pertinente depender em grande parte do que o investigador deseja identificar. Se o
objetivo da avaliao , por exemplo, a escolha da mais eficiente dentre duas ou mais solues de sanea-
mento mutuamente excludentes, o estudo de custo-efetividade dar a resposta adequada. Se, no entanto,
o propsito o de verificar se um projeto se justifica por si mesmo, uma avaliao de custo-benefcio e de
sustentabilidade do projeto ser mais apropriada. Outro critrio norteador do tipo de anlise a ser utiliza-
da a presena de diferentes tipos de benefcios no diretamente relacionados s condies de morbi-
mortalidade da populao afetada (Dye, C. et al., 1993).
Uma das maiores dificuldades na implementao de programas de avaliao econmica na rea da
sade, por sua vez, a valorao dos benefcios alcanados. Nesse sentido, a fim de reduzir o grau de
arbitrariedade da anlise implementada, muitas vezes opta-se pela anlise custo-efetividade. No caso de
existirem muito benefcios no relacionados sade passveis de valorao, a anlise custo-benefcio
priorizada (Garber et al., 1996).
As avaliaes econmicas propostas no mbito do presente projeto, por sua vez, se enquadram nas
anlises de custo-benefcio, custo-efetividade e eqidade. O objetivo do estudo de custo-efetividade
justamente a determinao dos impactos das aes em saneamento na sade das populaes. Os indica-
dores de resultado neste caso seriam as variveis epidemiolgicas de morbidade e mortalidade.
Destaca-se que os benefcios das intervenes de saneamento tm diversos impactos no direta-
mente relacionados sade, principalmente no tocante qualidade de vida e bem-estar dos indivduos,
no se tratando, portanto, de uma interveno que tem como objetivo nico a reduo da incidncia de
diarrias e da mortalidade infantil. Assim, a inteno de avaliar as intervenes de saneamento tem tambm
como foco verificar a correspondncia entre os recursos dispendidos e a melhoria na qualidade de vida
97
Ministrio da Sade / Representao da OPAS/OMS no Brasil
dos indivduos beneficiados. Neste sentido, opta-se, tambm, por uma avaliao de custo-benefcio das aes em
saneamento representado pelos anos de vida ganhos, valorizao dos imveis, reduo dos gastos pblicos e
privados com tratamento de doenas causadas pela falta de saneamento, dentre outros. Embora seja trabalhosa a
estimao de todos os benefcios gerados, esta anlise auxiliar o desenvolvimento de metodologias de avaliao de
polticas de intervenes em saneamento, uma vez que ainda so poucos os trabalhos existentes no pas.
Tendo o programa de saneamento bsico o objetivo de promover melhorias nas condies de vida dos
estados e municpios com precrio ndice de Desenvolvimento Humano-IDH, faz-se necessrio qualificar os
benefcios obtidos e a eqidade na sua distribuio. Os indicadores aqui propostos sero agrupados em
quatro grandes categorias articuladas entre si, quais sejam: benefcios, efetividade, custos e eqidade.
OBJETIVOS
O Eixo Econmico tem como objetivo geral avaliar o custo-benefcio e o custo-efetividade das
aes de saneamento.
O objetivo geral se desdobra nos seguintes objetivos especficos:
Definio e mensurao dos benefcios e custos diretos e indiretos das intervenes em saneamento;
Avaliao econmica do custo-benefcio das intervenes;
Avaliao econmica do custo-efetividade das intervenes; e
Avaliao da eqidade na distribuio dos benefcios nos municpios selecionados.
98
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
situaes intangveis, a exemplo de uma sensao de alvio aps a cura, esses trabalhos tm sido teis para
orientar o planejamento e a adoo de aes em sade.
Assim, enquanto os estudos de custo-benefcio referem-se avaliao econmica de programas, servi-
os ou ensaios clnicos em que os custos e os benefcios so representados em termos monetrios, a avaliao
de custo-efetividade, por sua vez, no exige a traduo dos indicadores de benefcios em termos monetrios,
adequando-se, portanto, a uma srie de estudos, principalmente os relacionados rea de sade.
METODOLOGIA
CONSIDERAES PRELIMINARES
As intervenes ambientais, nas quais se inserem as de saneamento, diferem da maior parte daquelas
relativas sade em diversos aspectos, devendo-se destacar, portanto, aqueles mais estritamente relacionados
ao saneamento.
Em primeiro lugar, as intervenes ambientais so fundamentalmente preventivas, o que faz com que
grande parte dos benefcios alcanados s seja percebida no longo prazo. A natureza preventiva das interven-
es de saneamento coloca uma questo importante na execuo da avaliao econmica, no que diz respei-
to ao horizonte temporal em que esses benefcios (custos evitados) sero computados, assim como com
relao taxa de desconto intertemporal utilizada.
Um segundo aspecto a elevada presena de benefcios no-sade que representam uma dimenso
importante dos resultados obtidos. Neste caso, tem-se, por exemplo, a reduo do tempo utilizado na busca de
gua potvel (aumento do tempo disponvel para as demais atividades), alteraes na produtividade do
trabalho e do rendimento escolar, os ganhos de bem-estar promovidos pelas aes em saneamento, benefci-
os comerciais, dentre outros.
A escolha do conjunto de benefcios sade e no-sade envolvidos na anlise, ser fundamentada pelo
modelo FPEEEA (Foras Motrizes, Presses, Estados, Exposies, Efeitos e Aes) proposto pela Organizao
Mundial de Sade-OMS. Esse modelo, portanto, apoiar a seleo dos indicadores que sero utilizados,
abrangendo por exemplo as seguintes questes:
1. Acessibilidade, inadequao ou inexistncia de servios de saneamento;
2. Iniqidade na distribuio de servios de gua, esgoto e lixo;
3. Exposio da populao a vetores e a condies ambientais domiciliares inadequadas; e
4. Alocao de recursos com critrios de priorizao inadequados.
Estas questes sero abordadas na coleta dos dados primrios nos municpios do estudo de caso, que
sero obtidos por entrevistas domiciliares e outros instrumentos de pesquisa, e na coleta dos dados secund-
rios disponveis.
A perspectiva inerente concepo do programa, por sua vez, inclui todos os resultados alcanados para
o conjunto da populao do municpio assistido e no apenas a populao qual foram providos servios de
saneamento diretamente, no caso desses servios serem implementados de forma desigual nos municpios. Nesse
sentido, importante que se tenha indicadores mdios do municpio que reflitam toda a populao (perspectiva
societria) e indicadores representativos dos domiclios que sofreram as intervenes.
99
Ministrio da Sade / Representao da OPAS/OMS no Brasil
FOCO DO ESTUDO
Este projeto incluir trs municpios do estudo de caso nos quais sero coletados os dados primrios
referentes aos custos (diretos e indiretos) e aos benefcios (sade e no-sade). Para os municpios da
amostra reduzida sero realizadas estimativas, tanto para os custos quanto para os benefcios, atravs das
informaes obtidas nos trs municpios escolhidos e dos dados secundrios disponveis.
100
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Este trabalho, por sua vez, pressupe o detalhamento dos custos das doenas em saneamento e do
tratamento das doenas relacionadas falta de condies adequadas de saneamento nos municpios. Para
tanto, torna-se necessrio o levantamento dos custos institucionais, representados pelo tratamento ambulatorial
e internaes hospitalares, dos custos pessoais e familiares, alm dos custos de implementao das aes, que
sero obtidos atravs das informaes fornecidas pela FUNASA e pelas Prefeituras Municipais.
A seguir, descrever-se- o mtodo de custeio utilizado durante as ltimas dcadas nas principais unida-
des de sade e emergncia do pas, que o mtodo de custeio por absoro.
101
Ministrio da Sade / Representao da OPAS/OMS no Brasil
Todavia, existe um dficit muito grande entre o que pago pelo Ministrio da Sade e o que realmente
gasto pelo hospital, o que tornaria o presente trabalho bastante impreciso se fosse baseado apenas nas
informaes contidas na suspeita diagnstica. Ento, a estrutura de custos final ser construda a partir dos
custos da assistncia aos pacientes que deram entrada devido a doenas relacionadas ausncia ou deficin-
cia de saneamento, onde sero incorporadas outras informaes sobre exames e medicamentos que no
constam nas referidas fontes de informao. Dessa forma ser possvel uma melhor visualizao dos gastos
com cada paciente. Este componente dos custos ser incorporado ao longo do processo, quando forem
realizadas as entrevistas domiciliares.
A Figura 11.1, abaixo, indica os componentes dos custos que sero utilizados neste trabalho.
Institucionais
Custos diretos
monetrios com
Famlia
tratamento
Custos monetrios
indiretos
Famlia
102
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Medicamentos
Ambulatorial
Consulta
Custos diretos
Honorrios mdicos
Medicamentos
Internao
Custos
Exames
institucionais
Vigilncia/
Alimentao
CUSTO AMBULATORIAL
O custo ambulatorial por paciente para cada doena ser estimado levando-se em conta as despe-
sas relacionadas com o tratamento ambulatorial nas unidades de sade. Sero contabilizadas as despesas com
pessoal (mdico e no mdico), despesas correntes, com medicamentos, exames, material de consumo e
despesas com depreciao. O custo ambulatorial por paciente ser assim definido:
103
Ministrio da Sade / Representao da OPAS/OMS no Brasil
Onde:
C pessoal = custo com pessoal mdico e no mdico, definido como a soma de todos os salrios
pagos ao pessoal mdico e no mdico de cada unidade de sade, incluindo
produtividade, frias, dcimo terceiro e encargos trabalhistas pagos.
Cdespesas correntes =custo com as despesas correntes da unidade. Refere-se soma das despesas das
unidades de sade com gua, luz, telefone, gases, segurana e demais contratos
terceirizados.
Cmedicamentos = custo com medicamentos. Sero computados todos os gastos com medicamentos para
as doenas.
Cmaterial consumo = custo com material de consumo. Refere-se soma de todas as despesas que cada
unidade teve com material de consumo (papel, material para exames, seringas, agulha,
algodo etc.).
C depreciao = custo com a depreciao dos bens mveis e imveis. Este valor ser calculado
considerando o valor registrado no sistema de patrimnio das Secretarias Municipais
de Sade, levando-se em considerao a depreciao padro dos valores mveis (20%
ao ano) e dos valores imveis (5% ao ano) no ano, para cada unidade.
N = nmero de pacientes total em todas as unidades de sade por doena.
j = unidade de sade 1 a n.
104
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Onde:
C pessoal = custo com pessoal mdico e no mdico;
C d.correntes = custo com despesas correntes;
C depreciao = custo com a depreciao dos bens mveis e imveis;
C material consumo = custo com material de consumo;
C medicamentos = custo com medicamentos. Refere-se ao custo com medicamentos por doena
tratada no referido hospital;
N total pacientes ano = nmero total de pacientes internados nos hospitais
Npacientes por doena ano = nmero de pacientes internados, por doena, no hospital;
j = doena 1 a doena n;
TMP = tempo mdio de permanncia (internamento), por doena, no hospital.
105
Ministrio da Sade / Representao da OPAS/OMS no Brasil
como no caso das internaes hospitalares. Na tabela SIA/SUS esto contidas listas de diagnsticos suspeitos
que, por sua vez, serviro como base para o pagamento do MS unidade de sade. O SIA/SUS gera o Boletim
de Produtividade Ambulatorial-BPA que dispe da consolidao dos preos e contm todos os valores incor-
porados no servio de atendimento prestado.
Por sua vez, o Sistema de informao sobre Ateno Bsica-SIAB utilizado para o registro de
informaes sobre as famlias cadastradas no Programa de Agente Comunitrio de Sade-PACS e Programa de
Sade da Famlia-PSF. Os dados coletados regularmente sobre as famlias alimentam esse sistema e permitem
acompanhar os casos de doenas, a vacinao, a gestao, o crescimento e desenvolvimento das crianas e os
bitos. As informaes fornecidas por esse sistema sero bastante teis na anlise dos principais indicadores
de sade utilizados, servindo, tambm, de base para a estimativa de custos do tratamento das doenas.
106
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Consulta/Privada
Medicamentos
Diretos
Plano de Sade
Custos de oportunidade
Indiretos
Gastos com alimentao
BENEFCIOS
No caso da interveno de saneamento, existem benefcios em sade e benefcios no relacionados
diretamente sade. Os principais impactos em sade de aes de saneamento referem-se incidncia e
mortes por diarria e outras doenas infecciosas e parasitrias.
107
Ministrio da Sade / Representao da OPAS/OMS no Brasil
108
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Sistema Pblico
Custos diretos
de Sade
monetrios
(Institucional)
Custos do tratamento
das doenas evitadas
Custos indiretos
Famlias
Benefcios monetrios
Sade
109
Ministrio da Sade / Representao da OPAS/OMS no Brasil
Uma possvel construo desses indicadores pode ser realizada utilizando a metodologia a seguir.
1) Benefcio de sade = Doenas evitadas X respectivo custo de tratamento.
2) Benefcio de sade = Doenas evitadas X respectivo custo para as famlias.
3) Benefcio de sade = Mortes evitadas X anos de vida produtiva ganhos X valor do trabalho.
Os custos familiares sero levantados em uma amostra de familias, que tenha, pelo menos, um membro
com a doena investigada, atravs de questionrio especfico.
Para o levantamento dos demais benefcios no associados diretamente sade, necessria uma
explorao inicial atravs de grupos de discusso e/ou entrevistas abertas. Essa tcnica de grupos e entrevistas
permite detectar benefcios ou prejuizos que ocorrem na tica da populao, mas no so percebidos pelo
investigador. A partir da identificao do que a populao percebe como benefcio, sero elaborados questi-
onrios especficos a serem aplicados em um nmero ampliado dos beneficirios (essa amostra ser a mesma
utilizada pelo grupo de antropologia). Os questionrios nesse tipo de estudo so geralmente desenhados de
forma a colocar o respondente em uma situao de escolha entre alternativas com diferentes pesos ou valores.
Ao fazer sua escolha, o respondente revela indiretamente o valor monetrio do benefcio recebido.
Um possvel mtodo busca criar um mercado hipottico fazendo com que os usurios revelem suas
preferncias, isto , tenta-se extrair dos usurios o valor que estes estariam dispostos a pagar pela utilizao da
gua ou servio. A pergunta sobre a disponibilidade a pagar aberta ao entrevistado, que pode atribuir
qualquer valor monetrio. A disponibilidade a pagar ser, portanto, uma varivel contnua que poder assu-
mir qualquer valor no negativo, podendo, por isso, ser economicamente modelada. (Carreira-Fernandez;
Garrido, 2003).
As questes podem, portanto, ser formuladas da seguinte forma: Quanto voc estaria disposto a pagar
para obter uma melhoria X? Quanto voc gostaria de receber como compensao se essa melhoria fosse
retirada? Em quanto voc acha que sua moradia ficou valorizada devido melhoria (por quanto voc venderia
a casa antes e depois da melhoria)?
Um outro mtodo, normalmente utilizado, fundamenta-se no custo de oportunidade ou preo de
reserva do servio e operacionalizado atravs de uma simulao hipottica da interrupo do seu forneci-
mento. Nessa simulao, obtm-se o valor mximo que os usurios estariam dispostos a pagar pelo servio e
permanecerem indiferentes entre o uso desse servio ou a busca por uma soluo alternativa que produza o
mesmo efeito. Uma vantagem deste mtodo que o preo de reserva, o custo da alternativa menos cara,
quando estimada, representa uma alternativa legtima do valor do servio. (Carrera-Fernandez; Garrido,
2003).
Estes mtodos permitem uma aproximao do valor do benefcio obtido. O instrumento a ser utilizado
ter que ser testado e devidamente validado antes de ser aplicado.
Benefcio no-sade = Valorizao do imvel (preo de mercado).
Benefcio no-sade = Tempo ganho com a melhoria x renda mdia por tempo.
Benefcio no-sade = ganho de bem-estar obtido com a interveno.
Para os benefcios no-sade (ver Figura 11.5), a escolha dos indicadores determinar o instrumento
a ser utilizado.
110
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
Valorizao imobiliria
Benefcios Questionrio/
Tempo ganho
Entrevistas
AVALIAO DE CUSTO-EFETIVIDADE
Com relao aos benefcios em sade proporcionados pelas intervenes em saneamento bsico, a
anlise de custo-efetividade apresenta-se como um importante e poderoso instrumento de avaliao
econmica.
A anlise de custo-efetividade se emprega na comparao de tecnologias sanitrias alternativas, ou seja,
tecnologias substitutivas e/ou complementares. Os resultados sobre a sade podem, portanto, ser medidos
numa mesma unidade clnica: anos de vida ganhos, dias de sofrimento evitados, adeso ao tratamento etc.
Existindo, por exemplo, duas intervenes (A) e (B), com custos C(a) e C(b), e uma efetividade E(a)
e E(b), e uma das intervenes apresentar custos sempre inferiores e a efetividade sempre superior, a deciso
sobre a interveno a ser escolhida torna-se simples e clara, ou seja, se C(a) > C(b) e E(a) < E(b), a
interveno B prefervel; por sua vez, se C(a) < C(b) e E(a) > E(b), a interveno A prefervel. Se o custo
de cada uma das intervenes for idntico (C(a) = C(b)) ou se a efetividade de cada uma das intervenes for
idntica (E(a) = E(b)), pode-se calcular e comparar as relaes custo-efetividade, ou seja C(a)/E(a) e C(b)/
E(b). Nessas circunstncias, se C(a)/E(a) < C(b)/E(b), a interveno A prefervel a B (Dye, C. et al., 1993).
Entretanto, se uma interveno mostra-se mais custosa e mais eficaz, no ser possvel chegar de
imediato a uma concluso.
Este o caso das intervenes de saneamento e a frmula geral para determinao do custo-efetividade
incremental, que determinar e possibilitar a anlise, determinada por:
111
Ministrio da Sade / Representao da OPAS/OMS no Brasil
No caso especfico deste estudo, a Efetividade dos servios ser determinada de acordo com a seguinte
formulao matemtica:
AVALIAO DE EQIDADE
As aes em Saneamento Bsico privilegiam o municpio como unidade a receber os investimentos
propostos que, no entanto, no um todo homogneo. Os municpios podem ser normalmente representados
como um mosaico de localidades, com variadas caractersticas, e com padro de necessidade e de qualidade de
vida distintamente distribudos. A distribuio dos benefcios propostos dificilmente se dar de maneira uniforme
para todos os residentes. Certamente alguns sero beneficiados, enquanto outros no. Se a avaliao das aes
do projeto no se detiver e analisar essas diferenas, poder chegar a falsas concluses quanto ao real impacto
do projeto. O erro poder ser tanto de super-estimao como de sub-estimao dos resultados. Importa portanto
avaliar em quais linhas a desigualdade na distribuio do benefcio vai se dar em cada contexto especfico.
METODOLOGIA
As medidas de equidade requerem, de um lado, o uso de indicadores de riqueza ou renda das famlias
e, de outro lado, os indicadores que expressem a intensidade com que o benefcio recebido pelas respecti-
vas famlias. A avaliao da equidade vai requerer portanto informao conjugada de renda/riqueza e benef-
cio para cada famlia na amostra. A amostra deve ser selecionada de tal forma que d conta da diversidade na
distribuio dos benefcios. Populaes contempladas por estes devem ter igual chance de compor a amostra
que as populaes no beneficiadas.
Indicador: % de benefcio recebido pelos 20% mais pobres do municpio em comparao com % do
benefcio recebido pelos 20% mais ricos do municpio.
Os percentuais podem ser ajustados a cada contexto. De acordo com a diversidade encontrada, os ndices de
benefcios podero ser mapeados e superpostos ao mapeamento da distribuio da renda/riqueza no municpio.
CONSIDERAES FINAIS
A proposta de avaliao econmica apresentada no restringe os custos incorridos e benefcios obti-
dos a uma anlise de curto prazo. No caso dos benefcios, por exemplo, as doenas evitadas podem ser
112
Avaliao de impacto na sade das aes de saneamento: marco conceitual e estratgia metodolgica
percebidas no apenas no curto prazo, mas nos anos subseqentes. Alm disso, como este projeto est
inserido em outro mais amplo, importante que a metodologia proposta acompanhe a estrutura de investiga-
o emprica dos demais grupos. No caso dos custos, segundo a mesma lgica, optou-se por no s conside-
rar os custos de curto prazo, que se constituem fundamentalmente dos custos de construo e
operacionalizao das obras de saneamento, como tambm os custos futuros. Como a anlise proposta no
se restringe aos impactos de curto prazo, ser necessria a utilizao de taxas de desconto intertemporal para
os custos e benefcios.
REFERNCIAS BIBLIOGRFICAS
113
Ministrio da Sade / Representao da OPAS/OMS no Brasil
Hart, Donald and Rosen, Marc. Environmental and health benefits of district cooling using utility-based
cogeneration in Ontario, Canada. Energy, 21 (12): 1135 1146; 1996.
Martins, Domingos. Custos e oramento hospitalar. So Paulo: Atlas, 2000.
Martins, Eliseu. Contabilidade de Custos. So Paulo: Atlas, 1998.
Organizacin Panamericana de la Salud. Informe de la Segunda Reunin STOP TB, Brasilia, Brasil, mar 2001.
Disponvel: www.paho.org. Acesso: 10/07/2001.
Organizacin Panamericana de la Salud. La salud en las Amricas. Edicin de 2002. (Publicacin cientfica y
tcnica, n. 587). v.2.
Organizacin Panamericana de la Salud. Informe de la Segunda Reunin STOP TB, Brasilia, Brasil, mar 2001.
Disponvel: www.http.paho.org. Acesso: 10/07/2001.
Philipson, T. Economic Epidemiology and infectious diseases. NBER- Working Paper 7037. Cambridge,
1999.
Piola. S.F. et al. (1995). Economia da sade: conceitos e contribuies para a gesto da sade. 3. Ed. Braslia:
IPEA, 1998.
Russel, L.B.; Siegel, J.E.; Dniels, N.; Gold, M.R.; Luce, B.R.; Anderlblatt, J.S. Cost-Effectiveness Analysis as a
Guide to Resource Allocation in Health: Roles and Limitations. In: Gold, M.R.; Siegel L, J.E.; Russel, L.B.;
Weinstein, M.C. Cost-Effectiveness in Health and Medicine. Oxford University Press, Oxford, 1996.
Secretaria de Sade do Estado da Bahia. Indicadores epidemiolgicos do Estado da Bahia 2002. Salvador,
2003.
Shi, A. How Access to Urban Potable Water and Sewerage Connections Affects Child Mortality. World Bank,
1999.
Teixeira, M.G.; Barreto, M. Sentinel areas: a monitoring strategy in public health. Cadernos de Sade Pblica,
RJ; 18 (5): 1119 1195; 2002.
Whitting, D.; Lauria, Donald and MU, Xinming. A Study of water and willingness to pay for water in Onitsha,
Nigeria. World Development, 19: 179 198; 1991.
WHO. Considerations in Evaluating the Cost-effectiveness of Environmental Health Interventions. WHO/
Protection of the Human Environment; Geneva, 2000.
114
CAPTULO 12
CONCLUSES
115
Ministrio da Sade / Representao da OPAS/OMS no Brasil
A avaliao integrada um aspecto crucial a ser considerado. Embora a proposta de avaliao, por
questes metodolgicas, tenha sido concebida em diferentes eixos, a sua avaliao integrada dever abranger
todas as dimenses envolvidas. As dimenses de avaliao contempladas no presente trabalho so: gesto,
sanitria e tecnolgica, sociocultural, epidemiolgica e econmica. Diante disso, fundamental que a avalia-
o global consiga integrar essas avaliaes parciais, procurando abordar a dimenso poltico-institucional.
Como exemplo, a medida de efetividade das aes de saneamento pode ser resultado do impacto na sade,
que verificado por mtodos epidemiolgicos. Do mesmo modo, a eficincia dessas aes poder ser
avaliada pela dimenso econmica. A avaliao integrada, ao incluir todas as dimenses, permitir indicar a
sustentabilidade das aes de saneamento implementadas por programas governamentais.
Embora essa proposta metodolgica tenha sido desenvolvida a partir de um cenrio de aes de
saneamento gerado por um programa de governo especfico, a meta dos trabalhos apresentar uma metodologia
de avaliao que possa ser incorporada pelos agentes pblicos para acompanhamento de aes de sanea-
mento em geral. Para tanto, fundamental identificar com clareza indicadores a serem incorporados nos
levantamentos regulares de informao, como a PNSB produzida pelo IBGE, o que garantir acompanhamen-
to contnuo da realidade do saneamento por meio de dados secundrios.
Esta publicao significa, de certa forma, uma marco importante na etapa de elaborao da metodologia.
A idia de que agora h condies para que a avaliao possa ser levada a cabo e seus resultados analisados.
Entretanto, a produo de resultados e sua anlise no devem ser vistos como atividades limitadas unicamente
pelo apontado nessa proposta metodolgica. Isso porque, por mais elaborado que tenha sido o processo de
desenvolvimento metodolgico, sempre se teve claro que haveria necessidade de correo de rumos. Como
possvel prever, as avaliaes parciais sero desenvolvidas durante um perodo relativamente longo, o que
indica a possibilidade de evoluo da compreenso e prtica de processo de avaliao complexo como o
apresentado na presente proposta.
Resta dizer algo sobre a etapa de validao dessa proposta metodolgica. Os pesquisadores envolvidos
at agora tm claro que o mesmo cuidado tomado na apresentao da proposta metodolgica deva ser
tomado na etapa de validao. Isso significa aproveitar diferentes formas para discutir os resultados encontra-
dos, tais como eventos cientficos e encontros de pesquisadores. Tambm deve-se ter como meta a publicao
dos resultados de maneira integrada, permitindo a crtica abrangente a todo o processo de avaliao.
116