Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
Ademais,
embora
se
considere
que
os
estudos
qualitativos
sejam
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
Este
conjunto de tcnicas envolve um grau de complexidade, o que chama ateno para uma
caracterstica importante da anlise de contedo: a necessidade de treinamento do
pesquisador, visto que este quem interpreta os dados a partir de uma grade de leitura
que necessita de rigor terico e metodolgico ao passar pelo crivo da classificao e
interpretao dos dados.
Assim, embora tenha contribudo significativamente ampliao do escopo das
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
o que igual e separa-se o que diferente. A estatstica usada nas anlises de material
textual consiste em identificar e contabilizar o vocabulrio presente no texto e a partir
disso fazer anlises multivariadas encima de um nmero indeterminado de variveis
selecionadas priori e que caracterizam quem produziu o texto (Lahlou, 1994).
As anlises lexicais so valiosas tcnicas para explorar os dados (Lahlou, 2012)
fornecendo ao pesquisador um panorama do vocabulrio referente ao objeto de
pesquisa. E em alguns casos, as tcnicas permitem tambm relacionar variveis,
comparar grupos, com validade e significncia estatstica, o que pode contribuir aos
avanos dos estudos qualitativos. O diferencial que o mtodo e as tcnicas de anlise
no so sensveis arbitrariedade de quem o codifica (Lahlou, 1994), o que diminui o
subjetivismo nas anlises dos textos e padroniza-os.
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
a realizao de
anlises de contedo
Junique,
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
Este tipo de tcnica consiste em solicitar ao respondente que evoque (escreva ou fale) livremente
algumas palavras relacionadas a um tema especfico (termo indutor). usada majoritariamente por
pesquisadores que utilizam a teoria das representaes sociais e seu objetivo descrever a estrutura de
uma representao. Entretanto, pode-se utilizar evocaes livres para realizar outros tipos de pesquisa,
uma vez que essa tcnica possibilita a apreenso de projees mentais de maneira descontrada e
espontnea, revelando contedos implcitos que podem ficar mascarados nas produes discursivas. Alm
disso, um modo de obter o contedo semntico de forma rpida e objetiva (Oliveira, Marques, Gomes &
Teixeira, 2005).
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
em que esse vocabulrio estava inserido, o que trouxe contribuies importantes no que
se refere fidedignidade das interpretaes das anlises lexicais.
O ALCESTE
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
que vo orientar o tratamento dos dados, assim como orientar as suas interpretaes
(Vergs, 2001).
Dentre as decises que o pesquisador toma ao proceder a uma anlise textual em
softwares especficos, algumas importantes referem-se a uma etapa preliminar analise:
a construo dos corpora. Os materiais de um corpus devem ter apenas um foco
temtico e devem ser to homogneos quanto possvel. Imagens, textos, entrevistas
individuais e com grupos focais podem ser partes de um mesmo projeto de pesquisa. No
entanto, devem ser separados em diferentes corpora na anlise de dados e comparados
posteriormente (Bauer & Aarts, 2013).
preciso atentar tambm s caractersticas lingusticas dos corpora. Uma parte
deles proveniente de documentos previamente escritos, os quais podem ser mais ou
menos institucionalizados (desde documentos oficiais, leis, at dirios sites ou blogs).
Usualmente estes documentos so utilizados em sua forma quase que original, cabendo
apenas algumas adaptaes de formatao textual. A comunicao oral, por sua vez tem
caractersticas distintas da comunicao escrita. Usualmente menos estruturada, mais
redundante, h repeties literais e recursos mnemnicos. Por vezes, transcrever da
linguagem oral para a escrita a qual ser analisada com auxlio do software - implica
em reescrever certas palavras ou frases, de modo a clarificar o texto e coloca-lo na
norma culta da lngua. As decises acerca de como ser a limpeza do corpus nas
transcries so bastante importantes e podem ter interferncias diretas nos resultados
(Brugidou et al, 2000).
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
anlises de similitude. Por meio desse software, a distribuio do vocabulrio pode ser
organizada de forma facilmente compreensvel e visualmente clara com representaes
grficas pautadas nas anlises lexicogrficas.
No IRAMUTEQ essas anlises podem ser realizadas tanto a partir de um grupo
de textos a respeito de uma determinada temtica (corpus) reunidos em um nico
arquivo de texto; como a partir de tabelas com indivduos em linha e palavras em
coluna, organizadas em planilhas, como o caso dos bancos de dados construdos a
partir de testes de evocaes livres.
Uma das suas grandes vantagens deste software a de que ele uma ferramenta
gratuita, desenvolvida sob a lgica open source - ou cdigo aberto, que consiste num
modelo colaborativo de produo intelectual, que permite que softwares sejam
livremente utilizados, modificados em compartilhados. licenciado por GNU GPL
(v2), quem permite que os usurios, alm de terem acesso aos softwares sem qualquer
custo, estejam tambm autorizados a modifica-los ou compartilha-los, uma vez que
esses so livres. Para processar os clculos estatsticos, o IRAMUTEQ ancora-se no
ambiente estatstico do software R (pacote gratuito para realizar anlises estatsticas) e
na linguagem de programao python (www.python.org), tambm de livre utilizao.
O software IRAMUTEQ foi desenvolvido inicialmente em lngua francesa, onde
estudos j o empregam como ferramenta de anlise de dados (Marchand & Ratinaud,
2012; Ratinaud & Marchand, 2012) e tambm j possui os dicionrios completos nas
lnguas inglesa e italiana. Ele comeou a ser utilizado no Brasil em 2013, atualmente o
dicionrio em lngua portuguesa encontra-se em fase experimental e trabalha-se no seu
aprimoramento. Mesmo assim, nos processamentos de dados j realizados nessa fase
experimental, observou-se que o atual dicionrio j permite o processamento de anlises
suficientemente precisas, o que torna o software IRAMUTEQ til para anlises de
dados em lngua portuguesa.
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
E sua principal
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
softwares que envolvem anlises lexicais pode ser muito til se acompanhado de um
estudo sobre o significado e forma adequada de empregar as diversas tcnicas de
anlise, alm de um bom domnio do estado da arte que envolve o tema especfico de
cada pesquisa.
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
anlise dos dados textuais. Nestes casos ocorre certo esvaziamento das relaes do
material textual com o contexto, alm de descries mecnicas do contedo estudado.
Salienta-se o quanto importante ao analisar material verbal considerar tambm
o que no explicitamente expresso. Muitas vezes a linguagem expressiva no capaz
de evidenciar algumas ideias ou opinies acerca de um objeto, seja por dificuldades de
expresso ou por tratar-se de algo politicamente incorreto, fora dos padres de
desejabilidade social. Entretanto, essas ausncias fazem parte dos dados, e apenas o
conhecimento externo do pesquisador acerca do tema que possibilita a interpretao
dos dados. Isso significa que o conhecimento que o pesquisador tem acerca dos dados,
da linguagem, do tema de pesquisa e do software capaz de ampliar ou limitar a
realizao da anlise (Lahlou 2012).
Lahlou (2012) aponta mais um equvoco bastante comum quando se processa
anlises textuais com auxlio informtico. Segundo o autor, em muitos casos confundese o software utilizado com um mtodo, confuso presente em uma srie de publicaes
que envolviam o uso do ALCESTE. O mesmo autor aponta ainda que por alguns anos
houve carncia de publicaes em lngua inglesa sobre as anlises envolvendo
estatsticas textuais; sendo a maior parte delas publicadas exclusivamente em lngua
francesa, portanto de difcil acesso a grande parte dos pesquisadores. No Brasil pode-se
observar fenmeno similar. H poucas de referncias em lngua portuguesa e a isso se
soma o fascnio que os softwares de anlise textual exercem nos pesquisadores e a
grande agilidade no tratamento dos textos. Como resultado observa-se inmeras
publicaes que citam o prprio software como se fosse a tcnica de anlise dos dados,
e algumas vezes como se fosse o prprio mtodo da pesquisa.
Observa-se tambm que h trabalhos que restringem a anlise dos dados s
informaes presentes nos outputs dos softwares, o que est o aqum do exerccio
necessrio ao pesquisador. Este exerccio requer no mnimo que se explore o material de
texto e interprete os resultados apresentados pelo software, criando uma nova forma de
apresentao dos dados que tenha passado pela leitura analtica do pesquisador e que
leve em considerao inclusive aqueles dados que no foram diretamente ilustrados pelo
processamento informtico.
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
Referncias
Andr, M. (2001). Pesquisa em educao: buscando rigor e qualidade. Cadernos de
Pesquisa, 113, 51-64.
Bardin, L. (2009). Anlise de Contedo: edio revista e actualizada. Lisboa: Edies
70.
Baril, E. & Garnier, B. (2013). IRaMuteQ 0.6: Interface de R pour les Analyses
Multidimensionnelles de Textes et de Questionnaires. Institut National dEtudes
Dmographiques. Disponvel em:
http://www.iramuteq.org/documentation/fichiers/Pas%20a%20Pas%20IRAMUTEQ_0.
6.pdf
Bauer, M. B.; Gaskell, G. &Allum, N. C. (2013). Qualidade, quantidade e interesses do
conhecimento Evitando confuses. In: M. Bauer & G. Gaskell (orgs.)
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
Pesquisa qualitativa com texto, imagem e som: um manual prtico (pp. 17-36).
Petrpolis: Vozes.
Berger, P. L. & Luckmann, T. (2011). A construo social da realidade: Tratado de
sociologia do conhecimento. Petrpolis: Vozes.
Brugidou, M. et al. (2000). Les facteurs de choix et dutilisation de logiciels dAnalyse
de Donnes Textuelles. JADT 2000 : 5es Journes Internationales dAnalyse
Statistique des Donnes Textuelles.
Camargo, B. V. (2005). ALCESTE: Um programa informtico de anlise quantitativa
de dados textuais. In Moreira, A. S. P.; Camargo, B. V.; Jesuno, J. C.; Nbrega,
S. M. (Eds.) Perspectivas terico-metodolgicas em representaes sociais (pp.
511-539). Joo Pessoa: Editora da UFPB.
Camargo, B. V. & Justo, A. M. (2013a). IRAMUTEQ: Um software gratuito para
anlise de dados textuais. Temas em Psicologia, 21 (2).
Camargo, B. V. & Justo, A. M. (2013b). Tutorial para uso do software de anlise
textual IRAMUTEQ. Laboratrio de Psicologia Social da Comunicao e
Cognio,
Universidade
Federal
de
Santa
Catarina.
Disponvel
em:
http://www.iramuteq.org/documentation/fichiers/tutoriel-en-portugais
Cibois, P. (1990). L'analyse des donnes en sociologie. Paris: P.U.F.
Chartier, J-F.; Meunier, J-G. (2011). Text Mining Methods for Social Representation
Analysis in Large Corpora. Papers on Social Representations, 20 (37), 1-47
Cros, M. (1993). Les apports de la linguistique: langage des jeunes et sida. In ANRS
(Agence Nationale de Recherche sur le Sida). Les jeunes face au Sida: de la
recherche l'action (pp. 50-61). Paris: ANRS.
Gibbs, G. (2009). Anlise de dados qualitativos. Porto Alegre: Artmed.
IMAGE (2009). Alceste 2009: Um logiciel danalyse de donnes textuelles (Manuel
dutilisateur). Toulouse: Socit Image.
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
Kelle, U. (2013). Anlise com auxlio de computador. In: M. Bauer & G. Gaskell
(orgs.) Pesquisa qualitativa com texto, imagem e som: um manual prtico (pp.
393-415). Petrpolis: Vozes.
Kronenberg, N. & Wagner, W. (2013). Palavras-chave em contexto: anlise estatstica
de textos. In: M. Bauer & G. Gaskell (orgs.) Pesquisa qualitativa com texto,
imagem e som: um manual prtico (pp. 416-442). Petrpolis: Vozes.
Lahlou, S. (1994). Lanalyse lexicale. Variances (3), 13-24.
Lahlou, S. (2012). Text Mining Methods: An answer to Chartier and Meunier. Papers
on Social Representations, 20 (38), 1.-7.
Lebart, L. & Salem, A. (1994). Statistique textuelle. Paris: DUNOP.
Loubre, L. & Ratinaud, P. (2014). Documentation IRaMuTeQ 0.6 alpha 3 version 0.1.
Disponvel
em:
http://www.iramuteq.org/documentation/fichiers/documentation_19_02_2014.p
df
Marchand, P.; P. Ratinaud. (2012). L'analyse de similitude applique aux corpus
textueles: les primaires socialistes pour l'election prsidentielle franaise. Em:
Actes des 11eme Journes internationales dAnalyse statistique des Donnes
Textuelles. JADT 2012. (687699). Presented at the 11eme Journes
internationales dAnalyse statistique des Donnes Textuelles. JADT 2012.,
Lige, Belgique.
Nascimento-Schulze, C. M.; Camargo, B. V. (2000). Psicologia social, representaes
sociais e mtodos. Temas de psicologia. Ribeiro Preto, 8 (3), 287-299.
Oliveira, E.; Ens, R. T.; Andrade, D. B. S. F. & Mussis, C. R. (2003). Anlise de
contedo e pesquisa na rea da educao. Dilogo Educacional, 4(9), 1-17.
Oliveira, D. C., Marques, S. C., Gomes, A. M. T., Teixeira, M. C. T. V. (2005). Anlise
das Evocaes Livres: uma tcnica de anlise estrutural das representaes
sociais. In A. S. P. Moreira, B. V. Camargo, J. C. Jesuno, & S. M. Nbrega
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>
(Org.), Perspectivas terico-metodolgicas em representaes sociais (pp. 573603). Joo Pessoa: Editora da Universidade Federal da Paraba.
Ratinaud, P., & Marchand, P. (2012). Application de la mthode ALCESTE de gros
corpus et stabilit des mondes lexicaux: analyse du CableGate avec
IraMuTeQ. Em: Actes des 11eme Journes internationales dAnalyse statistique
des Donnes Textuelles (835844). Presented at the 11eme Journes
internationales dAnalyse statistique des Donnes Textuelles. JADT 2012,
Lige.
Reinert, M. (1990). ALCESTE, une mthodologie d'analyse des donnes textuelles et
une application: Aurlia de G. de Nerval. Bulletin de mthodologie
sociologique, (28) 24-54.
Reis, A.O. A. et al. (2013). Algumas consideraes sobre pesquisa de natureza
qualitativa. Em: A. O. A. Reis, V. Sarubbi Junior, M. M. Berolino Neto & M.
L. R. Neto (orgs). Tecnologias computacionais para auxlio em pesquisa
qualitativa: Software evoc (p.13-31). So Paulo: Schoba.
SPAD (2008). Guide de lutilisateur. Courvoie: Coheris SPAD.
Veloz, M.C.T.; Nascimento-Schulze, C.M.; Camargo, B.V. (1999). Representaes
sociais do envelhecimento. Psicologia: Reflexo e Crtica, 12 (2), 479-501.
Vergs, P. (2001). Lanalyse des donnespar les graphes de similitude. Sciences
Humaines, Juin 2001.
Vergs, P., Scano, S., & Junique, C. (2002). Ensembles de programmes permettant
lanalyse des evocations: Manuel. Aix-en-Provence: Universit dAix em
Provence.
Justo, A. M. & Camargo, B. V. (2014). Estudos qualitativos e o uso de softwares para anlises
lexicais. Em: Novikoff, C.; Santos, S. R. M. & Mithidieri, O. B.(Orgs.) Caderno de artigos: X
SIAT & II Serpro (2014: Duque de Caxias, RJ) (p. 37-54). Duque de Caxias: Universidade do
Grande Rio Professor Jos de Souza Herdy - UNIGRANRIO, Caderno digital disponvel em:
<https://lageres.wordpress.com/>