1

ReVeLe - n 5 - maio/2013

MTODOS OFF-LINE EM PSICOLINGUSTICA: JULGAMENTO DE

ACEITABILIDADE

Cndido Samuel Fonseca de Oliveira

Thas Mara Machado de S1

RESUMO
Os estudos psicolingusticos procuram entender quais so os processos mentais
envolvidos na faculdade da linguagem. Neste artigo, procuramos dar enfoque ao
mtodo off-line Julgamento de Aceitabilidade. Os mtodos off-line so aqueles que
investigam o processamento a partir de dados obtidos ps-processamento. Neles, os
sujeitos so expostos s questes da pesquisa e aps a exposio devem executar
alguma tarefa. Ou seja, no se observam os processos mentais do sujeito ao longo do
processamento do que se quer investigar, mas quando o processamento j foi
concludo. O julgamento de aceitabilidade o julgamento de indivduos em relao
aceitabilidade de sentenas. Assim, a avaliao dos sujeitos um dado ps-processual,
mas que no deixa de refletir um processo mental. A avaliao do sujeito aos estmulos
pode ser realizada por meio da Escala Likert, que uma escala psicomtrica constituda
de vrios pontos, sendo as escalas de cinco e sete pontos as mais utilizadas. Cada
ponto se refere ao grau de aceitabilidade do indivduo em relao ao estmulo
apresentado. Outra opo a Estimativa de Magnitude, em que os participantes
devem atribuir valores que expressem a relao, proporo ou diferena entre os
estmulos. O mtodo Julgamento de Aceitabilidade apresenta confiabilidade e
facilidade de aplicao, sendo um mtodo de grande utilidade para estudos
psicolingusticos.
Palavras-chave: psicolingustica; escala Likert; estimativa de magnitude.
1

Mestrandos da Ps-graduao em Estudos lingusticos da FALE/UFMG, orientados, respectivamente,

pelos profs. Drs. Ricardo Augusto de Souza e Maria Luiza Cunha Lima. Trabalho desenvolvido no
Laboratrio Virtual de Psicolingustica da FALE/UFMG. E-mails: coliveira.ufmg@gmail.com;
thaismaira@gmail.com

ReVeLe - n 5 - maio/2013

INTRODUO

Quem veio primeiro: a lngua ou o pensamento? Como lngua e pensamento so

associados? Como as pessoas compreendem o que escutam ou leem? Quais so os
processos mentais utilizados pelas pessoas quando elas falam ou escrevem algo? Como
as crianas aprendem a entender o que ouvem e a falar o que sentem? A
psicolingustica uma cincia que se preocupa com questes como essas. Ela investiga
como adquirimos, compreendemos e produzimos lngua. Dessa forma, os estudos
psicolingusticos procuram entender quais so os processos mentais envolvidos na
faculdade da linguagem. (cf. Glucksberg, 1975; Deese, 1976; Gernsbacher, 1994).
Vrios mtodos so utilizados em investigaes sobre a lngua. O mais
tradicional deles a introspeo, realizado pelo pesquisador que reflete sobre a lngua
e cria hipteses a partir de sua prpria reflexo (cf. Starr e Rayner, 2005). No h,
assim, uma metodologia que envolva sujeitos2 ou dados do processamento comum
obtidos de um experimento propriamente dito. Apesar de muito utilizada em estudos
lingusticos, devemos questionar a confiabilidade da introspeco. Muitas vezes nos
cercamos por tanto tempo de construes lingusticas que ficamos acostumados a elas
e perdemos nossa capacidade de avaliao, o que acaba enviesando nossa reflexo.
Assim, os psicolinguistas procuram associar a introspeco a mtodos experimentais,
pois permitem que o pesquisador obtenha dados que verifiquem sua hiptese sobre o
funcionamento da lngua. Os mtodos de pesquisa sobre o processamento da lngua
podem ser divididos em: off-line, on-line e fisiolgicos. (cf. Field, 2004; Gernsbacher,
1994; Leito, 2008).

Sujeitos sero aqui definidos como os voluntrios livres e esclarecidos que contribuem com a pesquisa
lingustica, realizando a tarefa criada pelo experimentador. a partir das respostas dos sujeitos que o
experimentador obtm os dados de sua pesquisa.

ReVeLe - n 5 - maio/2013

Os mtodos off-line so aqueles que investigam o processamento a partir de

dados obtidos ps-processamento. Neles, os sujeitos so expostos s questes da
pesquisa e aps a exposio devem executar alguma tarefa. Ou seja, no se observam
os processos mentais do sujeito ao longo do processamento do que se quer investigar,
mas quando o processamento j foi concludo. Alguns exemplos de experimentos offline so: o Julgamento de Aceitabilidade (descrito neste artigo), Testes de Associao
de Palavras, Testes de Completao, entre outros.
Os mtodos on-line e fisiolgicos se contrapem aos off-line, j que os dados so
obtidos durante o processamento. Nos mtodos on-line e fisiolgicos os sujeitos so
expostos a estmulos que apresentam questes da pesquisa e durante a exposio so
avaliados. Nos on-line, uma tarefa realizada ao longo da exposio, sendo que a
tarefa depende do comportamento do sujeito. Tarefas como Nomeao, Priming e
Leitura Auto-Cadenciada so exemplos de mtodos on-line.
J os fisiolgicos no dependem do comportamento do sujeito, pois os dados
so obtidos a partir de reaes fisiolgicas que o sujeito tem no momento em que
exposto ao que se quer investigar. Um exemplo de teste fisiolgico o ERP (Potenciais
Relacionados a Eventos), que atravs de uma touca de eletrodos que colocada na
cabea do sujeito, obtm-se potenciais eltricos no momento em que o sujeito visualiza
ou escuta frases ou palavras com o problema terico que investigado 3.
Este artigo objetiva descrever uma das possibilidades da metodologia off-line: o
Julgamento de Aceitabilidade, alm de refletir sobre seus benefcios e seus problemas
metodolgicos.

Para saber mais sobre mtodos on-line e mtodos fisiolgicos, ler Starr e Rayner (2005), Mitchell
(2004).

ReVeLe - n 5 - maio/2013

1 A METODOLOGIA OFF-LINE

Imagine que voc tem como hiptese que a construo ir em aceita por
estudantes de Letras falantes nativos do portugus brasileiro. Pela sua intuio voc
poderia pensar que a frequncia da construo agramatical (segundo a gramtica
tradicional) ir em to grande que no haveria problemas em ser aceita. Contudo, a
realidade poderia ser oposta sua hiptese inicial e os estudantes de Letras, por terem
maior conhecimento da gramtica tradicional, no aceitariam a construo agramatical.
Como a intuio no suficiente, voc gostaria de comparar tal construo, que
agramatical e muito frequente, com a construo ir a, que gramatical, mas pouco
utilizada. Imagine que voc tenha apresentado sentenas com ambas as regncias do
verbo ir para 30 alunos e tenha pedido que eles avaliassem de 0 a 10 as sentenas.
Assim, os sujeitos leriam os estmulos e aps a leitura eles atribuiriam as notas.
Durante a leitura dos estmulos ocorreria o processamento da sentena e s
aps o processamento que voc teria uma resposta do que voc demonstrou. Dessa
forma, voc obteria dados que refletem algo sobre o processamento dos sujeitos, mas
no no momento em que o processamento acontece. Ser ps-processual o que
define os experimentos off-line. Os dados ps-processuais podem ser dados pela
compreenso dos sujeitos, como no exemplo acima, e pela produo dos sujeitos. Aqui
focaremos em procedimentos que envolvem a compreenso 4. Antes de entrarmos nos
experimentos propriamente ditos, discutiremos um pouco sobre tarefas de
compreenso.

Por falta de espao, optamos por descrever mais detalhadamente o Julgamento de Aceitabilidade, que
um experimento que envolve a compreenso do falante. Escolhemos tal mtodo porque ele vem
mostrando maior aplicabilidade. Para saber mais sobre produo, ver Gernsbacher (1994).

ReVeLe - n 5 - maio/2013

2 TAREFAS DE COMPREENSO

As tarefas de compreenso so aquelas que investigam o processamento em

relao a o que o falante compreende do estmulo. Continuando no exemplo da
aceitabilidade de ir em, ao perguntarmos aos sujeitos o que eles acharam das
sentenas, se elas so aceitveis ou no, queremos perceber como o sujeito
compreendeu tal sentena.
Outro caminho que poderamos recorrer seria pedir aos sujeitos que
produzissem sentenas com o verbo ir. Se realizssemos tal tarefa, ao invs de pedir
um julgamento sobre uma sentena dada, realizaramos uma tarefa de produo, pois
investigaramos como o sujeito produziu a sentena e no como ele a entendeu.
Assim, tarefas de compreenso e produo divergem no que se espera avaliar
sobre o processamento do sujeito, se o input, a recepo e decodificao da
informao, ou o output, a produo da informao.

3 JULGAMENTO DE ACEITABILIDADE

Como mencionado na introduo, muitas teorias foram e ainda so baseadas

apenas no julgamento provindo da introspeco do prprio linguista. Encontram-se
comumente na literatura propostas que baseiam sua argumentao em frases que so
julgadas pelo prprio autor. Tais julgamentos so comumente representados a partir
de smbolos tais como *,**, ?, e ?? 5.

O smbolo * comumente se refere a frases agramaticais e o smbolo ** se refere a frases consideradas

ainda mais agramaticais do que as que. J o smbolo ? se refere a frases cuja gramaticalidade ou
aceitabilidade so duvidosas e o smbolo ?? utilizado para aumentar o grau de intensidade de tal
caracterstica.

ReVeLe - n 5 - maio/2013

No desenvolvimento da dissertao de Oliveira6, por exemplo, ao se investigar a

aquisio das construes resultativas, os pesquisadores tiveram que basear todo o
seu estudo em obras cuja gramaticalidade das construes era relatada a partir da
intuio de seus autores (WESCHLER, 2001; BROCCIAS, 2003; JACKENDOFF;
GOLDBERG, 2004). Consequentemente, Oliveira encontrou o mesmo problema
apontado por Bard (1996) em que itens pertencentes a um determinado grupo (*,**, ?
ou ??) no parecem ter o mesmo nvel de aceitabilidade e, alm disso, o intervalo entre
esses grupos no apresenta regularidade. Tal problema se deve a questes
metodolgicas.
A aceitabilidade de uma construo pode ter grande variabilidade, logo uma
diviso em cerca de quatro grupos, por exemplo, pode no ser suficiente para uma
classificao adequada. O corolrio de tal metodologia, ento, uma grande variedade
de itens com diferentes nveis de aceitabilidade dentro de um mesmo grupo.
Com o objetivo de se testar hipteses na rea da lingustica aplicada e da
lingustica terica e de tornar robustas as evidncias relacionadas s hipteses a partir
da aceitabilidade de sentenas, o julgamento de vrios indivduos em relao
aceitabilidade de sentenas h anos utilizado (BARD, 1996). Acredita-se que o
julgamento de falantes em relao aceitabilidade de algumas sentenas pode ser
utilizado para se entender como certas construes (morfemas, palavras e, entre
outros, sentenas) so representadas (ZARA, 2009; SOUZA, 2011) e o quo presente
elas esto na gramtica de um ou mais grupos de indivduos.
importante ressaltar que o julgamento de aceitabilidade no se refere
gramaticalidade de um estmulo. Apesar de haver trabalhos que utilizam os termos
julgamento de gramaticalidade e julgamento de aceitabilidade com o mesmo
significado (MYERS, 2008), essas duas expresses se referem a processos distintos.
6

Trabalho de dissertao em desenvolvimento no POSLIN/FALE/UFMG, linha 1D, sob orientao do prof.

Dr. Ricardo Augusto de Souza, com previso de trmino para maro de 2013.

ReVeLe - n 5 - maio/2013

Enquanto a gramaticalidade de uma construo uma caracterstica inerente mesma

(SORACE, 2010), com embasamento terico (MYERS, 2008) e independente do
indivduo, a aceitabilidade a percepo que o indivduo tem em relao a um item
independentemente de qualquer construto terico. Assim, os dados de um julgamento
de aceitabilidade so relatos referentes s sensaes dos participantes frente s
construes em questo. Alm disso, uma construo julgada como aceitvel ou no
aceitvel no apenas de acordo com sua gramaticalidade, mas tambm de acordo com
seu custo de processamento, o seu significado e, entre outros, o contexto onde est
inserida. Portanto, o termo julgamento de aceitabilidade parece ser o mais apropriado
para se referir a estudos que abordam a gramtica de um indivduo, enquanto o termo
julgamento de gramaticalidade poderia ser utilizado para se estudar o conhecimento
das pessoas em relao gramtica (nesse caso, gramtica normativa) de uma lngua.
Julgamentos de aceitabilidade so essenciais para as pesquisas lingusticas, j
que a falta de paralelismo entre uso e conhecimento lingustico faz com que muitos
fenmenos no possam ser percebidos de maneira fcil e natural (SORACE, 2010).
Assim, experimentos que de alguma forma colocam os indivduos em contato com os
estmulos lingusticos em questo parecem ser a forma mais prtica de verificar se a
construo estudada compe de alguma forma a gramtica de um grupo especfico.
Alm disso, julgamentos de aceitabilidade permitem que linguistas estudem a
reao de falantes frente a construes que no existem no uso comum da lngua
informao negativa (SHUCTZE, 1996). Tal informao pode ser utilizada, por exemplo,
para testar a influncia de L2 na L1 de um falante bilngue (OLIVEIRA; SOUZA, 2012).
Para isso, o linguista elabora um experimento no qual o falante lidar com sentenas na
sua lngua nativa que so apenas licenciadas em sua L2. Oliveira e Souza (2012) e
Oliveira, no desenvolvimento da sua dissertao, por exemplo, investigaram como
falantes do Portugus Brasileiro (PB) representam construes especficas do ingls
em PB: alternncia de ao induzida e resultativa, respectivamente. Pouqussimas

ReVeLe - n 5 - maio/2013

seriam as chances de serem encontrados usos naturais suficientes de sentenas como

ele marchou os soldados ao acampamento e ele martelou o metal torto reto.
Dessa forma, o julgamento de aceitabilidade fez com que o fenmeno fosse percebido
mais facilmente.
Dois mtodos comuns em psicolingusticas para a obteno de dados relativos a
julgamentos de aceitabilidade so a Escala Likert e a Estimativa de Magnitude. A partir
da experincia na utilizao de tais mtodos por Oliveira e na pesquisa bibliogrfica
desenvolvida para tal utilizao, descrevemo-los nas prximas sees.

3.1 Escala Likert

Um dos mtodos mais comuns na coleta de dados de julgamentos de

gramaticalidade a escala Likert (Fig. 1). uma escala psicomtrica que pode ser
utilizada para se medir o nvel de aceitabilidade de um indivduo em relao a uma
construo. Ela pode ser constituda de vrios pontos sendo as escalas de cinco e sete
pontos as mais utilizadas. Cada ponto se refere ao grau de aceitabilidade do indivduo
em relao ao estmulo apresentado.
Assim, o valor mnimo da escala corresponderia rejeio total de um item e o
valor mximo aceitao total. O valor intermedirio demonstraria uma posio neutra
em relao ao item. J os outros valores situados entre as extremidades e ponto mdio
seriam julgamentos de rejeio ou aceitao parcial do item.

Figura 1. Escala Likert de 7 pontos.

ReVeLe - n 5 - maio/2013

Mtodos de julgamento de aceitabilidade como a escala Likert apresentam

algumas vantagens em relao a outros mtodos experimentais, tais como os mtodos
de processamento lingustico on-line, como Leitura Auto-Cadenciada, e mtodos
fisiolgicos como ERP. O julgamento de aceitabilidade pode ser aplicado
presencialmente ou via internet, por exemplo, em poucas sesses, o que facilita a
obteno de um nmero alto de sujeitos. Alm disso, o teste aplicado de forma
rpida, o que faz com que julgamentos de aceitabilidade possam ser facilmente
reaplicados e os dados reanalisados. Em testes de processamento on-line,
diferentemente, a obteno de um alto nmero de sujeitos no ocorre com a mesma
facilidade, j que costumam demandar uma grande estrutura no momento da
aplicao.
Na pesquisa de Oliveira, utiliza-se o paradigma da escala Likert para iluminar
questes relacionadas aquisio de estrutura argumental de uma construo rara na
L1 e frequente na L2. Mais especificamente, investigou-se como indivduos falantes
nativos do portugus brasileiro com alto nvel de proficincia em ingls representam
construes resultativas gramaticais e agramaticais do ingls. Esta uma construo
pouco licenciada em portugus (LOBATO, 2004) e com rica variabilidade e
aceitabilidade em ingls (JACKENDOFF; GOLDBERG, 2004). No trabalho em questo
utilizaram-se apenas construes resultativas com o padro sinttico NP-V-NP-AP. A
telicidade

e, consequentemente, a gramaticalidade das sentenas que instanciam a

construo resultativa com a estrutura acima so dependentes do adjetivo que a

compem (WECHSLER, 2001). Basicamente, o predicado resultativo precisa ser um
adjetivo de escala fechada com ponto final mximo quando o verbo da sentena for
durativo; ou pode ser um adjetivo no gradual caso o verbo da sentena seja pontual,
como pode ser visto nos exemplos (1) e (2) abaixo:
7

Telicidade se refere a propriedade de um sintagma verbal que apresenta um evento ou uma ao

descrito como completos.

ReVeLe - n 5 - maio/2013

10

(1) He wiped the table dry/ clean/ *wet/ *dirty

(2) He shot him dead/ *wounded 8

No trabalho de Oliveira, buscou-se investigar se falantes nativos do portugus

brasileiro com alta proficincia em ingls so sensveis s idiossincrasias das
construes resultativas que fazem com que a sentena acima varie em termos de
gramaticalidade de acordo com o tipo de adjetivo utilizado ou se eles generalizam a
regra de formao da construo em questo e aceitam a presena de quaisquer
adjetivos. Os participantes do estudo (N=25), que consistiu em um experimento de
Julgamento de Aceitabilidade com a escala Likert, tiveram a alta proficincia
comprovada a partir do VLT (Vocabulary Levels Test) (NATION, 1990). Os participantes
foram expostos a um conjunto de 48 frases, das quais 16 ilustravam a construo
resultativa em questo, como nos exemplos acima, sendo oito sentenas agramaticais
devido ao uso de adjetivos que no se enquadravam na construo, e oito gramaticais.
Cada uma dessas 48 frases deveria ser classificada, a partir de uma escala Likert, de 1 a
7 em relao a sua gramaticalidade.
Os resultados do experimento indicaram que os falantes so capazes de
diferenciar as construes resultativas gramaticais das agramaticais. O tratamento
estatstico dos resultados foi realizado a partir de um teste t bicaudal (t(24)= 3.94, df =
149, p 0,01) com amostras emparelhadas. Esse estudo, portanto, traz evidncias de
que, apesar do menor input em comparao com os falantes nativos de ingls, os
bilngues falantes nativos do portugus brasileiro e com alta proficincia em ingls so
capazes de adquirir as especificidades que limitam os tipos de adjetivos que podem ser
utilizados em construes resultativas.

Em portugus: (1)Ele esfregou a mesa seca/ limpa/*molha/ suja

(2)Ele o acertou(com um tiro) morto/ *ferido

ReVeLe - n 5 - maio/2013

11

A utilizao de mtodos estatsticos para anlise dos dados obtidos em um

julgamento de aceitabilidade dependente de como o teste entendido. H duas
vises diferentes em relao aos dados provindos de uma pesquisa que utiliza a Escala
Likert: podemos consider-los como dados ordinais ou intervalais. Dados ordinais no
permitem a utilizao de mdia e desvio padro em sua anlise, devido a sua natureza
hierrquica. Com essa viso, possvel apenas utilizar dados como moda, mediana e
porcentagem. Se os dados forem considerados intervalais, a mdia e o desvio padro
podem ser utilizados para o tratamento estatsticos dos dados, como foi feito no
estudo de Oliveira. Uma opo para pesquisas que desejam evidenciar a inteno de se
trabalhar com dados intervalais seria utilizar, no lugar de nmeros, uma linha, na qual
qualquer ponto do incio ao fim pode ser marcado para julgar os estmulos.
Outra possvel soluo metodolgica para se trabalhar com dados intervalais
seria implementar um experimento cujo julgamento dos informantes fosse relativo a
um outro item e no a um julgamento absoluto. O julgamento absoluto aquele no
qual os informantes precisam afirmar se um item contm ou no certa propriedade.
Nesse caso, os informantes poderiam, por exemplo, classificar sentenas como
gramaticais ou agramaticais, aceitveis ou inaceitveis, formais ou informais. Para isso,
os informantes utilizariam um ponto de referncia implcito a partir do qual os outros
itens seriam julgados. Este tipo de julgamento apresenta algumas desvantagens, tais
como a limitao das escalas e a inconsistncia dos valores. Para obter resultados mais
confiveis necessrio que os pesquisadores utilizem julgamentos de aceitabilidade
relativos, ou seja, em vez de caracterizar um item em termos absolutos mais
interessante julg-lo em relao a outros. Dessa forma, possvel medir as diferenas
entre aceitveis e inaceitveis; e, principalmente, medir o tamanho da preferncia de
um item em relao a outro. Sorace (2010) cita alguns experimentos que demonstram
que as pessoas tendem a ter maior facilidade em fazer julgamentos relativos do que em

12

ReVeLe - n 5 - maio/2013

fazer julgamentos absolutos. Um mtodo que pode ser utilizado para realizar
experimentos com julgamentos relativos seria a estimativa de magnitude.

3.2 Estimativa de magnitude

A estimativa de magnitude utilizada principalmente na psicofsica para

determinar a sensao de uma pessoa a um estmulo (luz ou som, por exemplo) em
relao a outro (SORACE, 2010; BARD et al., 1996).

Basicamente, nesse tipo de

experimento, um estmulo padro apresentado aos participantes que devem atribuir

a esse estimulo padro um valor que pode ser expresso por um nmero ou, at
mesmo, por uma linha. Em seguida, outros estmulos so apresentados e os
participantes devem atribuir valores que expressem a relao, proporo ou diferena
entre os estmulos. Para ilustrar tal experimento, imagine que o participante
apresentado a um som e a este som ele atribui o valor 25. Em seguida, o som
apresentado duas vezes mais alto. Se o participante tem a sensao que o som est
duas vezes mais alto ento ele deve atribuir o valor 50, mas se a sensao dele foi que o
som aumentou mais que duas ele pode atribuir qualquer valor acima de 50. Da mesma
forma, se a sensao do informante foi que o som aumentou menos do que duas vezes
ele atribuir algum valor entre 25 e 50. Dessa forma, o paradigma da estimativa de
magnitude capaz de capturar a diferena entre estmulos tal como ela percebida
pelos participantes.
A maior diferena entre os estudos metafsicos e os estudos lingusticos est no
fato de que na lingustica s possvel trabalhar com os valores atribudos pelos
informantes j que no h valores reais em termos de gramaticalidade e
aceitabilidade. De acordo com Sorace (2010), tal fato no gera problema algum s
pesquisas lingusticas. A autora afirma que h diversos estudos que vm corroborando

13

ReVeLe - n 5 - maio/2013

a ideia de que pesquisas que apenas trabalham com as opinies dos participantes
podem ser analisadas a partir da estimativa de magnitude. O uso desse paradigma em
julgamentos de aceitabilidade forneceria dados mais confiveis e precisos do que o uso
das escalas convencionais, tais como a escala Likert, pois a estimativa de magnitude
mais sensvel s diferenas sutis entre os estmulos (BARD et al., 1996). Alm disso, os
informantes no precisam classificar as sentenas como boas ou ruins, apenas
compar-las entre si.
O pesquisador tem diferentes opes de realizao de experimentos de
julgamento de aceitabilidade com o paradigma de estimativa de magnitude em relao
ao estmulo padro. Este pode ser escolhido previamente pelo pesquisador, que,
usualmente, opta por estmulos com valores intermedirios. Assim, os valores
seguintes podero ser maiores ou menores do que o estmulo padro. Nas pesquisas
metafsicas h uma preferncia pela randomizao

de todos os itens e, logo, o

estmulo padro no definido previamente. Uma vantagem da primeira opo seria o

fato de que ela apresenta melhor validade aparente j que ela parece exigir menos dos
informantes. Independentemente da opo pela randomizao, o pesquisador pode
escolher se o estmulo padro estar disponvel durante todo o experimento ou se ele
ser apresentado apenas no incio. Bem como a no randomizao, a presena do
estimulo padro durante toda a conduo do experimento facilita a execuo do
experimento por parte do participante e, logo, apresenta maior validade aparente.
Um cuidado que deve ser tomando ao se realizar um estudo com a estimativa
de magnitude a seleo do perfil dos participantes do estudo. No se sabe
exatamente se todas as pessoas tm a capacidade de fazer de forma confivel essa
relao entre estmulos. bem possvel que crianas tenham maior dificuldade para
atribuir valores e comparar diferentes estmulos. Assim, sugere-se que tal paradigma

Seleo de forma aleatria.

ReVeLe - n 5 - maio/2013

14

seja utilizado apenas para estudo com adultos. Alm disso, possvel que a formao
escolar tenha grande influncia no julgamento de aceitabilidade lingustica. Acredita-se,
por isso, que pessoas com baixa alfabetizao no devam compor este tipo de
experimento, ao menos que elas sejam o alvo da pesquisa. Para obter dados mais
confiveis, o ideal que todos os participantes tenham um perfil similar.
Outro fator que deve receber ateno na realizao de experimentos com
estimativa de magnitude a normalizao dos dados para que possa ser feito um teste
estatstico. De acordo com Sorace (2010), tal procedimento necessrio porque as
pessoas utilizam diferentes intervalos de estimativas e as distribuies tendem a ser
distorcidas. Para que isso no interfira nos resultados o pesquisador tem duas opes.
Ou ele transforma os valores crus em logaritmos a partir das mdias geomtricas de
tendncia central; ou ele divide cada valor numrico pelo valor do estmulo padro.
H diversas vantagens e desvantagens na utilizao do paradigma da estimativa
de magnitude. Este capaz de captar com maior preciso o grau de variabilidade da
aceitao dos itens e no impe nenhum tipo de restrio ao julgamento dos
informantes, que podem atribuir os valores que acharem mais condizentes a suas
percepes. Alm disso, no h necessidade de atribuir valores absolutos tais como
bom, agramatical, **, ou ?, necessrio apenas que os itens sejam
comparados entre si. O paradigma permite a aplicao de estatstica paramtrica e que
os experimentos contenham um nmero de participantes considervel. Contudo, este
tipo de experimento tende a requerer uma sesso de treinamento extensa, devido ao
fato de que os participantes provavelmente no esto acostumados como esse tipo de
tarefa e ela exige certo nvel de habilidade por parte dos informantes para ser bem
executada e, dessa forma, informantes devem ter um perfil bem similar.

ReVeLe - n 5 - maio/2013

15

4 OS CUIDADOS METODOLGICOS EM JULGAMENTO DE ACEITABILIDADE

Schutze (1996) apresenta uma srie de cuidados que linguistas devem ter ao
realizar experimentos que envolvam julgamento de aceitabilidade que se aplicam tanto
a testes com escala Likert como aqueles que utilizam estimativa de magnitude.
Segundo o autor, se todas as pesquisas seguissem as sugestes apontadas por ele, os
dados provindos desse tipo de pesquisa cientfica seriam mais confiveis.
Primeiramente, preciso organizar todos os estmulos, incluindo os distratores,
de forma que nem a ordem nem a gramaticalidade dos itens afetem os resultados. Para
isso, interessante que a ordem dos itens seja randomizada a cada sesso para que o
nervosismo do incio e a fadiga do final no interfiram nos julgamentos. Alm disso, os
itens podem ser controlados de forma que 50% deles sejam gramaticais e os outros 50%
agramaticais. Dessa forma, os informantes tero menos chance de perceber algum tipo
de tendncia em relao gramaticalidade dos itens. Tanto a proporo de sentenas
gramaticais e agramaticais e a ordem dos estmulos, como aponta Schutze (1996), so
comprovadamente fatores que influenciam no julgamento. Logo, esses cuidados so
importantes para que os dados apontem o funcionamento da gramtica do
informante.
O julgamento de uma sentena pode ser influenciado pelo vocabulrio que nela
est presente. A presena de palavras com baixa frequncia pode interferir no
julgamento da frase como um todo. Uma forma de evitar que isso ocorra seria incluir
no experimento apenas palavras cuja alta frequncia seja comprovada por corpus.
Alternativamente, o linguista poderia autorizar que os informantes indagassem sobre o
significado de qualquer vocbulo. Independentemente de qual mtodo escolhido,
fundamental que os participantes da pesquisa tenham conscincia do significado de

ReVeLe - n 5 - maio/2013

16

todas as palavras da sentena julgada para que aspectos lexicais no venham a

influenciar na aceitabilidade de uma frase.
Bem como o vocabulrio, o contexto de uma construo pode fazer com que
esta seja menos aceita. Uma mesma construo pode ser inserida em uma grande
variedade de contextos. No entanto, nem todos podem ser compreendidos com a
mesma facilidade. Em outras palavras, certos contextos demonstram ser mais
apropriados para determinadas construes. Dessa forma, para obter dados confiveis
sobre uma construo aconselhvel que o linguista selecione os contextos que so
pragmaticamente relacionados com a construo para evitar grande variao entre os
sujeitos.
Para que pequenas diferenas entre as construes alvo sejam percebidas
essencial que haja paralelismo entre todas elas. No que se referem sintaxe, as
sentenas alvos devem apresentar os mesmos tipos de sintagmas, seguindo a mesma
ordem, ao menos que a diferena de sintagmas ou de ordem seja o objeto de estudo.
Alm disso, sentenas sintaticamente complexas podem sobrecarregar a memria de
trabalho de alguns indivduos e consequentemente serem julgadas inadequadamente.
Uma frase como Maria demonstrou satisfao em mudar no sobrecarrega a
memria de trabalho da mesma forma que uma frase como o fato de Maria ter dito
para seus familiares que ela vai se mudar demonstra que provvel que ela foi sincera
quando ela disse que no estava satisfeita com a situao na qual a cidade se
encontrava.
Considera-se importante tambm a manuteno da semntica para que
construes no tenham suas estruturas julgadas inadequadamente devido ao seu
sentido excntrico, como em Sonhos verdes comiam pensamentos speros.
Portanto, se a sintaxe e a semntica dos itens receberem os cuidados apropriados,
maiores sero as chances de se chegar a resultados confiveis.

ReVeLe - n 5 - maio/2013

17

Bem como os estmulos do experimento, os informantes precisam ser

escolhidos criteriosamente para que eles no enviesem os dados. bem possvel que
linguistas, por estarem envolvidos constantemente com questes de aceitabilidade e
gramaticalidade, tenham julgamento diferenciado e, assim, no reflitam a populao a
que pertencem. Dessa forma, prefervel que no haja linguistas nos testes.
Acredita-se, ainda, que fatores como idade e educao tambm possam
interferir no julgamento, logo, o ideal que todos os informantes tenham nvel de
escolaridade e idade semelhantes. Alm disso, o nmero de informantes deve ser o
maior possvel, para que os dados tratados estatisticamente tenham maiores chances
de confiabilidade da amostra da populao em questo. Assim, em uma pesquisa ideal,
alm das observaes feitas anteriormente em relao aos estmulos, o linguista
tambm precisa ser cuidadoso na seleo dos seus informantes. Ele deve ser capaz de
reunir o nmero mximo possvel de informantes com perfis semelhantes.
A aplicao do teste tambm deve ser controlada para que no comprometa os
dados. Como foi dito anteriormente os termos aceitabilidade e gramaticalidade
ainda so confundidos entre linguistas e podem tambm ser mal interpretados pelos
informantes. Dessa forma, o ideal que o experimentador explique o que ele quer
dizer com aceitabilidade e julgue algumas sentenas para exemplificar o que foi
proposto.
Para dar maior segurana, necessrio que haja alguns exemplos para que os
indivduos possam praticar a tarefa de julgamento de aceitabilidade, de forma que
quando a tarefa se iniciar, todos os participantes estejam confortveis. Portanto,
importante que o experimentador deixe todos os participantes certos do que eles
devem fazer na tarefa.
Todos os experimentos que utilizam julgamento de aceitabilidade ainda tm a
ajuda da tecnologia para facilitar e intensificar o seu uso. H vrios programas

ReVeLe - n 5 - maio/2013

18

disponveis na internet, sendo alguns pagos e outros gratuitos, que facilitam a

utilizao de testes com escala Likert e estimativa de magnitude. O Webexp, por
exemplo, um software gratuito que permite que dados da escala Likert e da
estimativa de magnitude sejam coletados via internet. Dessa forma, possvel se obter
um nmero considervel de informantes e o programa facilita o acesso a populaes
(estrangeiros, por exemplo) com as quais a coleta presencial seria mais restrita.

CONCLUSES

O julgamento de aceitabilidade um mtodo off-line to eficaz quanto outros

mtodos on-line e fisiolgicos para iluminar questes relacionadas ao processamento e
estrutura da lngua. Uma grande vantagem de se utilizar o julgamento de
aceitabilidade que este pode ser conduzido a partir de um computador sem o contato
fsico entre experimentador e informante. Pelo que sabemos, isso ainda no pode ser
feito com mtodos on-line ou com mtodos fisiolgicos.

ABSTRACT
Psycholinguistic studies shed light on what mental processes are connected with
language. A vast array of methods is utilized in order to address this issue. The aim of
this article is to analyze an offline method named Acceptability Judgment. Offline
methods are those which are used to investigate language processing by using postprocessing data. In this kind of method, subjects do tasks after being exposed to the
research questions. In other words, the mental processes are not observed during the
processing itself; instead, assumptions are made from what is perceived after the
processing have been concluded. Acceptability Judgement refers to individuals
judgement concerning the acceptability of different sentences. In turn, the judgements
are post processing data, which are used as a reflection of different mental process.
The acceptability of the stimuli can be measured by using the Likert Scale paradigm,
which is a psychometric scale made of different points, the most common ones are the

ReVeLe - n 5 - maio/2013

19

5-point-scale and the 7-point-scale. Each of these scale points refers to how acceptable
each sentence is according to the judger. Another paradigm that can be utilized is the
Magnitude Estimation, through which participants assign grades to each sentence to
express the proportion and differences between each item. The Acceptability
Judgement methodology is easily and reliably applied and it is considerably useful for
psycholinguistics studies.
Keywords: Psycholinguistics, Likert scale, magnitude estimation

REFERNCIAS
BARD, Ellen G.; ROBERTSON, Dan; SORACE, Antonella. Magnitude estimation of
linguistic acceptability. Language, 72, p. 32-68. 1996.
BROCCIAS, Cristiano. The English Change Network. Berlin/New York: Mouton de
Gruyter. Cognitive Linguistics Research Series, 22, 2003.
DEESE, James. Psicolingstica. Petrpolis: Vozes, 1976.
FIELD, Jonh. Psycholinguistics: The key concepts. New York: Routledge, 2004.
GERNSBACHER, Morton A. Handbook of psycholinguistics. San Diego : Academic Press,
1994.
GLUCKSBERG, Sam. Experimental psycholinguistics. New Jersey: Lawrence Erlbaum
Associates, 1975.
JACKENDOFF, Ray; GOLDBERG; Adele. The English Resultative as a family of
constructions. Language, Washington D.C., n. 80. setembro 2004, p. 523-567.
LEITO, Mrcio M. Psicolingstica Experimental: Focalizando o processamento da
linguagem. In: MARTELOTTA, Mrio Eduardo (org.) Manual de Lingstica. So Paulo:
Contexto, 2008.
LOBATO, Lcia. Afinal, existe a construo resultativa em portugus? In: NEGRI, Lgia;
FOLTRAN, Maria Jos; OLIVEIRA, Roberta Pires de (orgs.). Sentido e Significao. So
Paulo: Contexto, 142-179, 2004.

ReVeLe - n 5 - maio/2013

20

MITCHELL, Don. On-line methods in language processing: Introduction and historical

review. In: CARREIRAS, Manuel; CLIFTON, Charles (Eds.). The On-line Study
Comprehension: Eyetracking, ERP and Beyond. Brighton, UK: Psychology Press, 2004.
NATION, Paul. Teaching and Learning Vocabulary. Boston, MA: Heinle & Heinle, 1990.
SCHULTZE, Carson. The empirical base of linguistics: Grammaticality judgments and
linguistic methodology. Chicago, IL: University of Chicago Press, 1996.
SOUZA, Ricardo; OLIVEIRA, Fernando de. Is knowledge of a non-dominant L2 activated
by bilinguals using their dominant L1? Insights from an on-line psycholinguistic
study. Organon, Porto Alegre, n. 51, 2011. p. 103-128.
SOUZA, Ricardo. Argument structure in L2 acquisition: Language transfer re-visited in a
semantics and syntax perspective. Ilha do Desterro. Journal of English Language,
Literatures in English and Cultural Studies, Florianpolis, n. 6. p. 153-188, 2011.
SORACE, Antonella. Using Magnitude Estimation in developmental linguistics research.
IN: BLOM, Elma; UNSWORTH, Sharon (orgs.). Experimental Methods in Language
Acquisition Research. Amsterdam/Philadelphia: John Benjamins, 2010. p. 57-72.
STARR, Matthew; RAYNER, Keith. Language Comprehension, Methodologies for
Studying. In: Encyclopedia of Cognitive Science. p. 1358-1392. 2005.
WECHSLER, Stephen. An analysis of English resultatives under the event-argument
homomorphism model of telicity. In: Proceedings of the 3rd Workshop on Text
Structure. University of Texas at Austin, 2001.
ZARA, Julia. Estudo da Expresso de Eventos de Transferncia de Posse na Interlngua de
Brasileiros Aprendizes de Ingls. Dissertao (Mestrado em Lingustica Aplicada) , 2009.
159 f., UFMG.