Documenti di Didattica
Documenti di Professioni
Documenti di Cultura
inadequadamente testes estatsticos devido no utilizao das pressuposies necessrias . Em conseqncia, os pesquisadores podem ter dificuldades tanto na anlise dos dados coletados , quanto na interpretao de resultados obtidos, podendo assim, originar concluses errneas. Assim sendo, de fundamental importncia para pesquisa a escolha do delineamento experimental adequado, bem como o emprego correto do modelo estatstico, no intuito de estimao correta do erro experimental. A escolha do teste inadequado pode causar dificuldade na interpretao dos resultados de um experimento ou mesmo levar o pesquisador a realizar concluses erradas (CARDELINO & SIEWERDT, 1992). Por exemplo, os principais aspectos que afetam diretamente a fidedignidade s o: i) falta de informao sobre as pressuposies dos diferentes testes estatsticos e;
(Recebido para Publicao em 11/05/2007, Aprovado em 08/02/2007) R. Bras. Agrocincia, Pelotas, v.13, n.4, p.441-447, out-dez, 2007
BERTOLDO et al. Teste de comparao de mdias: dificuldades e acertos em artigos cientficos ii) conhecimento incipiente da grande maioria dos mais utilizados pelos pesquisadores. Este recomendado quando o objetivo determinar os melhores tratamentos dentro de um grupo, ou seja, comparar todos os tratamentos entre si. Ainda, o uso de comparao de mdias se restringe s situaes especficas, tolerado quando no se conhecem as caractersticas dos fatores (CHEW, 1976). Alm dos testes de comparao de mdias, dependendo do objetivo e da estrutura dos tratamentos, as comparaes podem ser realizadas por contrastes, possibilitando uma melhor inferncia do pesquisador sobre os resultados. De forma geral, os contrastes podem ser divididos em comparaes, quando os efeitos de um grupo de tratamentos das variveis em estudo so comparados com os de outro grupo (AL VAREZ & AL VAREZ, 2006). Se os fatores forem de natureza quantitativa, com mais de dois nveis, recomendase a anlise de regresso. Segundo CHEW (1976), quando os fatores so quantitativos, a anlise de regresso a tcnica mais apropriada para o pesquisador inferir sobre os resultados. Neste caso, o objetivo do pesquisador observar o comportamento da varivel resposta entre os intervalos avaliados, como por exemplo, doses de um fertilizante, e no os nveis especficos. Portanto, para cada tipo de fator, h um teste estatstico especifico e apropriado, o que refora a importncia do pesquisador conhecer a classificao dos fatores que envolvem o seu trabalho. Assim, quando os fatores forem quantitativos o ajustamento de funes de resposta, atravs de tcnicas de regresso (JONES, 1984), o apropriado; o adequado para fatores qualitativos so os conjuntos de contrastes planejados entre as mdias ou grupos de mdias (GILL, 1973), e os procedimentos de comparao mltiplas de mdias para fator qualitativo especfico no estruturado, como por exemplo, cultivares (CHEW, 1976). Desta forma, este trabalho teve como objetivo identificar erros e acertos com relao aplicao de testes de comparao de mdias em trabalhos cientficos, e sugerir alternativas para uma melhor interpretao dos resultados pelos pesquisadores . MATERIAL E MTODOS
pesquisadores quanto aos tipos de fatores e tipos de variveis. Assim, a fundamentao terica do delineamento de tratamento de um experimento, tal como os tipos de fatores envolvidos, fundamental para as inferncias do pesquisador (SILVA et al., 1999, BANZATTO & KRONKA, 2006), uma vez que, tendo pleno conhecimento da classificao dos diferentes tipos de fatores quanto escala de medida e do tipo de distribuio das variveis (normal, binomial, etc.), as inferncias sobre os resultados podem ganhar acuidade e preciso. Para uma correta anlise dos dados, se faz necessrio o conhecimento da natureza dos fatores estudados. De modo geral, os fatores podem ser classificados em qualitativos (especficos estruturados e no-estruturados, ordenados e amostrados) estruturados e em quantitativos. cujos Fatores nveis qualitativos podem ser so aqueles
classificados em grupos, cujas comparaes constituem o objetivo do trabalho e os fatores qualitativos no estruturados apresentam como objetivo comparaes entre todos os nveis do fator, ou seja, todos contra todos. Os fatores qualitativos no-estruturados apresentam como objetivo comparaes entre todos os nveis do fator experimental, ou seja, todos contra todos (CHEW, 1976). Os fatores qualitativos, por exemplo, cultivares, se diferenciam dos quantitativos, por exemplo, densidade de plantas por unidade de rea, doses de um fertilizantes ou hormnio, por serem expressos numa varivel nominal, de escala ordinal ou ainda aleatria, enquanto que os quantitativos so expressos numa varivel intervalar ou racional. Entretanto, muitas vezes um fator de natureza quantitativa pode ser classificado como qualitativo, de acordo com o objetivo do trabalho. Por exemplo, se um experimento constitudo por 3 nveis de um hormnio (0, 45 e 90 mg L ) e se objetiva verificar as concentraes especficas, o fator classificado como qualitativo. Por outro lado, sendo o objetivo verificar os intervalos compreendidos entre as concentraes (nveis) do hormnio, a natureza do fator em estudo quantitativa. Quando apresentam caractersticas qualitativas e no relacionadas so comumente empregados os testes de comparao de mdias, pois, segundo AFLAKPUI (1995), os testes de comparao de mdias freqentemente so os
-1
Foi realizada uma reviso de quatrocentos e oitenta e trs (483) trabalhos cientficos publicados na Revista
BERTOLDO et al. Teste de comparao de mdias: dificuldades e acertos em artigos cientficos Brasileira de Agrocincias, no perodo entre 1995 a 2005, sendo utilizados trezentos e quarenta (340) trabalhos. Os artigos publicados e que no foram revisados, foram aqueles que no envolveram testes de comparao de mdias, por no se relacionarem com o objetivo deste trabalho; ou ainda, nenhuma anlise estatstica foi utilizada. Os demais trabalhos foram classificados quanto ao uso dos testes de comparao de mdias : i) correto; ii) parcialmente correto e; iii) incorreto. A categoria correto (teste de comparao de mdias para fatores qualitativos no-estruturados e no relacionados, anlise de regresso para fatores quantitativos e contrates ou teste de Dunnett, para fatores qualitativos estruturados) refere-se aos trabalhos cuja realizao de teste de comparao de mdias, foi em funo dos objetivos do trabalho e da estrutura de fatores. A categoria parcialmente correto caracteriza a aplicao de testes de comparao de mdias em experimentos com fatores qualitativos estruturados e anlise de regresso simultaneamente a testes de comparao de mdias para fator quantitativo. A Tabela 1 - Alternativas para a escolha de testes estatsticos em relao com os fatores de estudo. categoria incorreto foi usada para trabalhos com nveis de um fator quantitativo no qual se aplicou um teste de comparao de mdias, anlise de regresso para fatores qualitativos e ao no ser verificado o efeito da interao em experimentos fatoriais (com mais de um fator), nesse caso, quando o efeito da interao no foi estudado, o trabalho foi considerado incorreto, e se o efeito foi considerado, foram avaliados os efeitos dos fatores separadamente, da mesma forma que nos trabalhos com experimentos unifatorial. Se pelo menos um dos fatores estudados foram avaliados de forma errnea, o trabalho foi considerado como incorreto. Para melhor compreenso, foram separados exemplos mais contrastantes, sendo divididos em trs classes: classe I corretos; classe II parcialmente corretos e; classe III incorretos. Alm dos exemplos, para facilitar o entendimento dos pesquisadores, a Tabela 1, adaptada de GILL (1978), demonstra alternativas para a anlise dos dados, com relao aos fatores em estudo.
Tipo de Fatores
1. Qualitativos
Sim...............2 No...............5
2. Estruturado
Sim...............3 No...............4
Sim...............Dunnett No...............Contrastes
4. No estruturado
5. Quantitativo
Regresso
RESULTADOS E DISCUSSO Nos artigos revisados, a inadequada considerao dos tipos de fatores em estudo, ficou evidente, principalmente no uso incorreto de testes de comparaes de mdias em de experimentos fatoriais. Em experimentos unifatoriais, no houve grande dificuldade na utilizao de testes para a categoria unifatorial foi correta em 71% (109 trabalhos publicados) dos trabalhos revisados, em 21% (32 trabalhos publicados) foi parcialmente correta e em 8% (13 trabalhos publicados) incorreta. A principal dificuldade verificada, de acordo com a Tabela 2, est relacionada a trabalhos que envolvem fatores quantitativos, sendo que em 13 trabalhos, o uso de teste de comparao de mdias foi incorreto.
comparaes de mdias , conforme demonstrado na Tabela 2, onde a aplicao de testes de comparao de mdias
Tabela 2 - Nmero de artigos revisados em experimentos fatoriais, quanto ao tipo de fator (qualitativo no estruturado, qualitativo estruturado, quantitativo) e quanto ao uso (correto, parcialmente correto e incorreto), editados na Revista Brasileira de Agrocincia, no perodo 1995 a 2005. UNIFATORIAL Classificao Ql1 Qle 2 Qt3 Total %
Correto
59
46
109
71
Parcialmente correto
24
32
21
Incorreto
13
13
Total
59
28
67
154
38
18
44
Esses resultados esto de acordo com CARDELINO & SIEWERDT (1992) e SANTOS et. al (1998), que revisaram trezentos e noventa (390) trabalhos cientficos publicados na Revista da Sociedade Brasileira de Zootecnia e trabalhos publicados na Pesquisa Agropecuria Brasileira (PAB) no perodo de 1980 a 1994, com algum tipo de comparao de mdias, respectivamente, sendo que o uso inadequado mais
freqente dos testes de comparao de mdias ocorreu nos casos em que os tratamentos foram de natureza quantitativa. Por outro lado, em experimentos fatoriais, os resultados foram diferentes , como observado na Tabela 3, onde 31% (58) dos trabalhos revisados foram classificados como corretos, 2% (4) parcialmente corretos e 67% (124) como incorretos.
Tabela 3 - Nmero de artigos revisados quanto ao nmero de fatores (fatorial), quanto ao tipo de fator (qualitativo no estruturado, qualitativo estruturado, quantitativo) e quanto ao uso (correto, parcialmente correto e incorreto), editados na Revista Brasileira de Agrocincia no perodo 1995 a 2005. Fatorial Ql x Ql 1 Ql x Qt Ql x Qle Qt x Qt3 Qt x Qle 3 Ql 2 Ql x Qt Ql x 2 Qt 3 Ql x Qt 4 Ql 2 Ql x Qle x Qt 3 Qt Total %
2
Correto 22 13 1 6 0 6 9 1 0 0 0 0 58 31
Parcialmente correto 0 0 0 3 1 0 0 0 0 0 0 0 4 2
Incorreto 33 30 14 9 1 11 11 10 2 1 1 1 124 67
Total 55 43 15 18 2 17 20 11 2 1 1 1 186
% 29,60 23,00 8,10 9,70 1,10 9,10 10,80 6,00 1,10 0,50 0,50 0,50
Os resultados demonstram a dificuldade por parte dos pesquisadores na aplicao de testes de comparao de mdias em experim entos com fatores quantitativos, em experimentos fatoriais. O uso de um esquema fatorial importante quando se objetiva investigar as possveis interaes entre os fatores, e ainda, segundo WECHSLER (1998), o arranjo fatorial alm de permitir investigar as interaes entre os fatores, permite estimar a varincia do erro experimental com maior preciso, aumentando a potncia dos testes estatsticos . Porm, em trabalhos com esquema fatorial (n x n; n x n x n), se o efeito da interao entre os fatores for significativo, a anlise dos fatores devese dar em conjunto, uma vez que os nveis de um fator ocorre em combinao de nveis de um outro fator (PETERSEN, 1976). Sendo assim, em experimentos
fatoriais, o primeiro passo analisar os efeitos da interao entre os nveis dos fatores. Se for ignorado o efeito da interao significativa, ou seja, a dependncia do efeito de um fator nos nveis do outro, a premissa de que os nveis de um fator apresentam comportamento diferenciado na presena do outro fator pode ser comprometida. As comparaes entre tratamentos podem ser afetadas substancialmente pelas condies em que ocorrem, e, interpretaes claras dos efeitos de um tratamento precisam ser levadas em conta para o efeito de outros tratamentos. Isso significa que, uma vez significativa a interao entre os fatores, necessrio fazer um estudo dessa interao atravs de sua decomposio em fatores aninhados
(KUEHL,1994).
BERTOLDO et al. Teste de comparao de mdias: dificuldades e acertos em artigos cientficos De forma sucinta, geralmente o primeiro passo submeter os dados a uma anlise de varincia, atravs do teste F global. O teste de hipteses ou de significncia permite decidir se aceita-se ou rejeita-se a hiptese de nulidade (H 0), ou se a amostra observada difere estatisticamente dos valores esperados (BANZATTO & KRONKA, 2006), ou ainda se a o efeito da interao entre os fatores (esquema fatorial) significativo. Se os graus de liberdade se equivalerem a um (1), o teste F se torna decisivo, pois de acordo com CHEW (1976), quando um experimento inclui apenas dois tratamentos, nenhum teste adicional faz-se necessrio, uma vez que existindo apenas duas mdias, e sendo o teste F significativo, o nico contraste existente tambm significativo. Por outro lado, s e o fator em estudo for de natureza quantitativa, o teste F no necessrio, sendo aplicada anlise de regresso O trabalho publicado no volume 4, n.3, 183-186, 1998, foi classificado como correto quanto ao emprego de testes de comparao de mdias (Tabela 4). O objetivo do trabalho foi avaliar a qualidade fisiolgica das sementes de Delphinium que estavam a venda no mercado, em Classe I Trabalhos corretos Exemplos variar um fator, por vez, via de regra se aplica quando o objetivo estabelecer uma lei fundamental, o que conduziria ao conhecimento detalhado do efeito de um fator, quando os outros so mantidos constantes. Ainda, outro procedimento experimental seria considerar todas as possveis combinaes de nveis simultaneamente. Isso permitiria obter informao da acerca dos fatores os principais vrios e, especialmente, interao entre fatores
(NOGUEIRA, 1997).
diretamente. Assim, nos casos em que os tratamentos forem de nveis de um fator quantitativo, o apropriado decompor os graus de liberdade em componentes polinomiais
ortogonais (CHEW, 1976). Uma vez no sendo nenhum desses casos, os contrastes devem ser comparados por testes de comparao de mdias. Um nmero de procedimentos estatsticos pode ser utilizado com esse propsito. Alguns deles so: planejar contrastes entre as mdias, ou grupos de mdias e; utilizar teste de comparao de mdias (PETERSEN, 1976). Se a interao entre os fatores for significativa, os graus de liberdade devem ser rearranjados de modo a comparar os nveis de um fator dentro dos nveis do outro (CARDELINO & SIEWERDT, 1992). Nesse caso, fixando um fator e variando os nveis do outro fator, assim chamado de efeito simples. De acordo com HINKELMANN & KEMPTHORNE (1994), o procedimento de
Pelotas/RS, no ano de 1995. Como apresentou um nico fator, qualitativo especfico no estruturado (quatro lotes de trs diferentes empresas de importao de sementes de Delphinium ) foi aplicado teste de Duncan para a comparao das mdias de maneira correta, cujo objetivo era comparar todos contra todos . Apesar da correta utilizao de teste de comparao de mdia nesse caso, a escolha do teste de Duncan no adequada, uma vez que, com trs ou mais mdias sendo comparadas, a teoria do teste de Duncan inadequada, pois o nvel de significncia global no mantido (GILL, 1978). Como alternativa, os autores poderiam utilizar teste de Tukey, Scheff ou ainda Bonferroni.
Tabela 4 - Mdias das percentagens de germinao impressas na embalagem das sementes e avaliadas em laboratrio, percentagem de germinao aps pr-esfriamento, ndice de velocidade de emergncia (IVE) e estande final de sementes de Delphinium de quatro lotes diferentes (1) . Germinao impr. na emb. (%) Germinao em lab. (%) Germinao aps pr-esfriamento (%) Estande Final (%)
Lotes
IVE
65 Ac
14 Bb
62 Ab
0,31 bc
20 aB
94 Aa
55 aC
80 aB
0,38 ab
27 aD
C1
80 Ab
48 aC
67 Bb
0,58 a
28 aD
C2
(1)
80 Ab
0 cC
24 Bc
0,13 c
7 bC
Mdias seguidas da mesma letra minscula a coluna e da mesma letra maiscula na linha, no diferem significativamente entre s i
Um exemplo da correta aplicao de testes de comparao de mdias, foi verificada no trabalho publicado no volume 6, n.2, 107-111, 2000, que tinha como objetivo avaliar a resposta das plantas quanto s caractersticas fenomtricas do crisntemo em diferentes populaes e duas pocas de plantio, conduzido em haste nica e cultivado em estufa plstica. Os fatores nesse experimento foram duas pocas de plantio e oito populaes de plantas (2x8). Os autores no verificaram significncia na interao entre os fatores . Como a interao no foi significativa, analisaram os fatores de forma separada, onde para as pocas de plantio aplicaram teste de Duncan, uma vez que um fator qualitativo, e para as populaes de plantas , como um fator quantitativo ajustaram curvas de regresso para as variveis. Classe II Trabalhos parcialmente corretos
escarificao : escarificao mecnica em um escarificador eltrico provido de lixa nmero 180; calor mido : imerso em gua a 60C por cinco minutos e; testemunha). Os autores utilizaram teste de Tukey para a comparao entre os tratamentos, considerando assim, o fator como qualitativo no estruturado. Porm, uma vez que o trabalho apresenta uma testemunha, o fator deve ser classificado como qualitativo estruturado. Assim, o adequado seria a utilizao de teste de Dunnett para a inferncia sobre as mdias, pois segundo CARDELINO & SIEWERDT (1992), o teste de Dunnett apropriado quando se deseja comparaes apenas entre os tratamentos e uma testemunha. De acordo com os mesmos autores, o teste de Dunnett pode ser aplicado de modo unilateral ou bilateral. Quando a priori sabe-se que o tratamento testemunha ter o melhor ou o pior resultado dentre todos os tratamentos, o teste pode ser aplicado de forma unilateral, aumentando a probabilidade de
Dependendo do objetivo do experimento, alguns testes estatsticos podem ser mais eficazes do que outros. Nesse exemplo (Tabela 5), o esquema era unifatorial: trs tratamentos pr-germinativos (calor seco : exposio ao ar seco temperatura de 50+- 2C, durante seis dias;
Tabela 5 - Percentagens de germinao (PG), dureza, plntulas anormais e sementes mortas de Desmodium incanum submetidas a tratamentos de superao de dormncia . Estao Experimental Agronmica, Universidade Federal do Rio Grande do Sul, Eldorado do Sul, RS. Tratamentos PG Dureza Plntulas anormais Sementes mortas
(1)
Escarificado
80 a
0 b
19 a
1a
Calor seco
24 b
75 a
1 c
0a
Calor mido
21 b
75 a
4 b
0a
Testemunha
18 b
82 a
0 c
0a
CV (%)
(1)
15,081
11,495
32,183
230,940
Mdias na mesma coluna, seguidas por letras distintas diferem entre si pelo teste de Tukey, ao nvel de 1% de significncia. enraizadas. Como se objetiva a anlise dos intervalos de doses, a aplicao de teste de comparao est incorreta. O primeiro exemplo incorreto foi extrado do trabalho Portanto, o ajuste de uma equao de regresso para as diferentes concentraes de AIB o adequado, podendo indicar que uma concentrao entre o intervalo 4.000 ppm e 6.000 ppm foi a mais eficaz. Em comparaes de tratamentos com esquema fatorial ou nveis de fatores quantitativos, os graus de liberdade ou a soma dos quadrados devem ser particionados para corresponder aos efeitos principais ou interaes, sendo a regresso a tcnica apropriada nesse caso; se a regresso for significante, nenhuma comparao mltipla necessria e todos os tratamentos, incluindo os intermedirios no utilizados no experimento, so significativamente diferentes em seus efeitos (CHEW, 1976).
que avaliou efeito do cido indolbutrico no enraizamento de estacas semilenhosas de kiwi cultivar Hayward (Tabela 6). Nesse experimento os autores tinham um nico fator: cinco doses de AIB (0, 2.000, 4.000, 6.000 e 8.000 ppm). De acordo com o objetivo do trabalho, o fator em estudo quantitativo, uma vez que o interesse dos pesquisadores foi verificar os intervalos entre os nveis de AIB, ou seja, verificar quais as concentraes ideais de AIB no enraizamento das estacas. Para suas concluses utilizaram teste de comparao de mdias (Teste de Duncan ao nvel de 5% de significncia) e apesar de as concentraes 4.000, 6.000 e 8.000 no se diferenciarem , concluram que a concentrao 6.000 ppm proporcionou os melhores resultados de estacas
Tabela 6 - Percentagem de enraizamento de estacas semilenhosas de kiwi da cultivar Hayward (1), coletadas em novembro. Concentraes de AIB (ppm) Enraizamento (%)
Zero
25,06 c
2.000
50,07 b
4.000
64,78 a
6.000
75,59 a
8.000
(1)
69,49 a
Mdias seguidas por letras iguais, no diferem significativamente entre si pelo Teste de Duncan ao nvel de 5 % de probabilidade. R. Bras. Agrocincia, Pelotas, v.13, n.4, p.441-447, out-dez, 2007
O segundo exemplo incorreto foi extrado do trabalho que visou avaliar a influncia de diferentes concentraes de cido indolbutrico e nmero de folhas no enraizamento do pessegueiro cv. Charme (Tabela 7). O delineamento experimental foi o inteiramente casualizado com 4 repeties e 8 estacas por parcela, em arranjo fatorial 4 x 3 (nmero de folhas x concentraes de AIB). No trabalho no foi observado nenhum efeito significativo da interao entre os fatores: nmero de folhas e concentraes de AIB. Sendo assim, os autores optaram pela comparao mltipla de
mdias, onde utilizaram teste de Scott-Knott. Os fatores em estudo so de natureza qualitativa no estruturada (nmero de folhas) e quantitativa (concentraes de AIB). A priori, os autores acertaram em verificar se havia significncia da interao. Porm, como essa no foi significativa, deveriam realizar a anlise separada dos fatores, ou seja, aplicar teste de comparao de mdias para o nmero de folhas e ajustar uma equao de regresso para as concentraes de AIB, uma vez que, o efeito de um fator no est relacionado com o do outro.
Tabela 7 - Porcentagem de estacas enraizadas de pessegueiro cv. Charme em funo de concentraes de AIB e nmero de folhas (1) . Canoinhas, SC, 2004. Concentrao de AIB (mg L -1)
Nmero de Folhas
1000
2000
0,0 A a
3,1 A b
3,1 A b
0,0 C a
34,4 A a
15,6 B a
3,1 C a
37,5 A a
21,9 B a
6,2 C a
40,6 A a
18,7 B a
C.V (%)
(1)
21,8
Mdias seguidas pela mesma letra maiscula, na linha, e minscula, na coluna, no diferem entre si pelo teste de Scott-Knott (p =
0,05).
CONCLUSES Existe dificuldade na escolha de quais os procedimentos corretos em relao aos tipos de fatores em estudo. Os principais aspectos que afetam diretamente a fidedignidade na interpretao dos resultados por parte dos pesquisadores so: i) a no considerao das pressuposies dos
diferentes testes estatsticos e; ii) conhecimento incipiente em relao aos tipos de fatores. Incoerncias na escolha dos testes estatsticos acarretam em concluses incompletas e/ou inapropriadas (SILVA, 1999). REFERNCIAS
BERTOLDO et al. Teste de comparao de mdias: dificuldades e acertos em artigos cientficos AFL AKPUI, G.K.S. Some uses/abuses of statistics in crop experimentation. Tropical Science , New Jersey, v. 35, n. 2, p. 347-353, 1995. AL VAREZ, V. H.; AL VAREZ, G.A.M. Comparao de mdias ou teste de hipteses? Contrastes! Sociedade Brasileira de Cincias do Solo. Viosa, v. 3, n. 1, p. 24-33, 2006. BANZATTO, D.A; KRONKA, S.N. Experimentao Agrcola . Jaboticabal: FUNEP, 2006. 237p. CARDELLINO, R.A.; SIEWERDT, F. Utilizao adequada e inadequada dos testes de comparao de mdias. Revista da Sociedade Brasileira de Zootecnia, Viosa, v. 21, n. 6, p. 985-995, 1992. CHEW, V. Comparing treatment means: a compendium. Hortscience , Ale xandria, v. 11, n . 4, p. 348-35, 1976. GILL, J.L. Current status of multiple comparisons of means in designed experiments. Journal of Dairy Science , Sa vo y, v. 56, n. 8, p. 973-978, 1973. GILL, J.L. Design and analysis of experiments . Ames: Iowa State University Press, 1978. 410p. HINKELMANN, K.; KEMPTHORNE, O. Design and analysis of experiments: introduction to experimental design. New York, JohnWiley & Sons, 1994. 495p. JONES, D. Use, misuse, and role of multiple comparison procedures 649, 1984. KUEHL, R.O. Statistical principles of research design and analysis . Belmont, California: Duxbury Press, 1994. 686p. NOGUEIRA, M.C.S. Estatstica experimental aplicada experimentao agronmica . Piracicaba: DME/ESALQ, 1997. 250 p. PETERSEN, G.R. Use and misuse of multiple comparison procedures. Agronomy Journal, Madison, v. 69, n. 2, p. 205--208, 1976. SANTOS, J.W.; MOREIR A, J.A.N.; BELTRO, N.E.M. Avaliao do emprego dos testes de comparao de mdias na revista Pesquisa Agropecuria Brasileira (PAB) de 1980 a 1994. Pesquisa Agropecuria Brasileira , Braslia, v. 33, n. 3, p. 225-230, 1998. SILVA, E.C.; FERREIRA, D.F.; BEARZOTI, E. Avaliao do poder e taxas de erro tipo I do teste de Scott-Knott por meio do mtodo de Monte Carlo. Cincia e Agrotecnologia , Lavras, v. 23, n. 3, p.687-696, 1999. in ecological and agricultural entomology. Environmental Entomology , Lanham, v. 13, n. 3, p. 635SILVA, J.G.C. A considerao das estrutura das unidades em inferncias derivadas do experimento. Pesquisa Agropecuria Brasileira , Braslia, v. 34, n. 6, p.911-925, 1999. WECHSLER, F.S. Fatoriais fixos desbalanceados: uma anlise mal compreendida. Pesquisa Agropecuria