Seminario de tesis I y III

Mayo 2011

Justificacin

Justificacin

Argumentacin
que
explica
la
necesidad de realizar la investigacin
en las tres dimensiones; tiempo,
lugar y persona.

Es decir; en relacin directa con el

planteamiento del problema y partiendo de la
ausencia
de
conocimientos,
se
debe
argumentar la necesidad e importancia de
resolver dicha ausencia en trminos de
conocimiento
mismo,
trascendencia
o
relevancia de sus resultados e impacto
sobre la salud, la economa, la poltica, etc.

Justificacin

Se
debe
justificar
la
importancia del estudio en
funcin de:

No se ha realizado algo similar

Existen
investigaciones
similares, pero esta aporta algo
ms, se profundiza, se proponen
nuevas
metodologas
para
abordar el fenmeno
Quienes van a beneficiarse de
esta
investigacin?
Sus
implicaciones.
Qu
va
a
aportar
esta
investigacin
al
desarrollo
regional o a las ciencias
ambientales?
Estoy generando ciencia?

Objetivos

Objetivos
General:
engloba
toda
la
investigacin.
Particulares : (etapas) pormenorizar acciones
para cumplir el general

Representa la finalidad que persigue

la
investigacin;
los logros directos y evaluables que se pretenden
alcanzar.

Se elaboran en correspondencia a una pregunta

de investigacin cuya respuesta constituir la
conclusin del estudio.

Se plantea al menos un objetivo por cada

hiptesis que se pretenda desarrollar (ya sea de
conocimiento, de accin, de operacin o de
impacto), o las acciones a realizar para resolver el
problema expuesto;

Prepara al investigador para definir la metodologa

Sirven de gua, determinan lmites y amplitud del

estudio.

Orientan sobre los resultados que se espera obtener

y permiten determinar las etapas del proceso del
estudio a realizar.

Ttulo

Objetivos

Metodologa

Objetivos

Una forma de dirigir la elaboracin de los

objetivos es responder a las siguientes
preguntas:
Qu

se va a hacer?; la accin
directa a realizar.
En quin se va a realizar?. Es
decir; cual es la unidad (sujeto)
de observacin?

Objetivos

Dnde se va a efectuar?; el
lugar donde se va a llevar a
cabo
En que orden se debe
realizar cada actividad?
Cuando y cuanto tiempo se
va a operar?; el perodo para
el desarrollo del estudio.

Criterios para formulacin de objetivos

Debe

estar
dirigida
a
elementos
bsicos
del
problema.
Ser
mensurables
y
observables.
Ser claros y precisos.
Deben delimitar la amplitud del
estudio

Criterios para formulacin de objetivos

Seguir un orden metodolgico y operativo

para:
- Orientar las fases del estudio
- Enunciar un resultado nico, claro, preciso,
factible y medible que se obtendr una vez
terminado el estudio.
- Definir un estado o situacin cuantificable en
un lugar y tiempo determinado, que se intenta
alcanzar como resultado de la investigacin.
- Corresponder a una pregunta de
investigacin cuya respuesta constituir la
conclusin del estudio.
Ser expresados con verbos en infinitivo.

Ejemplo
General
Evaluar el impacto de las actividades de
educacin para la salud que realiza el personal
de una unidad hospitalaria
Especficos
Identificar cada actividad de educacin para la
salud, que realiza el personal de salud.
Determinar el grado de conocimientos obtenido
por la poblacin usuaria, como resultado de las
actividades de educacin para la salud.
Identificar el desarrollo de habilidades y
destrezas en la poblacin usuaria, como
resultado de las actividades de educacin para la
salud

Elementos para la
presentacin de
protocolos

Aspectos a considerar
El
proyecto
debe
ser
lo
suficientemente claro para evitar
discusiones innecesarias.
Debe considerarse con precisin
Qu vamos a hacer?cmo y dnde
habremos de hacerlo? hasta
dnde queremos llegar?
Ello debe tenerse en cuenta al
momento de disear la estructura
de la presentacin de protocolo a
fin de que sea incluido claramente.

Elementos de la estructura
Parte I. Introduccin.
Se presentan los diversos aspectos que
componen el trabajo.
Se utiliza para hacer un planteamiento
claro y ordenado del tema de la
investigacin, su importancia e
implicaciones.
Comprende el titulo, antencedentes, y
justificacin.

Parte I

La informacin aqu presentada permitir

mostrar:
Que el investigador dispone de un
conocimiento
previo
del
tema
y
posibilidades de dominio sobre este.
Hay
que
destacar
la
relacin
investigador-tema, sin caer en detalles
mnimos (hablando a futuro y en tercera
persona).

Parte I

Habr que destacarse la revisin de la

literatura que se ha realizado para
abordar el tema.
Los elementos tericos que sustentan el
trabajo.
Se puede, y recomienda, la inclusin de
citas, por lo que resulta fundamental
conocer algunos lineamientos bsicos.

 Las

citas son ideas ajenas

incluidas en el trabajo,
por lo que se hace
necesario
hacer
referencia a la fuente de
informacin:

Las formas mas conocidas

para citar son:

Estilo Ingls o Estilo numeral

i.

La modernizacin es un proceso homogenizador, es este

sentido slo podemos decir que la modernizacin genera
tendencia hacia la convergencia entre sociedades, por ejemplo,
Levy [1] sostiene que: "a medida que pasa el tiempo, ellos y
nosotros nos pareceremos cada vez ms los unos a los otros ya
que los patrones de modernizacin son tales que a medida que
las sociedades se modernicen ms, se parecern ms las la una
a la otra".
La modernizacin es un proceso europeizador y/o
americanizador; en la literatura modernizadora, hay una
actitud complaciente hacia Europa Occidental y hacia los
Estados Unidos. Se tiene una concepcin de que stos pases
poseen una prosperidad econmica y estabilidad poltica

ii.

imitable [2]

Las formas mas conocidas

para citar son:
Estilo Harvard
Wences coincida en sus reflexiones sobre la
democracia, la justicia y la sociedad civil con la
propuesta de Shapiro (1999) de una
justicia
democrtica; la necesidad de hacer expansiva esta
conciencia democrtica a todos los mbitos de
nuestra vida que advirti Cortina (2001); la
preocupacin ante la expansin el militarismo en
una presunta defensa de los derechos humanos
que discute Hard et al (2004), y a la construccin de
un Mxico incluyente que propone Esteva (2003) y
otros muchos ms.

Las citas en el texto se harn de acuerdo

con los siguientes lineamientos.

1. Se

anotar el apellido principal de los

autores y el ao, cuando se trate de uno o
dos autores, y el apellido principal del
primer autor seguido de la expresin et al y
el ao cuando se trate de tres o ms
autores;
2. Las citas, cuando sean ms de una, se
colocarn en orden cronolgico atendiendo
a lo siguiente:

Cuando el nombre del o los autores va en el

contexto se colocar el apellido principal
seguido del ao entre parntesis, ejemplo:
Hernndez (2002) observ que.., Robles
(1998) y Dvila (2000) encontraron gran
diferencia.
Cuando la cita se agrega al final de la oracin los
nombres de los autores, y el ao, se
colocarn entre parntesis, separados por
una coma, ejemplo: al final de la colecta de
frutos (Torres, 1998) o (Robledo, 1998;
Hernndez, 2000) o (Mosqueira et al., 1976);

Cuando se citan ms de una publicacin del

mismo autor, de un mismo ao se aade a
estos, para distinguirlos, las letras a, b, c, etc.,
ejemplo: (Mndez, 1988a), (Mndez, 1988b);

NORMA
INTERNACIONAL
NORMALIZACIN
ISO
12 ed. 1987

ORGANIZACIN

INTERNACIONAL

DE
690

http://biblioteca.ucv.cl/herramientas/citasbibliograficas/iso690/iso690.h
tm#9

Estilo Harvard
Referecias bibliograficas de libro
Apellidos autoresutor

Ttulo y nmero
de la edicin

Fecha (ao)bn
Barahona, A., y Barahona, F. 1984. Metodologa de trabajos cientficos (4.ed.).
Bogot: IPLER.

Lugar de
publicacin

Editorial

Artculos dentro de un libro

Autor

Fecha de publicacin

Titulo del artculo

Barahona, A. .1974. Aplicaciones del condicionamiento operante de la conquista.

En R. Ardila (Comp.), El anlisis experimental del comportamiento: La contribucin
latinoamericana (pp. 508516). Mxico: Trillas.

Compilador
o editor

Ttulo del libro

Pginas donde se halla

Subttulo del libro

Ciudad y editorial

Estilo Harvard
Referecias de periodico o revista
Apellidos autoresutor

Ttulo

Fecha (ao)bn
Sols Silvia. 2005. Necesidades sociales, desarrollo social y bienestar social. Revista
de Trabajo Social 9(11):34-40

Volumen y pagina

COMO CITAR REFERENCIAS BIBLIOGRFICAS

DOCUMENTOS IMPRESOS

La norma ISO 690-1987 y su equivalente UNE

50-104-94 establecen los criterios a seguir para
la elaboracin de referencias bibliogrficas
ISBD (International Standard Bibliographic
Description) o por las AACR (Anglo-American
cataloguing rules).

Ficha bibliogrfica, referencia o cita: la

informacin detallada y precisa sobre la fuente
o documento de donde se obtuvo la
informacin o parte de esta.
Se recomienda incluirla en forma alfabtica o
por temas al final del trabajo.

Libros y
folletos
Autor
Ttulo y subttulo
Traductor y/o editor
Nmero de edicin (tratndose de
ediciones posteriores a la primera
Lugar de publicacin
Editor o impresor
Ao de publicacin
Paginacin o total de volmenes y la Serie

Revistas:

Autor
Ao de la publicacin
Ttulo
Nombre de la revista
Volmen y (nmero de fascculo):
Pgina inicial y final del artculo

Artculos publicados en
Peridicos:

Autor del artculo (s lo hay)

Ttulo del artculo
Nombre del peridico
Lugar de publicacin
Fecha de publicacin
(mes abreviado, da y ao)
Paginacin

Artculo sin sealamiento de autor:

Annimo. 2009. Las profundas causas de la Crisis. Verigo

3(2):18

Artculos en peridicos:

Artculo Normal:
Rascn Marcos, 2009. Mercelo Ebraed: ni cerca ni
distante.La Jornada .Febrero. 3:17.

Artculo de una seccin especial:

Agencias. 2009. Phelps, sin sanciones del COI y la AMA por
fumar mariguana . La Jornada. Febrero 3:Seccin
Deportiva:11A.

PONENCIAS DE CONGRESOS

Ejemplo:
QUINTERO ROMERO, Dulce Mara . Los movimiento
de Guerrero en defensa de los bosques". En: Primer
Foro Internacional El ambiente sociourbano regional.
Retos y perspectivas, (Ciudad de mexico 4-8
noviembre de 2006), v. I. [IPN, UAC-CIEMAD], 2006.
Versin digital

TESIS:
Castrejn, Vernica. 2007. Las pioneras del
periodismo en Acapulco. Tesis Licenciatura.
Unidad Acadmica de Ciencias de la
Comunicacin . Universidad Autnoma de
Guerrero. 239 pp.

INFORMES
Informes publicados:
III Informe del Trabajo de la Comisin Estatal de Defensa
de los Derechos Humanos del Estado de Guerrero. 2000
: CODEHUM, 2000. 155 p.

Trabajos consultados en Internet:

Centro de Derechos Humanos de la montaa. 2006. El
caso del Proyecto Hidroelctrico La Parota Federal
.www.trachinolla.org l (Mayo 23, 2007).

PROGRAMA DE CMPUTO:

Statistical Package for the Social Sciences Level M. Ver. 8

(SPPSS Lev. M 8.1) (Chicago, IL:SPSS)

II. Desarrollo de la
investigacin
Los elementos centrales Qu
hacer?, Cmo se har el trabajo?
Metodologa
Cronograma

Definir las caractersticas de la

investigacin a realizar

Estudios retrospectivos: es un estudio

longitudinal en el tiempo que se analiza
en el presente, pero con datos del
pasado.
Ejemplo:
El objetivo de este trabajo es conocer el porcentaje
de la infeccin por rotavirus en nios menores de 14
aos y su epidemiologa en el rea Acapulco. Material
y mtodos. Se realiz un estudio retrospectivo
desde enero de 1995 hasta diciembre de 2004
en el que se analizaron 14.068 muestras de heces de
pacientes peditricos con gastroenteritis aguda. Las
variables analizadas fueron: sexo, edad, procedencia,
diagnstico de rotavirus y fecha de diagnstico.

Definir las caractersticas de la

investigacin a realizar
Estudio
retrospectivo
parcial.
Se
considera el pasado para la explicacin de
un hecho o suceso y establecer sus
consecuencias a futuro.
Pasado- Presente-Futuro
Ejemplo:

Analizar los procesos de organizacin social en

la historia de Guerrero, como gestores de
nuevos movimientos de transformacin poltica.

Definir las caractersticas de la

investigacin a realizar
Estudio prospectivo: es un estudio
longitudinal en el tiempo que se disea y
comienza a realizarse en el presente, pero
los datos se analizan transcurrido un
determinado tiempo, en el futuro.
Ejemplo:
Estudio sobre el posicionamiento de los
partidos polticos en Guerrero para los
procesos electorales de 2012

Definir las caractersticas de la

investigacin a realizar
LONGITUDINAL: SE MIDE VARIAS
VECES,
SE
EVALUA
LA
EVOLUCIN.

TRANSVERSAL: SE MIDE UNA VEZ

Dependiendo de si existe intervencin, los

estudios se clasifican en:
Observacional : el investigador no
interviene. Se limita a observar y
describir la realidad (Describe o
compara).
Estudios de intervencin: El investigador
introduce variables en el estudio,
interviniendo en la realidad y desarrollo
del mismo.
Dependiendo de si existe aleatorizacin o no:
Estudios cuasi-experimentales: son estudios en los que
existe intervencin pero los sujetos participantes no son
aleatorizados.
Estudios experimentales: los sujetos participantes han
sido incluidos de forma aleatoria.

Las encuestas pueden cumplir tres propsitos

(Kerlinger, 1997) :
1) Servir de instrumento exploratorio para
ayudar a identificar variables y relaciones,
sugerir hiptesis y dirigir otras fases de la
investigacin. (Encuestas descriptivas)
2)Ser el principal instrumento de la
investigacin, de modo tal que las preguntas
diseadas para medir las variables de la
investigacin se incluirn en el programa de
entrevistas (Encuesta explicativa).
3)Complementar otros mtodos, permitiendo
el seguimiento de resultados inesperados,
validando otros mtodos y profundizando en
las razones de la respuesta de las personas

Se deber detallar la metodologa

a utilizar

Conviene sealar cuales son los

elementos centrales por lo que se
opta por este tipo de metodologa, a
partir del objetivo central del
estudio.
Plantear que entendemos por...
Coincidiendo con autores.
Destacar las afinidades, sin debatir
las
debilidades
de
la
otra
metodologa.

DIFRENCIAS ENTRE INVESTIGACIN CUALITATIVA Y CUANTITATIVA

Investigacin cualitativa

Investigacin cuantitativa

Centrada en la fenomenologa y
comprensin

Basada en la induccin
probabilstica del positivismo
lgico.

Observacin naturista sin control.

Medicin penetrante y controlada

Subjetiva

Objetiva

Inferencias de sus datos

Inferencias ms all de los datos

Exploratoria, inductiva y
descriptiva

Confirmatoria, inferencial,
deductiva

Orientada al proceso

Orientada al resultado

Datos "ricos y profundos

Datos "slidos y repetibles"

No generalizable

Generalizable

Holista

Particularista

Realidad dinmica

Realidad esttica

Ventajas e inconvenientes de los mtodos cualitativos vs

cuantitativos.
Propensin a "comunicarse con"
los sujetos del estudio

Propensin a "servirse de" los

sujetos del estudio

Se limita a preguntar

Se limita a responder

Son fuertes en trminos de

validez interna, pero son dbiles
en validez externa, lo que
encuentran no es generalizable a
la poblacin

Son dbiles en trminos de validez

interna -casi nunca sabemos si
miden lo que quieren medir-, pero
son fuertes en validez externa, lo
que encuentran es generalizable a
la poblacin

Preguntan a los cuantitativos:

Cuan particularizables son los
hallazgos?

Preguntan a los cualitativos: Son

generalizables tus hallazgos?

Comunicacin ms horizontal...
entre el investigador y los
investigados... mayor naturalidad
y habilidad de estudiar los
factores sociales en un escenario
natural

Detallar la forma en
realizar la investigacin

Definiendo el sitio donde se trabajar

(con mapa)
Las carctersticas (poblacin, muestra).
Detallar el mtodo y los autores que se
toman de referencia para el diseo,
trabajo y anlisis de los resultados.
Debatir la viabilidad.

Detallar los tiempos.

ACCIONES

Revisin de bibliografa
Presentacin de
protocolo
Trabajo de Exploracin
en campo
Diseo guias
entrevistas
Trabajo de campo
Redaccin tesis
Presentacin primer
borrador

MARZOABRIL
2009.

MAYOJUNIO
2009

JULIODIC.
2009

ENERO
MARZO
2010

ABRILDIC.
2010

Elementos del protocolo

TTULO: INFORMATIVO Y CONCISO,

INDICA EL OBJETO DE ESTUDIO.
NOMBRE DEL ALUMNO
NOMBRE DE TUTOR Y ASESORES
I. INTRODUCCIN: TE INTRODUCE AL
TEMA A TRATAR DE MANERA GLOBAL.
II. OBJETIVOS
4.1. OBJETIVO/S GENERAL/ES
4.2. OBJETIVOS PARTICULARES

Elementos del protocolo

III. PREGUNTA/S DE INVESTIGACIN

IV. JUSTIFICACIN
(CONSIDERANDO SU APLICACIN EN EL
DESARROLLO REGIONAL O CIENCIAS
AMBIENTALES)
V. HIPOTESIS (EN FUNCIN DE LAS
VARIABLES)
VI. ANTECEDENTES, MARCO TERICO,
MARCO DE REFERENCIA.

Elementos del protocolo

VII. MATERIALES Y MTODOS

7.1. LUGAR DONDE SE DESARROLLAR
LA INVESTIGACIN
7.2. MATERIAL
7.3.DISEO DEL EXPERIMENTO
(METODOLOGA, MUESTREOS,
APLICACIONES, ETC.).
7.4. EQUIPO ESPECIAL (DESCRIBIRLO)
DE ACUERDO A LOS OBJETIVOS

Elementos del protocolo

7.5.METODOLOGA
CUANTITATIVA:
ENCUESTA:
POBLACIN,
MUESTRA
(CARACTERSTICAS
Y
FORMULAS,
CRITERIOS DE INCLUSIN, EXCLUSIN
Y ELIMINACIN).
7.6.
DISEO
ESTADSTICO
DEL
MUESTREO(DECIR QUE PROGRAMAS SE
USARN) : CUANDO MUESTREAR
ESPECIFICAR VARIABLES, LOGISTICA,
ETICA.

Elementos del protocolo

7.7
METODOLOGA
CUALITATIVA:
ENTREVISTA: GUA. TALLERES: EXPLICAR
VIII. CRONOGRAMA DE ACTIVIDADES
(ACTIVIDADES Y FECHAS). JUSTIFICAR
TIEMPOS.
IX. BIBLIOGRAFA
X. ANEXOS ( ENCUESTAS, MEDIOS DE CULTIVO,
ETC.).

XI. PRESUPUESTO (COTIZAR, NECESIDADES DE

MATERIAL, VIABILIDAD Y FACTIBILIDAD).

Elementos a considerar en la
presentacin del protocolo

Tiempo: 15 minutos de presentacin y 15

minutos para defensa del proyecto.
Dosificar el tiempo para cubrir a buen
ritmo todos los puntos del protocolo.
En el marco terico y antecedentes es
importante que la bibliografa sea
actualizada y abundante.
Que los conceotos manejados sean claros
y precisos.

Elementos a considerar en la
presentacin del protocolo
El material de apoyo (presentacin
power point) debe ser resumido.
Bien estructurado para su mejor
comprensin.
Cuidando la ortografa (no
maysculas)
No leer material, es slo un apoyo. Si
puede hacer diagramas o esquemas
mejor.

Se recomienda adems:
No leer.
Textos en buen tamao.
Oraciones bien estructuradas con elementos a
destacar.
Cuidar el color de las letras y el fondo.
Que los efectos no interfieran con el desarrollo de
la presentacin.
Evitar sonidos distractores.
Diagramas o cuadros difciles de leer.
Recordar que la presentacin es un apoyo

Preguntas de investigacin

Las preguntas de investigacin resumirn lo que habr de

ser la investigacin (Hernndez Sampieri, 1999:11) y, bien
formuladas, contribuirn a encuadrar y clarificar el
planteamiento del problema al que sta se va a avocar.
Plantear diversas preguntas sobre el problema permitir
presentar ste de manera directa, minimizando las
distorsiones (Christensen, 1980, en Hernndez Sampieri,
1999:12)
Evitar el hacer preguntas demasiado generales que no
conducen a una investigacin concreta.

Las preguntas generales deben aclararse y delimitarse para

esbozar el rea-problema y sugerir actividades pertinentes para
la investigacin (Ferman y Levin, 1979 en Hernndez Sampieri,
1999:12).

No deben contener trminos ambiguos o abstractos que

dejen lugar a dudas sobre lo que se pretende hacer.
Discrepancia.- Los hospitales deben tener una ocupacin
hospitalaria de 80%, pero solo se tiene 60%.
Pregunta de investigacin.- Cules son las circunstancias o
condiciones que permiten explicar esta diferencia?.

Antecedentes o Marco Terico

Algunos autores lo llaman tambin marco

terico, marco de referencia o estado del arte,
Schmelkes (2002) lo llama bosquejo de
fundamentos.
En este apartado se deber analizar todo
aquello que se ha escrito acerca del objeto de
estudio: qu se sabe del tema? qu estudios
se han hecho en relacin a l? desde qu
perspectivas se ha abordado?
Es la sustentacin terica del problema de
investigacin u objeto de estudio, sin embargo,
se debe ir ms all de la mera descripcin
Dado que generalmente las teoras representan
una escuela, un grupo o un autor, se debe
evitar abundar en teoras que slo planteen un
solo aspecto del fenmeno.

La funcin de los antecedentes (Salazar, 2002) es:

Delimitar el rea de investigacin;

Sugerir
guas,
reas,
nichos
o
lneas
de
investigacin;
Hacer un compendio de conocimientos existentes en
el rea que se va a investigar;
Expresar
proposiciones
tericas
generales,
postulados, marcos de referencia;
Ayuda a prevenir errores que se han cometido en
otros estudios;
Orienta sobre cmo habr de llevarse a cabo el
estudio;
Ampla el horizonte del estudio y gua al investigador
para que este se centre en su problema evitando as
posibles desviaciones del planteamiento original;
Provee un marco de referencia para interpretar los
resultados del estudio

Hiptesis; Los supuestos o conjeturas son las

respuestas provisionales que se dan a la, o las,
preguntas de investigacin y pueden constituirse, segn
el positivismo, en hiptesis dentro del mtodo cientfico.

Se trata por lo tanto de enunciados claros y

precisos que guiarn la investigacin y que, si son
hiptesis, sern puestos a prueba.
En este sentido, la hiptesis ser un enunciado o
proposicin que tendr que ser llevada al campo de
los hechos para contrastarla con la realidad y
demostrar la relacin que existe entre el supuesto
que se plantea y los sucesos que tiene lugar en el
entorno especfico para el que fue construida
(Arcudia, 2002).

Hiptesis y variables

La tipologa de las hiptesis depende mucho

de cada autor y del criterio de clasificacin. Sin
embargo, parece haber un consenso sobre los
elementos que las componen, a saber:
La unidad de anlisis y las variables.

La primera se refiere al objeto sobre el que se quiere

tener una respuesta (sujeto de la investigacin), tal
como
grupos
de
personas,
sistemas
de
comunicacin, etc.
Las segundas son los atributos que pueden estar
presentes o no en nuestro objeto de estudio y
presentarse con modalidades diferentes y en
distintos grados y medidas

Una hiptesis debe contar, por lo menos, con una

variable dependiente y otra independiente (Maya,
2002).

La independiente es el elemento, fenmeno o situacin

que explica, condiciona o determina la presencia de
otro,
En tanto que la dependiente es el fenmeno o situacin
explicado que est en funcin de otro.
La(s) variable(s) independiente(s) se considerada como
la causa posible del fenmeno que se estudia, que
origina diversos efectos (variables dependientes)
relacionados entre s y que pueden repercutir bajo
ciertas circunstancias en las causas (Rojas Soriano en
Maya, 2002).
Una variable es una propiedad o atributo cuya variacin
es susceptible de medirse y adquiere valor para la
investigacin cientfica en la medida en que pueden ser
relacionadas con otras al formar parte de una hiptesis
o de una teora (Hernndez Sampieri, 1998)