¿Qué hacen los candidatos a doctorado si su investigación produce resultados negativos o inutilizables?

Hice un proyecto de investigación de doctorado que encontró resultados negativos. Tenía una hipótesis, la probé y encontré poco o ningún apoyo para ella.

Lo que hice fue escribirlo de todos modos. En particular, hice una extensa revisión de la literatura, señalando todos los lugares en trabajos anteriores donde la gente había sugerido que tal hipótesis podría ser cierta. Nadie había salido directamente y me propuso la versión explícita que tenía, pero muchas personas habían hecho descripciones conceptuales sueltas de ideas similares. Entonces, lo que hice fue mostrar cómo mi trabajo era básicamente la aplicación de una metodología bien probada a una idea que mucha gente había sugerido vagamente pero que no había probado explícitamente. Esto me permitió enmarcar mi tesis doctoral como “Mucha gente parece esperar que su teoría pueda explicarse por algún mecanismo como tal y tal, pero cuando lo verificas, realmente no funciona”. También hice un análisis de potencia en el que generé datos simulados para mostrar que incluso se habría detectado un efecto pequeño, evitando así la preocupación de que la falta de resultados positivos podría deberse a un diseño experimental débil.

Fue una experiencia interesante y divertida. A mi comité le encantó y obtuve el doctorado. Sin embargo, en última instancia, decidí no seguir una carrera en la academia por varias razones, por lo que no he podido obtener muchos comentarios sobre cómo otras personas en el campo percibirían tal disertación.

Cuando un doctorado se entera de que su resultado es negativo o inutilizable, trabajan más duro y descubren cómo obtener resultados importantes.

¡La mayoría de los doctores tienen perseverancia y disciplina que te dejarán boquiabierto! Es lo que hace que el proceso de doctorado sea difícil y gratificante.

Las otras respuestas aquí muestran esto. Observe cómo casi todos los que respondieron a esta pregunta dicen que un diseño experimental deficiente es lo que hace que un resultado sea inutilizable. Esto es una prueba en el budín de lo increíblemente tenaz que es un doctorado. Piensan en un resultado inutilizable e inmediatamente piensan en cómo podrían haber diseñado el experimento para dar resultados útiles.

Esto es exactamente cierto. Le pasa a todo el mundo. Haces un experimento, aprendes que algún factor que no hubieras esperado que fuera importante es importante (como la humedad en el laboratorio o las luces en la habitación), y te das cuenta de que esos resultados son inútiles. Así que descubres cómo controlarlos y avanzar. Tenaz.

El simple hecho de que los doctores puedan gestionar y manejar resultados negativos e inutilizables con honestidad intelectual y continuar avanzando para obtener resultados útiles, y si tiene suerte, resultados positivos, dice mucho.

Los doctorados no deberían sentirse así:

¿Todo lo que obtuviste durante tu doctorado fueron resultados negativos? ¡Guauu! Los resultados negativos son a veces más difíciles de lograr. Especialmente en áreas teóricas. Por ejemplo, en Ciencias de la Computación Teórica, la capacidad de venir con límites inferiores, ejemplos contrarios para algoritmos bien conocidos requiere una claridad asombrosa en su visualización del espacio de solución. Si está respaldado por un gran asesor y conocidos colaboradores, no tiene nada de qué preocuparse.

Dijiste que tus resultados son “inutilizables” (no tienen ninguna aplicación inmediata): Hmm … esto puede ser preocupante en algunos campos. Ciertamente, las puertas pueden parecer cerradas desde la distancia. Porque desafortunadamente, la competencia en algunas áreas por trabajos industriales es realmente dura debido al suministro adecuado de excelentes aplicaciones. Y a menudo, las empresas quieren reclutarlo para resolver sus problemas que son del mundo real. Entonces, a menos que su perfil sea extraordinario, están más felices de enfocarse más en aquellos candidatos que han exhibido un historial de trabajo cerca de escenarios del mundo real. Al menos en Ciencias de la Computación, hoy en día, los documentos por el bien de los documentos (incluso en las principales conferencias) no siempre ayudan si NO capturan en absoluto escenarios cercanos al mundo real. De nuevo, no es el fin del mundo. Tener un buen asesor ayuda en tal caso.

Uno de los experimentos más interesantes en física fue el diseño de Michelson-Morley, en 1887, donde intentaron demostrar que la Tierra se estaba moviendo con respecto a un medio de referencia llamado Aether, que luego se pensó que era el medio para las ondas electromagnéticas. Para esto, construyeron un interferómetro y simultáneamente midieron la velocidad de la luz en la dirección de desplazamiento de la Tierra, y perpendicularmente a ella. No encontraron diferencia. Repitieron su experimento 6 meses después cuando la Tierra viajaba en la dirección opuesta a lo largo de su órbita y nuevamente no encontraron diferencias.

Este es un experimento muy famoso en el sentido de que este resultado nulo refutó la existencia del Aether. Permitió que el modelo Maxwell de acoplamiento electromagnético explicara las ondas electromagnéticas. Este modelo predice una velocidad constante de la luz, independientemente del marco de referencia. Einstein y su modelo especial de relatividad explicaron esa característica en 1905.

El experimento ha sido rehecho muchas veces, más recientemente en 2009, y cada vez el resultado ha sido convincentemente nulo, con una precisión cada vez mayor.

Entonces, la buena ciencia puede salir de resultados nulos.

Realmente hay dos preguntas muy diferentes en una aquí.

El primero es sobre resultados negativos . Mi asesor de tesis solía clasificar todos los experimentos como experimentos “A” o “B”. En los experimentos de clase B aprendiste algo si obtenías los resultados que estabas buscando. En los experimentos de clase A, aprendiste algo incluso si no obtenías los resultados que estabas buscando. Su objetivo, como asesora de tesis, era tratar de entrenarme para diseñar mis experimentos de modo que todos, o al menos casi todos, fueran de clase A. El razonamiento es que, como otros ya han señalado, los resultados negativos son sigue siendo extremadamente informativo, porque están refutando una hipótesis. La ciencia avanza tanto al refutar las hipótesis como al confirmarlas, aunque es cierto que es mucho, mucho más fácil publicar resultados confirmatorios que resultados negativos.

Sin embargo, si uno está trabajando en un campo donde los postdocs son necesarios, obtener una posición postdoc con resultados completamente negativos no debería ser demasiado difícil, siempre que se escriban en algún lugar y ese hecho se explica al posible IP. Aunque obtener fondos para apoyarlo puede ser más difícil (las agencias de financiación también están sesgadas a favor de los resultados positivos). La gente está menos entusiasmada con los resultados negativos, incluso si son muy valiosos, desafortunadamente esa es la forma en que funciona el sistema hasta que alguien pueda mejorarlo.

La segunda pregunta es sobre resultados inutilizables, y esto es completamente diferente . Los resultados inutilizables provienen de hacer preguntas deficientes, diseñar experimentos deficientes o no resolver los experimentos correctamente.

  1. En el caso de hacer preguntas deficientes, ahí es donde el comité de tesis debe intervenir e intervenir (un comité de tesis, cuando se usa adecuadamente, puede ser un recurso increíblemente valioso). Se deben celebrar reuniones periódicas con ellos para discutir la pregunta o las preguntas que se están investigando. y para ayudar a determinar si son significativos (o incluso responsables). De lo contrario, el comité debería ayudar a guiarlos en una dirección más fructífera, o aconsejar que se evite esa línea particular de investigación para no perder el tiempo del estudiante. Pasar por un doctorado completo sin obtener este consejo sería un fracaso del comité.
  2. En el caso de un diseño de experimento deficiente, esto recae principalmente en el asesor de tesis. Una gran parte del trabajo del asesor es ayudar a capacitar al estudiante en el diseño adecuado de los experimentos. Las cosas como no diseñar los controles correctamente o no tener en cuenta las condiciones que harán que los resultados sean ininterpretables deben arreglarse antes de comenzar los experimentos.
  3. En el último caso de no resolver los experimentos correctamente, eso recae principalmente en el estudiante. La ejecución de los experimentos es en gran parte responsabilidad del estudiante; si la resolución de problemas no funciona bien, es responsabilidad del estudiante solucionarlos o traer ayuda (un colega en el laboratorio, un compañero de estudios, el asesor o incluso alguien fuera) la institución) para tratar de arreglar cosas y generar datos útiles. Esta es una gran parte de completar un doctorado.

La pregunta es acerca de qué le sucede a un estudiante que obtiene resultados inutilizables, y realmente acabo de describir las salvaguardas que existen para asegurarse de que eso no suceda. La verdad es que si al final de su doctorado, todo lo que un estudiante tiene son resultados inutilizables, entonces no se les debe otorgar un título. Un doctorado es el título más avanzado que puede otorgar una universidad, y significa que esta persona ha avanzado las fronteras del conocimiento humano. Eso se puede hacer con resultados negativos, pero en el caso de resultados inutilizables que simplemente no han sucedido y el estudiante no debe obtener el título.

Estoy de acuerdo con las ideas de mi colega Chuck Hatt. Recuerde que el trabajo de un científico es idear, probar y generar nuevas hipótesis. La investigación no se trata de probar sus hipótesis correctamente; a menudo, la novedad de un proyecto de investigación se produce cuando sus hipótesis son erróneas. Aprenda a tomar los resultados negativos como oportunidades para presentar nuevas hipótesis y nuevas direcciones de investigación. Por supuesto, si sus resultados no se pueden usar, esto significa que su configuración experimental no fue adecuada para responder la pregunta que hizo: realice algunos seguimientos con controles negativos y positivos para asegurarse de que sus resultados se deban a un error del usuario y no a una hipótesis no válida. o método inadecuado.

Mantén la cabeza en alto y sigue adelante. No podrá llegar muy lejos en la ciencia si no puede superar una o dos fallas, pero la forma en que supere estos obstáculos de investigación hablará de sus habilidades como investigador.

A2A: Como otros han dicho aquí, un resultado negativo aún puede ser una buena ciencia, y si el trabajo se realiza con cuidado (es decir, si nadie más va a tener que mirar debajo de esa roca en particular nuevamente), probablemente pueda usar el resultado como tu disertación

Si sus resultados son “inutilizables” por alguna otra razón, el trabajo aún puede ser recuperable, o tal vez haya alguna variación o extensión que aún le permita obtener un doctorado. Aquí es donde tener un buen asesor y buenos miembros del comité puede ser de gran valor. Si algunos de ellos son investigadores senior, han estado en esta posición antes y saben qué oportunidades pueden existir aún no muy lejos de lo que has hecho.

Eso también es cierto en un caso común sobre el que no preguntó: alguien más publica de manera independiente el mismo resultado la semana anterior a su defensa programada.

Si nada de lo anterior funciona, es posible que deba comenzar de nuevo con un nuevo tema. El trabajo que ya ha realizado debería facilitar el progreso rápido: ahora sabe mucho sobre su área: técnicas y recursos, así como sobre lo que hay en los libros, y tal vez haya desarrollado la madurez y los hábitos de trabajo que un investigador necesidades. Pero fácilmente podría costarle uno o dos años adicionales.

Si tomarse más tiempo no está en las tarjetas, por alguna razón … bueno, al menos en informática probablemente tenga la opción de conseguir un trabajo en la industria y hacer más de lo que hace su asesor de tesis (aunque tal vez divertirse menos). No es el fin del mundo. Ni siquiera es el final de tu carrera investigadora, si quieres seguir investigando. Algunos muy buenos doctores han hecho un muy buen trabajo.

Cierra lentamente la puerta. Correr las cortinas. Y llorar sin cesar. Llena la cámara de penas. Estoy bromeando

Como candidato a doctorado que tiene más de seis proyectos de resultados nulos, puedo decirle que es bastante estresante y doloroso. Tenía proyectos en los que trabajé durante nueve meses seguidos y no hubo resultados al final. Incluso mi asesor estaba como bien … eso fue inesperado.

Puede ser realmente deprimente, pero siempre puedes desarrollarte. Creo que todos mis proyectos fallidos en realidad me han hecho conocedor e interesante. También puedo conectarme mejor con diferentes temas y áreas. Además, me ha obligado a pensar con mayor agudeza para no perder mi valioso tiempo y recursos.

Entonces, ¿qué hacer con los resultados nulos? Honestamente, encuentro interesantes los resultados nulos, pero la academia no tanto, lo cual es triste. Solo mantengo un breve resumen del resultado nulo y lo pienso de vez en cuando. ¿Por qué no salió? ¿Qué otras cosas pueden ser nulas? Creo que esto te hace un mejor investigador en general. Por supuesto, no aparecerá un artículo de repente, pero pensar en lo que salió mal o por qué no sale, te obliga a pensar más profundamente y hacer mejores preguntas de investigación.

En resumen, no se desanime, aprenda del nulo y vea cómo puede explotar el resultado nulo. Sí, ningún resultado sigue siendo un resultado.

¡Salud!

He leído algunas de las respuestas a continuación y tengo algunos comentarios.

  1. Si su investigación arroja “resultados inutilizables” y tiene un error en su experimento, no está investigando. La investigación es del 90% sobre el diseño del método para probar una hipótesis, y del 10% sobre ponerla en práctica y obtener resultados que respalden (o no) esa hipótesis (en realidad, Pareto aquí también es correcto, estos 10% a menudo toman el 90% del tiempo).
  2. Entonces, suponiendo que su método sea bueno y adecuado, no hay resultados negativos o resultados inutilizables, solo hay resultados que confirman o confirman una hipótesis o resultados que dicen “este método no nos permite ser concluyentes acerca de esta hipótesis”. De cualquier manera, así es como avanza la ciencia y debe publicarlos (hay algunos foros para publicar resultados negativos).
  3. Recuerdo haber leído un artículo sobre algo sobre el comportamiento cuántico de las partículas (lo siento, no es mi área), pero el título era una pregunta (voy a inventarlo ahora) “¿La partícula X interfiere con la Partícula Y cuando está sujeta a las condiciones? del experimento ABC? ”, y el resumen fue (y esto es un hecho)“ Resumen: Quizás ”.

Entonces, mientras estés haciendo ciencia, todos los resultados son utilizables. Ser concluyente o no, esa es otra pregunta.

Esta respuesta depende de si está hablando en el transcurso de todo el doctorado o en el transcurso de una semana, mes o año.

Me imagino que debe ser bastante devastador trabajar en una sola hipótesis durante 4-6 años solo para llegar a la conclusión de que es negativa. Sin embargo, creo que habrá oportunidades de publicación (al menos en revistas de nivel inferior) si la hipótesis es razonable y los experimentos fueron bien realizados.

Si los resultados son inutilizables, eso generalmente significa que el trabajo fue malo. El estudiante tendrá que resolver algo con su comité. Esta es una razón por la cual es importante mantener a su comité actualizado con su trabajo. A veces tienes que ser una verdadera plaga si es necesario para que no termines con la basura al cabo de 6 años. Es el trabajo de su comité asegurarse de que esto no suceda.

Por otro lado, para escalas de tiempo más cortas, esto no es infrecuente. La lección más difícil y quizás la más valiosa que aprendí en la escuela de posgrado fue no conectarme demasiado emocionalmente con mi trabajo, porque mis ideas generalmente resultaron ser incorrectas o simplemente no tan interesantes. Tienes que aprender a estar contento con el proceso y esperar que tus intentos actuales de resolver un problema o probar una hipótesis sean decepcionantes el 80% del tiempo. Por lo general, eventualmente descubrirá algo que será útil para otras personas y que puede publicarse.


Suelen deprimirse. Pero, el objetivo del doctorado no es obtener los resultados positivos en sus respectivos campos. Es el punto de entrenar a un estudiante para que comprenda e interprete los resultados obtenidos de manera sistemática. No importa si el resultado es positivo o negativo, pero es un resultado. Se requiere una interpretación lógica y sistemática de los resultados para comprender las raíces del problema de investigación.

Este es el caso común. Probablemente has arruinado el experimento, o el diseño experimental, o las matemáticas, o el modelo, o simplemente estás equivocado. Eliminar todo menos la última posibilidad puede llevar años. Si te equivocas (y todos los estudiantes de doctorado deberían tener la experiencia de ser completamente irremediablemente equivocados al menos unas pocas veces), saldrás de ese callejón sin salida, enfurruñarse durante un par de semanas y elegir una dirección diferente.

Mientras más práctica acumules haciendo ciencia, más rápido podrás superar el error o simplemente equivocarte, y se requiere menos tiempo de mal humor.

La investigación, si se realiza correctamente, debería arrojar resultados positivos o negativos.

En teoría, los resultados negativos siguen siendo valiosos, ya que su documentación mostraría a otros que no deben seguir el mismo camino.

En la práctica, generalmente se desperdician años de esfuerzos. Nadie los aprecia realmente, porque el campo de publicación de los campos parece estar lleno de resultados positivos. La mayoría trata de salvar mediante la recopilación y publicación de resultados positivos de objetivos menos ambiciosos (a veces triviales). El estudiante abandona o se gradúa y se olvida rápidamente. Es uno de los desafortunados lados oscuros de la academia moderna.

Desde el punto de vista de un experimentalista:

El resultado negativo, si significa no poder rechazar una hipótesis nula, ocurre todo el tiempo en la investigación científica. Por lo tanto, se puede establecer un límite a cierto parámetro de la teoría que forma la hipótesis. Si el límite es lo suficientemente estricto (por ejemplo, debido a una buena señal a la sensibilidad del fondo a través de una medición cuidadosa del fondo o una buena sensibilidad en el detector debido a una mejor instrumentación, que requiere tanto trabajo duro como bueno) que reducen significativamente el espacio del parámetro, puede ser publicado en una revista superior. Sería un truco de tesis.

Resultado negativo, si de alguna manera significa que el resultado no es tan innovador como para que no fuera publicable incluso después de todo el arduo trabajo, entonces sería decisión del estudiante y de su asesor. algunos pueden optar por examinar otro tema. Otros pueden decidir graduarse con él. Cada estudiante tiene diferentes personalidades, situaciones y ambiciones. No hay juicio aquí. Aun así, el resultado no es inútil porque sirve de referencia para el próximo que quiere mejorar en el mismo tema.

¿Un resultado inutilizable, significaría, no reproducible? ¿No es cotizable? ¿No es referenciable? Es difícil comentar sobre esto.

Vaya con la clásica conclusión del trabajo de investigación: se requiere más investigación. 😉

En serio, los resultados inutilizables probablemente no serán aceptables tal como están, y se necesitará más trabajo hasta que pueda obtener algo que sea utilizable.

Los resultados negativos pueden ser perfectamente aceptables. La tesis de Karl Popper es que los científicos nunca PROBAN nada, simplemente tachan las hipótesis falsificables hasta que llegan a un grupo cada vez más estricto de las que no pueden ser falsificadas. Si puede falsificar algo que se ha tomado como la sabiduría convencional hasta ahora, realmente podría tener algo.

Depende del campo. Por ejemplo, solo puedo hablar desde la perspectiva de un matemático, pero los resultados negativos siguen siendo útiles. Encontrar un contraejemplo a una conjetura que creías durante mucho tiempo mientras era cierto todavía es muy publicable. En la misma línea, probar la “imposibilidad” de cierto teorema ahorrará mucho tiempo y esfuerzo a las personas, tanto en otros campos como en el suyo.

Qué consejo puedo brindarle, si su campo no es matemático, más o menos reitera lo que dijo Scott E. Fahlman. Los “resultados útiles” aún pueden responder una pregunta, pero no la respuesta original a la que salió. Necesita ajustar constantemente sus expectativas y buscar un problema que sus “resultados inutilizables” puedan resolver. Por supuesto, esto no excluye el caso de que sus resultados sean realmente inutilizables. En cuyo caso, debe buscar una posición en la industria 🙂 (Es broma). Pero, ajustar las expectativas también puede desempeñar un papel en el proceso de obtener resultados no demostrables. Siempre debe ser optimista como estudiante de doctorado (al menos eso es lo que tengo que hacer al hacer una investigación), pero siempre piense en una estrategia para dar sentido a un resultado que puede ser inútil a primera vista.

Los resultados negativos y los resultados inutilizables son cosas completamente diferentes.

Resultados negativos: resultados que fueron consistentemente y significativamente en la dirección opuesta que se esperaba. Los resultados son perfectamente utilizables. Pero debe repetir todo el pensamiento que tenía antes de lanzar el experimento.

Resultados inutilizables: tírelo a la basura, rediseñe el experimento y hágalo bien esta vez.

Yo digo que depende del enfoque. Puede usar los resultados para señalar que su teoría no funciona, y eso también cuenta como conocimiento, una forma de no hacer las cosas. Conocí a alguien que defendió su tesis de esta manera y tuvo éxito. Siempre y cuando puedas justificarlo adecuadamente.

Hay una gran diferencia entre resultados negativos e inutilizables.

Los resultados deben ser incapaces pero no necesariamente deben ser positivos. La investigación tiene como objetivo aumentar el conocimiento humano y, por lo tanto, las preguntas iniciales de investigación deben elegirse cuidadosamente. Deben ser objetivos y la investigación debe ser imparcial. Los resultados deben ser independientes.

Al establecer un proyecto de investigación, uno debe considerar todos los resultados posibles.

Si descubren que tienen resultados negativos, ¡publican su disertación! Un resultado nulo sigue siendo un resultado y ahora sabemos una cosa más que no funciona o no está correlacionada con nuestra hipótesis.

Si tiene resultados inutilizables que para mí serían un tamaño de muestra que es demasiado pequeño para ser estadísticamente relevante, entonces necesita rediseñar su metodología y / o su hipótesis. Esto le sucedió a un amigo mío, la herramienta de redes sociales que estaba viendo como fuente de datos se cerró. tuvo que cambiar rápidamente la herramienta y descubrir cómo usar Twitter. Es un revés, pero se puede superar.