henry 发自 凹非寺
Quantum Bit | Publicaño QbitAI
¡Realmente os lo ruego! Hay tantos papers que no puedo verlos todos, y ¿cómo es que los tools para escribir papers automáticamente siguen apareciendo?
Recientemente, GitHub ha lanzado una nueva herramienta para generar artículos de investigación de IA.
Open Academic Paper Gen.
¡No te apresures a irte ahora!
Además de poder generar automáticamente una versión preliminar con referencias, Open Academic Paper Gen tiene un punto que debes tener en cuenta.
Si es posible obtener el texto completo de la literatura, buscará referencias en texto completo (resaltado) para verificar los puntos de vista citados en el artículo.
De acuerdo, esto es muy útil.
Porque en la escritura de artículos, muchas veces se parte de un tema de investigación, se organizan continuamente las opiniones y se buscan pruebas, y luego se ajusta el juicio según la literatura existente.
Con la IA, los argumentos pueden ayudarte a expandirse, y las evidencias pueden ayudarte a buscar fuentes.
Pero el problema es que, a veces, las opiniones y los artículos son reales. Sin embargo, una vez que se reintroducen las “opiniones” proporcionadas por la IA en el texto completo y se analiza en el contexto, se descubre que el autor probablemente no tuvo esa intención.
Por lo tanto, para resolver este problema, Open Academic Paper Gen, después de obtener el texto completo de la literatura, localizará aún más los párrafos relevantes y determinará si esa literatura puede respaldar la opinión correspondiente.
Si hay información de página, también se indicará en las notas el número de página correspondiente del PDF, para que sea más fácil volver a consultarla.
Es decir, no solo verificará si “este artículo existe”, sino también si “ estas palabras son realmente las que dijo”.
Un flujo de trabajo multi-agents para generar el borrador inicial de un artículo
En general, Open Academic Paper Gen es un flujo de trabajo multiagente para generar borradores de artículos académicos, que descompone el proceso desde la selección del tema hasta la exportación en nueve etapas:
Determinar el alcance del estudio, buscar literatura, limpiar y filtrar, analizar tendencias, encontrar puntos de entrada, elaborar esquemas, escribir, verificar y, finalmente, exportar.
Al igual que otros herramientas para la escritura de artículos de IA, le das un tema de investigación, como “RSI en el mundo físico”.
Se extraerán problemas de investigación específicos de este tema, y se generarán las palabras clave en chino e inglés correspondientes. Luego, se buscarán artículos en OpenAlex, crossroi, Semantic Scholar y arXiv.
Los documentos que se encuentran en la búsqueda se duplicarán y se calificarán adicionalmente, y luego el modelo seleccionará su relevancia. Cuando se encuentre un artículo con una alta relevancia, se seguirá sus referencias y los estudios posteriores que lo citan para continuar la búsqueda.
Es como atrapar uno y luego seguir el hilo para encontrar más, la idea es un poco similar a los CONNCTED PAPERS de aquellos tiempos.
¿Alguien entiende?
A continuación, los documentos recopilados se organizarán en una tabla de pruebas, que resume los problemas de investigación, los métodos, los datos, las conclusiones y las limitaciones de cada artículo.
Con estos materiales, el sistema analizará las tendencias de investigación y presentará posibles ángulos de investigación, vacíos en la investigación y hipótesis.
También hay un aspecto bastante interesante llamado diagnóstico innovador.
Open Academic Paper Gen evalúa los puntos de entrada desde varios dimensiones: problemas, métodos, datos y perspectivas. Se señalan las trabajos existentes más cercanos en la base de literatura y se presentan las dudas que podrían plantear los revisores.
(Esto es como cuando, cuando crees que has creado un ResNet, la IA primero te ayuda a ver si alguien ya lo ha hecho).
En particular, estos juicios se centrarán en los documentos encontrados en esta búsqueda, sin embargo, el hecho de que no se haya encontrado en la base de documentos no significa que nadie en el mundo no lo haya hecho.
Por último, una vez establecida la perspectiva de investigación, el sistema continúa generando un esquema y redactando secciones por capítulos.
Después de terminar la versión inicial, se procede a la verificación de citas y a una simulación de revisión. Finalmente, es posible exportar el texto en Markdown o LaTeX, así como en formatos de referencias como RIS y BibTeX.
En el modo de ejecución específico, en modo predeterminado Open Academic Paper Gen se detiene en la fase principal, hasta que usted lo revise, edite y confirme antes de continuar.
Si desea probar la capacidad de la investigación en IA, también puede hacer que funcione automáticamente, eligiendo el modo totalmente automático.
Por último, aquellos que estén listos para correr deben prestar atención a la configuración del modelo:
Actualmente, el proyecto soporta OpenAI y Zhipu GLM, pero los pasos de verificación de argumentos, revisión de afirmaciones sin referencias y revisión simulada todavía requieren una clave de API de OpenAI.
¿Cómo se encuentra una cita dentro de una oración?
De verdad, la búsqueda automática de artículos, la redacción de un borrador inicial y luego la revisión por una IA ya son combinaciones comunes en muchos proyectos de escritura de artículos.
Algunos de ellos también incluyen verificación de citas y confirmaciones manuales, con el fin de reducir al mínimo la creación arbitraria de modelos.
En este proceso, se detalla aún más la verificación y modificación de las citas.
Después de todo, añadir referencias en un borrador inicial es una cosa, y demostrar que dichas referencias realmente sustentan el texto principal es otra cosa completamente distinta.
En particular, descompone la verificación en tres pasos de inspección.
Primero, verificar si la referencia puede encontrarse en el pool de documentos.
Al escribir, cada marcador de cita debe corresponder a un artículo ya recopilado.
Si el modelo crea temporalmente un identificador de referencia que no existe, el sistema lo marcará para facilitar su localización y modificación.
Segundo paso: verificar la identidad de esta publicación.
Los artículos con DOI se verifican primero con los registros de crossref; si no se encuentra, se va a doi.org para confirmar.
Los títulos, autores, años y otros datos no coinciden, lo que provocará una advertencia correspondiente.
Tercero, verificar si el texto original apoya o no esta frase.
En este punto, la revisión realmente pasa de “información documental” a “contenido documental”.
Después de obtener el texto completo, el sistema encontrará el párrafo que mejor se ajusta al argumento citado, y junto con el inicio del artículo, lo presentará al modelo para determinar si el texto original puede sustentar las afirmaciones contenidas en él.
Si no se puede obtener el texto completo, utilice un resumen o fragmentos. Cuando haya datos de páginas, la advertencia también puede indicar la página correspondiente del PDF, lo que facilita que la persona vuelva a consultarla.
Por supuesto, el hecho de que no se haya encontrado suficiente evidencia sobre el modelo, no significa que se haya demostrado que esta afirmación es incorrecta.
De acuerdo con el método utilizado por Open Academic Paper Gen, cuando hay falta de evidencia, se puede indicar como “imposible determinar”.
Los documentos con muy poco texto y que son incapaces de ser verificados, se marcarán como “no verificado”, en lugar de ser considerados aprobados directamente.
Por lo tanto, en general, en comparación con “escribir el artículo con un solo clic”, Open Academic Paper Gen sí tiene una solución muy eficaz para organizar las referencias, localizar las pruebas y hacer la revisión de citas.
En particular, cuando se enfrentan a las opiniones y argumentos escritos por la IA, uno siente que “parece tener sentido, pero no se puede creer directamente”. Si se puede encontrar el texto original correspondiente, al menos se tiene un punto de partida para verificarlo de nuevo.
Por cierto, este proyecto proviene del desarrollador individual Cat Uncle. Además de Open Academic Paper Gen, también ha lanzado varios otros proyectos como escritores de IA y investigaciones de IA.
Enlace de referencia
[1]https://github.com/mmlong818/open-academic-paper-gen