Hugging FacePublication de la source

LitPivot : Développer des idées de recherche par une contextualisation dynamique dans le paysage de la littérature

📄 Article

📄 Article

La découverte d'un nouvel article peut changer la trajectoire d'une idée de recherche. Le chercheur peut découvrir que quelqu'un a déjà traité la contribution qu'il proposait, ou trouver dans l'article un problème non résolu qui inspire une nouvelle direction de recherche.

Nous appelons ce processus un pivot initié par la littérature: un changement de direction de recherche déclenché par la lecture de travaux antérieurs. Il relie deux activités que les chercheurs doivent souvent gérer séparément : développer une idée et décider de quelle littérature la confronter.

Avec des collaborateurs de l'Université de Pennsylvanie, nous avons développé LitPivot, un système qui aide les chercheurs à naviguer dans ces pivots. À partir d'articles récupérés via Asta Paper Finder, LitPivot organise la littérature autour de la partie d'une proposition en cours de rédaction, propose des critiques étayées par des extraits d'études sélectionnées et suggère des révisions que les chercheurs peuvent accepter, modifier ou rejeter. LitPivot est destiné à être utilisé pour l'idéation de recherche en phase amont, mais l'idée pourrait éventuellement s'étendre à des tâches de rédaction plus longues (c'est-à-dire la rédaction de la section d'introduction d'un article).

Dans une étude menée auprès de 17 chercheurs, des experts du domaine ont jugé que les idées de recherche développées avec LitPivot étaient mieux ancrées dans la littérature que celles développées avec un éditeur de texte et un outil de chat IA. Les participants ont également perçu leurs idées de recherche révisées comme plus originales et plus utiles, et ont rapporté une meilleure compréhension de la littérature environnante.

LitPivot sera présenté à UIST 2026 à Detroit. Lisez l'article ici.

Pourquoi pivoter est difficile

Les idées de recherche évoluent au contact de la littérature. Dans notre analyse des notes de réunion de quatre projets de recherche en informatique menés à leur terme, nous avons identifié 21 pivots initiés par la littérature à travers les quatre projets. Ils se répartissaient en deux types : différencier une idée des travaux existants pour établir son originalité, et aligner une idée sur les travaux existants pour s'en inspirer. Ce projet lui-même est passé par deux pivots avant que nous arrêtions ses contributions.

Ces changements peuvent être difficiles à gérer. Dans une étude formatrice, cinq chercheurs ont développé des propositions à l'aide d'un éditeur de texte et d'outils de recherche standards. Ils ont eu du mal à développer leurs idées tout en les évaluant de manière critique par rapport à la littérature. Lorsqu'un article remettait en question l'originalité d'une idée, ils souhaitaient des suggestions concrètes pour la réviser, étayées par des travaux antérieurs. Ces constats ont façonné les évaluations de LitPivot, qui associent des critiques appuyées par la littérature à des suggestions spécifiques pour réviser la partie sélectionnée d'une idée.

Fonctionnement de LitPivot

Dans LitPivot, un chercheur commence par rédiger une courte proposition dans un éditeur et active ce que nous appelons la mise en évidence des facettes, qui segmente une idée formulée en différentes facettes (c'est-à-dire un problème, une contribution et une évaluation). Pour vérifier une facette proposée, le chercheur clique sur ce segment dans le brouillon. Un panneau adjacent regroupe les articles connexes en fonction de la facette sélectionnée (par exemple, en regroupant les articles selon leurs méthodes d'évaluation lorsque la facette évaluation est sélectionnée) et met en évidence les groupes les plus pertinents. Le chercheur sélectionne des articles, demande une évaluation et examine une révision suggérée accompagnée des extraits qui appuient la critique. La littérature est ensuite reclassée en fonction de sa pertinence par rapport à la facette révisée.

En particulier, LitPivot sépare une idée de recherche en son problème, contribution proposéeet son plan d'évaluation. Chaque facette possède son propre ensemble de littérature associée et son propre classement par pertinence. LitPivot regroupe les articles récupérés autour de la facette en cours de modification, permettant au chercheur de choisir ceux que le système doit utiliser pour évaluer le brouillon.

Aux côtés d'environnements de rédaction scientifique tels que Prism et d'assistants agentiques tels que Claude Code, LitPivot explore un nouveau flux de travail pour développer une idée de recherche en phase amont : choisir la littérature à laquelle la confronter, utiliser ces preuves pour la réviser et reconsidérer quels articles comptent à mesure que l'idée évolue. Ses groupes d'articles et ses critiques liées rendent ces étapes explicites pour chaque partie de la proposition, tandis que les chercheurs gardent le contrôle à la fois du brouillon et des preuves utilisées pour l'évaluer.

Pour un énoncé de problème, LitPivot recherche des preuves que le problème existe et établit en quoi il importe. Pour évaluer une contribution proposée, il compare ce que les articles sélectionnés ont déjà traité avec les limites et travaux futurs qu'ils décrivent, à la recherche des lacunes restantes. Pour un plan d'évaluation, il vérifie si les tests proposés répondent à la question de recherche et comment des travaux similaires ont été évalués. Le système suggère ensuite une réécriture avec les citations justificatives jointes.

Modifier une facette d'une idée peut en rendre une autre obsolète. LitPivot signale les passages susceptibles de nécessiter une révision, comme un plan d'évaluation qui n'évalue plus adéquatement une contribution révisée. Les chercheurs peuvent accepter, modifier ou rejeter les suggestions, et demander de nouveaux articles ou actualiser le classement de la littérature à mesure que leur proposition se développe.

Exemple paraphrasé tiré d'un participant à l'étude.

Nos conclusions

Dans notre étude en laboratoire, 17 chercheurs ont chacun développé une idée qui leur était assignée avec LitPivot et une autre avec un outil de référence—un éditeur de texte et un outil d'IA pour poser des questions sur les articles sélectionnés. Les deux conditions utilisaient la même collection d'articles. Deux experts du domaine, ignorant quel système avait été utilisé, ont évalué les propositions obtenues selon un seul critère : la manière dont elles utilisaient la littérature pertinente pour appuyer et justifier l'idée. Les propositions développées avec LitPivot ont reçu des évaluations plus élevées.

Les participants à la même étude ont également fait état d'une meilleure compréhension de la littérature environnante et d'améliorations plus importantes, selon leurs propres déclarations, de la nouveauté et de l'utilité de leurs idées avec LitPivot qu'avec l'outil de référence. Les experts du domaine ont aussi examiné les idées des participants et ont jugé que les idées révisées à l'aide de LitPivot étaient significativement mieux ancrées dans la littérature pertinente.

Un participant à notre étude en laboratoire a commencé avec une proposition visant à générer des notes médicales synthétiques cohérentes et factuelles. LitPivot a identifié la cohérence entre plusieurs visites à l'hôpital comme un manque potentiel dans la littérature sélectionnée. Le participant a examiné les résumés et a retiré les articles portant sur des notes issues d'une seule visite. Après une nouvelle évaluation, il a restreint la proposition à la détection de contradictions entre des notes issues de plusieurs visites. Cet exemple montre comment la révision d'une idée et le choix de la littérature utilisée pour l'évaluer peuvent s'éclairer mutuellement.

Dans une étude de suivi, cinq chercheurs ont utilisé LitPivot sur leurs propres projets en cours lors de sessions de 30 minutes. Les participants ont utilisé LitPivot à travers plusieurs phases du projet, et pas seulement au début. Deux l'ont utilisé pour confronter de nouvelles idées à la littérature, tandis que trois l'ont utilisé pour affiner le cadrage d'idées plus mûres. Un chercheur a souligné comment la découverte de concepts parallèles issus de différents domaines l'avait aidé à recadrer sa contribution.

Ces études suggèrent que LitPivot peut soutenir à la fois l'exploration précoce et le raffinement d'une direction de recherche existante.

Soutenir la découverte scientifique

Chez Ai2, nous développons une IA pour aider les chercheurs à formuler des idées testables et à examiner les preuves qui les sous-tendent. Asta soutient cet effort à travers la génération de théories à partir de résultats publiés (Theorizer), la synthèse, et la génération et le test d'hypothèses sur des données (AutoDiscovery), tandis que HARPA génère des hypothèses prometteuses informées par les tendances de recherche émergentes. Scideator permet aux chercheurs de recombiner des éléments de travaux antérieurs en de nouvelles idées et d'évaluer leur nouveauté, et IdeaSynth soutient le raffinement itératif avec des retours fondés dans la littérature.

Notre étude récente, Old Ideas, Novel Problems, examine les limites de l'évaluation automatisée de la nouveauté, montrant comment de petits changements de prompt peuvent modifier le verdict d'un juge d'IA sur les mêmes idées. LitPivot prolonge ce axe de travail en faisant du choix de la littérature pertinente une partie du processus de révision. Les chercheurs peuvent modifier les articles qu'ils utilisent pour évaluer une proposition à mesure que leur idée se développe, puis utiliser les critiques et les extraits de soutien pour décider comment la réviser. Le système relie ces décisions à travers le problème, la contribution et le plan d'évaluation de la proposition.

Nous espérons que les enseignements tirés de LitPivot aideront les scientifiques à s'appuyer sur les connaissances existantes et à transformer les idées précoces en nouvelles contributions à leurs domaines.

Source originale

Hugging Face

À propos du contenu

La publication originale et les droits appartiennent à la source.

Traduction automatique · Consultez l’original