Démonstration pédagogique interactive
Comment amélioreriez-vous la prochaine tentative ?
Faites deux choix moléculaires, examinez le retour et préparez un plan pour votre propre expérience de RSI.
Vous faites les choix ; le navigateur les compare aux références enregistrées. Cette démonstration ne fait appel à aucun modèle et n’exécute aucune expérience de RSI.
Deux observations, deux candidats, une famille moléculaire. Le benchmark complet propose trois conditions : éléments correctement appariés, permutés ou contrefactuels. Cette démonstration utilise une observation d’origine et une observation contrefactuelle.
- Choisir
- Lire le retour
- Diagnostiquer
- Préparer une modification
- Préparer de nouveaux tests
1. Quelle structure correspond à l’observation ?
Ce sous-ensemble pédagogique comprend 2 observations, 2 candidats et 1 famille de cas : un même problème initial de reconstruction et ses observations. Choisissez une structure pour chaque norme du moment dipolaire, puis comparez vos choix aux réponses de référence.
Un squelette commun
La zone ombrée est la partie à compléter. Les deux candidats conservent la structure environnante.
Pont méthylène (–CH₂–)
Pont carbonyle (–C(=O)–)
Observation 1
Observation d’origine
- Votre choix
- Réponse de référence
- Candidat 1
–C(=O)–
Observation 2
Observation contrefactuelle
- Votre choix
- Réponse de référence
- Candidat 0
–CH₂–
Votre résultat porte sur les deux observations pédagogiques de ce parcours.
Transformer ce retour en plan.
Choisissez une question, rédigez une modification, puis définissez comment la tester. Ce parcours prépare un plan à appliquer avec votre propre modèle et vos outils.
Diagnostiquer
Enregistrez votre plan avant de changer les choix moléculaires ou la piste de diagnostic ; tout changement efface le plan sélectionné.
Choisissez une explication possible à tester. Chaque piste propose une modification et une façon de l’évaluer.
Préparer une modification
Prompt du modèle (en anglais)
Facultatif : modifier la méthode d’amélioration elle-même
Dans une étude de RSI, I désigne votre procédure d’amélioration. La modification proposée ci-dessous concerne la façon dont cette procédure évalue les modifications de votre solveur.
Il s’agit de règles proposées. Seuls les retours de développement autorisés peuvent guider la sélection. La procédure I1 installée doit effectivement générer, tester ou sélectionner une modification ultérieure du solveur. Une règle proposée ou un fichier modifié ne prouvent pas une exécution récursive. Voir le mécanisme de RSI.
Préparer le prochain test
Prochaine phase de développement autorisée
Les retours orientent votre processus de modification
À préparer : sélectionner des familles de développement indépendantes et effectuer la comparaison prévue.
Audit final protégé sur de nouvelles familles
En dehors de la boucle d’amélioration
Après le développement, évaluez l’artefact sélectionné et figé à l’aide d’un évaluateur externe fixe, sur des groupes indépendants de nouvelles familles. N’utilisez pas les résultats de l’audit pour choisir ou installer des modifications.
À préparer : obtenir de nouvelles familles et effectuer l’évaluation indépendante après le développement.
Le fichier contient vos essais, les références publiques et la proposition choisie. L’exécution et l’évaluation restent à faire. Le kit de démarrage ne charge pas ce plan : mettez-le en œuvre dans votre propre protocole de recherche.
Étape suivante : exécuter le kit de démarrage local avec votre agent. Le kit note les prédictions ; votre propre processus met le plan en œuvre.
Lire ou copier le plan JSON (en anglais)
Changer un choix moléculaire ou cette piste de diagnostic efface le plan sélectionné. Les tentatives précédentes restent consignées dans la session de cette page.
Chemical reference (English)
The candidate reference values
| Candidate | Reference value |
|---|---|
| Candidate 0 | 5.37590 |
| Candidate 1 | 1.45724 |
Computed dipole magnitudes from QM9S at B3LYP/def-TZVP.
This reference table opens after you commit both choices. Keep it with the evaluator when running your own model.
What this pair can teach
The reference targets differ while the candidate set stays fixed. Checking both observations makes the answer pattern visible.
Net dipole depends on molecular geometry and electronic structure together. A rule based only on the presence of a carbonyl group is unreliable. Explaining this pair’s difference requires further chemical analysis.
Source records and limits (English)
- Observation 1: observation d’origine
MCB_QM9_A3_49E99A99315E5E96 - Observation 2: observation contrefactuelle
MCB_QM9_A3CF_1D2CC3D6DB111D41
- One public teaching family, selected after inspecting a documented failure; not a representative performance sample.
- Labels and feedback are public. Repeating this example after seeing the reference is not a hidden test or evidence of improvement.
- A changed answer is not by itself proof of evidence use; a wrong answer does not identify its cause.
- No model calls, self-modification runs or new molecular calculations are performed by this demo.
Un cas pédagogique interactif fondé sur vos choix. Pour mesurer les progrès d’un modèle, exécutez votre propre système et évaluez sa version modifiée sur des familles de cas indépendantes.
D’une molécule connue à une tâche vérifiable
Conservez le dossier moléculaire complet comme référence, masquez un fragment et proposez des structures candidates valides. Le modèle doit utiliser les propriétés fournies pour choisir comment compléter la structure. Faire varier les éléments fournis permet des comparaisons utiles pour étudier les erreurs.
Un mauvais choix indique une piste à explorer. Il n’en établit pas la cause et ne fournit pas d’explication vérifiée. Testez une hypothèse précise avant de modifier le système.
Guide détaillé de constructionLe lien avec le RSI
Utilisez les retours de développement pour tester une modification proposée, puis comparez le système modifié sur des familles moléculaires indépendantes. Pour étudier l’amélioration récursive, vérifiez aussi si le système mis à jour contribue à produire de meilleures améliorations ultérieures.
Le benchmark fournit des tâches et des retours notés. Votre expérience apporte le modèle, le diagnostic, les modifications et les tests indépendants. Le plan téléchargé ici indique que ces expériences restent à effectuer.
Voir le mécanisme de RSIUtiliser avec votre modèle
Le kit de démarrage, le code, les prompts du modèle et le plan JSON exporté restent en anglais. Le guide d’utilisation détaillé explique le format d’entrée et les commandes de notation.
Source et citation
Article sur le banc d’évaluation. Yuhang Xie, Zhiyi Shi, Zeyi Zhang, Zhisheng Qi, Yushun Dong, Yu Wang, Xiongye Xiao. MolP2SBench: Do LLMs Really Reason from Molecular Properties to Structure? arXiv:2610.12522 (2026).
Citer cette ressource
Pour les tâches et la conception de MolP2SBench, citez l’article qui présente ce banc d’évaluation. Pour les données dérivées de QM9S, citez également l’article de QM9S et indiquez la version du jeu de données utilisée. Chaque source a ses propres conditions de réutilisation. A deep learning model for predicting selected organic molecular spectra · Version du jeu de données QM9S.
Sélectionnez et copiez les entrées ci-dessous, ou téléchargez le fichier BibTeX ci-dessus.
@misc{xie2026molp2sbench,
title = {MolP2SBench: Do LLMs Really Reason from Molecular Properties to Structure?},
author = {Yuhang Xie and Zhiyi Shi and Zeyi Zhang and Zhisheng Qi and Yushun Dong and Yu Wang and Xiongye Xiao},
year = {2026},
eprint = {2610.12522},
archivePrefix = {arXiv},
primaryClass = {physics.chem-ph},
url = {https://arxiv.org/abs/2610.12522}
}
@article{zou2023molecularspectra,
title = {A deep learning model for predicting selected organic molecular spectra},
author = {Zihan Zou and Yujin Zhang and Lijun Liang and Mingzhi Wei and Jiancai Leng and Jun Jiang and Yi Luo and Wei Hu},
journal = {Nature Computational Science},
year = {2023},
volume = {3},
pages = {957--964},
doi = {10.1038/s43588-023-00550-y},
url = {https://doi.org/10.1038/s43588-023-00550-y}
}