Las guías técnicas, los artículos y el código están actualmente en inglés.
Automejora recursiva para la ciencia
¿Puede la IA mejorar su forma de descubrir?
Una colección comunitaria de conjuntos de datos científicos y benchmarks para la automejora recursiva.
Descargue los datos, verifique las respuestas de su modelo y utilice los resultados de desarrollo para orientar las revisiones. Aporte un conjunto de datos para que otros puedan basarse en él.
El proceso de mejora revisado produce el siguiente cambio.
Comparar con un proceso de mejora fijo
Mecanismo ilustrativo. El proceso de mejora revisado se instala y se utiliza en la siguiente ronda.
MolP2SBench Descubrimiento molecular
Reconstruir un fragmento molecular faltante
Oculta un fragmento de una estructura conocida y pide al modelo que lo recupere a partir de propiedades físicas calculadas. El registro original aporta la respuesta de referencia; cambiar la evidencia permite estudiar cómo el modelo toma su decisión.
Esta es una pequeña parte del diseño molecular que se puede evaluar. La pregunta a más largo plazo es si aprender de tareas de reconstrucción puede ayudar a un sistema a proponer moléculas útiles.
La demostración utiliza dos observaciones, dos candidatos y una familia molecular. Cada canal de propiedad de la fuente contiene 136 problemas de origen, con entre dos y cuatro candidatos por tarea.
El descubrimiento científico implica muchas hipótesis y diseños posibles. Elegir mejor el siguiente paso podría reducir los ensayos innecesarios. Reunimos recursos que ayudan a los investigadores a evaluar esas mejoras.
Resultados verificables
Una referencia científica o un verificador reproducible, con una descripción clara de lo que mide.
Retroalimentación útil
Resultados evaluados y, cuando se justifique, comparaciones controladas que ayuden a investigar los fallos.
Problemas nuevos
Familias científicas independientes para comprobar si una revisión se generaliza.
Comparaciones reproducibles
Verificaciones fijas, acceso declarado a la retroalimentación y registros de versiones, presupuestos y decisiones.
La automejora recursiva (RSI) utiliza las capacidades actuales de un sistema para mejorarlo e incorpora las capacidades actualizadas en rondas posteriores de mejora. Ver el mecanismo.
Para proponer una fuente, basta con un enlace y un ejemplo; el conjunto de prueba independiente puede prepararse más adelante.
MASS trains a shared model on selected agent trajectories, then uses the updated model to execute, optimize and evaluate the next round. It connects learning from task experience with later self-improvement.
CISE uses calibrated reward intervals to guide materials search. It addresses a practical dataset question: how can feedback prevent promising-looking but infeasible candidates from steering later trials?
A feedback method for materials search; recursive self-revision is untested.
AIDE² evolves research-agent code. Its separate ignition test puts an evolved agent back into the role of improving agents—the return path that matters for recursive self-improvement.
Later improver reuse was tested; its advantage remains unresolved.
El conjunto de datos de un proyecto puede ser el punto de partida de otro. Comparta datos científicos originales o recopilados y organizados, con resultados verificables y retroalimentación útil. Un artículo es opcional, y los enlaces a fuentes de datos existentes son bienvenidos.
ColaboradoresElija una ciudad para conocer a los colaboradores de sus conjuntos de datos.Conozca a los colaboradores mediante el enlace al conjunto de datos de abajo.