Proposer un jeu de données
Pour étudier l’auto-amélioration récursive, il faut des tâches scientifiques aux résultats vérifiables, des retours qui guident les modifications et des comparaisons indépendantes. Vous pouvez partir de mesures, de simulations ou de relevés expérimentaux existants. Proposez un ensemble de fichiers déjà préparé, ou commencez par un lien vers la source et un exemple.
Un article n’est pas nécessaire. Partagez des données originales ou préparez une ressource existante pour sa réutilisation, en précisant les sources et les conditions applicables.
Gardez vos données sur leur hébergement actuel
Partagez un lien vers une version précise sur Zenodo, Hugging Face, GitHub ou un dépôt institutionnel, avec les conditions d’accès et un exemple public représentatif. Le jeu de données complet peut rester sur son hébergement actuel. Comment les jeux de données proposés par lien sont examinés
Vous pouvez préparer votre brouillon sur votre appareil, puis nous contacter par courriel pour discuter de votre contribution. Écrire au responsable du projet
- Jeu de données
- Des données scientifiques dont les sources, les champs et les conditions de réutilisation sont documentés. Vous pouvez aussi proposer comme source des données qui ne sont pas encore annotées.
- Tâche
- Une question qui précise les données fournies au modèle, les réponses attendues et la manière de les vérifier.
- Banc d’évaluation
- Un ensemble de tâches et une procédure fixe pour comparer les performances.
Pour des tâches accompagnées des outils de vérification
Rassemblez les fichiers indiqués dans le guide, puis lancez les vérifications locales avant de demander un examen par une personne.
L’outil de vérification actuel accepte des enregistrements JSON avec des champs scalaires et des valeurs cibles de référence. Pour les autres formats, commencez par proposer la source.
Proposer un jeu de données ou une source
Quelques phrases et des liens publics suffisent pour commencer. Ce formulaire prépare un brouillon sur votre appareil, sans le transmettre ni le soumettre.
Comment un jeu de données entre dans la collection
Pour chaque source proposée, nous examinons les métadonnées, les conditions d’accès et la pertinence. Si les fichiers nécessaires sont fournis, l’examen porte aussi sur les données, le calcul des scores et la reproductibilité. Chaque fiche précise les éléments examinés et les usages pris en charge.
Fichiers à préparer et exemples · Critères d’examen
Sources et autorisations
Dans votre brouillon, utilisez des liens vers des sources publiques. Chaque ressource conserve ses conditions d’accès et de réutilisation. Nous vérifions les autorisations avant toute redistribution de données. Les brouillons privés et les réponses d’évaluation protégées restent confidentiels. Sources et conditions de réutilisation