Introduction
Dans l'univers du développement open-source, les pull requests (PRs) sont l'épine dorsale de la collaboration et de l'innovation. Mais, comme pour tout système ouvert, l'abus est une menace constante. Aujourd'hui, le spam de PRs est comparable à l'explosion du spam email que l'on a connu au début des années 2000. Explorons comment ces phénomènes se ressemblent et comment l'industrie peut s'adapter.
Le phénomène OpenClaw
Prenons l'exemple d'OpenClaw, un projet qui a vu une explosion du nombre de PRs. En décembre dernier, OpenClaw recevait deux PRs par semaine. En février, ce chiffre est monté à 3 400 par semaine. Cette augmentation massive est en grande partie due à des PRs générées par des agents IA, avec une qualité souvent discutable.
Par exemple, un contributeur a soumis 106 PRs en une seule journée, avec un intervalle médian de trois secondes entre les soumissions. Ces chiffres illustrent bien l'ampleur du problème actuel.
Comparaison avec le spam email
Dans les années 2000, l'ILOVEYOU worm a infecté 45 millions d'ordinateurs en 24 heures, profitant du faible coût d'envoi des emails et de la confiance des utilisateurs envers la plateforme. Aujourd'hui, le coût de soumission d'une PR est également très bas, conduisant à une augmentation massive de la quantité de contributions, souvent peu pertinentes.
Les défis actuels
Avec un taux de fusion de seulement 9,3 % après l'augmentation des PRs, il est clair que la qualité est un problème. Les PRs de première soumission ont un taux d'acceptation de 8,2 %, contre 18,6 % pour ceux ayant plus de cinq contributions.
Mitchell Hashimoto, créateur de Ghostty, a dû limiter les contributions générées par IA en raison de la surcharge. Il a introduit Vouch, un système de gestion de confiance pour filtrer les contributeurs non fiables.
Solutions potentielles
Pour contrer le spam de PRs, nous pouvons nous inspirer des solutions anti-spam email :
- Blocklists : Similaires aux listes noires d'emails, elles peuvent bloquer les contributeurs problématiques.
- Filtres basés sur la confiance : Évaluer la réputation des contributeurs pour décider de la pertinence de leur PR.
- Infrastructure de réputation : Tout comme les scores de réputation pour les emails, les contributeurs pourraient être notés en fonction de leur historique.
Conclusion
La prolifération des PRs générées par IA est un défi qui nécessite une attention immédiate. En tirant parti de l'expérience passée avec le spam email, nous pouvons développer des outils robustes pour protéger l'intégrité des projets open-source.
Discutons de ton projet en 15 minutes.