Écrit le script
write_file et edit_file créent et ajustent ton script de benchmark, et chaque modification apparaît en diff.
Produit
Scripts, exécutions et journaux de server benchmark pour des machines qui t'appartiennent
01
Un server benchmark est un travail fixe que tu lances sur une machine qui t'appartient ou que tu as le droit de tester, avec les mêmes réglages à chaque fois, pour que deux résultats se comparent équitablement. BenchQuorum écrit le script, le lance dans le terminal et n'enregistre que les chiffres qui ont été mesurés. Le périmètre reste de ton côté.
Lance ta commande
Shell exécute ta commande de test et indique le vrai code de sortie, pour que tu voies quand une exécution a échoué.
Lit les chiffres
read_file et grep récupèrent les chiffres dans les fichiers de résultats enregistrés, et l'agent construit un tableau des exécutions.
Ce que l'agent peut faire
- Fichiers read_file, write_file, append_file, edit_file, delete_file, make_dir, move_file, copy_file, list_dir, grep et glob travaillent dans le dossier de travail du chat, avec un compteur de fichiers créés, modifiés et lus.
- Shell exécute des commandes de terminal, comme ta commande de test ou systeminfo, et juge la réussite d'après le vrai code de sortie. Les commandes dangereuses sont bloquées.
- Web web_search trouve des pages et http_get lit une page de documentation, par exemple le manuel de ton propre matériel.
- Captures et images ocr lit le texte d'une capture d'écran, comme un écran de réglages ou une fenêtre de résultats, et gen_image enregistre de vrais fichiers image.
- Orchestration task lance des sous-agents en parallèle pour des vérifications distinctes, run_on_model envoie une étape difficile à un modèle plus gros, et skill conserve des procédures réutilisables.
- Modes de validation Auto-run agit tout de suite, Ask first s'arrête avant chaque action qui modifie quelque chose, et Plan only planifie sans rien changer. Les plans survivent aux redémarrages.
- Cron lance un prompt selon le calendrier que tu fixes, par exemple une exécution hebdomadaire qui ajoute une ligne à ton fichier de résultats.
- Modèles connecte un fournisseur d'IA dans le cloud via un point d'accès d'API standard, un modèle qui tourne en local sur ton PC, ou le modèle intégré.
Où le travail se passe
L'application tourne sur ton PC Windows, dans un seul dossier de travail. Une commande qui atteint une autre machine est une commande que tu as demandée, sur une machine qui t'appartient ou que tu as le droit de tester.
Écris bench.py, lance-le sur cette machine et enregistre la médiane avec la date dans results.csv.
- write_file
bench.pyenregistré - Shell
systeminfoexit 0 - write_file
system.txtenregistré - Shell
python bench.pyexit 0 - append_file
results.csvligne ajoutée - read_file
results.csvlu - edit_file
notes.mddiff affiché
En attente de ton OK avant l'étape suivanteRefuserAccepter
Deux tâches, pas à pas
Établis une référence pour une machine de homelab
Avant de régler une machine de homelab pour la mesurer, prends une référence : demande à l'agent de lancer d'abord ton script de benchmark sur la machine intacte. Shell le lance et indique le code de sortie, write_file enregistre la sortie sous baseline.txt et append_file ajoute la médiane à results.csv. Change un seul réglage, relance la même exécution et l'agent montre les deux lignes côte à côte. Un changement à la fois. Lis le plan en mode Plan only avant que quoi que ce soit ne tourne, passe ensuite en Ask first pour que chaque écriture de fichier attende ton OK, et compare toi-même les médianes avant de garder le changement.
Contrôle un VPS loué depuis ton propre PC
Pour mesurer un VPS que tu loues, le disque et le réseau demandent des tests séparés, car chacun mesure une partie différente de la machine. Vérifie d'abord les conditions du fournisseur sur les tests. Depuis ton PC, Shell lance ping -n 20 suivi de l'adresse de ton VPS, et write_file enregistre les temps aller-retour sous latency.txt. Le test de disque, tu le lances toi-même sur le VPS, en dehors de BenchQuorum, avec ta propre commande. Les résultats réseau et processeur d'un VPS n'ont de sens qu'à côté de l'offre, de l'heure et des réglages que tu as consignés. Garde un trafic faible et court, et vérifie chaque chiffre avec la sortie de la console.
Ce que BenchQuorum ne fait pas
BenchQuorum n'est ni un service hébergé ni un plugin d'un autre programme. Il est prévu uniquement pour tes propres fichiers, ton PC et les machines que tu es autorisé à utiliser : ne le dirige donc pas vers des systèmes, des comptes ou des données qui ne t'appartiennent pas. Il ne peut pas garantir que le code, les mesures ou l'analyse sont corrects, c'est pourquoi tu relis chaque diff.
