Warum sich mein Leaderboard neu sortiert hat: Ein Erfahrungsbericht über Tokenhunger, verschwiegene Antworten und die Tücken von OpenRouter
Ich habe in den letzten Tagen Teile meines Leaderboard neu getestet. Am Ende habe ich mehr über die Infrastruktur hinter den Modellen gelernt als über die Modelle selbst. Dieser Bericht dokumentiert, warum sich die Top 20 von CrucibleMark gerade neu sortiert haben, und was davon Verbesserung war, was Artefakt und was schlicht ein fremder Server, der meine Prompts beantwortet hat, ohne dass ich davon wusste.