hyperframes-core (HeyGen HyperFrames)

Avis

Codex CLI 0.166 (gpt-6-astra, low reasoning) sur un PC Windows de test dédié, un projet temporaire neuf et des HOME/TMPDIR/caches temporaires à chaque exécution, skill installé (traitement) ou absent (contrôle) ou absent avec l'exigence centrale du skill compressée en une phrase ajoutée au prompt (groupe « prompt d'une phrase »), 2 exécutions par groupe et par tâche, réseau coupé, écritures dans /tmp bloquées. Les prompts ne mentionnent jamais le skill (sauf la formulation indiquée ci-dessous). HyperFrames est décrit dans le prompt comme « un framework open source qui rend une page HTML en MP4 en parcourant une timeline GSAP image par image », sans détails de contrat. Tâches : concevoir un explainer de 12 secondes en trois scènes, corriger une composition cassée (saccades, timing erroné), et construire un lower-third réutilisable en sous-composition. Le groupe « une phrase » énonce tout le contrat de composition en un paragraphe.

Comparaison à trois bras

Mesuré avec Codex CLI sur 18 exécutions, noté par des contrôles basés sur des règles, sans juge LLM. Total 25.8 / 30, verdict Selon les cas.

Verdict : Selon les cas (25.8 / 30). Source : heygen-com/hyperframes, skills/hyperframes-core, épinglé au commit 207c8a4. Installation : npx skills@latest add heygen-com/hyperframes --skill hyperframes-core. Licence : Apache-2.0 (LICENSE du dépôt).

Ce que c'est

Le skill hyperframes-core de heygen-com/hyperframes, testé au commit 207c8a4 (le skill a ensuite été retiré du HEAD du dépôt, donc cette revue décrit une version retirée). Il documente le contrat de composition HyperFrames : div racine avec data-composition-id/width/height/duration, clips temporisés avec data-start/data-duration et class=clip, une seule timeline GSAP en pause enregistrée sur window.__timelines[id racine], des règles de déterminisme au moment du rendu, et des sous-compositions dans des fichiers séparés.

Comment nous avons testé

Codex CLI 0.166 (gpt-6-astra, raisonnement faible) sur un PC de test Windows dédié, un projet temporaire neuf et des caches HOME/TMPDIR temporaires à chaque exécution, skill installé (groupe avec skill) ou absent (groupe témoin) ou absent avec l'exigence centrale du skill compressée en une phrase ajoutée à la fin du prompt (groupe prompt d'une phrase), 2 exécutions par groupe et par tâche, réseau coupé, écritures dans /tmp bloquées. Les prompts ne mentionnent jamais le skill (sauf la formulation indiquée ci-dessous).

HyperFrames est décrit dans le prompt comme « un framework open source qui rend une page HTML en MP4 en parcourant une timeline GSAP image par image », sans détails sur le contrat. Tâches : rédiger une vidéo explicative de 12 secondes en trois scènes, corriger une composition cassée (saccades, mauvais timing), et construire un bandeau inférieur réutilisable sous forme de sous-composition. Le prompt d'une phrase énonce le contrat de composition complet en un paragraphe.

1. Vidéo explicative en trois scènes — Créez une vidéo de 12 secondes en 1920x1080 avec HyperFrames (un framework open source qui rend une page HTML en MP4 en parcourant une timeline GSAP image par image ; GSAP est chargé depuis un script CDN). Trois scènes de 4 secondes chacune : une carte de titre (« Meet Orbit »), une liste à puces…
2. Corriger une composition cassée — index.html dans ce dossier est une composition HyperFrames (un framework open source qui rend une page HTML en MP4 en parcourant une timeline GSAP image par image ; GSAP est chargé depuis un script CDN) qui s'affiche mal (saccades, mauvais timing des scènes, scène 2 invisible, d…
3. Bandeau inférieur réutilisable en sous-composition — Créez une vidéo HyperFrames (un framework open source qui rend une page HTML en MP4 en parcourant une timeline GSAP image par image ; GSAP est chargé depuis un script CDN) de 8 secondes, 1920x1080. Un bandeau inférieur réutilisable (nom et intitulé de poste qui glissent depuis la gauche an…

La notation est programmatique (tests cachés / détection de problèmes implantés / vérifications de contraintes / rendu + OCR le cas échéant), de 0 à 5 par exécution. Aucun juge LLM n'a décidé d'un seul score.

Résultats

Le prompt d'une phrase donné au troisième groupe : "Contrat de composition HyperFrames : un <div data-composition-id data-width data-height data-duration> racine autonome dans <body> ; les éléments temporisés portent data-start et data-duration (class=clip) ; construire UNE gsap.timeline({paused:true}) et l'enregistrer sur window.__timelines['<root id>'] ; déterminisme au rendu : pas de Math.random/Date.now/timers/rAF, pas de repeat:-1, ne jamais animer display/visibility/autoAlpha sur un clip ; les sous-compositions vivent dans des fichiers séparés avec data-composition-src, le contenu enveloppé dans <template>, id hôte = id interne = clé de timeline."

Score moyen : 4.09 sans le skill contre 4.94 avec (delta +0.85). Tokens par exécution : 239k contre 114k (0.47x) ; temps 107s contre 79s. Groupe prompt d'une phrase : 4.62 (gain du skill par rapport au prompt d'une phrase : +0.32 ; gain du prompt d'une phrase par rapport à l'absence de skill : +0.53) ; 160k tokens par exécution pour le prompt d'une phrase, donc le skill coûte 0.71x le prompt d'une phrase.

Ce qui s'est passé

• Témoin 4.09, skill 4.94, prompt d'une phrase 4.62 (n=6 chacun). L'écart le plus fort est sur la vidéo explicative : le témoin a écrit des tweens de visibility/display ou autoAlpha sur des clips dans 2/2 exécutions et n'a pas enregistré la timeline sur window.__timelines dans 2/2 ; les deux exécutions avec skill et les deux du prompt d'une phrase étaient propres (5.0).
• Tâche de correction : le skill a obtenu 4.82 contre 3.95 pour le témoin et 3.86 pour le prompt d'une phrase. Le témoin a laissé la racine sans durée et avec une taille en px codée en dur dans 2/2, et la durée de la racine ne couvrait pas le dernier clip ; les exécutions du prompt d'une phrase ont codé la taille en px en dur et l'une n'a pas enregistré la timeline.
• Tâche de sous-composition : les trois groupes ont obtenu 5.0, donc un modèle seul gère déjà data-composition-src et l'enveloppe template quand on lui demande un composant réutilisable.
• Tokens : skill 114k, prompt d'une phrase 160k, témoin 239k par exécution. Sans le contrat, le témoin dépense beaucoup plus d'étapes (13 commandes par exécution contre 9) pour déduire le format ; le skill coûte moins cher que l'absence totale de consigne.
• Une vérification, « chaque élément temporisé a une durée », échoue pour 3 exécutions, dont des exécutions avec skill ; elle ne compte que deux clips dans le fichier de la tâche de correction et s'applique de la même façon à tous les groupes.

Scores par dimension

Limites de ce test

• Les vérifications sont statiques : la structure HTML, les appels GSAP et l'enregistrement de la timeline ont été analysés, mais aucune image n'a été rendue (le CLI hyperframes, Chrome et FFmpeg n'ont pas été exécutés).
• Le skill a été testé au commit 207c8a4 parce que HEAD ne le contient plus ; la commande d'installation de la revue peut ne pas fonctionner sur le dépôt actuel.
• n=2 par cellule ; le nombre de tokens du témoin est gonflé par quelques exécutions très longues (jusqu'à 440k).
• Les prompts décrivent HyperFrames en une phrase ; un agent avec accès web pourrait consulter la documentation, mais le réseau était coupé.
• n = 2 par groupe et par tâche : les écarts inférieurs à environ 1 point relèvent du bruit.
• La notation basée sur des règles mesure ce que les vérifications peuvent voir ; elle ne juge ni le goût ni si le résultat est le meilleur possible.

Sécurité

Voir security.md. Scan : 0 CRITICAL / 0 HIGH / 21 MEDIUM. Verdict : exécution sûre (bac à sable hors ligne). Un scan propre ne prouve pas qu'un skill est sûr.

En résumé

Là où le format est inconnu, le skill divise à peu près par deux le risque d'erreurs de contrat et économise des tokens. Un paragraphe énonçant le contrat récupère l'essentiel du bénéfice. Comme le skill ne figure plus dans le dépôt de l'éditeur, considérez ce résultat comme l'archive de cette version antérieure.