hyperframes-core (HeyGen HyperFrames)

Avaliação

Codex CLI 0.166 (gpt-6-astra, raciocínio baixo) em um PC Windows dedicado a testes, um projeto temporário novo e HOME/TMPDIR/caches temporários por execução, skill instalada (tratamento), ausente (controle) ou ausente com o requisito central da skill condensado em uma frase anexada ao prompt (grupo de uma frase), 2 execuções por grupo por tarefa, rede desligada, gravações em /tmp bloqueadas. Os prompts nunca mencionam a skill (exceto o texto indicado abaixo). O HyperFrames é descrito no prompt como “um framework open-source que renderiza uma página HTML em MP4 percorrendo uma timeline GSAP quadro a quadro”, sem detalhes do contrato. Tarefas: criar um vídeo explicativo de 12 segundos em três cenas, corrigir uma composição quebrada (tremor, timing errado) e construir um lower-third reutilizável como subcomposição. O prompt de uma frase enuncia o contrato completo de composição em um parágrafo.

Comparação entre os braços

Medido com Codex CLI em 18 execuções, com pontuação por verificações baseadas em regras e sem juiz LLM. Total 25.8 / 30, veredito Situacional.

Veredito: Situacional (25.8 / 30). Fonte: heygen-com/hyperframes, skills/hyperframes-core, fixado no commit 207c8a4. Instalação: npx skills@latest add heygen-com/hyperframes --skill hyperframes-core. Licença: Apache-2.0 (LICENSE do repositório).

O que é

A skill hyperframes-core de heygen-com/hyperframes, testada no commit 207c8a4 (a skill foi removida do HEAD do repositório depois, então isto descreve uma versão descontinuada). Ela documenta o contrato de composição do HyperFrames: div raiz com data-composition-id/width/height/duration, clipes com tempo definido por data-start/data-duration e class=clip, uma timeline GSAP pausada registrada em window.__timelines[root id], regras de determinismo em tempo de renderização e subcomposições em arquivos separados.

Como testamos

Codex CLI 0.166 (gpt-6-astra, raciocínio baixo) em um PC de testes Windows dedicado, com um projeto temporário novo e HOME/TMPDIR/caches temporários a cada execução, skill instalada (com a skill), ausente (controle) ou ausente com o requisito central da skill comprimido em uma frase anexada ao prompt (grupo do prompt de uma frase), 2 execuções por grupo por tarefa, rede desativada, gravações em /tmp bloqueadas. Os prompts nunca mencionam a skill (exceto pelo texto indicado abaixo).

O HyperFrames é descrito no prompt como "um framework de código aberto que renderiza uma página HTML em MP4 avançando uma timeline GSAP quadro a quadro", sem detalhes do contrato. Tarefas: criar um explicador de 12 segundos em três cenas, corrigir uma composição quebrada (tremores, timing errado) e construir um lower-third reutilizável como subcomposição. O prompt de uma frase enuncia o contrato de composição completo em um parágrafo.

1. Explicador em três cenas — Crie um vídeo de 12 segundos em 1920x1080 como um HyperFrames (um framework de código aberto que renderiza uma página HTML em MP4 avançando uma timeline GSAP quadro a quadro; o GSAP vem de uma tag script de CDN). Três cenas de 4 segundos cada: um cartão de título ("Meet Orbit"), uma lista de tópicos l…
2. Corrigir uma composição quebrada — O index.html nesta pasta é uma composição HyperFrames (um framework de código aberto que renderiza uma página HTML em MP4 avançando uma timeline GSAP quadro a quadro; o GSAP vem de uma tag script de CDN) que renderiza errado (instável, timing de cena errado, cena 2 invisível, d…
3. Lower-third reutilizável como subcomposição — Construa um vídeo HyperFrames (um framework de código aberto que renderiza uma página HTML em MP4 avançando uma timeline GSAP quadro a quadro; o GSAP vem de uma tag script de CDN) de 8 segundos, 1920x1080. Um lower-third reutilizável (nome e cargo que entram deslizando pela esquerda e…

A pontuação é programática (testes ocultos / recuperação de problemas plantados / verificações de restrições / renderização+OCR quando relevante), 0–5 por execução. Nenhum juiz LLM decidiu qualquer pontuação.

Resultados

A frase única dada ao terceiro grupo: "Contrato de composição do HyperFrames: uma raiz autônoma <div data-composition-id data-width data-height data-duration> em <body>; elementos com tempo carregam data-start e data-duration (class=clip); crie UMA gsap.timeline({paused:true}) e registre-a em window.__timelines['<root id>']; determinismo em tempo de renderização: sem Math.random/Date.now/timers/rAF, sem repeat:-1, nunca faça tween de display/visibility/autoAlpha em um clipe; subcomposições ficam em arquivos separados com data-composition-src, conteúdo envolvido em <template>, id do host = id interno = chave da timeline."

Pontuação média: 4.09 sem a skill vs 4.94 com a skill (delta +0.85). Tokens por execução: 239k vs 114k (0.47x); tempo 107s vs 79s. Grupo prompt de uma frase: 4.62 (ganho da skill sobre o prompt de uma frase: +0.32; ganho do próprio prompt de uma frase sobre nenhuma skill: +0.53); tokens do prompt de uma frase: 160k por execução, então a skill custa 0.71x o prompt de uma frase.

O que aconteceu

• Controle 4.09, skill 4.94, prompt de uma frase 4.62 (n=6 cada). A maior diferença está no explicador: o controle escreveu tweens de visibility/display ou autoAlpha nos clipes em 2/2 execuções e não registrou a timeline em window.__timelines em 2/2; as duas execuções com a skill e as duas do prompt de uma frase ficaram limpas (5.0).
• Tarefa de correção: a skill pontuou 4.82, contra 3.95 do controle e 3.86 do prompt de uma frase. O controle deixou a raiz sem duração e com tamanho em px fixo em 2/2, e a duração da raiz não cobria o último clipe; as execuções do prompt de uma frase fixaram o tamanho em px e uma não registrou a timeline.
• Tarefa de subcomposição: os três grupos pontuaram 5.0, então um modelo sem nenhuma orientação já lida com data-composition-src e o wrapper de template quando se pede um componente reutilizável.
• Tokens: skill 114k, prompt de uma frase 160k, controle 239k por execução. Sem o contrato, o controle gasta muito mais passos (13 comandos por execução contra 9) tentando descobrir o formato; a skill custa menos do que trabalhar sem orientação alguma.
• Uma verificação, "todo elemento com tempo tem uma duração", falha em 3 execuções, incluindo execuções com a skill; ela conta apenas dois clipes no arquivo da tarefa de correção e é a mesma regra para todos os grupos.

Pontuações por dimensão

Limites deste teste

• As verificações são estáticas: a estrutura HTML, as chamadas GSAP e o registro da timeline foram analisados, mas nenhum quadro foi renderizado (a CLI do hyperframes, o Chrome e o FFmpeg não foram executados).
• A skill foi testada no commit 207c8a4 porque o HEAD não a contém mais; o comando de instalação da análise pode não funcionar no repositório atual.
• n=2 por célula; a contagem de tokens do controle é inflada por algumas execuções muito longas (até 440k).
• Os prompts descrevem o HyperFrames em uma frase; um agente com acesso à web poderia consultar a documentação, mas a rede estava desativada.
• n = 2 por grupo por tarefa: diferenças abaixo de ~1 ponto são ruído.
• A pontuação baseada em regras mede o que as verificações conseguem ver; ela não julga bom gosto nem se o resultado é o melhor possível.

Segurança

Consulte security.md. Varredura: 0 CRITICAL / 0 HIGH / 21 MEDIUM. Veredito: seguro para executar (sandbox sem rede). Uma varredura limpa não prova que uma skill é segura.

Conclusão

Onde o formato é desconhecido, a skill reduz aproximadamente pela metade a chance de erros de contrato e economiza tokens. Um parágrafo enunciando o contrato recupera a maior parte do benefício. Como a skill não está mais no repositório do fornecedor, trate o resultado como um registro daquela versão anterior.