algorithmic-art (Anthropic)

Avaliação

Codex CLI 0.166 (gpt-6-astra, raciocínio baixo) em um PC de teste Windows dedicado, com um projeto temporário novo e HOME/TMPDIR/caches temporários a cada execução, skill instalada (tratamento), ausente (grupo de controle) ou ausente com o requisito central da skill comprimido em uma frase anexada ao prompt (grupo do prompt de uma frase), 2 execuções por grupo por tarefa, rede desligada, gravações em /tmp bloqueadas. Os prompts nunca mencionam a skill (exceto pelo texto indicado abaixo). Três tarefas: um campo de fluxo com milhares de partículas, uma peça de órbitas/harmônicos e um briefing aberto de 'piscinas de maré', todas pedindo p5.js e saída com seed, ajustável, entregue em arquivos. O grupo com a skill usa o mesmo prompt do grupo de controle (a skill é detectada pela correspondência da descrição). O grupo prompt de uma frase acrescenta uma frase: escreva primeiro uma filosofia algorítmica curta e depois o código, majoritariamente generativo, com seed e controles de parâmetros em um visualizador HTML.

Comparação entre os braços

Medido com Codex CLI em 18 execuções, com pontuação por verificações baseadas em regras e sem juiz LLM. Total 22.5 / 30, veredito Situacional.

Veredito: Situacional (22.5 / 30). Fonte: anthropics/skills, skills/algorithmic-art, fixado no commit ca45fc4. Instalação: npx skills@latest add anthropics/skills --skill algorithmic-art. Licença: Apache-2.0 / termos da Anthropic (consulte LICENSE.txt na skill).

O que é

A skill algorithmic-art do anthropics/skills: um procedimento em duas etapas para arte generativa com p5.js: primeiro escrever uma "filosofia algorítmica" (um movimento estético nomeado, 4-6 parágrafos) e depois expressá-la como código p5.js com seed em um visualizador HTML interativo criado a partir do viewer.html e do generator_template.js da skill. Licença em LICENSE.txt (estilo Apache para esta skill).

Como testamos

Codex CLI 0.166 (gpt-6-astra, raciocínio baixo) em um PC de testes Windows dedicado, com um projeto temporário novo e HOME/TMPDIR/caches temporários a cada execução, skill instalada (com a skill), ausente (controle) ou ausente com o requisito central da skill comprimido em uma frase anexada ao prompt (grupo do prompt de uma frase), 2 execuções por grupo por tarefa, rede desativada, gravações em /tmp bloqueadas. Os prompts nunca mencionam a skill (exceto pelo texto indicado abaixo).

Três tarefas: um campo de fluxo com milhares de partículas, uma peça de órbitas/harmônicos e um briefing aberto de "poças de maré", todas pedindo p5.js, saída com seed e ajustável em arquivos. O grupo com a skill usa o mesmo prompt do controle (a skill é adotada por correspondência de descrição). O grupo do prompt de uma frase acrescenta uma frase: escrever primeiro uma filosofia algorítmica curta e depois um código majoritariamente generativo, com seed e controles de parâmetros em um visualizador HTML.

1. Arte de campo de fluxo — Crie arte generativa com p5.js: um campo de fluxo com milhares de partículas. Torne-a explorável (com seed e ajustável). Entregue-a como arquivos na pasta atual.
2. Arte de sistema de partículas — Faça uma peça de arte algorítmica com p5.js: partículas orbitando vários atratores e deixando rastros. Com seed e interativa. Arquivos na pasta atual.
3. Briefing aberto — Crie uma peça original de arte algorítmica inspirada em poças de maré, usando p5.js, com aleatoriedade com seed e controles de parâmetros. Arquivos na pasta atual.

A pontuação é programática (testes ocultos / recuperação de problemas plantados / verificações de restrições / renderização+OCR quando relevante), 0–5 por execução. Nenhum juiz LLM decidiu qualquer pontuação.

Resultados

A frase única dada ao terceiro grupo: "Primeiro escreva uma filosofia algorítmica curta (um movimento estético nomeado) e depois a expresse como código p5.js majoritariamente de algoritmo generativo, que use um gerador aleatório com seed para que a mesma seed reproduza a peça e exponha controles de parâmetros em um visualizador HTML interativo."

Pontuação média: 4.52 sem a skill vs 5.0 com a skill (delta +0.48). Tokens por execução: 115k vs 229k (1.99x); tempo 181s vs 165s. Grupo prompt de uma frase: 4.76 (ganho da skill sobre o prompt de uma frase: +0.24; ganho do próprio prompt de uma frase sobre nenhuma skill: +0.24); tokens do prompt de uma frase: 145k por execução, então a skill custa 1.58x o prompt de uma frase.

O que aconteceu

• O controle já constrói o básico: um HTML de visualizador, um esboço com seed e sliders em 6/6 execuções. A diferença de pontuação está quase toda na verificação da filosofia: o controle escreveu apenas um README (126-226 palavras) e ficou abaixo do limite de 150 palavras em 2 execuções, e nenhuma das 6 execuções de controle produziu um arquivo de filosofia separado. Média de 4.52 no controle, 4.76 no prompt de uma frase e 5.00 com a skill.
• A skill torna a etapa da filosofia confiável: 6/6 execuções com a skill escreveram um philosophy.md (410-520 palavras), e o grupo do prompt de uma frase também escreveu um em 6/6 (290-460 palavras). A única falha de seed em 18 execuções foi uma execução do prompt de uma frase (t2-orbits) que não usou randomSeed/noiseSeed.
• A skill acrescenta saídas que não foram pedidas: código de exportação/salvamento (5, 8 e 3 referências a download/saveCanvas nos visualizadores com a skill, contra 1 no controle), arquivos extras (8.3 arquivos por execução, contra 4 no controle) e, em 2 execuções, scripts auxiliares (build_art.py, verify.cjs) que montam o template.
• Custo: 229k tokens por execução com a skill, contra 115k no controle e 145k no prompt de uma frase, cerca de 2.0x e 1.6x. O grupo com a skill leu a skill em 6/6 execuções sem que isso fosse pedido.
• Todos os grupos, exceto uma execução do prompt de uma frase, carregam p5.js de uma CDN, então no sandbox offline nenhuma peça pôde ser renderizada; a qualidade das imagens não é comparada.

Pontuações por dimensão

Limites deste teste

• Apenas verificações baseadas em regras (o arquivo existe, funções de seed, marcação de sliders, contagem de palavras); 14 das 15 verificações ponderadas passam em quase toda execução, então o conjunto de verificações tem efeito teto e não consegue classificar a arte em si.
• Sem renderização: o p5.js vem de uma CDN, que o sandbox offline bloqueia, então nenhum dos esboços foi executado no navegador.
• A verificação de "filosofia" aceita qualquer .md com 150+ palavras, então um README longo pode passar; aqui isso foi tratado contando também os arquivos de filosofia separados (veja os achados).
• n = 2 por grupo por tarefa: diferenças abaixo de ~1 ponto são ruído.
• A pontuação baseada em regras mede o que as verificações conseguem ver; ela não julga bom gosto nem se o resultado é o melhor possível.

Segurança

Consulte security.md. Varredura: 0 CRITICAL / 0 HIGH / 0 MEDIUM. Veredito: seguro para executar (sandbox sem rede). Uma varredura limpa não prova que uma skill é segura.

Conclusão

A skill produz de forma confiável a entrega em duas partes (filosofia nomeada mais visualizador com seed e ajustável) e os recursos extras de exportação, mas uma instrução de uma frase obtém quase as mesmas verificações com 60% dos tokens. Vale instalar quando você quer exatamente esse fluxo de trabalho e estilo; não é um salto de qualidade que as verificações consigam mostrar.