Benchmarking

qiskit é uma skill de computação quântica da IBM para criar circuitos, escolher backends, fazer transpiling para hardware e executar jobs em simuladores ou dispositivos IBM Quantum. É uma ótima opção para uso do qiskit em química, otimização e machine learning, especialmente quando você precisa de orientação prática de instalação e execução, e não de um guia só teórico de qiskit.

A skill huggingface-best ajuda você a encontrar o melhor modelo para uma tarefa, consultando rankings de benchmark do Hugging Face e filtrando por limites de dispositivo e tamanho do modelo. Use quando precisar de recomendações de modelos para coding, reasoning, chat, OCR, RAG, speech, vision ou trabalho multimodal, e quiser uma shortlist prática em vez de uma lista genérica de modelos.

A skill libafl ajuda você a planejar e criar fuzzers modulares com o LibAFL para alvos personalizados, estratégias de mutação e fluxos de trabalho de auditoria de segurança. Use este guia de libafl para sair dos detalhes do alvo e chegar a um harness prático, a um modelo de feedback e a um plano de execução com menos suposições.

O skill-optimizer ajuda autores a melhorar skills de IA em ativação, clareza e confiabilidade entre modelos. Use em Skill Authoring quando uma skill está escrita, mas não é seguida de forma confiável; quando os gatilhos são fracos, aparecem regressões ou é preciso reduzir o custo de contexto. Ele dá suporte a ciclos de benchmark, gates de release e maior fidelidade de uso.

pytdc é uma skill para o Therapeutics Data Commons, oferecendo datasets e benchmarks prontos para IA em descoberta de fármacos para ADME, toxicidade, DTI, DDI, geração, splits por scaffold e predição farmacológica.

Skill pytorch-lightning para organizar projetos PyTorch com LightningModules e Trainers. Use este guia de pytorch-lightning para instalação, treinamento, validação, logging, checkpointing e execução distribuída em fluxos de trabalho com multi-GPU ou TPU.

pymoo é uma skill em Python para otimização de um ou vários objetivos, frentes de Pareto, problemas com restrições e testes de benchmark. Use este guia do pymoo para escolher algoritmos como NSGA-II, NSGA-III e MOEA/D, seguir o fluxo de instalação e uso e aplicar o pymoo em análise de dados quando for preciso equilibrar várias métricas.

finance-metrics-quickref é um skill de consulta rápida para métricas financeiras de SaaS, fórmulas e benchmarks. Use-o para definições rápidas de métricas, conferência de fórmulas e lembretes de benchmark em trabalhos de produto, finanças, GTM ou revisão com o board.