pipeline-eval

Name: pipeline-eval
Rating: 5 (1 reviews)
Author: EvXata

Um framework de avaliação em nível de sistema para pipelines LLM multiestágio, que pontua o pipeline como um todo em 8 dimensões, como qualidade de entrada/saída e design de prompt. Ele complementa o `deepeval` ao avaliar a arquitetura do pipeline em si, em vez de artefatos de conteúdo únicos.

1estrelas

Atualizado há 2 meses

Ver no GitHub ↗Licença: MIT

Como adicionar

/plugin marketplace add EvXata/deepeval-bcg

O comando exato pode variar conforme o repositório. Confira o README no GitHub.

Para o autor da skill

Cole no README do seu repo

Mostra que sua skill está catalogada na Skillteca, gera backlink e tráfego rastreável.

[![Listada na Skillteca](https://www.skillteca.com.br/api/badge/pipeline-eval-mpsg60nv/svg)](https://www.skillteca.com.br/skills/pipeline-eval-mpsg60nv?utm_source=badge&utm_medium=readme&utm_campaign=badge)

#llm

Skills relacionadas

Ver todas de Design e Frontend →

webapp-testing

153.1k

Kit de ferramentas para interagir e testar aplicações web locais usando Playwright. Suporta a verificação de funcionalidades de frontend, depuração de comportamento da UI, captura de screenshots do navegador e visualização de logs do navegador.

Design e Frontend#testpor anthropics

brand-guidelines

153.1k

Aplica as cores e tipografia oficiais da marca Anthropic a qualquer artefato que se beneficie de sua identidade visual. Use-o quando diretrizes de estilo, formatação visual ou padrões de design da empresa forem aplicáveis.

Design e Frontendpor anthropics

frontend-design

153.1k

Cria interfaces frontend distintas e de nível de produção com alta qualidade de design, gerando código criativo e polido e design de UI que evita a estética genérica de IA. Use para construir componentes web, páginas e aplicações, ou para estilizar/embelezar UIs web.

Design e Frontend#css#aipor anthropics

mcp-builder

153.1k

Guia para criar servidores MCP (Model Context Protocol) de alta qualidade que permitem que LLMs interajam com serviços externos por meio de ferramentas bem projetadas. Use ao construir servidores MCP para integrar APIs ou serviços externos, seja em Python (FastMCP) ou Node/TypeScript (MCP SDK).

Design e Frontend#llm#typescriptpor anthropics

Alerta por categoria

Receba novas skills de Design e Frontend toda segunda

1 email curto, só com as skills novas de Design e Frontend. 4 minutos de leitura, sem spam, cancela com 1 clique.

Você confirma o email no primeiro envio. Sem spam. Cancela com 1 clique.

pipeline-eval — System-level evaluation for LLM pipelines

What this skill is for

deepeval scores one content artifact. pipeline-eval scores the system that produced it. Different question, different rubric, complementary.

Use pipeline-eval when:

The user has a multi-stage pipeline (pipeline.json, n8n workflow, LangGraph, custom orchestrator)
They want to know: where does quality leak? — at input, at the prompt, at sequencing, at fact-grounding, somewhere else
They

[Description truncada. Veja o README completo no GitHub.]

CompartilharX LinkedIn

Comentários · Nenhum comentário

Ainda não há comentários. Seja o primeiro.