Receber por email
← Voltar para o catálogo

pipeline-eval

Um framework de avaliação em nível de sistema para pipelines LLM multiestágio, que pontua o pipeline como um todo em 8 dimensões, incluindo qualidade de entrada/saída, design do prompt e fundamentação factual. Ele complementa o `deepeval` ao avaliar a arquitetura do pipeline em vez de artefatos de conteúdo únicos.

1estrelas
Atualizado há 5 meses

Ver no GitHub ↗ Licença: MIT

Como adicionar

/plugin marketplace add EvXata/deepeval-bcg

O comando exato pode variar conforme o repositório. Confira o README no GitHub.

Para o autor da skill

Cole no README do seu repo

Mostra que sua skill está catalogada na Skillteca, gera backlink e tráfego rastreável.

[![Skillteca](https://www.skillteca.com.br/api/badge/pipeline-eval-evxata/svg)](https://www.skillteca.com.br/skills/pipeline-eval-evxata)

Alerta por categoria

Receba novas skills de Design e Frontend toda segunda

1 email curto, só com as skills novas de Design e Frontend. 4 minutos de leitura, sem spam, cancela com 1 clique.

Você confirma o email no primeiro envio. Sem spam. Cancela com 1 clique.

Ler descrição completa

pipeline-eval — System-level evaluation for LLM pipelines

What this skill is for

deepeval scores one content artifact. pipeline-eval scores the system that produced it. Different question, different rubric, complementary.

Use pipeline-eval when:

  • The user has a multi-stage pipeline (pipeline.json, n8n workflow, LangGraph, custom orchestrator)
  • They want to know: where does quality leak? — at input, at the prompt, at sequencing, at fact-grounding, somewhere else
  • They

[Description truncada. Veja o README completo no GitHub.]

Compartilhar X LinkedIn