Clipador: quem fala cada palavra (streamer × outra pessoa) e legenda em duas linhas
A fala de colegas no Discord e de outros jogadores saía na legenda como se fosse do streamer. Agora cada palavra tem falante: - voz: cada trecho de fala vira uma impressão de voz (WeSpeaker ResNet34-LM, ONNX, pesos CC-BY-4.0) na análise do bloco (~0,2 s de CPU por bloco); as vozes da sessão são agrupadas sob demanda (0,05 s) e a do streamer é a que mexe a boca na webcam (YuNet, nova série `mouth` no rastreio) ou a mais alta no áudio. Sem prova, tudo continua como do streamer. - dados: `scoring.Word.speaker`; `words_json` aceita o 4º elemento; tabela `voice_chunks` (CREATE TABLE IF NOT EXISTS, fora da lista de migrações). - legenda: streamer na posição normal e outra pessoa logo abaixo, em outra cor (`caption.otherColor`/`otherSize`); blocos nunca misturam falantes; os dois juntos = duas linhas; gancho desvia as duas; vertical e horizontal. - tradução com `speaker` por linha; juízes recebem a transcrição marcada. - painel: cor da outra pessoa na configuração, falante na transcrição do editor (com correção manual), prévia em duas linhas e "O que falam" no modal. - doc/clipador/FALANTES.md com abordagem, licenças e qualidade medida na sessão 15. Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
co-authored by
Claude Opus 5.5
parent
54eac7cebf
commit
377536f778
@@ -8,6 +8,7 @@ import { CLIP_STATUS, SOURCE_LABEL, clipperCall, formatClock, formatDuration, la
|
||||
import {
|
||||
ChatSignals, ClipActions, ClipMedia, DeleteControl, FaceSignal, JudgeVerdict, TrimControl, situationLabel, type DeleteClip,
|
||||
} from "./clipper-clip-parts";
|
||||
import { isOther, speakerLabel } from "./clip-editor-model";
|
||||
import { Dialog } from "./dialog";
|
||||
import { ArrowLeftIcon, ArrowRightIcon, CheckIcon, ClockIcon } from "./icons";
|
||||
import type { PublishJob } from "./publishing-client";
|
||||
@@ -168,6 +169,8 @@ function Portuguese({ clip, pending, run }: {
|
||||
const pt = clip.judge && "pt" in clip.judge ? clip.judge.pt : undefined;
|
||||
const lines = clip.translation?.lines ?? [];
|
||||
const english = (clip.language ?? "").toLowerCase().startsWith("en");
|
||||
// Quem fala cada frase (doc/clipador/FALANTES.md): o streamer ou outra pessoa (colega no Discord, voz do jogo).
|
||||
const others = lines.some((l) => isOther(l.speaker));
|
||||
if (!english && !pt && !lines.length) return null;
|
||||
const translate = () => run("translate", () => clipperCall<Clip>(`clips/${clip.id}/translate`, "POST"), "Fala traduzida.");
|
||||
return (
|
||||
@@ -180,12 +183,19 @@ function Portuguese({ clip, pending, run }: {
|
||||
{pt?.caption && <p className="text-[0.8125rem] leading-relaxed text-fg-muted">{pt.caption}</p>}
|
||||
{lines.length > 0 ? (
|
||||
<details className="text-[0.8125rem]">
|
||||
<summary className="cursor-pointer text-fg-muted select-none hover:text-fg">O que ele fala ({lines.length} frases)</summary>
|
||||
<summary className="cursor-pointer text-fg-muted select-none hover:text-fg">
|
||||
{others ? "O que falam" : "O que ele fala"} ({lines.length} frases)
|
||||
</summary>
|
||||
<ol className="mt-2 grid gap-2">
|
||||
{lines.map((line, i) => (
|
||||
<li key={i} className="grid grid-cols-[3.25rem_minmax(0,1fr)] gap-2">
|
||||
<span className="pt-px font-mono text-[0.6875rem] text-fg-subtle tabular-nums">{formatClock(line.s - clip.startS)}</span>
|
||||
<span className="grid gap-0.5">
|
||||
<span className={cx("grid gap-0.5", isOther(line.speaker) && "border-l-2 border-info/60 pl-2")}>
|
||||
{others && (
|
||||
<span className={cx("text-[0.6875rem] font-semibold", isOther(line.speaker) ? "text-info" : "text-fg-muted")}>
|
||||
{speakerLabel(line.speaker)}
|
||||
</span>
|
||||
)}
|
||||
<span className="text-fg">{line.pt}</span>
|
||||
<span className="text-xs text-fg-subtle italic">{line.text}</span>
|
||||
</span>
|
||||
|
||||
Reference in New Issue
Block a user