V provozu · AI · třídění s člověkem ve smyčce

SORTHOUSE

Laboratoř třídění e-mailů a dokumentů s extrakcí ověřenou podle schématu, důkazy pro každé pole, politikou mimo model, frontou schvalování a idempotentními akcemi.

SORTHOUSE · fronta schvalování
Inspektor polí SORTHOUSE ukazuje vyfocenou fakturu, nejisté pole a oblast důkazu.

Vyzkoušejte zde

Otevřete vyfocenou fakturu, zkontrolujte nejisté pole a jeho důkaz, opravte ho a pak spusťte scénář prompt injection ve Failure Lab. Rozhraní laboratoře je anglicky.

sorthouse.syslora.comNová karta ↗

Problém

Automatizace smíšené schránky je bezpečná, jen když systém pozná nedostatek důkazů a neopakuje akci po opakování nebo timeoutu.

Co dělá

Otevřete syntetickou schránku s fakturami, reklamací, poptávkou, spamem a nejednoznačnou zprávou. Každá zpráva prochází skutečnými kroky: očištění, klasifikace, extrakce, validace, politika a kontrola. Každé extrahované pole odkazuje na svůj důkaz: citaci z e-mailu, stránku PDF nebo oblast na vyfocené faktuře.

O automatizaci rozhoduje politika mimo model na základě deterministických kontrol. Faktury a odpovědi zákazníkům zůstávají jen se schválením; můžete schválit, opravit nebo zamítnout a oprava ponechá původní predikci v auditu. Schválené akce procházejí transakčním outboxem, takže opakování, duplicitní doručení i timeout po odeslání se vyrovnávají, ne opakují.

Ve výchozím stavu jsou klasifikátor a extraktor deterministická heuristická základna a OCR, kontrola malwaru a akce jsou simulované a v rozhraní označené; adaptéry pro skutečné modely existují, ale veřejné demo je nepoužívá. Relace jsou dočasné a izolované s dvouhodinovou retencí a obrana proti prompt injection je vrstvená, bez tvrzení, že je problém vyřešen.

Publikované hodnocení zahrnuje 122 syntetických případů: 100 e-mailů v oddělené testovací sadě, 12 adversariálních a 10 chybových scénářů. Deterministický baseline provedl 0 chybných automatických akcí a zablokoval 16/16 nebezpečných akcí. Veřejné demo používá tento baseline; adaptéry LLM jsou zaměnitelné a publikované metriky nejsou výsledky LLM. Malý syntetický korpus nedokazuje výkon na skutečných schránkách. Je to vlastní ukázka, ne nasazení pro klienta.

Co obsahuje.

  1. 01Klasifikace a extrakce s důkazy pro pole
  2. 02Deterministická validace a práh jistoty
  3. 03Fronta schvalování: schválit, opravit nebo zamítnout
  4. 04Transakční outbox s vyrovnáním po timeoutu
  5. 05Laboratoř prompt injection a simulace selhání
  6. 06Izolované relace a měřená hodnocení

Vytvořeno pomocí

  • Laravel
  • Alpine.js
  • PostgreSQL
  • Redis / Horizon
  • Provider adapters
  • Playwright

SORTHOUSE · Váš projekt

Potřebujete podobný systém?

Řekněte nám, která část tohoto systému by pomohla vašemu týmu, co děláte ručně a jaké nástroje používáte. Můžeme probrat, co odpovídá vašemu pracovnímu postupu.