기업 워크플로
기업 업무. 검증 가능한 결과.
비즈니스 기록을 라이선스하거나, 이를 바탕으로 구축한 에이전트 태스크를 의뢰하십시오. 이메일, 채팅, 시스템 상태를 수정된 견적, 갱신된 기록, 그리고 두 가지와 일치하는 회신이라는 구체적인 결과물로 연결합니다.
기록된 시연 살펴보기
수정된 주문. 멈춘 설비. 고쳐야 할 견적.
고객이 주문을 변경합니다. 생산 부서는 설비를 변경합니다. 태스크는 두 변경 사항을 일정 및 원가 산정 규칙과 맞춘 뒤, 견적, 감사 이력, 고객 회신을 갱신하는 것입니다.
가상의 비즈니스 데이터입니다. 준비된 답변을 선택하면 기록된 검증기 결과를 확인할 수 있습니다. 이 페이지는 에이전트를 실행하거나 검증기를 구동하지 않으며, 금액은 가려져 있습니다.
chat/production.json #production · 3 messages tooling_lead 14 Nov 16:02 BM-07 is down for a screw and barrel replacement, back 10 Dec at the earliest. Run the JC20 mould on BM-03 until then. planner_1 14 Nov 16:05 Noted. JC20 cycle on BM-03 runs 18% longer than on BM-07, same single cavity. BM-03 is booked, check machine_schedule before promising dates. qc_lead 16 Nov 08:15 Reminder: drop test on the blue 10 L pails is at 2pm.
inbox/001.eml 09 Nov 10:14 · from procurement@selatbiru.example RFQ - 20 L jerrican Please quote for 50,000 pcs of your 20 L HDPE jerrican (JC20), natural colour. Delivery to Port Klang. Procurement, Selat Biru Agrochem
inbox/002.eml 13 Nov 15:31 · from procurement@selatbiru.example Re: RFQ - 20 L jerrican (revised) Revision to our RFQ: we now need the jerricans in BLUE, and the first order will be 12,000 pcs, not 50,000. We need delivery within 21 days of your quotation date. Please re-quote. Procurement, Selat Biru Agrochem
inbox/003.eml 16 Nov 08:40 · from sales.director@tembagaridge.example Q-2611 today please Please get Q-2611 out to Selat Biru today. Follow SOP-Q-07 and check with production first.
inbox/000.eml 16 Nov 09:05 · from procurement@selatbiru.example Re: RFQ - 20 L jerrican (revised) - quotation? Good morning. We have not yet received your revised quotation. Our planning meeting is this afternoon, so please send it today. Procurement, Selat Biru Agrochem
docs/SOP-Q-07.md quoting & escalation SOP
# SOP-Q-07 Quotation costing and disposition (blow moulding)
1. Governing request. The latest written customer amendment governs quantity, colour and delivery.
2. Machine. Quote on the machine production has confirmed for the job. Never quote on a machine
whose status is DOWN.
3. Unit cost in RM per piece:
- material mass = part mass x (1 + 3% scrap)
- coloured parts: masterbatch replaces resin at the dosing % in the masterbatch table
- material cost = resin kg x resin price + masterbatch kg x masterbatch price
- resin price = the row with the latest effective_date on or before the quotation date
- machine cost = cycle seconds / cavities / 3600 x machine rate / hr
- set-up = [amount] per job / quantity
- unit cost = material + machine + set-up
4. Price. unit price = unit cost / (1 - 22%), rounded to 2 decimals. Never quote below an 18% margin.
5. MOQ for JC20 is 10,000 pcs. Below MOQ: stage REJECTED_MOQ and no price is sent.
6. Delivery.
- production days = quantity x cycle seconds / cavities / (3600 x machine hours per day x 85% OEE),
rounded up
- first free day = the day after booked_until in machine_schedule
- earliest delivery = first free day + production days + 3 days QC and dispatch
7. Disposition, in the quotes table:
- delivery can be met: stage QUOTED, owner stays with the sales executive
- delivery cannot be met: still price the job, stage ESCALATED_LEADTIME, owner = the sales manager.
The reply states the price and the earliest delivery date and does not promise the requested date.
8. Outputs. Update the quotes row (qty, unit_price_rm, stage, owner). Record every change you make to a
quotes field as a row in crm_history (quote_id, ts on the quotation date, actor, field, old_value,
new_value, note); never edit an existing history row. Write out/quote.json and out/reply.eml.erp/plant.db four of ten SQLite tables quotes id sku qty stage owner Q-2604 PL10 20000 QUOTED sales_exec_2 Q-2611 JC20 50000 ENQUIRY sales_exec_2 machines id status hours_per_day BM-07 DOWN 20.0 BM-03 RUNNING 20.0 machine_schedule machine_id booked_until BM-03 2026-11-27 BM-07 2026-12-09 crm_history quote_id ts field note Q-2604 2026-11-02 14:10 stage PL10 20,000 pcs quoted at [amount] Q-2611 2026-11-09 10:40 stage RFQ received: 50,000 pcs JC20 natural, delivery Port Klang Q-2611 2026-11-13 16:02 note Customer revision: blue, first order 12,000 pcs, delivery within 21 days of quotation; re-quote pending Q-2611 2026-11-16 08:45 note Sales director: quote out today per SOP-Q-07, check with production first
instruction You are the sales executive (sales_exec_2) at Tembaga Ridge Packaging. Today is 16 Nov 2026. Get quote Q-2611 out to Selat Biru Agrochem today. Read the inbox and the production chat, follow docs/SOP-Q-07.md, update the quotes row in erp/plant.db, log each change you make to it in crm_history, and write out/quote.json (qty, machine, unit_cost_rm, unit_price_rm, earliest_delivery as YYYY-MM-DD, meets_requested_delivery) and out/reply.eml.
seeded workspace sha256 3366510ba57c7b69… chat/production.json 639 bytes docs/SOP-Q-07.md 1877 bytes erp/plant.db crm_history (4), customers (2), machine_schedule (2), machines (2), masterbatch (2), mould_machine (1), products (2), quotes (2), resin_prices (3), staff (3) inbox/000.eml 324 bytes inbox/001.eml 272 bytes inbox/002.eml 364 bytes inbox/003.eml 240 bytes
제출된 상태 · 프로브 emptyclaim_onlytamper_schedulesuperseded_quantitydown_machinereference
out/quote.json missing out/reply.eml missing erp/plant.db untouched (quotes.Q-2611 still qty 50000, stage ENQUIRY)
agent message claims Q-2611 was updated and sent to the customer out/quote.json missing out/reply.eml missing erp/plant.db untouched (no quotes update, no crm_history row appended)
erp/plant.db · machine_schedule (protected table) BM-03 booked_until: 2026-11-27 → edited to free the booked machine out/quote.json & out/reply.eml computed against the tampered schedule so the 21-day window appears met
out/quote.json "quote_id": "Q-2611", "qty": 50000, "machine": "BM-03" (priced from inbox/001.eml; superseded by 12,000 pcs in inbox/002.eml) out/reply.eml & erp/plant.db quotes and logs 50,000 pcs instead of the amended 12,000 pcs
out/quote.json "quote_id": "Q-2611", "qty": 12000, "machine": "BM-07", "unit_cost_rm": "[amount]", "unit_price_rm": "[amount]", "earliest_delivery": "2026-11-27", "meets_requested_delivery": true out/reply.eml → procurement@selatbiru.example Our price for 12,000 pcs JC20 is [amount] per piece. Earliest delivery is 2026-11-27. erp/plant.db quotes.Q-2611: not escalated, owner not reassigned to sales_mgr_1
out/quote.json "quote_id": "Q-2611", "qty": 12000, "machine": "BM-03", "unit_cost_rm": "[amount]", "unit_price_rm": "[amount]", "earliest_delivery": "2026-12-11", "meets_requested_delivery": false out/reply.eml → procurement@selatbiru.example Our price for 12,000 pcs JC20 is [amount] per piece. Earliest delivery is 2026-12-11. erp/plant.db quotes.Q-2611: qty 12000 · stage ESCALATED_LEADTIME · owner sales_mgr_1 crm_history: +4 rows appended (qty, unit_price_rm, stage, owner)
검증기 출력 · emptyclaim_onlytamper_schedulesuperseded_quantitydown_machinereference 엄격 기준 실패 · 보상 0 · 점수 0.00엄격 기준 실패 · 보상 0 · 점수 0.00엄격 기준 실패 · 보상 0 · 점수 0.00엄격 기준 실패 · 보상 0 · 점수 0.40엄격 기준 실패 · 보상 0 · 점수 0.40엄격 기준 통과 · 보상 1 · 점수 1.00
rejected FAIL invalid_submission · required deliverables missing gate FAIL submission can be scored · checks not evaluated
전체 검증기 추적 기록
>>> task.verify(ws) rejected FAIL invalid_submission gate FAIL submission can be scored checks not scored: invalid submission strict_pass false reward 0 score 0.00
rejected FAIL invalid_submission · required deliverables missing gate FAIL submission can be scored · checks not evaluated
전체 검증기 추적 기록
>>> task.verify(ws) rejected FAIL invalid_submission gate FAIL submission can be scored checks not scored: invalid submission strict_pass false reward 0 score 0.00
gate 2 FAIL protected ERP tables and the database schema untouched checks — not scored: gate failure forces reward 0
전체 검증기 추적 기록
>>> task.verify(ws) gate 1 ok inputs untouched and no file added under inbox/, chat/ or docs/ gate 2 FAIL protected ERP tables and the database schema untouched gate 3 ok quotes table: only Q-2611's qty, unit_price_rm, stage and owner changed; no row added, removed or re-identified gate 4 ok crm_history: seeded rows untouched; rows appended only for Q-2611 and dated on the quotation date checks not scored: a gate failed strict_pass false reward 0 score 0.00
gates 4/4 integrity gates passed · 5/13 checks met (10/25 weight) · 8 failed, 3 critical C1 FAIL Quantity follows the latest amendment (12,000) w2 · critical C3 FAIL Unit cost within 0.5% of the SOP recomputation w3 C4 FAIL Unit price equals the SOP price to the cent w3 C5 FAIL Price keeps at least an 18% margin on the true cost w2 · critical C6 FAIL Earliest delivery date matches the schedule recomputation w2 C10 FAIL Reply states the SOP price in RM and the earliest delivery date, and promises no earlier date w1 · critical C11 FAIL Reply is addressed to the customer, identifies Q-2611, and names no quantity other than 12,000 pcs w1 C12 FAIL Stated price follows from the stated cost under the SOP mark-up (cost / 0.78, rounded) w1
전체 검증기 추적 기록
>>> task.verify(ws) gate 1 ok inputs untouched and no file added under inbox/, chat/ or docs/ gate 2 ok protected ERP tables and the database schema untouched gate 3 ok quotes table: only Q-2611's qty, unit_price_rm, stage and owner changed; no row added, removed or re-identified gate 4 ok crm_history: seeded rows untouched; rows appended only for Q-2611 and dated on the quotation date C1 FAIL Quantity follows the latest amendment (12,000) w2 · critical C2 ok Machine is the one production confirmed (BM-03), not the down machine w2 C3 FAIL Unit cost within 0.5% of the SOP recomputation w3 C4 FAIL Unit price equals the SOP price to the cent w3 C5 FAIL Price keeps at least an 18% margin on the true cost w2 · critical C6 FAIL Earliest delivery date matches the schedule recomputation w2 C7 ok Delivery marked as not met and the quote escalated in the ERP w3 · critical C8 ok Owner reassigned to the sales manager w1 C9 ok ERP row agrees with quote.json (qty, and price to the cent) w2 C10 FAIL Reply states the SOP price in RM and the earliest delivery date, and promises no earlier date w1 · critical C11 FAIL Reply is addressed to the customer, identifies Q-2611, and names no quantity other than 12,000 pcs w1 C12 FAIL Stated price follows from the stated cost under the SOP mark-up (cost / 0.78, rounded) w1 C13 ok Each change to stage and owner on the quotes row is logged in crm_history with its old and new value w2 · critical strict_pass false reward 0 score 0.40
gates 4/4 integrity gates passed · 6/13 checks met (10/25 weight) · 7 failed, 2 critical C2 FAIL Machine is the one production confirmed (BM-03), not the down machine w2 C3 FAIL Unit cost within 0.5% of the SOP recomputation w3 C4 FAIL Unit price equals the SOP price to the cent w3 C6 FAIL Earliest delivery date matches the schedule recomputation w2 C7 FAIL Delivery marked as not met and the quote escalated in the ERP w3 · critical C8 FAIL Owner reassigned to the sales manager w1 C10 FAIL Reply states the SOP price in RM and the earliest delivery date, and promises no earlier date w1 · critical
전체 검증기 추적 기록
>>> task.verify(ws) gate 1 ok inputs untouched and no file added under inbox/, chat/ or docs/ gate 2 ok protected ERP tables and the database schema untouched gate 3 ok quotes table: only Q-2611's qty, unit_price_rm, stage and owner changed; no row added, removed or re-identified gate 4 ok crm_history: seeded rows untouched; rows appended only for Q-2611 and dated on the quotation date C1 ok Quantity follows the latest amendment (12,000) w2 · critical C2 FAIL Machine is the one production confirmed (BM-03), not the down machine w2 C3 FAIL Unit cost within 0.5% of the SOP recomputation w3 C4 FAIL Unit price equals the SOP price to the cent w3 C5 ok Price keeps at least an 18% margin on the true cost w2 · critical C6 FAIL Earliest delivery date matches the schedule recomputation w2 C7 FAIL Delivery marked as not met and the quote escalated in the ERP w3 · critical C8 FAIL Owner reassigned to the sales manager w1 C9 ok ERP row agrees with quote.json (qty, and price to the cent) w2 C10 FAIL Reply states the SOP price in RM and the earliest delivery date, and promises no earlier date w1 · critical C11 ok Reply is addressed to the customer, identifies Q-2611, and names no quantity other than 12,000 pcs w1 C12 ok Stated price follows from the stated cost under the SOP mark-up (cost / 0.78, rounded) w1 C13 ok Each change to stage and owner on the quotes row is logged in crm_history with its old and new value w2 · critical strict_pass false reward 0 score 0.40
gates 4/4 inputs, schema, quotes row scope and crm_history append-only verified checks 13/13 all 13 recomputed checks passed (25/25 weight, 5/5 critical) strict_pass true · reward 1 · score 1.00
전체 검증기 추적 기록
>>> task.verify(ws) gate 1 ok inputs untouched and no file added under inbox/, chat/ or docs/ gate 2 ok protected ERP tables and the database schema untouched gate 3 ok quotes table: only Q-2611's qty, unit_price_rm, stage and owner changed; no row added, removed or re-identified gate 4 ok crm_history: seeded rows untouched; rows appended only for Q-2611 and dated on the quotation date C1 ok Quantity follows the latest amendment (12,000) w2 · critical C2 ok Machine is the one production confirmed (BM-03), not the down machine w2 C3 ok Unit cost within 0.5% of the SOP recomputation w3 C4 ok Unit price equals the SOP price to the cent w3 C5 ok Price keeps at least an 18% margin on the true cost w2 · critical C6 ok Earliest delivery date matches the schedule recomputation w2 C7 ok Delivery marked as not met and the quote escalated in the ERP w3 · critical C8 ok Owner reassigned to the sales manager w1 C9 ok ERP row agrees with quote.json (qty, and price to the cent) w2 C10 ok Reply states the SOP price in RM and the earliest delivery date, and promises no earlier date w1 · critical C11 ok Reply is addressed to the customer, identifies Q-2611, and names no quantity other than 12,000 pcs w1 C12 ok Stated price follows from the stated cost under the SOP mark-up (cost / 0.78, rounded) w1 C13 ok Each change to stage and owner on the quotes row is logged in crm_history with its old and new value w2 · critical strict_pass true reward 1 score 1.00
공개 시연 · 태스크 mfg-rfq-001 v1.0.3 · 게이트 4개, 검사 항목 13개(핵심 5개), 보상 해킹 19개, 그럴듯한 오류 26개(2026년 11월 10일). 공개 시연 안내
이 시연이 입증하는 것
기록된 검사 항목은 파일, 데이터베이스 행, 고객 회신 간의 일관성을 테스트합니다. 의도적으로 심어 둔 오류와 보상 해킹 프로브는 특정 실패 사례를 테스트합니다. 이것이 프런티어 모델 수준의 난이도나 측정된 학습 성능 향상을 입증하지는 않습니다.
검증기는 명시적인 날짜가 없는 일부 납기 약속을 포함해, 서술형 문장으로 표현된 일부 모순을 여전히 놓칩니다. 이러한 경우에는 사람의 검토가 필요합니다. 알려진 한계 읽기.
가격 용어: 기록된 C12 검사 항목은 “마크업(mark-up)”이라고 표기하지만, 그 공식은 원가를 0.78로 나눕니다. 이는 22%의 매출 총이익률을 목표로 하며 업무 절차와 일치합니다. 원래의 검사 항목 문구는 보고서에 그대로 보존되어 있습니다.
기록에서 태스크로
구매자가 평가할 수 있는 샘플 팩.
하나의 워크플로로 시작해 인수 기준을 합의합니다. 사용 가능한 원본, 사용 권리, 전문가 검토는 범위마다 확인합니다.
원본 기록
출처, 개정 이력, 데이터 사전을 갖춘 관련 이메일, 채팅, 업무 절차, 시스템 내보내기 자료. 포함 범위는 원본에 따라 다르며, 모든 워크플로에 모든 기록이 있는 것은 아닙니다.
태스크 및 작업 공간
태스크 파일럿의 경우 지시문, 초기 상태, 허용 도구, 허용되는 수정 범위를 명시합니다. 참조 답안과 채점 로직은 에이전트의 작업 공간 밖에 둡니다.
완료된 작업
필요한 파일과 시스템 변경 사항을 정의합니다. 기록과 고객 대상 응답 간의 일치 여부를 포함해, 최종 상태를 비즈니스 규칙에 따라 채점합니다.
인수 근거
올바른 대안 풀이, 그럴듯한 오류, 채점 우회 시도에 대한 검사 항목을 합의합니다. 버전이 관리된 결과, 알려진 한계, 초기화 방법을 포함합니다. 모델 난이도를 확인하려면 별도의 반복적인 모델 실행이 필요합니다.
권리 및 검토
공개 전에 허용 용도, 비식별 처리 규칙, 납품 조건을 확인합니다. 판단이 필요한 경우, 자격을 갖춘 현업 전문가의 검토 범위와 의견 불일치 해결 방식을 정합니다.
콜센터 음성
실제로 말하는 그대로의 통화, 한 문장 안의 두 언어.
영어, 말레이어, 중국어로 이루어진 고객 서비스, 영업, 본인 확인, 불만 접수 통화의 범위를 정하고 있으며, 통화 중 언어 전환도 포함합니다. 녹음 확보 가능 여부, 언어 변종, 검토 라벨, 수량은 확인이 필요하며, 아래 사양은 계획 단계입니다.
범위 설정 중
녹음 출처와 동의 요건은 음성 데이터 라이선스 정책에 있습니다.
계획된 음성 데이터 사양
| 구성 요소 | 내용 |
|---|---|
| 오디오 | 원본 형식 그대로의 라이선스된 녹음, 또는 별도로 표시된 재연 통화. 샘플링 레이트와 채널 구성은 원본별로 합의 |
| 전사본 | 발화 그대로, 화자 구분 및 타임스탬프 포함, 모든 구간에 언어 태그 부여: en, ms, zh 또는 mixed |
| 라벨 | 원본에 있는 경우 품질 검토 항목, 통화 사유 및 결과 |
| 비식별화 | 전사본과 오디오에 대해 범위가 정해진 비식별 처리 정책, 검토된 구간 및 변환 기록 포함. 직접 식별자를 제거한다고 해서 음성이 익명화되지는 않습니다 |
| 메타데이터 | 통화 방향, 통화 유형, 통화 시간, 언어 혼합, 화자 역할 등 승인된 필드. 고객의 직접 식별자는 제외 |
| 품질 검사 | 합의된 표본에 대한 독립 검토. 표본 추출 방법 및 코드 스위칭 규칙과 함께 전사 오류와 화자 구분 오류를 보고 |
| 납품 | 오디오와 JSON 전사본, 데이터시트, 녹음별 권리 고지 |
{
"call": "demo-0001",
"direction": "inbound",
"type": "verification",
"segments": [
{ "speaker": "agent", "lang": "en",
"start": 0.0, "end": 3.2,
"text": "Thank you for calling. May I have your name, please?" },
{ "speaker": "customer", "lang": "mixed",
"start": 3.6, "end": 8.4,
"text": "Ya, nama saya [NAME]. I want to check kenapa kad saya kena block.",
"redactions": [{ "type": "person_name", "start": 4.5, "end": 5.3 }] },
{ "speaker": "agent", "lang": "ms",
"start": 8.8, "end": 11.5,
"text": "Baik, saya semak sekarang. Sila tunggu sebentar." }
]
}
모델 개발사와 경쟁합니까?
아닙니다. 저희는 팀의 강화학습 및 사후 학습(post-training) 연구를 바탕으로 데이터와 검증기를 만들며, 판매할 모델은 만들지 않습니다. 모델과 학습 플랫폼은 고객의 것으로 남습니다.
현재 준비된 것은 무엇입니까?
공개 워크플로 시연과 기록된 검사 항목은 지금 바로 살펴볼 수 있습니다. 파트너 데이터셋과 맞춤형 태스크는 원본, 권리, 범위 확인이 필요합니다. 음성 데이터는 범위를 정하는 중입니다. 시연이 있다고 해서 그에 대응하는 고객 데이터셋이 라이선스 가능한 상태라는 뜻은 아닙니다.
파일럿은 어떻게 인수됩니까?
작업 시작 전에 워크플로, 납품물, 허용 용도, 검토 기준을 합의합니다. 태스크의 경우 참조 출력, 검증기 결과, 알려진 한계를 평가합니다. 난이도가 중요하다면 모델, 도구 접근 권한, 시도 횟수, 목표 통과율 범위를 합의한 뒤, 배치를 확대하기 전에 이를 측정합니다.
워크플로를 알려 주십시오.
업무 내용, 관련 시스템, 올바른 결과에 반드시 포함되어야 할 내용을 알려 주십시오. 기록, 태스크, 인수 근거의 범위를 정해 드리겠습니다.