영상 · 음성으로 묻기
채팅은 문서와 도면만 찾지 않습니다. 관리자가 영상 · 음성을 켜 두면 정비 · 교육 영상의 그 장면을 답의 근거로 가져오고, 입력칸의 말로 묻기(마이크)로 말로 물을 수도 있습니다. 이 쪽은 「묻기」 에서 영상에 대해 무엇을 물을 수 있고, 답 아래 영상 · 음성 근거 카드가 어떻게 움직이는지를 다룹니다.
묻기 입력칸의 파일 넣기로 영상 · 음성 파일을 넣습니다(1GB · 60분까지). 이렇게 넣은 영상은 그 대화에서만 쓰이고, 그 대화의 주인만 재생합니다 — 문서 검색과 이 쪽의 장면 카드 검색에는 나오지 않고, 처리 시간대를 기다리지 않습니다 → AI 채팅 — 영상 · 음성 파일 넣기
영상은 어디서 들어오나
| 경로 | 무엇 |
|---|---|
| 관리 콘솔 › RAG › 색인 › 동영상 의 영상 올리기 | 관리자가 직접 올립니다. 영상 mp4 · mov · mkv · webm, 음성 m4a · mp3 · wav, 곁 자막 srt · vtt |
| 자동 동기화 | 플랫폼에서 설비에 붙인 영상 · 음성 파일도 문서처럼 주기적으로 들어옵니다 |
올린 영상은 말소리를 받아 적고(녹취), 내장 자막 트랙 · 곁 자막이 있으면 그것도 읽어 시각이 붙은 글로 색인합니다. 화면에 입힌 자막 · 화면 글자까지 읽게 하는 것은 관리자 설정입니다 → 환경 설정
받아 적기는 채팅과 같은 서버 자원을 나눠 쓰므로, 정해진 시간대에만 시작합니다. 관리자가 시간대를 비워 두면
밤 20:00 ~ 06:00(공장 시간대 PP_TZ) 입니다 — 낮에 올린 영상은 그날 밤에 처리됩니다. 관리자가 always 로 열어 두면
언제든 시작합니다. 시간대는 처리의 «시작» 에만 걸리고, 시작한 처리는 창이 닫혀도 끝까지 갑니다.
처리 상태(대기 중 · 녹취 중 · 색인됨 · 소리 없음 · 실패 …)와 지금의 처리 시간대는 관리 콘솔의 동영상 화면 위쪽에 보입니다 → 관리자 콘솔
무엇을 묻나
절차를 묻는 질문이 잘 맞습니다. 답의 근거가 영상의 그 시각으로 바로 데려갑니다.
- 「베어링 교체할 때 압입 전에 뭘 확인해?」
- 「유압 토크렌치 반력 암은 어떻게 고정해?」
- 「(작업) 작업 절차 문서나 영상을 찾아줘」
장면 카드
답 아래 근거 카드 가운데 영상 · 음성 카드는 이렇게 생겼습니다.
| 보이는 것 | 뜻 |
|---|---|
| 번호 | 본문의 [번호] 와 같은 번호 |
| 작은 그림 또는 아이콘 | 맞은 장면의 그림 — 문서 검색이 장면을 보관해 둔 영상에만 보입니다. 없으면 영상 · 음성 아이콘입니다 |
| 제목 | 영상 · 음성 파일 이름 |
| 보조 줄 3:12 · … | 맞은 장면의 시각(분:초)과 그 구간의 글 한 줄. 재생도 이 시각에서 시작합니다 |
| 표지 자막 · 화면 · 음성 | 그 구간의 글이 어디서 왔는지 — 자막, 화면에 찍힌 글자, 말소리. 음성 파일에는 «음성» 표지를 붙이지 않습니다 |
카드를 누르면 대화를 둔 채 오른쪽 패널에 재생기가 열립니다. 문서 원문 · 도면이 열리는 것과 같은 패널입니다 — 닫기 · 폭 바꾸기 · 좁은 화면에서의 모양은 코파일럿 화면 지도 — 오른쪽 패널에 있습니다.
- 카드에 적힌 맞은 장면의 시각부터 스스로 틀고, 구간 끝에서 멈춥니다 — 「구간 끝에서 멈췄습니다」. 맞은 장면은 검색이 질문과 맞는다고 본 문장이 나오는 자리입니다. 그 자리를 모르거나 구간 밖이면 구간의 시작부터 틉니다.
- 재생기 아래에 「구간 3:10 ~ 3:47」 처럼 구간 전체와 구간 다시 재생이 있습니다. 누르면 구간 처음부터 다시 틉니다 — 맞은 장면 앞의 맥락을 볼 때 씁니다.
- 구간 끝에서 멈춘 뒤 재생을 직접 누르면 그 뒤도 이어서 볼 수 있습니다. 구간 안으로 되감으면 다시 구간 끝에서 멈춥니다.
- 그 아래에 그 구간의 글이 보이고, 영상이면 절차 초안 만들기가 있습니다 → 아래 영상에서 작업 절차 만들기
- 다른 카드를 누르면 패널이 그 영상으로 바뀝니다. 패널 닫기나 Esc 로 닫습니다.
- 음성 파일(
m4a·mp3·wav)은 화면 없이 재생 막대만 뜹니다. - 제안의 근거에 붙은 영상도 같은 재생기로 열립니다 — 상세 위에 열리고 뒤로로 돌아갑니다.
- 재생은 로그인한 사람이면 누구나 됩니다(문서와 같은 규칙). 영상 원본은 고객 서버 안에만 있습니다.
어떤 영상이 카드로 붙나
어떤 영상 구간을 카드로 낼지는 문서 검색이 정합니다 — 검색이 쓴 답이 무엇에 기댔는지를 봅니다.
- 검색 답이 인용한 영상 구간만 카드가 됩니다. 검색에 걸렸어도 검색 답이 기대지 않은 영상은 붙지 않습니다.
- 검색 답이 첫머리에서 «자료에 그 정보가 없다» 고 말하면 영상 카드를 붙이지 않습니다 — 그 뒤에 비슷한 영상을 인용해도 마찬가지입니다.
- 검색 답이 아무것도 인용하지 않았으면 맞은 문장이 있는 구간을 앞에 두고 3개까지 붙습니다.
- 이렇게 고른 영상 · 음성 카드는 채팅 답의 본문이 번호를 달지 않았어도 남습니다 — 검색이 이미 «자기 답이 기댄 구간» 으로 골랐기 때문입니다.
인용하지 않은 카드는 흐리게 보일 뿐입니다. 다만 이럴 때는 빠집니다.
- 답이 영상 · 음성 파일 이름을 댔으면 그 이름의 카드만 남습니다.
- 답이 문서 검색이 아닌 결과(센서 · 차트 · 디지털 스레드)를 인용했거나 차트로 그렸으면, 인용하지 않은 영상 카드는 빠집니다 — 답의 근거가 그쪽입니다.
- 영상 카드가 남은 답에서는 같은 검색의 문서 · 도면 카드가 본문이 인용한 것만 남습니다. 인용하지 않은 문서 카드가 «인용 없음» 근거로 되살아나지 않습니다 → 묻기 — 근거 카드와 인용
- 새 대화의 첫 질문은 문서 검색을 사용자가 쓴 문장 그대로 한 번 합니다. 그 검색이 영상 구간을 하나도 내지 않았으면, AI 가 말을 바꿔 다시 찾은 검색에서 나온 영상은 카드로 싣지 않습니다. 이어지는 질문은 AI 가 앞 대화를 반영해 고친 질의를 씁니다.
얼마나 맞히나
사내 평가 세트(v2, 83문항 × 3회, 검색 직접 경로)에서 잰 값입니다. 고객 자료 · 질문에서의 성능을 보장하는 숫자가 아닙니다.
| 잰 것 | 결과 |
|---|---|
| 맞는 영상이 1순위 | 90% |
| 맞는 영상이 5순위 안 | 97% |
| 장면 시각 오차(중앙값) | 7.6초 |
| 자료에 없는 질문에 «모른다» 고 답함 | 95% |
영상에서 작업 절차 만들기
정비 영상이 근거로 붙은 답에서 영상 카드를 눌러 연 오른쪽 패널의 절차 초안 만들기를 누르면, 패널이 작업 절차로 바뀌고 그 영상의 말 · 자막 · 화면 글자에서 단계와 체크리스트를 뽑아 초안으로 보여 줍니다.
- 만드는 동안 「녹취에서 단계를 뽑는 중입니다」 가 뜹니다 — 「영상 길이에 따라 1분쯤 걸릴 수 있습니다. 패널을 닫아도 됩니다.」
- 이미 만든 절차가 있으면 새로 만들지 않고 그것을 엽니다(「이 영상의 절차가 이미 있어 그것을 열었습니다.」). 그 옆에 다시 만들기가 있습니다.
| 패널에 보이는 것 | 뜻 |
|---|---|
| 상태 배지 | 초안 · 게시됨 v«판» · 고친 초안 · 게시본 v«판»(게시한 뒤 다시 고친 것) |
| 단계 N | 뽑은 단계들. 단계마다 아래 표의 것이 붙습니다 |
| 체크리스트 N | 작업 전후에 확인할 항목 |
| 버린 항목 N | 「근거 줄이 없거나 근거에 없는 수치가 있어 초안에서 뺐습니다.」 — AI 가 냈지만 근거를 못 댄 단계 · 체크 |
| 이 설비의 절차 | 같은 설비의 다른 절차 목록 |
| 단계마다 보이는 것 | 뜻 |
|---|---|
| 주의 · 공구·부품 | 영상에서 언급된 것 |
| 근거 | 음성 · 자막 · 자막 글자 · 화면 글자 가운데 어디서 왔는지, 그리고 그 구간 재생 |
| 확신 높음 · 보통 · 낮음 | AI 가 그 단계를 얼마나 확신하는지 — 낮음은 꼭 영상으로 확인합니다 |
| 검토자 수정 | 사람이 고친 단계. 근거가 붙어 있으면 「근거 구간 참고」, 근거를 뗐으면 「영상 근거 없음」 이 함께 보입니다 |
- 고치기로 제목 · 행동 · 주의 · 공구·부품을 고치고, 단계 · 체크 항목을 더하고(단계 더하기 · 체크 항목 더하기), 순서를 바꾸고(위로 · 아래로), 뺍니다(빼기). 근거가 붙은 글을 고치면 그 단계는 검토자 수정이 됩니다. 근거 떼기를 하면 «검토자가 적음 — 영상 근거 없음» 단계가 됩니다. 저장해야 남고, 그만 고치기는 「고친 내용을 버릴까요?」 를 묻습니다.
- 다시 만들기는 영상에서 단계를 처음부터 다시 뽑습니다 — 「지금 제목·본문은 한 벌만 남고, 게시본은 다음 게시까지 그대로 검색됩니다.」
- 🔴 근거에 없는 숫자(토크 · 온도 · 시간 등)가 있으면 「표시된 문제를 고쳐야 게시할 수 있습니다 — 숫자를 근거대로 고치거나 근거를 떼세요.」 띠가 뜨고 게시가 막힙니다. 단계가 하나도 없어도 게시할 수 없습니다(「단계가 없거나 표시된 문제가 남아 있어 아직 게시할 수 없습니다」).
- 게시를 누르면 「절차를 게시할까요?」 가 설비 · 문서 이름 · 등급(「원본 영상과 같은 등급」) · 단계와 체크 수를 보여 주고, 확인하면 그 절차가 설비 문서가 되어 이후 채팅이 근거로 인용합니다.
- 게시는 절차 게시 권한(
publish:procedure)이 있는 사람만 합니다 — 기본으로 반장 · 정비 · 공장장 · 관리자입니다. 초안 만들기는 묻기를 쓰는 누구나 할 수 있고, 남의 초안은 만든 사람과 게시 권한자만 고칩니다.
| 뜨는 말 | 뜻 |
|---|---|
| 「초안을 만들지 못했습니다 — 녹취가 없거나 모델이 응답하지 않습니다」 | 아직 받아 적지 않은 영상이거나 AI 모델이 응답하지 않습니다 |
| 「이 영상의 등급이 내 열람 등급보다 높아 열 수 없습니다」 | 관리자에게 열람 등급을 확인합니다 |
| 「영상 등급을 확인할 수 없습니다 — 문서 서버가 응답하지 않습니다. 잠시 뒤 다시 시도하세요」 | 문서 검색 서버에 닿지 못했습니다 |
| 「이 일을 할 권한이 없습니다 — 만든 사람이나 게시 권한이 있는 사람만 할 수 있습니다」 | 남의 초안을 고치거나 권한 없이 게시하려 했습니다 |
| 「영상이나 절차를 찾을 수 없습니다 — 지워졌거나 내 범위 밖입니다」 | 영상이 지워졌거나 내 설비 범위 밖입니다 |
한계
| 이럴 때 | 이렇게 됩니다 |
|---|---|
| 방금 올린 영상 | 처리 시간대(기본 20:00 ~ 06:00)가 열려야 받아 적기를 시작합니다. 올린 당일 낮에는 아직 검색되지 않을 수 있습니다 |
| 2026.10 재릴리즈 4 전에 받아 적은 영상 | 말이 무음 · 소음 뒤에 시작하는 자리에서 첫 문장이 빠졌거나 장면 시각이 앞으로 끌려갔을 수 있습니다. 재릴리즈 4 는 이를 고쳤지만 이미 받아 적은 영상은 저절로 다시 하지 않습니다 — 관리자가 다시 녹취 하면 처리 시간대(기본 20:00 ~ 06:00)에 다시 받아 적습니다 |
| 질문과 영상의 말이 다른 언어(예: 영어로 묻고 한국어 영상) | 맞은 문장을 고르지 못합니다. 구간이 길면 원하는 장면보다 앞에서 열립니다 |
| 브라우저가 못 여는 코덱(예: H.265 mp4) | 검색은 되고 카드도 붙지만 패널에서 재생되지 않습니다 |
| 길이 상한(기본 120분)을 넘는 영상 | 앞부분만 넣지 않고 통째로 건너뜁니다 |
| 말도 자막도 없는 영상 | 찾을 글자가 없어 검색되지 않습니다(관리 콘솔에 «소리 없음» · «말 없음» 으로 보입니다) |
음성으로 묻기 — 마이크 단추
입력칸 오른쪽의 말로 묻기(마이크 — 보내기 단추와 같은 크기, 폰에서는 장갑 낀 손가락에 맞춘 터치 영역)로 말로 물을 수 있습니다. 영상 · 음성이 켜진 설치에서만 됩니다.
- 단추를 한 번 눌러 시작하고 다시 눌러(녹음 멈추기) 멈춥니다.
- 녹음하는 동안 입력칸 자리에 「듣는 중」 · 소리 크기 막대 · 경과 시간 · 「최대 60초」 가 보입니다. ✕(취소)를 누르면 녹음을 버립니다. 최대 60초이고, 60초가 되면 스스로 멈춥니다.
- 멈추면 「글로 옮기는 중」 을 거쳐 말을 글로 옮겨 입력칸에 넣습니다(이미 쓴 글이 있으면 그 뒤에 붙입니다). 확인하고 고친 뒤 보냅니다.
- 음성은 저장하지 않습니다. 글로 옮긴 질문만 대화에 남습니다.
- 마이크는 HTTPS 주소에서만 열립니다. 사내 IP 의
http://로 열면 브라우저가 마이크를 내주지 않아 「이 브라우저는 녹음을 지원하지 않습니다」 가 뜹니다. - 답이 흐르는 동안에는 마이크 단추가 잠깁니다.
| 뜨는 말 | 뜻 · 할 일 |
|---|---|
| 「지금 음성 입력을 쓸 수 없습니다(녹취 서비스가 꺼져 있거나 바쁩니다). 글로 입력하세요.」 | 영상 · 음성이 꺼진 설치이거나 녹취 서비스가 응답하지 않습니다. 글로 묻고, 계속되면 관리자에게 알립니다 |
| 「마이크를 쓸 수 없습니다. 브라우저에서 마이크를 허용하세요」 | 주소창의 사이트 설정 → 마이크 «허용» 뒤 다시 누릅니다 |
| 「이 브라우저는 녹음을 지원하지 않습니다」 | http:// 주소이거나 녹음을 못 하는 브라우저입니다. https:// 주소로 엽니다 |
| 「말소리를 알아듣지 못했습니다. 마이크에 가까이 대고 다시 말하세요」 | 마이크에 가까이 대고 다시 말합니다 |
| 「너무 짧습니다. 조금 더 길게 말하세요」 | 0.6초보다 짧은 녹음은 버립니다 |
| 「글로 옮기지 못했습니다. 다시 하세요」 | 받아 적기가 실패했습니다. 다시 누릅니다 |
| 「녹음이 너무 깁니다(최대 60초).」 | 질문을 나눠 말합니다 |
관련 문서
- 묻기 — AI 채팅 — 근거 카드 · 인용 · 오른쪽 패널
- 도면으로 묻기 — 도면 카드 · 판 비교
- RAG — 검색 엔진과 색인
- 안전 · 교육 유즈케이스 — 교육 영상으로 절차 찾기
- 환경 설정 — 영상 · 음성 켜기 · 처리 시간대