자동 번역은 리플레이에만 있고 라이브에는 없다 — 유튜브 라이브를 내 언어 자막으로 실시간 시청하는 법

이런 장면을 떠올려 보세요. 몇 달을 기다린 해외 게임 쇼케이스가 막 시작됐는데, 진행자는 빠른 영어로 쉴 새 없이 말하고 — 뮤직비디오를 볼 때마다 잘 되던 자막 번역 버튼이 오늘 밤엔 아무것도 내주지 않습니다. 일본어 VTuber 방송, 스페인어 기자회견, 미국 기업의 어닝콜도 마찬가지입니다. 영상이 라이브가 되는 순간, 여러분이 믿고 쓰던 번역 기능들이 조용히 사라집니다.

결론부터 말씀드리면: 2026년 현재, 유튜브는 라이브 스트림을 실시간으로 번역해 주지 않습니다. 라이브 방송의 자동 자막은 영어 전용이고, 일반 영상에서 쓰던 자동 번역 메뉴는 라이브에는 대개 존재하지 않는 자막 트랙을 필요로 하며, 자동 더빙은 업로드 영상에만 적용됩니다. 다행인 것은 리플레이를 기다릴 필요가 없다는 점입니다. 브라우저 안의 도구 — Newey가 바로 이걸 위해 만들어진 도구입니다 — 가 스트림의 오디오를 듣고, 재생되는 그대로 번역 자막을 영상 위에 띄워 줄 수 있으니까요. 이 글에서는 라이브가 왜 다른지, 유튜브가 실제로 무엇을 주는지, 그리고 약 1분 만에 아무 라이브 스트림에나 실시간 번역 자막을 세팅하는 방법을 안내합니다.

자동 번역은 왜 일반 영상에선 되는데 라이브에선 안 될까?

유튜브가 완전히 다른 두 개의 자막 시스템을 돌린다는 사실부터 알아두면 이해가 쉽습니다.

일반 업로드 영상에서는 음성 인식이 일할 시간이 충분합니다. 유튜브는 아랍어와 벵골어부터 베트남어, 줄루어까지 긴 목록의 언어로 자동 자막을 생성합니다. 그리고 자막 트랙이 하나라도 생기면 그 유명한 톱니바퀴 메뉴가 열립니다: 내 언어가 목록에 없으면 "자동 번역"을 눌러 전체 번역 메뉴에서 고르면 되니까요. 자막 트랙 하나만 들어가면, 거의 모든 언어가 나옵니다.

라이브 스트림은 완전히 다른 기계이고, 훨씬 제한적입니다. 유튜브 공식 문서에 따르면, 오늘의 라이브 자동 자막은:

• 영어 전용입니다. 유튜브는 언어를 늘릴 계획이라고 밝혔지만, 아직입니다.
• 일반 지연(normal latency) 스트림에서만 작동합니다. 낮은 지연·초저지연으로 설정된 스트림(캐주얼한 방송과 모바일 방송 대부분)에는 아예 없습니다.
• 아직 순차 배포 중입니다. 구독자 1,000명 이상 채널부터 점진적으로 켜지고 있어서, 영어 방송이라도 그냥 없을 수 있습니다.

이제 두 시스템을 붙여 놓으면 함정이 보입니다. 자동 번역은 번역할 자막 트랙이 필요합니다. 라이브 스트림에서는 그 트랙이 아예 없거나, 조건을 갖춘 채널의 영어 트랙 하나뿐입니다. 한국어·일본어·스페인어 라이브 스트림은 방송 중에는 대개 자막이 하나도 없고 — 그러면 자동 번역이 일할 재료 자체가 없으니, 여러분이 찾는 그 메뉴는 끝내 나타나지 않습니다.

알아둘 만한 특이점이 하나 더 있습니다. 라이브 중에 나오던 자막조차 임시입니다. 방송이 끝나면 라이브 자막은 폐기되고, 일반 영상 프로세스로 새 자막이 다시 생성됩니다 — 리플레이의 자막이 라이브 순간보다 더 낫고 더 번역 가능한 이유가 이것입니다.

그래서 실제로 뭘 받게 될까 — 라이브 vs 리플레이?

전체 그림을 한눈에 보면 이렇습니다:

이 표가 크게 말하는 것은 하나입니다: 유튜브에서 다국어는 전부 방송이 끝난 뒤의 일입니다. 방송 중에 필요하다면 번역이 여러분 쪽 화면에서 돌아가야 하고 — 그 공백을 메우는 것이 Newey 같은 시청자 쪽 도구입니다. 세팅은 잠시 뒤에 함께 하겠습니다.

자동 더빙은 이 중 가장 새로운 기능이라 짚어둘 만합니다. 조건을 갖춘 업로드 영상에 유튜브가 번역된 음성 트랙을 자동 생성하는 기능인데 — 원어 감지는 약 스물네 개 언어, 영어 영상은 스무 개 넘는 언어로 더빙되어 나옵니다. 다만 경계가 뚜렷합니다. 120분을 넘는 영상, 말이 아주 빠른 영상, 원어가 불분명한 영상은 대상이 아니고 — 무엇보다 스트림이 라이브인 동안에는 아무것도 적용되지 않습니다.

무료 선택지는 어디까지 데려다줄까?

전용 도구를 꺼내기 전에, 알아둘 것이 세 가지 있습니다.

크롬의 실시간 자막(Live Caption). 크롬은 브라우저에서 재생되는 모든 오디오에 자막을 달 수 있고, 전부 기기 안에서 처리됩니다 — 오디오가 컴퓨터를 떠나지 않습니다. 대부분의 컴퓨터에서 이것은 같은 언어 자막입니다(언어를 읽을 수는 있는데 빠른 말을 못 따라갈 때 유용하죠). Chromebook Plus 기기에서는 실시간 번역(Live Translate)이라는 동반 기능이 그 자막을 100개 이상의 언어로 번역해 줍니다. 해당 하드웨어가 있다면 이것부터 시도해 보세요.

리플레이 기다리기. 라이브의 순간이 필요 없다면 — 채팅도, 스포일러 걱정도 없다면 — VOD 경로는 잘 작동합니다. 리플레이의 자동 자막 처리가 끝나면 자동 번역 메뉴가 돌아오니까요. 다만 시간에 민감한 것에는 이게 바로 문제입니다. 리플레이에 자막이 붙을 때쯤이면, SNS가 이미 결말을 다 알려준 뒤입니다.

제작자가 해 주길 바라기. 스트리머는 라이브 스트림에 전문 자막을 흘려 넣을 수 있습니다 — 유튜브는 자막 소프트웨어와 내장 자막 트랙을 통해 이를 받아 줍니다. 하지만 이것은 제작자의 선택이고, 세팅이 필요하며, 거의 언제나 한 가지 언어뿐입니다.

각 선택지는 한 조각씩만 덮습니다. 그 어느 것도 가장 흔한 경우 — 지금, 라이브로, 내가 모르는 언어의 스트림 — 는 덮지 못합니다.

실시간 번역 자막, 직접 세팅하려면?

이 공백을 닫는 기술이 탭 오디오 캡처입니다. 유튜브가 자막 트랙을 주기를 기다리는 대신, 브라우저에서 돌아가는 자막 도구가 스트림이 재생되는 탭의 오디오를 듣고, 받아 적고, 그 텍스트를 내 언어로 기계번역합니다 — 라이브로, 화자보다 한 박자 뒤에서요. (이런 자막이 눈앞에서 스스로 고쳐 쓰는 게 왜 정상인지 궁금하다면 실시간 음성 번역의 작동 원리에서 설명했습니다.)

자막이 여러분 쪽 화면에서 생성되기 때문에, 채널이 무엇이든, 무슨 언어로 방송하든, 유튜브 자막이 있든 없든 상관없습니다. 세팅은 이렇습니다 — Newey를 기준으로 구체적으로 적지만, 탭 오디오 캡처를 지원하는 자막 도구라면 같은 모양입니다:

1. 라이브 스트림을 엽니다 — 데스크톱 브라우저 탭에서요. Chrome이나 Edge를 쓰세요. 탭 오디오 캡처는 Chromium 계열 브라우저의 기능입니다.
2. Newey를 두 번째 탭에 열고 탭 오디오를 입력으로 세션을 시작합니다.
3. 스트림이 있는 탭을 선택합니다 — 화면 공유 대화상자가 뜨면요.
4. "오디오 공유(Share audio)"에 체크합니다. 모두가 놓치는 단계입니다 — 건너뛰면 자막에는 침묵만 들립니다.
5. 언어를 설정합니다: 방송에서 말하는 언어 하나, 그리고 내가 읽을 언어 하나 — Newey의 60개 자막 언어 중 아무거나요.
6. PiP(화면 속 화면) 자막 오버레이를 영상 위로 끌어다 놓습니다. 자막이 이미 보고 있는 자리에 앉도록요.

큰 방송 전에 알아둘 팁 두 가지. 첫째, 짧은 지연은 감안하세요 — 실시간 번역은 언제나 화자를 조금 따라가고, 2026년 기준 약 1초 뒤가 현실적인 최선입니다. 둘째, 방송이 이름과 좁은 분야 어휘(멤버 이름, 게임 제목, 팬 용어)로 가득하다면 시작 전에 용어를 단어장에 박아 두세요 — Newey는 바로 이걸 위한 전문가 팩 단어장을 제공하는데, 애니·게임·인터넷 슬랭 팩이 포함되어 있어 자막이 눈에 띄게 매끄러워집니다.

이 세팅으로 어떤 스트림이 열릴까?

세팅이 손에 익으면 — 금방 익습니다 — 라이브 인터넷의 꽤 많은 부분이 열립니다:

• 해외 아티스트의 컴백 라이브·팬 방송 — 라이브 채팅의 그 순간이 전부인데, 자막 달린 클립은 며칠 뒤에야 오는 곳.
• 일본 게임 쇼케이스와 VTuber 방송 — 라이브 자동 자막이 일본어를 아예 지원하지 않아, 방송 중 자막이 0인 대표적인 영역.
• 어떤 언어로든 열리는 기자회견과 속보 — 번역된 요약을 기다리는 것은 몇 시간을 기다리는 일이죠.
• 키노트와 어닝콜 — 이 세계는 어닝콜과 키노트를 내 언어 자막으로 라이브 시청하는 법에서 자세히 다뤘습니다.
• 예배·강의·시의회 중계 — 자막을 만들어 줄 일이 영영 없을 기관들의 스트림.

구체적으로 그려 보면 이렇습니다. 도쿄발 게임 쇼케이스가 8시에 시작합니다. 스트림을 한 탭에, Newey를 옆 탭에 열고, 스트림 탭을 오디오 포함으로 공유하고, 말하는 언어는 일본어·자막 언어는 한국어로 설정한 다음, 오버레이를 진행자 아래로 끌어다 놓습니다. 첫 인사부터 현장보다 약 1초 뒤로 따라 읽게 됩니다 — 번역 클립이 올라오려면 아직 몇 시간이 남은 시각에요.

그리고 양방향으로 작동합니다. 영어 전용 라이브는 한국어로 읽을 수 있게 되고, 일본어 스트림도 한국어로 열립니다. 라이브가 아니라 쌓아둔 콘텐츠 — 애니, 영화, 시리즈 — 가 목표라면 그건 그것대로의 공략집이 있고, 자막 없는 해외 애니·영화·드라마 보는 법에 정리해 뒀습니다.

스트림이 스스로 번역해 주지 않을 때: Newey

여기까지 읽으셨다면 이 가이드가 어떤 도구를 중심으로 쓰였는지 이미 만나신 셈입니다. Newey AI는 브라우저 기반 실시간 번역 자막 도구입니다. 아무 탭의 오디오나 캡처해서 — 유튜브 라이브든, 트위치든, 브라우저에서 소리가 나는 어떤 플레이어든 — 번역 자막을 PiP 오버레이로 영상 위에 띄웁니다. 60개 언어 중 아무 언어로나, 화자보다 약 1초 뒤에요. 끝난 세션은 기록으로 저장해 다시 읽을 수 있습니다. 베타 기간 동안 무료입니다: 스트림 옆 탭에 newey.ai를 열어 두면, 오프닝이 끝나기 전에 준비가 끝납니다.

FAQ

유튜브가 라이브 스트림을 실시간으로 번역해 줄 수 있나요?

아니요. 2026년 현재 유튜브 라이브 스트림의 자동 자막은 영어 전용이고, 일반 지연 스트림에 한정되며, 구독자 1,000명 이상 채널부터 순차 적용 중입니다. 라이브 스트림의 실시간 번역 자막은 시청자 쪽 도구에서 나와야 합니다 — Newey는 브라우저에서 스트림 탭의 오디오를 캡처해, 재생되는 그대로 60개 언어 중 원하는 언어로 번역하는 방식입니다.

라이브 스트림에는 왜 자동 번역 옵션이 안 보이나요?

자동 번역은 이미 있는 자막 트랙을 번역합니다 — 영상에 자막이 있고 그중 내 언어가 없을 때 나타나는 메뉴입니다. 대부분의 라이브 스트림에는 방송 중 자막 트랙이 없고(비영어 방송은 거의 예외 없이요), 그래서 메뉴가 내놓을 것이 없어 숨어 있는 것입니다.

유튜브 라이브 자막은 영어 말고 다른 언어로도 되나요?

자동으로는 안 됩니다. 라이브 자동 자막은 현재 영어 전용입니다. 제작자가 전문 자막 도구로 다른 언어의 라이브 자막을 공급할 수는 있지만, 대형 방송사 밖에서는 드문 일입니다.

라이브 스트림이 끝나면 자막은 어떻게 되나요?

교체됩니다. 라이브 자동 자막은 영상에 남지 않고, 일반 업로드 프로세스로 새 자막이 생성됩니다 — 이쪽이 훨씬 많은 언어를 지원하죠. 라이브에는 없던 자막과 자동 번역 메뉴가 리플레이에는 있는 이유입니다.

크롬의 실시간 자막으로 유튜브 라이브를 번역할 수 있나요?

자막은 달아 줍니다. 그것도 기기 안에서, 프라이버시를 지키면서요 — 오디오가 기기를 떠나지 않습니다. 문제는 번역입니다. 그 자막을 100개 이상 언어로 바꿔 주는 실시간 번역(Live Translate) 옵션은 Chromebook Plus 기기에서 제공되고, 다른 데스크톱에서 실시간 자막은 기본적으로 같은 언어 자막입니다. 그 하드웨어가 아니라면, Newey 같은 브라우저 도구가 아무 데스크톱 Chrome·Edge에서나 번역 단계를 맡아 줍니다.

프리미어(Premieres)도 자막에서는 라이브처럼 동작하나요?

프리미어는 미리 업로드한 영상을 예약 시각에 함께 보는 기능이라 업로드 규칙을 따릅니다. 제작자가 자막을 붙여 뒀거나 자동 자막 처리가 끝났다면, 프리미어 중에도 평소의 자막·자동 번역 메뉴가 작동합니다. 둘 다 아직이라면 라이브 스트림과 같은 처지가 되고 — 내 쪽 화면의 자막이 우회로입니다.