MP4 to MIDI로 영상 속 연주를 음표로 옮기기

처음에는 혼자 부른 멜로디, 짧은 기타 솔로, 몇 개의 피아노 코드처럼 원하는 음악이 분명한 영상을 권합니다. 파일을 선택하기 전에 화면을 보지 않고 소리만 들어 보세요. 필요한 선율을 귀로 따라갈 수 있다면 변환 결과를 확인할 기준이 생깁니다. 높은 화질이 흐릿한 소리나 찢어지는 녹음을 보완하지는 않습니다. 악기가 대화 소리에 가려져 있거나 여러 소리가 비슷한 크기로 겹치면 결과를 해석하기 어려울 수 있습니다. 손가락이 잘 보이는 장면보다 음이 또렷하게 들리는 녹음이 이 작업에는 더 중요합니다.

이 페이지는 기기에 저장된 MP4 파일을 받으며 크기는 최대 50 MB, 길이는 2분까지입니다. 긴 합주나 공연 영상은 다른 앱에서 필요한 구간을 먼저 잘라 주세요. 여기에는 동영상 자르기 기능이 없습니다. 첫 음이 시작되는 순간과 마지막 음이 자연스럽게 끝나는 부분을 남기면 비교하기 편합니다. 소리가 이어지는 중간을 임의로 끊으면 길이를 판단하기 어려워질 수 있습니다. 익숙한 한 구절로 시작하면 무엇이 빠졌는지, 어떤 음이 추가됐는지 확인하기도 쉬워집니다.

MP4에는 영상과 녹음된 소리가 들어갑니다. MIDI는 음높이, 시작 시점, 길이, 세기 같은 연주 정보를 기록합니다. 이 도구는 영상의 오디오 트랙을 분석해 그러한 음표 이벤트를 추정합니다. 연주자의 손 움직임을 읽거나 화면에 나온 악보를 인식하지는 않습니다. 따라서 소리가 없는 영상은 건반이 선명하게 보여도 변환에 필요한 입력이 되지 않습니다. 동작이 정확히 보이는지보다 실제로 읽을 수 있는 오디오가 있는지 먼저 확인해 주세요.

결과에는 원래 목소리의 음색이나 악기의 울림이 녹음 그대로 들어 있지 않습니다. 같은 음표를 다른 가상 악기로 재생하면 새로운 소리로 들을 수 있습니다. 휴대전화에 흥얼거려 둔 아이디어를 키보드 파트로 시험해 보는 것이 한 가지 활용 방법입니다. 공간의 잔향과 주변 소음도 원본 오디오로 보존되지 않습니다. 단순히 영상의 소리를 그대로 저장하려는 목적이라면 오디오 추출이 필요합니다. MIDI 변환은 선율을 고치고 다른 악기로 연주하며 편곡을 이어 가기 위한 출발점에 가깝습니다.

페이지 위쪽 업로드 영역에서 영상을 고르세요. 길이 확인이 끝나면 출력 모드를 선택할 수 있습니다. 여러 음이 동시에 울리는 코드를 살리고 싶다면 다성 모드로 시작하고, 노래나 독주의 중심 선율을 단순하게 보고 싶다면 멜로디 모드를 시험해 보세요. 정리 프리셋은 초기 설정이므로 변환 전에 모든 값을 정확하게 정할 필요는 없습니다. 분석을 시작한 뒤에는 완료될 때까지 탭을 열어 두고 상태를 확인해 주세요.

결과 미리보기의 피아노 롤에서는 음표 위치와 길이를 볼 수 있습니다. MIDI와 영상 오디오를 번갈아 재생하며 시작 부분, 길게 유지되는 음, 끝나는 구절을 먼저 비교하세요. 이런 지점에서 옥타브 오류나 빠진 음을 비교적 쉽게 찾을 수 있습니다. 미리듣기 악기를 바꾸면 음을 구별하는 데 도움이 될 수 있지만 검출된 음표 자체가 수정되는 것은 아닙니다. 음색이 마음에 드는지와 선율이 맞게 옮겨졌는지는 따로 판단하는 것이 좋습니다. 전체를 반복해서 듣기 전에 짧은 기준 구간을 정하면 확인할 부분이 더 분명해집니다.

배음, 잔향, 반주 때문에 예상하지 않은 음표가 생길 수 있습니다. 먼저 다성 모드와 멜로디 모드를 비교해 필요한 파트를 더 잘 표현하는 쪽을 고르세요. 코드에서는 겹치는 음이 필요하지만 독창 선율에서는 방해가 될 수 있습니다. 검출된 개수와 남은 개수는 필터 효과를 보여 주는 정보이며 정확도 점수는 아닙니다. 음표가 줄어들었다고 반드시 음악이 더 정확해지는 것은 아니므로 결과를 귀로 확인해야 합니다.

최소 길이, 최소 세기, 음역은 한 번에 하나씩 바꾸는 편이 좋습니다. 값을 조정할 때마다 같은 부분을 다시 들어 어떤 음이 사라졌는지 확인하세요. 길이 기준을 높이면 짧은 잡음성 이벤트를 줄일 수 있지만 의도한 꾸밈음도 없어질 수 있습니다. 세기 기준이 높으면 작은 소리나 약한 박을 놓칠 수 있습니다. 음역이 분명한 베이스 라인은 범위를 좁혀 비교해 볼 수 있습니다. 중요한 표현이 빠졌다면 해당 조건을 느슨하게 바꾸고 원본과 다시 들어 보세요.

연습 중에 나온 기타 프레이즈나 잠깐 흥얼거린 멜로디를 편집 가능한 초안으로 가져올 수 있습니다. 가장 특징적인 음부터 고친 뒤 리듬과 길이를 점검하면 문제를 찾기 쉽습니다. 작업 프로그램에서는 어택이 분명한 악기로 먼저 확인하고, 선율이 정리된 다음 화성이나 악기 배치를 고민해 보세요. 자동 검출이 모든 음악적 결정을 대신해 주지는 않습니다. 익숙한 원본을 옆에 두고 필요한 부분을 직접 수정하는 과정이 유용합니다.

이미 믹싱된 노래는 다른 기대가 필요합니다. 보컬, 코드, 여러 악기가 비슷한 음역을 차지하면 서로 다른 파트의 음표가 결과에 섞일 수 있습니다. 이 도구는 모든 악기를 독립된 MIDI 트랙으로 나누거나 완전한 총보를 복원한다고 보장하지 않습니다. 특정 파트만 필요하다면 분리한 오디오를 준비한 뒤 오디오를 MIDI로 바꾸는 도구를 사용해 보세요. 입력을 한 파트에 집중하면 비교하기 쉬워지지만 그 결과도 원래 음악과 대조해야 합니다.

MP4는 컨테이너이므로 같은 확장자라도 내부 코덱이 다를 수 있습니다. 읽기에 실패하면 녹화나 편집 앱에서 AAC 오디오가 포함된 MP4로 다시 내보내 보세요. 파일 이름의 확장자만 바꾸는 것으로 형식이 변하지는 않습니다. 실제 오디오 트랙이 들어 있는지도 확인해야 합니다. 일반 플레이어에서 영상이 보인다고 현재 브라우저가 소리까지 분석할 수 있다는 뜻은 아닙니다. 계속 문제가 생기면 소리만 따로 내보내 오디오 변환으로 진행하는 방법도 있습니다.

분석은 현재 기기의 브라우저에서 수행됩니다. 처리 시간은 하드웨어, 브라우저, 구간 길이에 따라 달라집니다. 작업 중에는 탭을 열어 두세요. 휴대전화에서 처리가 느리다면 더 짧은 구간으로 시도하거나 컴퓨터에서 진행하세요. 처음에는 작은 파일로 오디오를 읽을 수 있는지 확인하는 것이 좋습니다. 파일을 읽을 수 있는지 먼저 확인한 다음 필요한 연주 구간을 준비하면 됩니다. 처리가 진행되는 동안에는 페이지를 닫거나 새로고침하지 말고 현재 화면에서 진행 상태를 확인하세요.

작업 화면의 다운로드는 현재 정리 조건으로 남긴 음표를 MIDI로 저장합니다. 저장 전에 시작 부분을 한 번 더 들어 어떤 버전을 가져가는지 확인하세요. .mid 파일을 MIDI 편집기나 음악 작업 프로그램에 열고 악기를 지정한 뒤 길이, 세기, 시간 위치를 살펴보세요. 프로젝트의 템포와 마디에 맞추는 과정은 수동 판단이 필요할 수 있습니다. 선율이 알아들을 만하더라도 다른 트랙과 바로 자연스럽게 어울리는 것은 아닐 수 있습니다.

로컬 기록에서는 같은 브라우저에 저장된 MIDI와 변환 정보를 다시 열 수 있습니다. 원본 영상과 오디오 미리보기는 보관하지 않습니다. 로그인한 계정의 기록도 MIDI와 메타데이터를 저장합니다. 브라우저 데이터는 삭제될 수 있으니 중요한 아이디어는 프로젝트 폴더에도 내려받아 두세요. 원본 MP4는 따로 보관하면 나중에 연주의 세부 표현을 비교하거나 편집한 음악을 영상에 다시 맞추는 데 도움이 됩니다. 기록만을 장기 보관용 파일 대신으로 생각하지 않는 것이 좋습니다.