자료만 충분하다면 요즘은 AI를 통해 다양한 시도를 해볼 수 있습니다. 저도 취미 삼아 가능성 있어 보이는 건 이것저것 만들어보고 있습니다. 예전에는 직접 자료를 찾고, 하나씩 설정하고, 막히면 다른 방법을 찾아야 했습니다. 지금은 AI와 오픈소스 덕분에 아이디어를 실제로 시험해보기까지의 거리가 꽤 줄어든 느낌입니다.
최근에는 APEX4에서 APEX6 Pro로 컨트롤러를 바꾼 이야기를 올렸는데, 이번에는 그 진동 기능을 원격 스트리밍 환경에서도 활용하고 싶어졌습니다. 단순히 화면이 잘 나오고 조작이 되는 것에서 끝나는 게 아니라, 게임이 전달하는 햅틱과 트리거 반응도 클라이언트에서 느낄 수 없을까 하는 생각입니다.

오래전에 버츄얼히어까지 사용했던 기억
사실 이런 시도가 처음은 아닙니다. 예전에도 Apollo와 Artemis를 활용하면서 듀얼센스의 진동이나 관련 기능을 원격에서 쓰기 위해 여러 프로그램을 조합해봤습니다. 그때는 VirtualHere까지 사용하며 가능성 정도는 확인했던 기억이 있습니다.
다만 설정이 간단하지 않았습니다. 안드로이드 쪽에서 필요한 유료 프로그램도 있었고, 연결 환경에 따라 챙겨야 할 부분이 많았습니다. 한 번 시험에 성공하더라도 평소 게임할 때 자연스럽게 쓰기에는 부담이 있었던 셈입니다.
그래서 완성된 도구로 만들어 쓰기보다는 ‘아예 불가능한 건 아니구나’ 정도의 경험으로 남았습니다. 이번에는 그때의 기억을 바탕으로 지금 사용할 수 있는 프로그램과 개발 도구를 다시 접목해보려는 것입니다.
Apollo와 Artemis, Sunshine과 Moonlight의 관계
먼저 이름부터 조금 정리할 필요가 있습니다. Sunshine은 게임 화면을 전송하는 호스트 프로그램이고 Moonlight는 스트리밍 영상을 받아 입력을 돌려보내는 클라이언트입니다. Apollo는 Sunshine에서 파생된 호스트 프로젝트, Artemis는 Moonlight 계열에서 발전한 클라이언트 프로젝트입니다.
즉 아폴로·선샤인·문라이트·아르테미스가 모두 별도의 역할로 동시에 설치되어야 한다는 뜻은 아닙니다. 서로 관련 있는 호스트와 클라이언트 계열의 기능을 참고하고, 필요한 부분을 선택해 확장하려는 방향에 가깝습니다.
기존 원격 스트리밍은 영상 전송과 게임패드 입력을 꽤 편하게 처리합니다. 하지만 듀얼센스에서 사용하는 특수한 햅틱 데이터와 트리거 효과는 일반 진동과 다르게 다뤄야 할 수 있습니다. 원격 연결에서는 중간에 전달할 수 있는 데이터와 클라이언트가 지원하는 장치 기능이 모두 영향을 줍니다.
이번 목표는 APEX6 Pro의 원격 진동과 햅틱
제가 만들고 싶은 건 Moonlight와 Sunshine 계열의 포크를 바탕으로, APEX6 Pro에서 듀얼센스 계열의 HD 햅틱과 트리거 관련 신호를 가능한 범위에서 전달하도록 하는 것입니다. 호스트에서 발생한 컨트롤러 피드백을 원격 클라이언트까지 어떻게 옮기고 해석할지가 핵심입니다.
APEX6 Pro는 일반 게임패드 진동과 다른 촉각 피드백을 활용할 수 있는 모델입니다. 그런데 로컬 PC에서 프로그램을 실행할 때와, 외부망에 연결된 클라이언트에서 컨트롤러를 쓸 때는 조건이 다릅니다. 게임이 출력한 신호를 호스트에서 받는 것만으로 모든 문제가 해결되지는 않습니다.
이 부분에서 참고하고 있는 프로그램 가운데 하나가 오픈소스 ApexSenseBridge입니다. 지원되는 Windows 게임에서 가상 DualSense로 전달된 입력과 피드백을 Flydigi APEX 컨트롤러 쪽으로 변환하는 프로젝트입니다. 다만 이것이 곧바로 네트워크 너머의 모든 컨트롤러와 동일하게 작동한다는 보장은 아닙니다.
스텔라 블레이드로 확인하는 두 가지 반응

메인 테스트 게임은 스텔라 블레이드입니다. 햅틱과 트리거 쪽에서 확인하고 싶은 장면이 비교적 분명하기 때문입니다. 현재 주로 살펴보는 것은 두 가지입니다.
- 달리기 시 진동: 움직임에 맞춘 세밀한 햅틱 반응이 원격 컨트롤러까지 전달되는지
- 총기 발사 시 반응: 사격에 맞춰 트리거 관련 피드백이나 진동을 느낄 수 있는지
단순한 진동이 발생했다는 사실만으로 듀얼센스의 HD 햅틱이나 어댑티브 트리거 효과가 원본 그대로 구현됐다고 판단할 수는 없습니다. APEX6 Pro의 트리거 구동 방식도 듀얼센스의 저항 변화 방식과 완전히 같지는 않습니다. 그래서 원본 게임에서 의도한 반응과 변환 후 느낌이 얼마나 비슷한지는 따로 구분해야겠습니다.
첨부 사진은 실험에 사용한 원격 게임 환경입니다. 휴대용 Windows 게임기와 노트북, APEX6 Pro 컨트롤러가 함께 놓여 있습니다. 원격 접속과 프로그램 설정을 확인하면서 실제 게임에서 반응을 점검하고 있는 단계입니다. 사진에 나온 화면이나 장치는 실측 성능을 보여주는 자료라기보다 테스트 구성의 기록입니다.
현재는 가능성을 확인한 수준입니다
현재 테스트 수준에서는 원하는 방향의 동작이 가능하다는 점을 확인했습니다. 그렇다고 모든 게임에서 햅틱과 트리거 효과가 완벽하게 전달되거나, 일반 사용자도 설치만 하면 그대로 사용할 수 있는 상태라는 뜻은 아닙니다.
실제로 원격 스트리밍에는 변수가 많습니다. 호스트의 운영체제와 드라이버, 사용하는 클라이언트와 연결 방식, 컨트롤러를 Bluetooth로 연결했는지 동글로 연결했는지에 따라 결과가 달라질 수 있습니다. 여기에 일반 진동과 특수 햅틱 데이터의 처리 경로가 중복되면 원치 않는 반응이 발생할 수도 있겠습니다.
또한 지금 단계에서 정확한 입력 지연이나 햅틱 신호의 재현 정확도를 측정한 결과까지 확보한 것은 아닙니다. 따라서 ‘가능성 확인’과 ‘안정화 완료’를 구분해두려고 합니다. 게임을 실제로 플레이하면서 반복해서 시험해야 어느 정도 수준인지 판단할 수 있을 것 같습니다.
기존 프로그램을 활용하는 이유
직접 만들더라도 모든 기능을 처음부터 구현할 필요는 없다고 생각합니다. 이미 공개된 프로그램들이 잘 해결한 부분은 참고하고, 원격 햅틱처럼 부족하다고 느끼는 부분을 중심으로 작업하는 편이 현실적입니다.
기능을 하나로 합치면 편리하겠지만 동시에 충돌과 유지보수도 생각해야 합니다. 프로그램 버전이 바뀌거나 게임 업데이트가 이루어지면 이전에 잘 되던 기능이 달라질 수 있습니다. 특히 가상 컨트롤러나 드라이버를 사용하는 부분은 다른 게임 프로그램과의 호환성도 확인할 필요가 있습니다.
제가 하는 시도가 이미 다른 곳에서 구현되었을 수도 있습니다. 그래도 직접 사용하는 환경에 맞춰 원하는 기능만 고르고, 설치와 테스트 과정을 단순화할 수 있다는 점에서는 개인 프로젝트로서 의미가 있다고 생각합니다.
배포까지 갈 수 있으면 좋겠습니다
아직은 실험 중인 프로젝트입니다. 화면 스트리밍과 기본 입력뿐 아니라 햅틱 전달 경로까지 정리하고, 실제 게임에서 어느 정도 재현되는지 확인하는 작업이 남았습니다. 가능하면 연결 방식에 따른 차이와 실패하는 조건도 기록하려고 합니다.
결과가 괜찮다면 저만 사용하는 프로그램이 아니라 다른 사람도 시험해볼 수 있는 형태로 배포하고 싶은 마음이 있습니다. 하지만 배포하려면 설치 방식, 호환성 안내, 오픈소스 라이선스, 업데이트 이후 유지보수 같은 문제까지 해결해야겠지요.
아무튼 AI 시대가 되면서 예전에는 생각만 했던 것을 다시 꺼내 시험하기가 한결 편해졌습니다. 동시에 새로운 프로그램도 너무 빠르게 나오고 있어 따라가기 어렵다는 생각도 듭니다. 이번에는 완성도를 서두르기보다, 제가 실제로 사용하는 원격 게임 환경에서 잘 동작하는 것부터 차근차근 확인해볼 생각입니다.

답글 남기기