특허의 효과

컴퓨터 그래픽 환경을 제공하는 시뮬레이션 기술의 진전에 따라, 정보적으로 확장된 가상 세계이며 실제 세계의 반영인 미러 월드의 구현 기술이 진화하고 있다.

상기 미러월드를 구축하기 위해서는 먼저 실세계를 3차원으로 표현할 수 있어야 한다.

이를 위해서는 현실 세계를 모델링하고, 다양한 이벤트를 표현할 수 있는 기술이 필요하다.

지금까지, VRML이라는 3차원 물체와 공간을표현할 수 있는 파일 포맷이 탄생한 이래로, XML을 기반으로 한 X3D(Extensible 3D)의 규격이 발표되어 널리 보급되어 왔다.

구글 어스와 스트리트 뷰에서는 실세계를 기반으로 한 미러 월드를 2D 기반으로 제작하여 서비스하고 있으며,최근에는 주요 건물들의 3차원 정보들이 포함되어 조금 더 실감나는 미러 월드를 볼 수 있게 되었다.

본 발명은 실시간 방송 정보를 수신하여, 3차원 가상 형식으로 실감 방송 정보를 제공하는 실감 방송 시스템 및이를 이용한 시스템 제어 방법을 제공하기 위한 것이다.

상기한 과제를 실현하기 위한 본 발명의 일 실시 예에 따른 실감 방송 시스템은, 실 공간과 동일한 공간 정보를갖는 3차원 가상 공간에 관한 영상 정보가 저장되는 메모리부, 방송 정보를 수신하는 통신부, 상기 메모리부의영상 정보에 상기 통신부를 통해 수신되는 방송 정보를 랜더링하고, 사용자 지시 신호에 의한 이벤트를 반영시킨 3차원 방송 영상을 생성하는 제어부 및 상기 수신된 방송 정보 또는 상기 제어부에서 생성된 3차원 방송 영상 정보를 출력하는 출력부를 포함한다.

또한, 상기 제어부는 상기 3차원 방송 영상에 제 1 사용자 지시 신호에 의한 이벤트가 반영된 제 1 아바타를 랜더링한다.

또한, 사용자로부터 미디어 정보를 입력받는 입력부를 더 포함하고, 상기 제어부는 상기 미디어 정보가 더 표시된 3차원 방송 영상을 생성한다.

또한, 상기한 과제를 실현하기 위한 본 발명의 일 실시 예에 따른 실감 방송 시스템 제어 방법은, 실 공간과 동일한 방송 정보를 갖는 3차원 가상 공간에 관한 영상 정보가 저장되는 저장 단계, 방송 정보가 수신되는 수신단계, 상기 3차원 가상 공간에 관한 영상 정보에 상기 수신된 방송 정보를 랜더링하고, 사용자 지시 신호에 의한 이벤트를 반영시킨 3차원 방송 영상을 생성하는 생성 단계 및 상기 수신된 방송 정보 또는 상기 3차원 방송영상을 출력하는 출력 단계를포함한다.

또한, 상기 생성 단계는, 사용자 지시 신호에 의한 이벤트가 반영된 사용자 분신인 아바타가 더 표시된 3차원방송 영상을 생성한다.

상기와 같이 구성되는 본 발명의 적어도 하나의 실시 예에 관련된 실감 방송 시스템은 3차원 가상 공간 상에서실감 방송 정보를 제공하고, 사용자로 하여금 소셜 미디어를 이용하여 다양한 이벤트에 대한 인덱스를 생성하여활용하도록 할 수 있는 이점이 있다.

특허 기술 설명

실감 방송 시스템

본 발명의 일 실시 예에 따른 실감 방송 시스템(100)은 통신부(110), 출력부(120), 입력부

(130), 메모리부(140), 인터페이스부(150) 및 제어부(160)를 포함하여, 미러 월드의 3차원 가상 공간을 기반으로 실시간 방송 정보를 제공한다. 상기 미러 월드란, 컴퓨터 그래픽 환경을 제공하는 시뮬레이션 기술에 기반한것으로, 정보적으로 확장된 가상 세계를 의미한다.

상기 통신부(110)는 상기 실감 방송 시스템(100)과 방송 관리 서버, 상기 실감 방송 시스템(100)과 실감 방송시스템(100) 또는 상기 실감 방송 시스템(100)과 개인용 단말기 사이의 무선 통신을 가능하게 하며, 상기 방송관리 서버로부터 방송 채널을 통하여 실시간 방송 정보를 수신한다.

상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있고, 상기 방송 관리 서버는, 방송 신호 또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기생성된 방송 신호 또는 방송 관련 정보를 제공받아 송신하는 서버를 포함할 수 있다.

또한, 상기 통신부는 상기방송 정보를 수신하는 방송 수신 모듈 이외에 이동 통신 모듈, 무선 인터넷 모듈, 근거리 통신 모듈 등을 포함할 수 있다.

상기 출력부(120)는 상기 통신부(110)를 통해 수신된 방송 정보 또는 상기 실감 방송 시스템(100)을 통해 생성된 3차원 방송 정보를 출력한다.

즉, 상기 수신된 방송 정보 및 생성된 3차원 방송 정보를 서로 스위칭하면서출력하거나, 수신된 방송 정보 또는 생성된 3차원 방송 정보를 함께 출력할 수 있다.

상기 수신된 방송 정보 및생성된 3차원 방송 정보가 서로 스위칭되는 경우에는, 재생되는 방송 정보에 대응하는 시점 또는 공간 지점을 연결시켜 3차원 방송 정보가 출력되도록 제어할 수 있다.

상기 출력부(120)는 상기 개인용 단말기와 연결된 상태로 상기 개인용 단말기에 가상 형식의 정보를 출력하는 정보 인터페이스부가 되거나, 직접 상기 3차원 형식의정보를 표시하는 디스플레이부가 될 수 있다.

상기 출력부(120)가 디스플레이부의 기능을 수행하는 경우, 상기 출력부(120)는 3차원 형식으로 표시되는 실시간 방송 정보를 표시한다.

또한, 상기 출력부(120)는 사용자 분신인 아바타가 단수 또는 복수로 표시된 방송 정보, 상기 방송 정보에 해당하는 타임 라인(time line)이 더 표시된 방송 정보를 표시할 수 있다.

또한, 상기 출력부(120)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시킬 수 있는 것으로, 상기 3차원 형식의 정보를 영상 정보, 음향 정보 또는 햅틱 정보 중 하나 이상의 형태로 출력할 수 있다.

또한, 상기 출력부(120)는 웨어러블(wearable) 디바이스 또는 휴대용인 핸드헬드(handheld) 디바이스를 통해 다양한 형태의 출력 정보를 제공할수 있다.

상기 출력부(120)가 정보 인터페이스부의 기능을 수행하는 경우, 상기 출력부(120)는 상기 실감 방송 시스템(100)으로부터 생성되는 3차원 방송 정보를 상기 실감 방송 시스템(100)에 접속된 사용자에게 동시에 출력할 수있다.

따라서, 제 1 사용자의 지시에 따라 이벤트가 반영된 제 1 아바타가 표시된 3차원 가상 형식의 방송 정보 를 제 1 사용자 및 제 2 사용자에게 출력할 수 있다.

따라서, 상기 실감 방송 시스템(100)을 통해 스포츠 정보를 제공하는 경우, 상기와 같은 제공 정보의 집단 공유로 인하여 깃발 들기, 파도 타기, 단체 색종이 응원 등을실행할 수 있다.

상기 출력부(120)가 사용자 개인 단말기와 연결되어 정보 인터페이스부의 기능을 수행하는 경우, 상기 사용자 개인 단말기에는 데스크탑, 모바일폰, IPTV 또는 몰입형 공간 등의 다양한 플랫폼이 포함될 수있다.

상기 입력부(130)는 사용자가 상기 실감 방송 시스템(100)의 동작 제어를 위한 사용자 지시 신호를 입력받는다.

상기 입력부(130)는 상기 개인용 단말기와 연결된 상태로 상기 개인용 단말기의 지시 신호를 입력받는 정보 인터페이스부가 되거나, 직접 사용자 지시를 입력받는 키패드(key pad), 돔 스위치(dome switch), 터치 패드, 조그 휠 또는 조그 스위치 등으로 구성될 수 있다.

상기 입력부(130)가 정보 인터페이스부의 기능을 수행하는 경우, 상기 입력부(130)는 상기 실감 방송 시스템(100)에 접속하는 사용자들로부터 미디어 정보를 입력받을 수 있다.

상기 미디어 정보란, 채팅 또는 마이크로블로깅 등의 소셜 미디어(social media)에 활용되는 정보로, 상기 실감 방송 시스템(100)에 접속하는 사용자들의 의견, 생각, 경험 또는 관점들을 서로 공유하기 위해 사용하는 온라인 정보를 의미한다.

상기 미디어 정보는문자, 사진 등의 이미지, 오디오 또는 동영상 등의 비디오 형태를 가질 수 있다.

상기 입력부(130)를 통해 입력된 소셜 미디어 정보는 이후 메모리부(140)에 저장될 수 있고, 표시하는 방송 정보에 대한 과거 또는 현재의 이벤트 검색에 활용될 수 있다.

상기 입력부(130)는 사용자 지시를 입력하는 오브젝트를 감쌀 수 있도록 의복 및 액세사리 형태로 변형시킨 웨어러블(wearable) 디바이스 또는 휴대용인 핸드헬드(handheld) 디바이스를 통해 행동 인식을 통한 사용자 신호를 입력받을 수 있다.

또한, 상기 입력부(130)를 통해 입력되는 특정 동작에 해당하는 모션을 미리 설정하여,해당하는 동작 신호가 입력되는 경우 미리 설정된 상기 모션에 대한 지시 신호가 입력되는 것으로 인식하도록할 수 있다.

예를 들어, 상기 실감 방송 시스템(100)을 통하여 스포츠 관람을 하는 경우, 색종이 날리기로 설정된 임의의 형태에 해당하는 동작 신호가 입력되면, 상기 실감 방송 시스템(100)은 색종이 날리기 신호가 입력된것으로 인식할 수 있다.

상기 메모리부(140)는 실(real) 공간과 동일한 공간 정보를 갖는 3차원 가상 공간에 관한 영상 정보 등 상기 실감 방송 시스템(100)의 동작을 위한 프로그램 및 입출력되는 데이터들이 저장될 수 있다.

따라서, 상기 메모리부(140)의 영상 정보를 이용하여, 실제 현실을 정보적으로 확장시킨 미러 월드 기반의 영상 정보를 생성할 수있다.

상기 인터페이스부(150)는 상기 실감 방송 시스템(100)에 접속하는 사용자의 로그인 관리, 상기 통신부(110)를통한 방송 정보 수신에 대한 채널 관리 등을 수행한다.

구체적으로, 상기 인터페이스부(150)는 상기 실감 방송시스템(100)에 접속하는 사용자의 사용 권한을 인증하기 위해 각종 정보를 저장하고 있으며, 사용자에 의해 로그인 신호가 입력되면 상기 로그인 신호를 처리하고, 이후 접속된 사용자의 접속 상태를 관리한다. 또한, 상기인터페이스부(150)는 각 채널 별로 사용자의 접속 여부를 관리하여, 특정 채널에 대한 과부하를 방지할 수 있다.

상기 제어부(160)는 상기 실감 방송 시스템(100)의 통상적인 동작을 제어한다. 구체적으로, 상기 제어부(160)는상기 메모리부(140)의 영상 정보에 상기 통신부(110)를 통해 수신되는 방송 정보를 랜더링(rendering)하고, 상기 입력부(130)의 사용자 지시 신호에 의한 이벤트를 3차원 가상 영상에 반영시켜 3차원 방송 정보를 생성하도록 제어한다.

상기 랜더링이란, 컴퓨터 프로그램을 사용하여 2차원의 화상에 광원·위치, 색상 등 외부 정보를고려하여 3차원 화상을 만드는 과정을 의미한다. 본 발명의 실시예에 따라 생성된 3차원 방송 정보는 정보적으로 확장된 가상 세계를 의미하는 미러 월드를 기반으로 할 수 있다.

상기 제어부(160)는 상기 출력부(120)를 통해 출력되는 정보를 선택할 수 있고, 따라서 상기 출력부(120)를 통해 상기 수신되는 방송 정보 또는 상기 제어부(160)에서 생성되는 3차원 방송 정보가 출력되도록 제어할 수 있다.

구체적으로, 상기 수신되는 방송 정보와 동일한 공간적인 정보를 갖는 3차원 방송 정보를 함께 출력하거나, 입력 신호에 따라서 수신되는 방송 정보 및 3차원 방송 정보를 스위칭 하면서 출력하도록 제어할 수 있다.

상기제어부(160)는 수신되는 방송 정보 및 3차원 방송 정보가 스위칭 되는 경우, 출력되는 방송 정보와 공간적인 좌표가 일치하는 3차원 방송 정보가 출력되도록 하거나, 출력되는 3차원 방송 정보와 공간적인 좌표가 일치하는방송 정보가 출력되도록 하여, 사용자에게 공간적인 연장감을 제공할 수 있다.
 
예를 들어, 상기 제어부(160)는 상기 출력부(120)를 통해 수신된 방송 정보를 출력하는 중, 입력 신호에 따라서 출력되는 방송 정보와 동일한 공간 좌표 정보를 갖는 3차원 방송 정보가 출력되도록 제어하고, 또 상기 3차원 방송 정보를 출력하는 중, 입력 신호에 따라서 3차원 방송 정보에서 표시되는 시점에 해당하는 실시간 방송 정보가 출력되도록 제어할 수 있다.

상기 3차원 방송 정보에서 실시간 방송 정보로 변환되는 경우, 설정에 따라서 3차원 방송 정보에서 표시되는 지점과 가장 가까운 카메라의 영상으로 전환되거나, 동일한 시점으로 표시되는 카메라의 영상으로 전환되거나 또는 새로운 영상의 합성을 통해 실시간 방송 정보로 변환되도록 할 수 있다.

또한, 상기 제어부(160)는 상기 출력 정보의 3차원 방송 영상에 아바타에해당하는 사용자로부터 입력된 이벤트를 반영한 아바타를 표시하도록 제어한다. 이 경우, 상기 제어부(160)는 상기 입력부(130)의 행동 인식에 따른입력 신호를 이용할 수 있다. 상기 아바타란, 가상 영상에서 사용자 분신을 의미하는 시각적인 이미지를 의미한다.

즉, 사용자는 상기 아바타를 통해 공간을 이동하거나, 특정 동작을 표현할 수 있다. 상기 실감 방송 시스템(100)에 접속하는 사용자가 복수에 해당하는 경우, 상기 제어부(160)는 제 1 사용자에 해당하는 제 1 아바타에상기 제 1 사용자 지시 신호에 의한 이벤트를 반영시켜 랜더링하고, 상기 랜더링된 제 1 아바타가 포함된 3차원가상 형식의 정보를 제 1 사용자를 포함한 모든 사용자에게 출력할 수 있다.

따라서, 상기 제어부(160)를 통해제 2 사용자의 지시 신호에 의한 이벤트가 반영된 제 2 아바타가 랜더링된 3차원 형식의 정보가제 1 사용자에게도 출력될 수 있고, 이를 통해서 상기 3차원 가상 영상을 기반으로 집단 방송 관람이 가능하게 된다.

상기 제어부(160)는 상기 아바타가 표시되는 3차원 방송 영상을, 상기 아바타 시점 등 다양한 시점으로 표시되도록 제어할 수 있다. 따라서, 상기 제어부(160)는 상기 실감 방송 시스템(100)에 접속한 제 1 사용자에게 상기 제 1사용자에 해당하는 제 1 아바타 시점으로 표시된 3차원 가상 형식의 정보 또는 제 3 자 시점으로 표시된 3차원가상 형식의 정보를 생성할 수 있다.

또한, 상기 제어부(160)는 상기 실감 방송 시스템(100)에 접속한 사용자들로부터 입력받은 소셜 미디어 정보를상기 3차원 방송 영상에 반영시켜 표시하도록 제어할 수 있다.

즉, 상기 제어부(160)는 3차원 가상 공간에 관한영상 정보에 상기 통신부(110)를 통해 수신된 방송 정보를 랜더링하고, 상기 실감 방송 시스템(100)에 접속한사용자로부터 입력된 지시 신호에 의한 이벤트를 반영하며, 상기 실감 방송 시스템(100)에 접속한 사용자로부터 입력된 소셜 미디어 정보를 믹스시켜 2차원 또는 3차원 형태로 표시할 수 있다.

구체적으로, 상기 제어부(160)는 상기 실감 방송 시스템(100)에 접속한 사용자들로부터 입력받은 미디어 정보를 상기 메모리부(140)에 저장하고, 상기 미디어 정보로부터 대표 키워드를 추출하여 추출된 키워드로 구성된 인덱스 정보를 생성하여 사용자들에게 제공할 수 있다.

상기 인덱스 정보는 상기 메모리부(140)에 저장되어, 향후 과거 및 현재의 방송 정보에

대한 이벤트의 검색이나 정보 제공에 활용될 수 있다. 또한, 상기 제어부(160)는 상기 출력 정보의 3차원 방송영상에 타임 라인이 표시되도록 할 수 있다.

상기 타임 라인이란, 상기 3차원 방송 영상의 진행 시간 정보를 표시하는 바(bar)를 의미한다.

상기 제어부(160)는 타임 라인에는, 사용자들로부터 입력받은 미디어 정보로 링크 될 수 있는 아이콘이 함께 표시할 수 있다.

또한, 상기 제어부(160)는 상기 입력부(130)를 통해 입력되는 사용자 채널 선택 신호에 따라, 수신되는 방송 정보에 대한 채널을 변경할 수 있다.

따라서, 상기 제어부(160)는 상기 사용자로부터 선택된 채널에 해당하는 방송 정보를 3차원 형식으로 랜더링한다.

실감 방송 시스템의 세부 구성도

1.구성도의 구성에 세부 구성 요소 설명


실감 방송 시스템(100)에 포함되는 통신부(110), 출력부(120),에 입력부(130), 메모리부(140), 인터페이스부(150) 및 제어부(160)는 각 구성별로 필요한 세부 구성 요소를 더 포함할 수 있다.

상기 통신부(110)는 방송 관리 서버로부터 실감 방송 정보를 수신하는 실시간 방송 정보 통신부(111)를 포함한다.

상기 메모리부(140)는 3차원 가상 공간에 관한 영상 정보가 저장되는 영상 정보데이터 베이스(141), 사용자로 부터 입력된 소셜 미디어 정보가 저장되는 소셜 미디어 데이터 베이스(142) 및 과거 방송 정보를 저장하는 과거 방송 정보 데터 베이스가 포함된다.

상기 인터페이스부(150)는 상기 실감 방송 시스템(100)에 접속하는 사용자를 관리하는 사용자 관리부(151) 및 각 방송 채널별로 접속 정보를 관리하는 채절별 접속 관리부(152)를 포함하고, 상기 사용자 관리부(151)에는 사용자의 접속 개시를 신호를 입력받는 로그인 관리부(151A) 및 로그인 이후 발생하는 지시 신호에 따라 제어하는 사용자 행동 기록부(151B)를 포함한다.

상기 제어부(160)는 상기 인터페이스부(150)를 통해 입력되는 로그인 신호에 따라 사용자 접속 허용 여부를 결정하는 로그인 처리부(161), 사용자 신호에 따라 출력 정보에 포함시킬 내용을 처리하는 정보 확인부(162), 사용자 신호에 따라 선택된 관람 채널로 연결하는 관람 채널 연결부(163), 연결된 관람 채널에 해당하는 방송 정보를 출력 정보에 포함시키는 관람 채널 운용부(164) 및 상기 인터페이스부(150)의 채널별 접속 관리부(152)의 제어 신호에 따라 관람 채널에 대한 제어를 수행하는 관람 채널 관리부(165)가 포함될 수 있다.

2.실감 방송 시스템의 기능별 세부 구성 요소

실감 방송 시스템(100)은 상기 실감 방송 시스템에 접속하는 사용자 정보를 관리하는 사용자 접속/ 정보 관리 서버(101), 3차원영상 정보를 제공하는 3차원 영상 제공 서버(102), 수신하는 방송 정보를 관리하는 실감 방송 정보 및 과거 방송 기록 서버(103) 및 소셜 미디어 정보가 관리되는 소셜 미디어 서버(104)를 포함한다.

상기 사용자 접속/ 정보 관리 서버(101)는 상기 실감 방송 시스템에 접속하는 사용자의 계정과 로그인 과정상의log를 관리하는 로그인 관리부(1012) 및 로그인 이후 사용자가 인터페이스를 통해서 방송 제공 도중에 행하는모든 행동 정보를 기록하는 사용자 행동 기록부(1013)를 포함하는 사용자 관리 데이터 베이스(1011) 및 사용자 신호에 따라 선택되는 채널을 제어하여 채널별로 과부하가 걸리지 않도록 관리하는 채널별 접속 정보 관리부(1015)가 포함되는 관람 채널 데이터 베이스(1014)가 포함된다.

상기 3차원 영상 제공 서버(102)는 상기 사용자 접속/ 정보 관리 서버(101)로부터 입력되는 로그인 신호 및 입력 신호를 처리하는 인터페이스 제공부(1021), 상기 사용자 접속/ 정보 관리 서버(101), 실시간 방송 정보 및과거 방송 기록 서버(103)로부터 정보를 수신하는 정보 수신부(1023), 수신된 정보를 확인하는 정보 확인부(1023), 출력 정보를 생성하여 전송하는 정보 전송부(1024), 처리되는 정보를 실시간 저장하는 정보 저장부(1025), 사용자가 선택한 관람 채널로 연결하는 관람 채널 연결부(1026), 수신되는 방송 정보를 이용하여 출력정보를 재생하는 관람 운영부(1027) 및 상기 출력 정보를 제어하는 관람 제어부(1028)을 포함한다.

따라서, 사용자는 상기 사용자 접속/ 정보 관리 서버(101)를 통하여 상기 실감 방송 시스템(100)에 로그인하고, 상기 정보수신부(1023)를 통해 정보를 수신하고, 상기 정보 확인부(1023)를 통해 수신된 정보를 확인한다.

또한, 사용자의사에 따라 관람 채널을 선택하고, 상기 관람 채널 연결부(1026)가 상기 선택된 채널로 연결을 지원하며, 관람 도중에 필요한 운용 및 제어는 관람 운용부(1027) 및 관람 제어부(1028)를 통해 수행한다.

상기 실시간 방송 정보 및 과거 방송 기록 서버(103)는 상기 실시간 방송 시스템(100)으로 수신되거나, 상기 실시간 방송 시스템(100)에서 출력된 과거 방송 정보가 저장되는 과거 방송 기록 데이터 베이스(1031) 및 사용자지시 신호에 따라 실시간으로 해당하는 채널의 방송 정보를 요청하는 실시간 정보 송신부(1035) 및 상기 영상이나 텍스트 중계 정보 등이 포함되는 스트리밍 영상을 수신하는 실시간 정보 수신부(1036)를 포함하는 실시간 방송 정보 처리부(1034)를 포함한다.

상기 소셜 미디어 서버(104)는 수신되는 소셜 미디어가 저장되는 소셜 미디어 데이터 베이스(1041), 상시소셜미디어로부터 대표 키워드를 추출하는 소셜 미디어 인덱스 추출부(1042) 및 상기 추출된 소셜 미디어 인덱스로리스트를 구성하는 소셜 미디어 이벤트 인덱스 데이터 베이스(1043)를 포함한다.

개인용 단말기를 연결한 실감 방송 시스템

실감 방송 시스템(100)에 다양한 개인용 단말기(210, 220, 230 및 240)를 연결하여, 상

기 개인용 단말기를 통해 사용자 지시를 입력하고, 상기 실감 방송 시스템(100)에서 출력되는 출력 정보를 상기개인용 단말기에 표시하도록 할 수 있다.

상기 개인용 단말기의 종류에는 PC(210), 이동 단말기(220), IPTV 및 몰입형 공간(240) 등이 포함될 수 있다.

아바타가 표시된 스포츠 방송 정보를 제공하는 실감 방송 시스템

1. 방송 정보를 사용자의 아바타 시점으로 표시하는 실감 방송 시스템

실감 방송 시스템에 표시되는 표시 화면(200)은 상기 실감 방송 시스템에 연결된 제 1사용자에게 제공되는 스포츠 경기 정보에 관한 것이다.
 
상기 표시 화면(200)에는, 제 1 사용자의 분신인 제 1아바타(211), 제 2 사용자의 분신인 제 2 아바타(212) 및 제 3 사용자에 해당하는 제 3 아바타(213)가표시된다. 상기 각각의 아바타는 해당하는 사용자들의 이벤트를 반영하여 표시되고, 구체적으로 상기 제 1 아바타(211)는 사용자의 박수치는 동작 이벤트를 반영하여 박수치는 동작을 표시한다.

상기 제 1 사용자에게 제공되는 실시간 방송 정보의 스포츠 경기장은 상기 제 1 사용자의 분신인 아바타(211) 시점을 기준으로표시됨으로써, 실제 경기장에 앉아서 스포츠 경기를 관람하는 실감을 제공한다.
 
상기와 같은 방법으로, 상기 실감 방송 시스템에 접속한 제 2 사용자에게는 상기 제 2 사용자의 분신인 제 2 아바타(212)의 시점을 기준으로 표시된 방송 정보를 제공할 수 있다.

2. 상기 방송 정보를 제 3 자 시점으로 표시하는 실감 방송 시스템

실감 방송 시스템에 표시되는 표시 화면(200)은 상기 실감 방송 시스템에 연결된 복수의 사용자에게 공통으로 제공될 수 있는 스포츠 경기 정보에 관한 것이다.

상기 표시 화면(200)에는, 제 1 사용자 분신인 제 1 아바타(221), 제 2 사용자 분신인 제 2 아바타(222) 및 제 3 사용자 분신인 제 3 아바타(223)가표시된다.

상기 각각의 아바타는 해당하는 사용자들의 이벤트를 반영하여 표시되고, 구체적으로 상기 제 1 아바타(221)는 사용자의 내려치는 동작 이벤트를 반영하여 북치는 동작을 표시한다.

상기 제 1 사용자를 포함한 나머지 사용자들에게 공통적으로 제공될 수 있는 실시간 방송 정보의 스포츠 경기장은 제 3 시점으로 표시된다.

스포츠 방송 정보를 표시하는 실감 방송 시스템

실시간 스포츠 방송 정보에는 실시간 스포츠 종합 중계 영상(511), 상기 채널 이외에 현재 제공 가능한 방송 채널 리스트(512), 제 3 시점으로 표시되는 실시간 스포츠 영상(513), 상기 실감 방송 시스템에 접속한 타 사용자와의 대화창(514), 상기 실시간 방송 정보에 대응하는 타임 라인(515) 및 상기 타임 라인의 특정 시점에 관한 미디어 정보가 있음을 표시하는 아이콘(516, 517)이 포함된다.

상기 타 사용자와의 대화창(514)에 입력된 정보는 이후 상기 실감 방송 시스템의 메모리부에 저장되어 미디어 정보로 활용될 수 있다.

상기 타임 라인(515)에 표시되는 아이콘은 특정 이벤트가 발생한 시점에 링크될 수 있는 미디어 정보가 있음을표시하는 아이콘(517) 및 링크되는 미디어 정보에 대한 텍스트 정보(516)가 포함될 수 있다.

사용자로부터 입력된 미디어 정보를 표시하는 실감 방송 시스템

실감 방송 시스템은 스포츠 경기 정보(610)를 제공한다. 상기 실감 방송 시스템에 접속한 복수의 사용자들은 제공되는 스포츠 경기를 관람하면서 대화창(620)을 통해 자유롭게 대화할 수 있고, 상기실감 방송 시스템의 인덱스 추출부는 임의의 기준을 통해 상기 대화창(620)으로부터 인덱스를 추출한다.

예를들어, 야구 경기 1회 동안의 경기를 관람한 사용자들은 채팅 등을 통해 다양한 소셜 미디어를 생성한다.

상기임의의 기준은, 출현 빈도수가 높은 단어, 미리 저장된 단어와 일치하는 단어, 주기적인 시간 기준에 출현하는 단어 등에 해당하는 기준이 예에 해당할 수 있다.

상기 인덱스 추출부를 통해 추출된 인덱스는 리스트(630)로 정리되어, 상기 실감 방송 시스템에 접속한 복수의 사용자들에게 제공된다.

따라서, 상기와 같이 생성된 인덱스를 통해 복수의 사용자들에게 1회 경기 동안의 관전 포인트가 제공될 수 있고, 상기 관전 포인트는 이후 검색이나 정보 제공에 활용될 수 있다.

상기 인덱스 추출부를 통해 추출된 인덱스는 상기 리스트 형식 이외에 타임 라인 또는 아이콘 등 다양한 실시예에 따라서 사용자에게 제공될 수 있다.

사용자로부터 입력되는 이벤트를 반영하여 표시하는 방송 정보를 제공하는 실감 방송 시스템

1. 핸드 헬드 디바이스를 통해서 사용자 모션에 대한 이벤트를 반영하는 실감 방송 시스템

상기 실감 방송 시스템을 이용하는 제 1 사용자 및 상기 실감 방송 시스템에서 제공되는 방송 정보를 표시하는 화면(720)에는 상기 제 1 사용자의 분신인 제 1 아바타(721) 및 타 사용자의 분신인 제 2아바타(722) 및 제 3 아바타(723)이 표시된다.

상기 제 1 사용자와 연결된 핸드 헬드 디바이스를 통해서 제 1사용자가 양팔을 벌리는 모션에 대한 신호를 입력하면, 상기 실감 방송 시스템은 자이로 센서등을 통해서 상기핸드 헬드 디바이스의 움직임 동작을 감지하거나, 상기 핸드 헬드 디바이스에서 발생한 움직임 동작에 따른 감지 신호를 입력받아, 상기 입력된 신호에 대응하는 이벤트를 상기 제 1 아바타(721)에 반영시켜 표시한다.

2.미리 설정된 지시 신호가 입력되는 경우, 상기 지시 신호에 대응하는 이벤트가 표시되는 실감방송 시스템

상기 제 1 사용자가 양팔을 오므리는 모션에 대한 신호를 입력하면, 상기 실감 방송 시스템의 표시 화면(720)은 상기와 같은 방법으로 상기 입력된 신호에 대응하는 이벤트를 상기 제 1 아바타(721)에반영시켜 표시한다.

이때, 상기 실감 방송 시스템에 상기 양팔을 벌렸다 오므리는 동작이 색종이 날리기 신호로미리 설정되어 있는 경우, 수초 이내에 상기 모션이 연결되어 입력되면 해당하는 이벤트인 색종이 날리기(724)가 반영되어 표시된다.

상기 제 2 아바타(722) 및 제 3 아바타(723)는 각 아바타에 해당하는 사용자의 지시 신호에 대한 이벤트를 자유롭게 반영하여 표시한다.

상기 표시 화면(720)과 같이 복수의 사용자들이 같은 시간에 같은 동작에 대한 지시 신호를 입력하고, 상기 같은 동작이 표시되는 방송 정보가 상기 복수의 사용자에게 피드백되어, 스포츠 경기를 관람하면서 단체 응원을 표시할 수 있다.

또한, 상기 입력 방식을 통하여 북, 깃발, 색종이 또는 신문 등 추가적인 응원 도구를 이용한 사용자 모션을 표시할 수 있다.

실감 방송 시스템에 접속한 복수의 사용자의 이벤트를 반영한 방송 정보를 상기 복수의 사용자에게 제공하는 실감 방송 시스템의 정보 처리 방법


 

실감 방송 시스템에는 제 1 사용자, 제 2 사용자 등을 포함한 n명의 사용자가 접속되어 있고, 상기 복수의 사용자로부터 사용자 동작 지시 신호가 입력된다.

상기 사용자들로부터 동작 지시(821, 812,813)를 입력받은 실감 방송 시스템은 입력된 사용자에 해당하는 아바타 위치 정보를 파악하고(S821), 해당하는아바타에 입력된 사용자의 지시에 대응하는 이벤트를 반영하고(S822), 3차원 실감 이미지를 생성하여(S823) 상기 방송 정보를 제공받는 그룹 내 사용자들에게 햅틱, 음성 또는 영상 등 다양한 영태로 멀티캐스트(S824)한다.

따라서, 상기 실감 방송 시스템에 접속한 n명의 사용자는 각각의 사용자 지시에 따른 이벤트가 반영된 방송 정보(831, 832, 833)를 제공받을 수 있다.

실감 방송 시스템을 이용한 방송 정보 제공 과정

실감 방송 시스템에는 3차원 가상 현실에 관한 정보가 저장되고(S910), 상기 실감 방송 시스템에 사용자 지시 신호가 입력되면(S920), 사용자 지시 신호에 의해 선택된 방송 정보가 수신되고(S930).

상기 방송 정보에 상기 사용자 지시 신호에 따른 이벤트를 랜더링하여 3차원 형식의 방송 정보가 제공된다(S940).
 

설명된 방송 시스템은 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어구성될 수 있다.

발명자: 고희동, 김진우

대리인: 김순영, 김영철