KR20130143078A - 원격 세션 상에서의 실시간 미디어 최적화 - Google Patents

원격 세션 상에서의 실시간 미디어 최적화 Download PDF

Info

Publication number
KR20130143078A
KR20130143078A KR1020137014949A KR20137014949A KR20130143078A KR 20130143078 A KR20130143078 A KR 20130143078A KR 1020137014949 A KR1020137014949 A KR 1020137014949A KR 20137014949 A KR20137014949 A KR 20137014949A KR 20130143078 A KR20130143078 A KR 20130143078A
Authority
KR
South Korea
Prior art keywords
real
computing device
server
path
media data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020137014949A
Other languages
English (en)
Other versions
KR101900969B1 (ko
Inventor
구오-웨이 쉬
스리바트사 케이 스리니비산
센실 케이 벨라유삼
라즈니쉬 마하잔
서브하쉬리 아이어
허메이언 칸
Original Assignee
마이크로소프트 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 코포레이션 filed Critical 마이크로소프트 코포레이션
Publication of KR20130143078A publication Critical patent/KR20130143078A/ko
Application granted granted Critical
Publication of KR101900969B1 publication Critical patent/KR101900969B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/402—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel non-real time sessions, e.g. downloading a file in a parallel FTP session, initiating an email or combinational services
    • H04L65/4025—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel non-real time sessions, e.g. downloading a file in a parallel FTP session, initiating an email or combinational services where none of the additional parallel sessions is real time or time sensitive, e.g. downloading a file in a parallel FTP session, initiating an email or combinational services

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Information Transfer Between Computers (AREA)
  • Computer And Data Communications (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

실시간 미디어 최적화가 제공될 수 있다. 우선, 원격 세션이 원격 컴퓨팅 디바이스를 상대로 수립될 수 있다. 이어서, 원격 세션 동안, 비실시간 미디어 데이터가 원격 컴퓨팅 디바이스를 상대로 서버 경로 상에서 교환될 수 있다. 더욱이, 실시간 미디어 데이터가 원격 컴퓨팅 디바이스를 상대로 미디어 경로 상에서 원격 세션 동안 교환될 수 있다.

Description

원격 세션 상에서의 실시간 미디어 최적화{REAL-TIME MEDIA OPTIMIZATION OVER REMOTED SESSIONS}
비디오회의(videoconferencing)는 회의를 위해 상이한 장소에 있는 사람들을 모으는 데에 오디오 및 비디오의 전기통신(telecommunications)을 사용한다. 이는 개인 사무실에 있는 두 사람 간의 (점대점(point-to-point)) 대화처럼 간단할 수 있거나 상이한 장소의 큰 공간에 여러 사람이 있는 여러 장소(다지점(multi-point))와 관련될 수 있다. 회의 활동의 시청각적 송신(audio and visual transmission) 외에, 비디오회의는 문서, 컴퓨터로 디스플레이되는(computer-displayed) 정보 및 화이트보드(whiteboard)를 공유하는 데 사용될 수 있다.
이 요약은 이하 발명의 상세한 설명에서 추가로 서술되는 개념들 중 선택된 것을 단순화된 형태로 소개하기 위해 제공된다. 이 요약은 청구된 발명 대상(subject matter)의 주된 특징 또는 필수적 특징을 식별시키고자 의도된 것은 아니다. 이 요약은 또한 청구된 발명 대상의 범주를 제한하는 데 사용되고자 의도된 것도 아니다.
실시간 미디어 최적화(real-time media optimization)가 제공될 수 있다. 먼저, 원격 세션(remote session)이 원격 컴퓨팅 디바이스(remote computing device)를 상대로 수립될 수 있다. 이어서, 원격 세션 동안, 서버 경로(server path) 상에서 원격 컴퓨팅 디바이스를 상대로 비실시간 미디어 데이터(non-realtime media data)가 교환될 수 있다. 나아가, 원격 세션 동안 미디어 경로(media path) 상에서 원격 컴퓨팅 디바이스를 상대로 실시간 미디어 데이터(real-time media data)가 교환될 수 있다.
전술한 일반적인 서술과 후술하는 상세한 설명은 모두 단지 예를 제공하고 설명하기 위한 것이다. 따라서, 전술한 일반적인 서술과 후술하는 상세한 설명은 제한적인 것으로 간주되어서는 안 된다. 또한, 특징들 내지 변형들이 본 명세서에 기재된 바에 덧붙여 제공될 수 있다. 예를 들어, 실시예들은 상세한 설명에서 서술된 다양한 특징 조합(combination)들 및 서브조합(sub-combination)들을 지향할 수 있다.
본 명세서의 일부를 구성하고 이에 포함되는 첨부된 도면들은 본 발명의 여러 실시예를 도시하며, 다음과 같다.
도 1은 가상화된 환경(virtualized environment)의 블록 다이어그램(block diagram)이다.
도 2는 실시간 미디어 시스템의 블록 다이어그램이다.
도 3은 실시간 미디어 최적화를 제공하기 위한 방법의 흐름도(flow chart)이다.
도 4는 실시간 미디어 시스템의 블록 다이어그램이다.
그리고, 도 5는 컴퓨팅 디바이스를 포함하는 시스템의 블록 다이어그램이다.
이하의 상세한 설명은 첨부된 도면들을 참조한다. 가능한 경우에는 어느 경우라도, 동일한 또는 유사한 구성요소를 참조하기 위해 그 도면들 및 이하의 설명에서 동일한 참조 번호가 사용된다. 본 발명의 실시예들이 서술될 수 있으나, 수정, 조정 및 다른 구현예가 가능하다. 예를 들어, 도면들에 도시된 구성요소에 대하여 대체, 부가 또는 수정이 행해질 수 있고, 소정의 스테이지(stage)들을 개시된 방법들에 대하여 부가하거나 재정렬하거나 대체함으로써 본 명세서에서 서술된 방법들이 수정될 수 있다. 따라서, 이하의 상세한 설명은 본 발명을 제한하지 않는다. 대신, 본 발명의 적절한 범주는 첨부된 청구항에 의해 정의된다.
민감한 데이터 및 애플리케이션을 가지며 민감한 데이터나 애플리케이션이 클라이언트 측 머신(client side machine)에 있어서는 안 되는(예컨대, 보안 사유) 기업들에 의해 데스크톱 가상화(desktop virtualization)가 사용될 수 있다. 결과적으로, 데스크톱 가상화로, 민감한 데이터와 애플리케이션은 기업에 의해 제어되는 서버 상에서 실행되되, 클라이언트 측 머신 상에서는 씬 클라이언트(thin client)가 실행될 수 있다. 이러한 상황에서, 애플리케이션은 실제로 서버 상에서 실행 중이며 사용자가 보는 것은 모두 클라이언트 측 머신 상의 사용자 인터페이스(user interface: UI)일 따름이다. 따라서, 기업과 함께 시스템 관리자(system administrator)는 서버 측 이미지를 업데이트할 수 있다. 이어서, 사용자가 서버로 로그하는 경우, 사용자는 시스템 관리자가 푸시(push)하기를 원하는 최신 소프트웨어를 얻는다.
도 1은 가상화된 환경(100)의 블록 다이어그램이다. 도 1에 도시된 바와 같이, 데스크톱 가상화로, 실제 프로세싱은 클라이언트 측 머신(110) 대신에 서버(105) 상에서 행해질 수 있다. 그러한 애플리케이션(즉, 가상화된 환경(100)에서 실행 중인 애플리케이션)은 "가상화된 애플리케이션"으로 언급될 수 있다. 예를 들어, 제1 애플리케이션(115) 및 제2 애플리케이션(120)은 실제로 서버(105) 상에서 실행 중일 수 있다. 클라이언트 측 머신(110)은, 제1 애플리케이션(115) 및 제2 애플리케이션(120)에 각각 대응하는 제1 사용자 인터페이스(125) 및 제2 사용자 인터페이스(130)를 렌더링하고 디스플레이할 수 있다. 가상화된 애플리케이션은 가령 키 입력 등과 같은 원 데이터(raw data)가 클라이언트 측 머신으로부터 서버로 전해질 수 있는 비실시간 애플리케이션(예컨대, 워드 프로세싱, 스프레드시트 등)을 위해 받아 들일만 할 수 있는데, 이 경우 서버 상에서 실행되는 가상화된 애플리케이션이 사용자의 입력을 받아 그러한 데이터를 처리한다.
앞서 언급한 가상화된 환경에서 실시간 오디오/비디오 회의 애플리케이션이 가상화된 애플리케이션으로서 실행될 수 있다. 예컨대 실시간 오디오/비디오 회의 애플리케이션은 클라이언트 측 머신으로부터 캡처된 원(raw) 오디오/비디오 데이터를 취하고, 그 데이터를 인코딩하고, 인코딩된 데이터를 전선(wire) 상에서 송신할 수 있다. 부가적으로 실시간 오디오/비디오 회의 애플리케이션은 인코딩된 데이터 스트림을 네트워크로부터 수신하고, 인코딩된 데이터를 디코딩하고, 디코딩된 데이터 스트림을 클라이언트 측 머신 상에 렌더링할 수 있다. 그러나, 가상화된 실시간 오디오/비디오 회의 애플리케이션으로는, 클라이언트 측 머신 상에서 로컬로(locally) 실행되는 "비-가상화된"(non-virtualized) 실시간 애플리케이션에 비해, 그 "가상화된" 실시간 애플리케이션이 지나갈 필요가 있는 (예컨대, 서버를 거치는) 부가적인 홉(hop)들이 있다.
비-가상화된 실시간 애플리케이션에서 실시간 오디오/비디오를 보내고 수신하는 경우, 모든 프로세싱은 클라이언트 측 머신에서 행해지며 서버 상에서 행해지지는 않는다. 예를 들어, 클라이언트 측 애플리케이션은 디바이스들로부터 오디오/비디오를 포착(catch)하고 그것을 인코딩하고 클라이언트 측 머신으로부터 전선을 거쳐 보낸다. 비-가상화와 달리, 가상화된 실시간 애플리케이션에 있어서는, 예컨대 캡처 디바이스(capturing device)를 원격시키거나 캡처 디바이스들로부터 원격 데스크톱 채널을 거쳐 서버로 오는 원 데이터 스트림을 보내는 것에 의해, 캡처된 원 오디오/비디오 데이터가 서버로 보내질 수 있다. 더욱이, 가상화된 환경 내의 서버는 인코딩된 스트림을 내보낸다. 그 결과, 가상화된 환경에서는, 오디오/비디오의 경로에 (예컨대, 클라이언트 측 머신으로부터 서버까지의) 부가적인 홉이 있다. 이러한 부가적인 홉은 실시간 오디오/비디오 데이터 흐름에서 지연(delay)/레이턴시(latency)를 증가시킬 수 있다.
도 2는 본 발명의 실시예에 따른 실시간 미디어 시스템(200)을 보여준다. 실시간 미디어 시스템(200)은 제1 클라이언트 측 머신(205)(예컨대, 로컬 컴퓨팅 디바이스), 제2 클라이언트 측 머신(210)(예컨대, 원격 컴퓨팅 디바이스), 서버(215) 및 네트워크(220)를 포함할 수 있다. 본 발명의 실시예에 따라, 비-가상화된 실시간 오디오/비디오 회의는 네트워크(220) 상에서 제1 클라이언트 측 머신(205) 및 제2 클라이언트 측 머신(210) 간에 행해질 수 있다.
본 발명의 실시예가 서버 경로(즉, 제1 홉(225) 및 제2 홉(230))를 사용하는 경우, 제1 클라이언트 측 머신(205) 및 제2 클라이언트 측 머신(210) 간 오디오/비디오 데이터의 경로 내에는 부가적 홉들(예컨대, 제1 클라이언트 측 머신(205)으로부터 서버(215)까지 및 서버(215)로부터 제2 클라이언트 측 머신(210)까지)이 있을 것이다. 러한 부가적인 홉들은 예컨대 제1 클라이언트 측 머신(205) 및 제2 클라이언트 측 머신(210) 간 실시간 오디오/비디오 데이터 흐름에서의 지연/레이턴시를 증가시킬 수 있다.
본 발명의 실시예에 따라, 제1 클라이언트 측 머신(205) 및 제2 클라이언트 측 머신 간 실시간 오디오/비디오 데이터 흐름에서의 전술한 지연/레이턴시는 실시간 오디오/비디오 데이터 흐름에 서버(215)를 포함시키지 않음으로써 회피될 수 있다. 예컨대 오디오/비디오 데이터는 서버(215)를 수반하지 않는 미디어 경로(235) 상에서 제1 클라이언트 측 머신(205) 및 제2 클라이언트 측 머신(210) 간에 송신될 수 있다. 그러나, 미디어 경로(235)가 수립되어 있지 않은 경우 또는 수립된 후 고장난 경우, 오디오/비디오 데이터는 서버 경로 상에서 제1 클라이언트 측 머신(205) 및 제2 클라이언트 측 머신(210) 간에 송신될 수 있다.
제1 클라이언트 측 머신(205), 제2 클라이언트 측 머신(210) 및 서버(215) 중 어느 것이나 예컨대 데스크톱 컴퓨터, 노트북 컴퓨터, 이동 디바이스(mobile device), 스마트폰(smart telephone) 또는 개인용 디지털 보조장치(personal digital assistant)를 포함할 수 있으나 이에 제한되는 것은 아니다. 네트워크(220)는 제1 클라이언트 측 머신(205), 제2 클라이언트 측 머신(210) 및 서버(215)가 통신할 수 있는 인터넷 또는 임의의 타입의 네트워크를 포함할 수 있다. 제1 클라이언트 측 머신(205), 제2 클라이언트 측 머신(210) 및 서버(215) 중 어느 것이나 예컨대 이하에서 도 5와 관련하여 더욱 상세히 서술되는 컴퓨팅 디바이스(500)를 사용하여 구현될 수 있다.
도 3은 실시간 미디어 최적화를 제공하기 위한 본 발명의 실시예에 따른 방법(300)에 수반되는 일반적인 스테이지(stage)들을 제시하는 흐름도이다. 방법(300)은 앞에서 서술된 그러한 실시간 미디어 시스템(200)을 사용하여 구현될 수 있다. 이하에서 방법(300)의 스테이지들을 구현하는 방식이 더 상세히 서술될 것이다.
방법(300)은 시작 블록(305)에서 시작하여 제1 클라이언트 측 머신(205)이 원격 세션을 원격 컴퓨팅 디바이스(예컨대, 제2 클라이언트 측 머신(210))와 수립할 수 있는 스테이지(310)로 진행될 수 있다. 예를 들어, 도 4에서 도시된 바와 같이, 애플리케이션(405)이 서버(215)에서 실행 중일 수 있다. 애플리케이션(405)은 비디오회의 애플리케이션을 포함할 수 있다. 그러한 원격 세션에 따라서, 제1 클라이언트 측 머신(205)에서 실행 중인 씬 클라이언트는 서버 상에서(215) 실행 중인 애플리케이션(405)에 대응하는 사용자 인터페이스(415)를 렌더링하고 디스플레이할 수 있다. 애플리케이션(405)은 제1 클라이언트 측 머신(205) 및 제2 클라이언트 측 머신(210) 간에 원격 세션을 완료할 수 있다.
제1 클라이언트 측 머신(205)이 원격 세션을 수립하는 스테이지(310)로부터, 방법(300)은 제1 클라이언트 측 머신(205)이 원격 세션 동안 비실시간 미디어 데이터를 원격 컴퓨팅 디바이스(예컨대, 제2 클라이언트 측 머신(210))와 서버 경로 상에서 교환할 수 있는 스테이지(320)로 나아갈 수 있다. 예를 들어, 교환되는 비실시간 미디어 데이터는 가령 제1 클라이언트 측 머신(205) 및 제2 클라이언트 측 머신(210) 간 비디오회의 세션에 대응하는 임의의 비-오디오(non-audio) 또는 비-비디오(non-video) 데이터를 포함할 수 있다. 예를 들어, 비실시간 미디어 데이터는 가령 응급 911 호출을 위해 사용되는 제1 클라이언트 측 머신(205)의 위치에 대응하는 데이터를 포함할 수 있다. 비실시간 미디어 데이터는 클라이언트 및 서버 능력(capability)들을 포함할 수 있으나 이에 제한되는 것은 아니다. 이러한 능력들은 두 클라이언트 간의 직접적인 통신에 영향을 주는 데 이용될 수 있다.
제1 클라이언트 측 머신(205)이 스테이지(320)에서 비실시간 미디어 데이터를 교환하면, 방법(300)은 제1 클라이언트 측 머신(205)이 원격 세션 동안 실시간 미디어 데이터를 원격 컴퓨팅 디바이스와 미디어 경로(235) 상에서 교환할 수 있는 스테이지(330)로 계속될 수 있다. 실시간 미디어 데이터는 오디오 또는 비디오 데이터를 포함할 수 있다. 본 발명의 실시예가 실시간 미디어 데이터를 위해 서버 경로(즉, 제1 홉(225) 및 제2 홉(230))를 사용하는 경우, 제1 클라이언트 측 머신(205) 및 제2 클라이언트 측 머신(210) 간 오디오/비디오 데이터의 경로 내에 부가적인 홉들(예컨대, 제1 클라이언트 측 머신(205)으로부터 서버(215)까지 및 서버(215)로부터 제2 클라이언트 측 머신(210)까지)이 있을 것이다. 이러한 부가적인 홉은 예컨대 제1 클라이언트 측 머신(205) 및 제2 클라이언트 측 머신(210) 간 실시간 오디오/비디오 데이터 흐름에서 지연/레이턴시를 증가시킬 수 있다.
본 발명의 실시예는, 미디어 경로(235) 내에 서버(215)를 포함시키지 않으면서, 실시간 미디어 데이터(예컨대, 오디오/비디오 및 다른 양상(modality)들이 부가될 수 있음)를 캡처하고 인코딩하고 직접적으로 제1 클라이언트 측 머신(205)으로부터 제2 클라이언트 측 머신(210)으로 송신할 수 있는 제1 클라이언트 측 머신(205) 상의 원격 미디어 관리자(remote media manager: RMM)(예컨대, 원격 미디어 관리자 애플리케이션(410))를 구비함으로써, 앞서 언급된 지연/레이턴시를 피할 수 있다. 또한, RMM은 인코딩된 실시간 미디어 데이터를 네트워크(220)로부터 수신하고(예컨대, 미디어 경로(235) 상에서 제2 클라이언트 측 머신(210)으로부터 직접적으로 전해짐) 수신되는 인코딩된 실시간 미디어 데이터를 디코딩하고 제2 클라이언트 측 머신(210)으로부터 수신한 디코딩된 실시간 미디어 데이터를 사용자 인터페이스(415)에 직접적으로 렌더링할 수 있다. RMM은 서버(215) 상의 애플리케이션(405)과 함께 작동될 수 있다. 예를 들어, 애플리케이션(405)은 제1 클라이언트 측 머신(205)에 연결된 출력 디바이스(예컨대, 스피커(430)) 및 입력 디바이스(예컨대, 카메라(420) 및 마이크(425))를 사용하여 데이터를 송신하고 수신할 수 있다. RMM은 또한 동일한 입력 및 출력 디바이스들을 사용할 수 있다. 그 결과, RMM은 입력 및 출력 디바이스들을 공유하기 위해 서버(215) 상의 애플리케이션(405)과 함께 작동될 수 있다. 다시 말해, 입력 및 출력 디바이스들은 미디어 경로(235) 상에서 송신/수신되는 데이터 및 서버 경로 상에서 송신/수신되는 데이터 간에 공유될 수 있다.
RMM이 서버(215) 상의 애플리케이션(405)과 함께 작동될 수 있는 다른 예는 미디어 경로(235)로부터의 데이터 및 서버 경로로부터의 데이터가 동기화되는 경우이다. 한 예는 기하 추적(geometry tracking)을 포함할 수 있다. 기하 추적은 (비디오 데이터가 미디어 경로(235) 상에서 제2 클라이언트 측 머신(210)으로부터 직접적으로 송신되어 제1 클라이언트 측 머신(205)으로 곧장 오고 서버 경로를 바이패스하는(bypassing) 경우) 디스플레이(415) 상에 비디오를 그것이 보여져야 할 곳에 위치시키는 것을 감안할 수 있다. 예를 들어, 애플리케이션(405)은 서버 경로에서 제1 클라이언트 측 머신(205)으로 비디오 영역의 위치 및 형상을 보낼 수 있다. 이어서 제1 클라이언트 측 머신(205)은 애플리케이션(405)에 의해 송신된 정보(예컨대, 위치 및 형상)를 추적하는 "프록시"(proxy) 윈도우 상에 (미디어 경로(235) 상에서 오는) 비디오를 렌더링할 수 있다. 애플리케이션(405)은 비디오 위치 및 형상에 일어날 수 있는 임의의 변화를 계속해서 모니터링할 수 있고 이 정보로 제1 클라이언트 측 머신(205)을 계속 업데이트할 수 있다. 잇따라서 제1 클라이언트 측 머신(205)은 애플리케이션(405)의 정보로 "프록시" 윈도우를 계속 업데이트할 수 있다. 이러한 방식으로, 제1 클라이언트 측 머신(205) 상의 비디오 디스플레이는 동기화될 수 있다.
뿐만 아니라, 원격 세션 동안 실시간 미디어 데이터를 원격 컴퓨팅 디바이스와 미디어 경로(235) 상에서 교환하는 제1 클라이언트 측 머신(205)은 제1 클라이언트 측 머신(205)으로부터 원격 컴퓨팅 디바이스로 네트워크 어드레스 변환(network address translation: NAT)을 수행하는 것을 포함할 수 있다. 컴퓨터 네트워킹에서, 네트워크 어드레스 변환(NAT)은 하나의 IP 어드레스 공간을 다른 것으로 재맵핑할 목적을 위해 트래픽 라우팅 디바이스를 가로질러 송신 중(in transit)에 있는 동안 데이터그램 (IP) 패킷 헤더 내의 네트워크 어드레스 정보를 수정하는 프로세스를 포함할 수 있다. 스테이지(330)에서 제1 클라이언트 측 머신(205)이 실시간 미디어 데이터를 교환한 후, 이어서 방법(300)은 스테이지(340)에서 끝날 수 있다.
본 발명에 따른 일 실시예는 실시간 미디어 최적화를 제공하기 위한 시스템을 포함할 수 있다. 그러한 시스템은 메모리 스토리지(memory storage) 및 메모리 스토리지에 연결된 프로세싱 유닛(processing unit)을 포함할 수 있다. 프로세싱 유닛은 원격 세션을 원격 컴퓨팅 디바이스와 수립하도록 동작 가능할 수 있다. 더욱이, 프로세싱 유닛은 원격 세션 동안 비실시간 미디어 데이터를 원격 컴퓨팅 디바이스와 서버 경로 상에서 교환하는 것 및 원격 세션 동안 실시간 미디어 데이터를 원격 컴퓨팅 디바이스와 미디어 경로 상에서 교환하는 것을 행하도록 동작 가능할 수 있다.
본 발명에 따른 다른 실시예는 실시간 미디어 최적화를 제공하기 위한 시스템을 포함할 수 있다. 그러한 시스템은 메모리 스토리지 및 메모리 스토리지에 연결된 프로세싱 유닛을 포함할 수 있다. 프로세싱 유닛은 로컬 컴퓨팅 디바이스 및 원격 컴퓨팅 디바이스 간 원격 세션을 수립하도록 동작 가능할 수 있다. 부가적으로, 프로세싱 유닛은 원격 세션 동안 서버를 포함하는 서버 경로 상에서 로컬 컴퓨팅 디바이스 및 원격 컴퓨팅 디바이스 간에 비실시간 미디어 데이터를 교환하도록 동작 가능할 수 있다. 뿐만 아니라, 프로세싱 유닛은 원격 세션 동안 미디어 경로 상에서 로컬 컴퓨팅 디바이스 및 원격 컴퓨팅 디바이스 간에 오디오 및 비디오 데이터를 포함하는 실시간 미디어 데이터를 교환하도록 동작 가능할 수 있다. 서버는 미디어 경로 내에 있지 않다.
본 발명에 따른 또 다른 실시예는 실시간 미디어 최적화를 제공하기 위한 시스템을 포함할 수 있다. 그러한 시스템은 메모리 스토리지 및 메모리 스토리지에 연결된 프로세싱 유닛을 포함할 수 있다. 프로세싱 유닛은 원격 세션을 원격 컴퓨팅 디바이스와 수립하도록 동작 가능할 수 있다. 프로세싱 유닛이 원격 세션을 수립하도록 동작 가능한 것은 프로세싱 유닛이 서버 경로를 수립하는 것(서버가 서버 경로 내에 포함됨) 및 미디어 경로를 수립하는 것(서버가 서버 경로 내에 포함되지 않고 미디어 경로는 직접적으로 원격 컴퓨팅 디바이스와 수립됨)을 행하도록 동작 가능한 것을 포함할 수 있다. 더욱이, 프로세싱 유닛은 원격 세션 동안 비실시간 미디어 데이터를 원격 컴퓨팅 디바이스와 서버 경로 상에서 교환하는 것 및 원격 세션 동안 실시간 미디어 데이터를 원격 컴퓨팅 디바이스와 미디어 경로 상에서 교환하는 것을 행하도록 동작 가능할 수 있다.
도 5는 컴퓨팅 디바이스(500)를 포함하는 시스템의 블록 다이어그램이다. 본 발명의 실시예에 따라, 앞서 언급된 메모리 스토리지 및 프로세싱 유닛은 도 5의 컴퓨팅 디바이스(500)와 같은 컴퓨팅 디바이스 내에 구현될 수 있다. 하드웨어, 소프트웨어 또는 펌웨어의 임의의 적절한 조합이 그러한 메모리 스토리지 및 프로세싱 유닛을 구현하는 데 사용될 수 있다. 더욱이, 컴퓨팅 디바이스(500)는 가상 머신(virtual machine)에서 또는 물리적인 머신(physical machine) 상에서 실행될 수 있다. 예를 들어, 메모리 스토리지 및 프로세싱 유닛은 컴퓨팅 디바이스(500)로써 또는 컴퓨팅 디바이스(500)와 조합되어 다른 컴퓨팅 디바이스들(518) 중 임의의 것으로써 구현될 수 있다. 앞서 언급된 시스템, 디바이스 및 프로세서는 예시이고 다른 시스템, 디바이스 및 프로세스가 본 발명의 실시예에 따라 앞서 언급된 메모리 스토리지 및 프로세싱 유닛을 포함할 수 있다. 뿐만 아니라, 컴퓨팅 디바이스(500)는 앞서 서술된 바와 같이 제1 클라이언트 측 머신(205) 또는 제2 클라이언트 측 머신(210)을 위한 운영 환경(operating environment)을 포함할 수 있다. 제1 클라이언트 측 머신(205) 또는 제2 클라이언트 측 머신(210)은 다른 환경에서 동작할 수 있고 컴퓨팅 디바이스(500)로 제한되는 것은 아니다.
도 5를 참조하면, 본 발명의 실시예에 따른 시스템은 컴퓨팅 디바이스(500)와 같은 컴퓨팅 디바이스를 포함할 수 있다. 기본적인 일 구성에서, 컴퓨팅 디바이스(500)는 적어도 하나의 프로세싱 유닛(502) 및 시스템 메모리(504)를 포함할 수 있다. 컴퓨팅 디바이스의 구성 및 타입에 따라, 시스템 메모리(504)는 휘발성 메모리(예컨대, 랜덤 액세스 메모리(random access memory: RAM)), 비휘발성 메모리(예컨대, 판독 전용 메모리(read-only memory: ROM)), 플래시 메모리(flash memory) 또는 임의의 조합을 포함할 수 있으나 이에 제한되는 것은 아니다. 시스템 메모리(504)는 운영 시스템(operating system)(505), 하나 이상의 프로그래밍 모듈(506)을 포함할 수 있고 프로그램 데이터(507)를 포함할 수 있다. 예컨대, 운영 시스템(505)은 컴퓨팅 디바이스(500)의 동작을 제어하는 데 적합할 수 있다. 일 실시예에서, 프로그래밍 모듈(506)은 가령 원격 미디어 관리자 애플리케이션(410)을 포함할 수 있다. 뿐만 아니라, 본 발명의 실시예는 그래픽 라이브러리, 다른 운영 시스템 또는 임의의 다른 애플리케이션 프로그램과 함께 행해질 수 있고 임의의 특정 애플리케이션 또는 시스템에 제한되는 것은 아니다. 이러한 기본적인 구성은 도 5에서 점선(508) 내의 컴포넌트들에 의해 도시되어 있다.
컴퓨팅 디바이스(500)는 부가적인 특징 또는 기능을 가질 수 있다. 예를 들어, 컴퓨팅 디바이스(500)는 또한, 예컨대 가령 자기 디스크, 광디스크 또는 테이프와 같은 부가적인 데이터 스토리지 디바이스(분리가능(removable) 및/또는 비분리식(non-removable))를 포함할 수 있다. 그러한 부가적인 스토리지가 분리가능 스토리지(509) 및 비분리식 스토리지(510)에 의해 도 5에 도시되어 있다. 컴퓨팅 디바이스(500)는 또한, 디바이스(500)로 하여금 다른 컴퓨팅 디바이스(518)와 예컨대 인트라넷 또는 인터넷과 같은 분산된 컴퓨팅 환경에서의 네트워크 상에서 통신하도록 할 수 있는 통신 연결(516)을 포함할 수 있다. 통신 연결(516)은 통신 매체(communication media)의 일 예이다.
본 명세서에서 사용되는 용어 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 다른 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현되는 휘발성 및 비휘발성, 분리가능 및 비분리식 매체를 포함할 수 있다. 시스템 메모리(504), 분리가능 스토리지(509) 및 비분리식 스토리지(510)는 모두 컴퓨터 저장 매체 예시(즉, 메모리 스토리지)이다. 컴퓨터 저장 매체는 RAM, ROM, 전기적 소거 가능 ROM(electrically erasable read-only memory: EEPROM), 플래시 메모리 또는 다른 메모리 기술, CD-ROM, 디지털 다기능 디스크(digital versatile disk: DVD) 또는 다른 광학 스토리지, 자기 카세트, 자기 테이프, 자기 디스크 스토리지 또는 다른 자기 스토리지 디바이스, 또는 컴퓨팅 디바이스(500)에 의해 액세스될 수 있고 정보를 저장하는 데 사용될 수 있는 임의의 다른 매체를 포함할 수 있으나, 이에 제한되는 것은 아니다. 임의의 그러한 컴퓨터 저장 매체는 디바이스(500)의 일부일 수 있다. 컴퓨팅 디바이스(500)는 또한 키보드, 마우스, 펜, 음성 입력 디바이스, 터치 입력 디바이스 등과 같은 입력 디바이스(들)(512)를 구비할 수 있다. 디스플레이, 스피커, 프린터 등과 같은 출력 디바이스(들)(514)이 또한 포함될 수 있다. 앞서 언급된 디바이스들은 예시이고 다른 디바이스들이 사용될 수 있다.
본 명세서에서 사용되는 용어 컴퓨터 판독가능 매체는 또한 통신 매체를 포함할 수 있다. 통신 매체는 가령 반송파(carrier wave) 또는 다른 전송 메커니즘과 같이 변조된 데이터 신호 내의 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 다른 데이터에 의해 구현될 수 있고, 임의의 정보 전달 매체를 포함한다. "변조된 데이터 신호"라는 용어는 신호 내에 정보를 인코딩하는 그러한 방식으로 설정된 또는 변경된 하나 이상의 특성을 갖는 신호를 말할 수 있다. 제한이 아니라 예시로서, 통신 매체는 유선 매체(wired media)(가령, 유선 네트워크(wired network) 내지 직결 연결(direct-wired connection)) 및 무선 매체(wireless media)(가령, 음향, 무선주파수(radio frequency: RF), 적외선 및 다른 무선 매체)를 포함할 수 있다.
위에서 언급한 바와 같이, 다수의 프로그램 모듈들 및 데이터 파일들이 운영 시스템(505)을 포함하는 시스템 메모리(504) 내에 저장될 수 있다. 프로세싱 유닛(502) 상에서 실행되는 동안 프로그래밍 모듈(506)(예컨대, 원격 미디어 관리자 애플리케이션(410))은 예컨대 방법(300)의 하나 이상의 전술된 스테이지를 포함하는 프로세스를 수행할 수 있다. 앞서 언급된 프로세스는 예시이고 프로세싱 유닛(502)은 다른 프로세스를 수행할 수 있다. 본 발명의 실시예에 따라 사용될 수 있는 다른 프로그래밍 모듈은 전자 메일 및 연락처 애플리케이션, 워드 프로세싱 애플리케이션, 스프레드시트 애플리케이션, 데이터베이스 애플리케이션, 슬라이드 프리젠테이션 애플리케이션, 드로잉 내지 컴퓨터에 의해 지원되는 애플리케이션 프로그램 등을 포함할 수 있다.
일반적으로, 본 발명의 실시예에 따라, 프로그램 모듈은 루틴, 프로그램, 컴포넌트, 데이터 구조, 그리고 특정 태스크를 수행할 수 있거나 특정 추상화 데이터 타입을 구현할 수 있는 다른 타입의 구조를 포함할 수 있다. 더욱이, 본 발명의 실시예는, 핸드헬드 디바이스, 멀티프로세서 시스템, 마이크로프로세서 기반 내지 프로그래밍 가능 가전 제품, 미니컴퓨터, 메인프레임 컴퓨터 등을 포함하는 다른 컴퓨터 시스템 구성으로써 행해질 수 있다. 본 발명의 실시예는 또한 통신 네트워크를 통해 링크된 원격 프로세싱 디바이스에 의해 태스크가 수행되는 분산 컴퓨팅 환경에서 행해질 수 있다. 분산 컴퓨팅 환경에서, 프로그램 모듈은 로컬 메모리 스토리지 디바이스 및 원격 메모리 스토리지 디바이스 모두에 위치할 수 있다.
뿐만 아니라, 본 발명의 실시예는 이산(discrete) 전자 소자를 포함하는 전자 회로, 논리 게이트를 포함하는 패키징된 또는 집적된 전자 칩, 마이크로프로세서를 이용하는 회로로 또는 전자 소자 또는 마이크로프로세서를 포함하는 하나의 칩 상에서 행해질 수 있다. 본 발명의 실시예는 또한, 예컨대 AND, OR 및 NOT과 같은 논리적 동작을 수행할 수 있는 다른 기술들(기계적, 광학적, 유체 및 양자 기술들을 포함하되 이에 제한되지는 않음)을 사용하여 행해질 수 있다. 부가적으로, 본 발명의 실시예는 범용 컴퓨터 내에서 또는 임의의 다른 회로 내지 시스템에서 행해질 수 있다.
본 발명의 실시예는 가령 컴퓨터 프로세스 (방법), 컴퓨팅 시스템 또는 컴퓨터 프로그램 제품이나 컴퓨터 판독가능 매체와 같은 제조품으로서 구현될 수 있다. 컴퓨터 프로그램 제품은 컴퓨터 시스템에 의해 판독가능하고 컴퓨터 프로세스를 실행하기 위한 명령어들의 컴퓨터 프로그램을 인코딩하는 컴퓨터 저장 매체일 수 있다. 컴퓨터 프로그램 제품은 또한 컴퓨터 시스템에 의해 판독가능하고 컴퓨터 프로세스를 실행하기 위한 명령어들의 컴퓨터 프로그램을 인코딩하는 반송자(carrier) 상의 전파되는 신호일 수 있다. 따라서, 본 발명은 하드웨어로 및/또는 (펌웨어, 상주 소프트웨어, 마이크로-코드 등을 포함하는) 소프트웨어로 구현될 수 있다. 다시 말해, 본 발명의 실시예는 컴퓨터 사용가능 또는 컴퓨터 판독가능 저장 매체(명령어 실행 시스템에 의해 사용되기 위해 또는 명령어 실행 시스템과 관련되어 사용되기 위해 그러한 매체 상에 포함되는 컴퓨터 사용가능 또는 컴퓨터 판독가능 프로그램 코드를 가짐) 상의 컴퓨터 프로그램 제품의 형태를 취할 수 있다. 컴퓨터 사용가능 또는 컴퓨터 판독가능 저장 매체는 명령어 실행 시스템, 장치 또는 디바이스에 의해 사용되기 위해 또는 명령어 실행 시스템, 장치 또는 디바이스와 관련되어 사용되기 위해 프로그램을 포함, 저장, 통신, 전파 또는 전송할 수 있는 임의의 매체일 수 있다.
컴퓨터 사용가능 또는 컴퓨터 판독가능 매체는 예컨대 전자, 자기, 광학, 전자기, 적외선 또는 반도체 시스템, 장치, 디바이스 또는 전파 매체일 수 있으나 이에 제한되는 것은 아니다. 더욱 구체적인 컴퓨터 판독가능 매체 예들(비전면적인 리스트)은, 컴퓨터 판독가능 매체가 다음의 것들, 즉 하나 이상의 전선을 가진 전기 연결, 휴대형 컴퓨터 디스켓, 랜덤 액세스 메모리(random access memory: RAM), 판독 전용 메모리(read-only memory: ROM), 소거가능 프로그램가능 판독 전용 메모리(erasable programmable read-only memory: EPROM 내지 플래시 메모리), 광 파이버, 휴대형 컴팩트 디스크 판독 전용 메모리(compact disc read-only memory: CD-ROM)를 포함할 수 있다. 컴퓨터 사용가능 또는 컴퓨터 판독가능 매체는, 프로그램이 예컨대 종이 내지 다른 매체의 광학 스캐닝을 통해 전자적으로 캡처되고, 이어서 컴파일되거나 해석되거나 아니면 필요한 경우 적절한 방식으로 처리되고, 이어서 컴퓨터 메모리에 저장될 수 있는바, 그 위에 프로그램이 프린트된 종이 또는 임의의 적절한 매체를 포함할 수도 있을 것이라는 점에 유의하시오.
본 발명의 실시예는 예컨대 본 발명의 실시예에 따른 방법, 시스템 및 컴퓨터 프로그램 제품의 블록 다이어그램 및/또는 동작 설명을 참조하여 앞에서 서술되어 있다. 블록 내에서 언급된 기능/행동은 임의의 플로우차트에서 도시된 순서가 뒤바뀌어서 있게 될 수 있다. 예를 들어, 잇달아 도시된 두 블록은 관련된 기능/행동에 따라 그 블록들이 때때로 역순으로 실행될 수 있거나 실제로는 실질적으로 동시에 실행될 수 있다.
본 발명의 소정의 실시예들이 서술되었으나, 다른 실시예들이 존재할 수 있다. 뿐만 아니라, 본 발명의 실시예들이 메모리 및 다른 저장 매체 내에 저장된 데이터와 연관된 것으로 서술되었으나, 데이터는 또한 다른 타입의 컴퓨터 판독가능 매체(하드 디스크, 플로피 디스크 또는 CD-ROM과 같은 이를테면 이차적인 저장 디바이스, 인터넷으로부터의 반송파, 또는 RAM 내지 ROM의 다른 유형) 상에 저장되거나 그로부터 판독될 수 있다. 나아가, 개시된 방법의 스테이지는, 본 발명으로부터 벗어나지 않으면서 스테이지를 재배열하고/하거나 스테이지를 삽입 또는 삭제하는 것에 의함을 포함하는 임의의 방식으로 수정될 수 있다.
본 명세서에 포함된 코드에 관한 저작권을 포함하는 모든 권리가 출원인에게 귀속되고 출원인의 재산이다. 출원인은 본 명세서에 포함된 코드의 모든 권리는 유지하고 보유하며, 허여된 특허의 복사와 관련하여서만 그러한 자료를 복제하는 것을 허가하고 다른 목적을 위해서는 그러하지 않는다.
본 명세서는 예시들을 포함하는 한편, 본 발명의 범주는 이하의 청구항에 의해 나타내어진다. 뿐만 아니라, 본 명세서가 구조적 특징 및/또는 방법적 행동에 특정한 언어로 서술되었으나, 청구항은 앞에서 서술된 특징이나 행동에 제한되지 않는다. 오히려, 앞서 서술된 구체적인 특징 및 행동들은 본 발명의 실시예를 위한 예로서 개시되어 있다.

Claims (15)

  1. 실시간 미디어 최적화(real-time media optimization)를 제공하기 위한 방법으로서,
    원격 컴퓨팅 디바이스와의 원격 세션을 수립하는(establishing) 단계;
    상기 원격 세션 동안 비실시간(non-real-time) 미디어 데이터를 서버 경로(server path) 상에서 상기 원격 컴퓨팅 디바이스와 교환하는 단계; 및
    상기 원격 세션 동안 실시간 미디어 데이터를 미디어 경로(media path) 상에서 상기 원격 컴퓨팅 디바이스와 교환하는 단계를 포함하는,
    방법.
  2. 제1항에 있어서,
    상기 원격 세션을 수립하는 단계는 로컬 컴퓨팅 디바이스에서 실행 중인 클라이언트 및 서버에서 실행 중인 애플리케이션 간의 홉(hop)을 수립하는 단계를 포함하되, 상기 수립되는 홉은 상기 서버 경로 내에 있는,
    방법.
  3. 제1항에 있어서,
    상기 비실시간 미디어 데이터를 상기 서버 경로 상에서 상기 원격 컴퓨팅 디바이스와 교환하는 단계는 비실시간 정보를 상기 서버 경로 내의 서버에 전달하는 단계를 포함하는,
    방법.
  4. 제1항에 있어서,
    상기 비실시간 미디어 데이터를 상기 서버 경로 상에서 상기 원격 컴퓨팅 디바이스와 교환하는 단계는 비실시간 정보를 상기 서버 경로 내의 서버에 전달하는 단계를 포함하되, 상기 비실시간 정보는 로컬 컴퓨팅 디바이스의 위치에 대응하는 정보를 포함하는,
    방법.
  5. 제1항에 있어서,
    상기 실시간 미디어 데이터를 상기 미디어 경로 상에서 상기 원격 컴퓨팅 디바이스와 교환하는 단계는 상기 실시간 미디어 데이터를 캡처하고(capturing) 인코딩하고(encoding) 송신하는 단계를 포함하는,
    방법.
  6. 제1항에 있어서,
    상기 미디어 경로로부터의 상기 실시간 미디어 데이터 및 상기 서버 경로로부터의 상기 비실시간 미디어 데이터를 동기화하는(synchronizing) 단계를 더 포함하는,
    방법.
  7. 제1항에 있어서,
    상기 실시간 미디어 데이터를 상기 미디어 경로 상에서 상기 원격 컴퓨팅 디바이스와 교환하는 단계는 상기 미디어 경로 상에서 상기 원격 컴퓨팅 디바이스로부터 상기 실시간 미디어 데이터를 수신하는 단계, 상기 실시간 미디어 데이터를 디코딩하는(decoding) 단계 및 상기 디코딩된 실시간 미디어 데이터를 렌더링하는(rendering) 단계를 포함하는,
    방법.
  8. 제1항에 있어서,
    상기 실시간 미디어 데이터를 상기 미디어 경로 상에서 상기 원격 컴퓨팅 디바이스와 교환하는 단계는 하나의 어드레스 공간을 다른 어드레스 공간으로 재맵핑(remapping)할 목적으로 네트워크 어드레스 정보를 수정하는 단계를 포함하는,
    방법.
  9. 실시간 미디어 최적화(real-time media optimization)를 제공하기 위한 방법으로서,
    로컬 컴퓨팅 디바이스 및 원격 컴퓨팅 디바이스 간 원격 세션을 수립하는(establishing) 단계;
    상기 원격 세션 동안 서버 경로(server path) 상에서 상기 로컬 컴퓨팅 디바이스 및 상기 원격 컴퓨팅 디바이스 간에 비실시간(non-real-time) 미디어 데이터를 교환하는 단계 - 상기 비실시간 미디어 데이터를 교환하는 단계는 상기 서버 경로 내의 서버를 통해 비실시간 정보를 전달하는 단계를 포함함 - ; 및
    상기 원격 세션 동안 미디어 경로(media path) 상에서 상기 로컬 컴퓨팅 디바이스 및 상기 원격 컴퓨팅 디바이스 간에 오디오 및 비디오 데이터를 포함하는 실시간 미디어 데이터를 교환하는 단계 - 상기 실시간 미디어 데이터를 교환하는 단계는 상기 미디어 경로 내에 상기 서버를 포함시키지 않으면서 상기 로컬 컴퓨팅 디바이스 및 상기 원격 컴퓨팅 디바이스 간에 직접적으로 상기 실시간 미디어 데이터를 교환하는 단계를 포함함 - 를 포함하는,
    방법.
  10. 제9항에 있어서,
    상기 원격 세션을 수립하는 단계는 상기 로컬 컴퓨팅 디바이스에서 실행 중인 클라이언트 및 상기 서버에서 실행 중인 애플리케이션 간의 홉(hop)을 수립하는 단계를 포함하되, 상기 수립되는 홉은 상기 서버 경로 내에 있는,
    방법.
  11. 제9항에 있어서,
    상기 원격 세션을 수립하는 단계는 상기 로컬 컴퓨팅 디바이스에서 실행 중인 클라이언트 내에서 실행 중인 원격 미디어 관리자(remote media manager)와 상기 원격 컴퓨팅 디바이스 간 상기 미디어 경로를 수립하는 단계를 포함하는,
    방법.
  12. 제9항에 있어서,
    상기 비실시간 미디어 데이터를 상기 서버 경로 상에서 상기 원격 컴퓨팅 디바이스와 교환하는 단계는 비실시간 정보를 상기 서버 경로 내의 상기 서버에 전달하는 단계를 포함하되, 상기 비실시간 정보는 상기 로컬 컴퓨팅 디바이스의 위치에 대응하는 정보를 포함하는,
    방법.
  13. 제9항에 있어서,
    상기 미디어 경로로부터의 상기 실시간 미디어 데이터 및 상기 서버 경로로부터의 상기 비실시간 미디어 데이터를 동기화하는(synchronizing) 단계를 더 포함하는,
    방법.
  14. 제9항에 있어서,
    상기 실시간 미디어 데이터를 상기 미디어 경로 상에서 상기 원격 컴퓨팅 디바이스와 교환하는 단계는 상기 미디어 경로 상에서 상기 원격 컴퓨팅 디바이스로부터 상기 실시간 미디어 데이터를 수신하는 단계, 상기 실시간 미디어 데이터를 디코딩하는(decoding) 단계 및 상기 디코딩된 실시간 미디어 데이터를 렌더링하는(rendering) 단계를 포함하는,
    방법.
  15. 실시간 미디어 최적화(real-time media optimization)를 제공하기 위한 시스템으로서,
    메모리 스토리지(memory storage); 및
    상기 메모리 스토리지에 연결된 프로세싱 유닛(processing unit)을 포함하되,
    상기 프로세싱 유닛은,
    원격 세션을 원격 컴퓨팅 디바이스와 수립하는(establishing) 것;
    상기 원격 세션 동안 비실시간(non-real-time) 미디어 데이터를 서버 경로(server path) 상에서 상기 원격 컴퓨팅 디바이스와 교환하는 것; 및
    상기 원격 세션 동안 실시간 미디어 데이터를 미디어 경로(media path) 상에서 상기 원격 컴퓨팅 디바이스와 교환하는 것을 행하도록 동작가능하되,
    상기 프로세싱 유닛이 상기 원격 세션을 수립하는 것을 행하도록 동작가능한 것은 상기 프로세싱 유닛이,
    상기 서버 경로를 수립하는 것 - 상기 서버 경로 내에 서버가 포함됨 - ; 및
    상기 미디어 경로를 수립하는 것 - 상기 서버는 상기 서버 경로에 포함되지 않고 상기 미디어 경로는 상기 원격 컴퓨팅 디바이스와 직접적으로 수립됨 - 을 행하도록 동작가능한 것을 포함하는,
    시스템.
KR1020137014949A 2010-12-14 2011-11-28 원격 세션 상에서의 실시간 미디어 최적화 기법 Active KR101900969B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/967,100 2010-12-14
US12/967,100 US9276972B2 (en) 2010-12-14 2010-12-14 Real-time media optimization over remoted sessions
PCT/US2011/062269 WO2012082347A2 (en) 2010-12-14 2011-11-28 Real-time media optimization over remoted sessions

Publications (2)

Publication Number Publication Date
KR20130143078A true KR20130143078A (ko) 2013-12-30
KR101900969B1 KR101900969B1 (ko) 2018-09-20

Family

ID=46200509

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020137014949A Active KR101900969B1 (ko) 2010-12-14 2011-11-28 원격 세션 상에서의 실시간 미디어 최적화 기법

Country Status (9)

Country Link
US (2) US9276972B2 (ko)
EP (1) EP2652913B1 (ko)
JP (1) JP5961185B2 (ko)
KR (1) KR101900969B1 (ko)
AU (2) AU2011341522B2 (ko)
BR (1) BR112013014766A8 (ko)
CA (1) CA2818516C (ko)
RU (1) RU2595548C2 (ko)
WO (1) WO2012082347A2 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9276972B2 (en) 2010-12-14 2016-03-01 Microsoft Technology Licensing, Llc Real-time media optimization over remoted sessions
JP6353793B2 (ja) * 2015-01-16 2018-07-04 Kddi株式会社 画面共有システム、ソース端末、シンク端末及び画面共有方法
US11016717B1 (en) 2019-11-08 2021-05-25 Microsoft Technology Licensing, Llc Selective electronic content casting

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080080568A1 (en) * 2006-09-29 2008-04-03 Simon Derek Hughes Latency differential mitigation for real time data streams
US20100232319A1 (en) * 2009-03-16 2010-09-16 Fujitsu Limited Recording medium having communication program recorded therein, relay node and communication method

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020041830A (ko) * 1999-10-29 2002-06-03 암만 챨스 비. 텔레비전 화상 회의 시스템
TW575447B (en) 2000-02-02 2004-02-11 Nextech Corp Network system processing method and network system
GB0108041D0 (en) * 2001-03-30 2001-05-23 Nokia Networks Oy Presence service in IP multimedia
US7634533B2 (en) 2004-04-30 2009-12-15 Microsoft Corporation Systems and methods for real-time audio-visual communication and data collaboration in a network conference environment
US7590750B2 (en) * 2004-09-10 2009-09-15 Microsoft Corporation Systems and methods for multimedia remoting over terminal server connections
JP4643386B2 (ja) 2005-08-09 2011-03-02 株式会社野村総合研究所 転送制御プログラム、送受信制御プログラム及びイベント情報送受信システム
US7860808B2 (en) * 2006-01-05 2010-12-28 International Business Machines Corporation System and method for hybrid conservation of fossil fuel
US20080146256A1 (en) 2006-12-19 2008-06-19 Jeffrey Charles Hawkins Sharing data during a voice call using a mobile communications device, and associated user interface
US9253222B2 (en) 2007-02-22 2016-02-02 Match.Com. L.L.C. Synchronous delivery of media content in a collaborative environment
US7953882B2 (en) 2007-07-26 2011-05-31 Realnetworks, Inc. Adaptive variable fidelity media distribution system and method
US7769806B2 (en) * 2007-10-24 2010-08-03 Social Communications Company Automated real-time data stream switching in a shared virtual area communication environment
US20090288007A1 (en) 2008-04-05 2009-11-19 Social Communications Company Spatial interfaces for realtime networked communications
US8732236B2 (en) * 2008-12-05 2014-05-20 Social Communications Company Managing network communications between network nodes and stream transport protocol
EP2053825B1 (en) 2007-10-25 2015-07-08 Alcatel Lucent Distribution of shared content streams in communications networks
US8890874B2 (en) * 2007-12-14 2014-11-18 Microsoft Corporation Changing visual content communication
JP5721634B2 (ja) 2008-12-05 2015-05-20 ソーシャル・コミュニケーションズ・カンパニー リアルタイムカーネル
US8429647B2 (en) 2009-05-06 2013-04-23 Vmware, Inc. Virtual machine migration across network by publishing routes to the associated virtual networks via virtual router after the start of migration of the virtual machine
CN101841563A (zh) 2010-04-16 2010-09-22 上海亚图软件有限公司 服务器控制的基于p2p网游同步方法
US9276972B2 (en) 2010-12-14 2016-03-01 Microsoft Technology Licensing, Llc Real-time media optimization over remoted sessions

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080080568A1 (en) * 2006-09-29 2008-04-03 Simon Derek Hughes Latency differential mitigation for real time data streams
US20100232319A1 (en) * 2009-03-16 2010-09-16 Fujitsu Limited Recording medium having communication program recorded therein, relay node and communication method

Also Published As

Publication number Publication date
US9699225B2 (en) 2017-07-04
RU2595548C2 (ru) 2016-08-27
WO2012082347A2 (en) 2012-06-21
JP5961185B2 (ja) 2016-08-02
CA2818516A1 (en) 2012-06-21
CA2818516C (en) 2018-07-17
AU2011341522A1 (en) 2013-06-06
US9276972B2 (en) 2016-03-01
EP2652913A2 (en) 2013-10-23
CN102571764A (zh) 2012-07-11
JP2014507697A (ja) 2014-03-27
BR112013014766A2 (pt) 2016-10-04
KR101900969B1 (ko) 2018-09-20
EP2652913A4 (en) 2014-07-23
AU2016200543A1 (en) 2016-02-18
BR112013014766A8 (pt) 2017-12-19
AU2016200543B2 (en) 2017-04-06
US20120151008A1 (en) 2012-06-14
AU2011341522B2 (en) 2015-10-29
WO2012082347A3 (en) 2012-08-16
EP2652913B1 (en) 2019-04-24
RU2013127119A (ru) 2014-12-20
US20160112468A1 (en) 2016-04-21

Similar Documents

Publication Publication Date Title
CN113741837B (zh) 信息处理方法、设备、系统及存储介质
US10362072B2 (en) Systems and methods for multimedia multipoint real-time conferencing allowing real-time bandwidth management and prioritized media distribution
US10129313B2 (en) System, method, and logic for managing content in a virtual meeting
TWI865716B (zh) 同步本地房間和遠端共享
JP2015534676A (ja) インスタントメッセージングとビデオ通信システムとのエージェントベース統合のためのシステムおよび方法
WO2020248649A1 (zh) 音视频数据同步播放方法、装置、系统、电子设备及介质
US20190387020A1 (en) Distributed denial of service mitigation for web conferencing
US9699225B2 (en) Real-time media optimization over remoted sessions
KR102198799B1 (ko) 다자간 회의 제공 장치 및 상기 장치에서의 콘텐츠 공유 방법
KR102898091B1 (ko) 사운드 공유 장치 및 방법
CN102571764B (zh) 远程会话上的实时媒体优化
US9503812B2 (en) Systems and methods for split echo cancellation
US10511644B2 (en) Joining executable component to online conference
HK1171135A (en) Real-time media optimization over remoted sessions
HK1171135B (en) Real-time media optimization over remoted sessions
US20240205521A1 (en) Action mirroring in online meetings
CN115914156B (zh) 一种用于协同的方法、设备、介质及程序产品
KR102279576B1 (ko) 컨퍼런스 시스템 및 상기 시스템에서의 컨퍼런스 접속 처리 방법
CN118337763A (zh) 一种视频会议中共享白板的方法、装置、介质和产品
WO2025010981A1 (zh) 一种屏幕共享方法以及相关设备
Yu et al. Web conferencing systems for ubi-media collaboration: Achievements and challenges

Legal Events

Date Code Title Description
PA0105 International application

Patent event date: 20130611

Patent event code: PA01051R01D

Comment text: International Patent Application

PG1501 Laying open of application
N231 Notification of change of applicant
PN2301 Change of applicant

Patent event date: 20150715

Comment text: Notification of Change of Applicant

Patent event code: PN23011R01D

A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20161027

Comment text: Request for Examination of Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20180402

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20180615

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20180914

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20180914

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
FPAY Annual fee payment

Payment date: 20210818

Year of fee payment: 4

PR1001 Payment of annual fee

Payment date: 20210818

Start annual number: 4

End annual number: 4

FPAY Annual fee payment

Payment date: 20220818

Year of fee payment: 5

PR1001 Payment of annual fee

Payment date: 20220818

Start annual number: 5

End annual number: 5

PR1001 Payment of annual fee

Payment date: 20230828

Start annual number: 6

End annual number: 6

PR1001 Payment of annual fee

Payment date: 20240826

Start annual number: 7

End annual number: 7