[go: up one dir, main page]

KR102091414B1 - 방송되는 미디어 관련 전자 메시징 향상 - Google Patents

방송되는 미디어 관련 전자 메시징 향상 Download PDF

Info

Publication number
KR102091414B1
KR102091414B1 KR1020157011005A KR20157011005A KR102091414B1 KR 102091414 B1 KR102091414 B1 KR 102091414B1 KR 1020157011005 A KR1020157011005 A KR 1020157011005A KR 20157011005 A KR20157011005 A KR 20157011005A KR 102091414 B1 KR102091414 B1 KR 102091414B1
Authority
KR
South Korea
Prior art keywords
electronic message
received electronic
program
way
implementations
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020157011005A
Other languages
English (en)
Other versions
KR20150063138A (ko
Inventor
앤트 오즈타스켄트
야로슬라브 보로비치
Original Assignee
구글 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 구글 엘엘씨 filed Critical 구글 엘엘씨
Publication of KR20150063138A publication Critical patent/KR20150063138A/ko
Application granted granted Critical
Publication of KR102091414B1 publication Critical patent/KR102091414B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/08—Annexed information, e.g. attachments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/24—
    • H04L51/32—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21—Monitoring or handling of messages
    • H04L51/224—Monitoring or handling of messages providing notification on incoming messages, e.g. pushed notifications of received messages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/52—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail for supporting social networking services

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본원에 설명된 시스템들, 방법들 및 디바이스들은, 인터넷-가능(Internet-enabled) 디바이스들의 사용자들이, 방송되는 미디오 프로그램으로부터의 콘텐츠를 실시간으로 공유하는 것을 가능케한다. 특히, 일부 구현들에서, 시스템들, 방법들 및 디바이스들은, 개별 인터넷-가능 제2 디바이스들을 사용하여 제1 타입의 디바이스상에 제시되는 방송되는 미디어 콘텐츠로부터의 콘텐츠를 공유하도록 동작가능하다. 예를 들어, 서버 시스템은, 전자 메시지가 특정한 현재 방송되는 미디어 프로그램과 연관되는지를 결정하기 위해, 클라이언트 디바이스로부터 수신된 전자 메시지를 파싱한다. 수신된 전자 메시지가 특정한 현재 방송되는 미디어 프로그램과 연관된다는 결정에 응답하여, 서버 시스템은, 현재 방송되는 미디어 프로그램으로부터의 콘텐츠를 포함함으로써, 수신된 전자 메시지로부터, 대응하는 보충 전자 메시지를 생성한다. 이후 서버 시스템은, 디스플레이를 위한 서비스(예를 들어, 마이크로-블로그 애플리케이션)에 보충 전자 메시지를 제공한다.

Description

방송되는 미디어 관련 전자 메시징 향상{ENRICHING BROADCAST MEDIA RELATED ELECTRONIC MESSAGING}
[0001] 본 개시내용은 일반적으로 방송되는 미디어 전달에 소셜 미디어 애플리케이션들을 링크하는 것에 관한 것이며, 특히 사용자들이 방송되는 미디어 프로그램들로부터의 콘텐츠를 실시간으로 공유하도록 하는 것에 관한 것이다.
[0002] 인터넷-가능 전자 디바이스들, 예를들어 컴퓨터들, 태블릿들 및 스마트 폰들의 사용자들은 미디어 시청 및 청취 경험들을 다른 사용자들과 공유하는 것에 점점더 관심을 가지고 있다. 미디어 콘텐츠를 공유하는 것은 미디어 콘텐츠가 온라인으로 이용가능할 때(예를 들어, 미디어 콘텐츠가 스트리밍 비디오, 웹 페이지들, 스크립트들로부터의 쿼트들, 다운로드가능한 뮤직 또는 비디오들 일때) 비교적 간단해 지며, 온라인으로 이용가능한 경우에 사용자는 관심 미디어 콘텐츠에의 링크들로 간단하게 전자 메시지들을 전송할 수 있다. 그러나, 사용자가 방송되는 미디어 콘텐츠에 대한 정보를 실시간으로 공유하는 것은 더 어려운데, 왜냐하면 이러한 콘텐츠는 통상적으로 아직 온라인으로 이용가능하지 않기 때문이다. 예를들어, 만일 뷰어가 TV 시트콤 및 영화로부터 쿼트를 공유하기를 원하면, 그 뷰어는 이메일, 텍스트, 트위트 또는 소셜 네트워크 업데이트를 송신할 필요가 있거나 또는 관련 쿼트를 가진 자신의 친구들에게 한번 또는 수번의 전화 통화 및/또는 인스턴트 메시지들을 수행할 필요가 있다. 어쨌든 가능한 경우라도, 콘텐츠가 방송중일 때 방송되는 미디어 콘텐츠(예를 들어, 텔레비젼) 간의 통합의 부족으로 인해 그리고 미디어 콘텐츠에 대한 정보를 공유하기 위하여 사용자에 의해 어떤 통신 디바이스가 사용될지라도 방송되는 미디어 콘텐츠 방송으로의 링크, 또는 그것의 스니핏, 또는 그것으로부터의 쿼트를 사용자가 친구에게 전송하는 것은 훨씬 더 어렵다.
[0003] 다시 말해서, 사용자들은 그들이 TV를 통해 시청중에 있는 미디어 콘텐츠와 관련된 정보를 공유하는 것은 비효율적인데, 왜냐하면, 이러한 정보를 공유하는 것은 현재 하나의 매체로부터 다른 매체로 미디어 콘텐츠를 링크시키기 위하여 시청 경험을 넘어서는 일부 동작들을 사용자들이 취할 것을 요구하기 때문이다. 앞의 예를 참조하면, 소셜 네트워킹 웹사이트상에서 TV 시트콤으로부터의 쿼트를 공유하는 것을 시도하는 사용자는 쿼트를 로케이팅하기 위하여 쿼트를 타이핑하거나 스크립트의 텍스트를 온라인으로 검색해야 한다. 그리고, 비록 스크립트의 텍스트가 온라인으로 이용가능할지라도, 온라인 텍스트를 절단 및 오려 붙이는 것은 번거로울 수 있다.
[0004] 본원에 설명된 시스템들, 방법들 및 디바이스들은, 인터넷-가능(internet-enabled) 디바이스들의 사용자들이, 방송되는 미디어 프로그램으로부터의 콘텐츠를 실시간으로 공유하는 것을 가능케한다. 예를들어, 일부 구현들에서, 시스템들, 방법들, 디바이스들은 개별 인터넷-가능 제2 디바이스들을 사용하여 제1 타입의 디바이스상에 제시된 방송되는 미디어 콘텐츠와 연관된 코멘트들을 공유하고 시청하도록 동작가능하다.
[0005] 특히, 일부 구현들에서, 시스템들, 방법들 및 디바이스들은 쿼트들, 스크린샷들, 비디오-스니핏들 등과 같은 프로그램으로부터의 콘텐츠를 사용하여 방송되는 미디어 프로그램에 대한 뷰어들로부터의 전자 메시지들을 보충하도록 동작가능하다. 예를들어, 방송되는 미디어 프로그램의 뷰어는 적어도 서버에 전자 메시지를 송신하기 위하여 클라이언트 디바이스(예를들어, 랩탑, 태블릿 컴퓨터, 스마트폰 등)을 사용한다. 결국, 서버는 전자 메시지가 특정한 현재 방송되는 미디어 프로그램과 연관되는지를 결정하기 위해, 클라이언트 디바이스로부터 수신된 전자 메시지를 파싱한다. 수신된 전자 메시지가 특정한 현재 방송되는 미디어 프로그램과 연관된다는 결정에 응답하여, 서버는, 현재 방송되는 미디어 프로그램으로부터의 콘텐츠를 포함시킴으로써, 수신된 전자 메시지로부터, 대응하는 보충 전자 메시지를 생성한다. 이후 서버는, 디스플레이를 위한 서비스(예를 들어, 마이크로-블로그 애플리케이션)에 보충 전자 메시지를 제공한다. 대안적으로, 수신된 전자 메시지가 특정한 현재 방송되는 미디어 프로그램과 연관되지 않는다는 결정에 응답하여, 서버는 디스플레이를 위한 전술한 서비스에, 수신된 전자 메시지를 제공한다.
[0006] 일부 구현들에서, 특정의 방송되는 미디어 프로그램과 연관된 전자 메시지를 보충하는 방법은, 프로세서 및 상기 프로세서에 의해 실행하기 위한 프로그램들을 저장하는 메모리를 포함하는 서버에서, 전자 메시지를 수신하는 단계, 상기 수신되는 전자 메시지가 현재 방송되는 미디어 프로그램에 대한 참조를 포함하는지 여부를 결정하는 단계, 적어도 상기 수신되는 전자 메시지가 상기 참조를 포함한다는 결정에 응답하여, 상기 수신되는 전자 메시지로부터 대응하는 보충된 전자 메시지를 생성하는 단계 및 상기 보충된 전자 메시지를 디스플레이를 위한 서비스에 제공하는 단계를 포함한다. 대응하는 보충된 전자 메시지를 생성하는 단계는 적어도, 참조된 현재 방송되는 미디어 프로그램으로부터 콘텐츠의 디스플레이가능한 표시자를 추가하는 것을 포함한다.
[0007] 일부 구현들에서, 방법은 수신되는 전자 메시지가 상기 참조를 포함하지 않는다는 결정에 응답하여, 상기 수신되는 전자 메시지를 디스플레이를 위한 서비스에 제공하는 단계를 더 포함한다.
[0008] 일부 구현들에서, 전자 메시지는 마이크로-포스트(micro-post), 소셜 네트워킹 메시지, 채팅 방 메시지 또는 인스턴스(instant) 메시지 중 적어도 하나를 포함한다.
[0009] 일부 구현들에서, 상기 수신되는 전자 메시지가 상기 참조를 포함하는지 여부를 결정하는 단계는 상기 수신되는 전자 메시지가 특정의 현재 방송되는 미디어 프로그램과 연관되는지 여부를 결정하기 위해서 적어도 하나의 현재 방송되는 미디어 프로그램과 연관되고 상기 메모리에 저장되는 미디어 프로그램 콘텐츠 데이터에 기초하여 상기 수신되는 전자 메시지를 평가하는 단계를 포함한다.
[0010] 일부 구현들에서, 상기 수신되는 전자 메시지를 평가하는 단계는,
상기 수신되는 전자 메시지와 특정의 현재 방송되는 미디어 프로그램 간의 관계를 나타내는 값을 상기 수신되는 전자 메시지에 할당하는 단계; 상기 값이 제1 임계치를 만족시키는지 여부를 결정하는 단계; 및 상기 값이 상기 제1 임계치를 만족시킨다는 결정에 응답하여, 상기 수신되는 전자 메시지가 특정의 현재 방송되는 미디어 프로그램과 연관된다고 결정하는 단계를 포함한다.
[0011] 일부 구현들에서, 방법은 또한 상기 수신되는 전자 메시지의 콘텐츠에 적어도 기초하여 상기 대응하는 보충된 전자 메시지를 생성할지 여부를 결정하는 단계를 더 포함한다.
[0012] 일부 구현들에서, 대응하는 보충된 전자 메시지를 생성할지 여부를 결정하는 단계는 상기 수신되는 전자 메시지로부터의 텍스트가 상기 참조되는 현재 방송되는 미디어 프로그램으로부터의 하나 이상의 서브타이틀들 중 적어도 하나에 매칭하는지 여부를 결정하기 위해서 상기 수신되는 전자 메시지로부터의 텍스트를 상기 하나 이상의 서브타이틀들에 비교하는 단계를 포함한다.
[0013] 일부 구현들에서, 상기 수신되는 전자 메시지로부터의 텍스트를 상기 하나 이상의 서브타이틀들에 비교하는 단계는 상기 수신되는 전자 메시지의 단어들을 제1 서브타이틀의 단어들에 비교하는 단계; 상기 수신되는 전자 메시지의 단어들과 상기 제1 서브타이틀의 단어들 간의 매칭 개수를 식별하는 단계; 및 매칭되는 단어들의 개수가 미리 결정된 임계치를 초과하는 경우에 상기 수신되는 전자 메시지를 쿼트(quote)로서 식별하는 단계를 포함한다.
[0014] 일부 구현들에서, 상기 단어들을 비교하는 단계는 저 해밍 거리 세트(low Hamming distance set)를 결정 및 선택하는 단계를 포함한다.
[0015] 일부 구현들에서, 제1 시간스탬프(timestamp)는, 수신된 전자 메시지에 의해 참조되는 방송되는 미디어 프로그램의 대응하는 순간(moment)을 나타내며, 적어도 하나의 매칭 서브타이틀(matching subtitle)과 관련하여 메모리에 저장된다.
[0016] 일부 구현들에서, 전자 메시지로부터의 텍스트와 하나 이상의 서브타이틀들 간의 비교는 내고장성(fault-tolerant)이다.
[0017] 일부 구현들에서, 비교에 이용되는 하나 이상의 서브타이틀들은, 수신된 전자 메시지와 연관된 시간 표시자(time indicator)에 관하여 특정의 경과된 지속시간(particular elapsed duration)으로부터의 하나 이상의 서브타이틀들로 제한된다.
[0018] 일부 구현들에서, 방법은, 텍스트가 적어도 하나의 서브타이틀에 매칭한다는 결정에 응답하여, 적어도 하나의 매칭 서브타이틀과 연관된 대응하는 제1 시간스탬프를 식별하는 단계; 및 적어도 제1 시간스탬프에 기초하여 현재 플레이하는 방송되는 미디어 프로그램의 스크린샷을 메모리로부터 선택하는 단계를 더 포함한다. 선택된 스크린샷은 제1 시간스탬프에 인접한 개별 제2 시간스탬프를 갖는다.
[0019] 일부 구현들에서, 스크린샷을 선택하는 단계는 또한 이미지 품질에 기초한다.
[0020] 일부 구현들에서, 방법은, 하나 이상의 현재 방송되는 미디어 프로그램들과 연관된 클로즈드-캡션(closed-caption) 데이터 및 서브타이틀들 중 적어도 하나를 획득(acquiring)하는 단계; 및 각각의 획득된 서브타이틀 또는 클로즈드-캡션 데이터 부분이 제공가능했던 시간을 나타내는 대응하는 시간스탬프들과 함께, 획득된 서브타이틀들 또는 클로즈드-캡션 데이터를 포함하도록 메모리에 저장된 탐색 인덱스(search index)를 업데이트하는 단계를 더 포함한다.
[0021] 일부 구현들에서, 방법은, 하나 이상의 방송되는 미디어 프로그램이 방송될 때 하나 이상의 방송되는 미디어 프로그램로부터 스크린샷들을 획득하는 단계 ―스크린샷들은 규칙적인 간격들로 획득됨―; 및 각각의 획득된 스크린샷이 제공가능했던 시간을 나타내는 대응하는 시간스탬프들과 함께, 획득된 스크린샷들을 포함하도록 메모리에 저장된 탐색 인덱스를 업데이트하는 단계를 더 포함한다.
[0022] 일부 구현들에서, 방법은, 하나 이상의 방송되는 미디어 프로그램이 방송될 때 하나 이상의 방송되는 미디어 프로그램로부터 비디오 클립들(video clips)을 획득하는 단계 ―비디오 클립들은 규칙적인 간격들로 획득됨―; 및 각각의 획득된 비디오 클립이 제공가능했던 시간을 나타내는 대응하는 시간스탬프들과 함께, 획득된 비디오 클립을 포함하도록 메모리에 저장된 탐색 인덱스를 업데이트하는 단계를 더 포함한다.
[0023] 제1 항의 방법으로서, 대응하는 보충(supplemental) 전자 메시지를 생성하는 단계는, 참조되는 방송되는 미디어 프로그램과 연관된 콘텐츠를 식별하는 단계; 및 적어도 식별된 콘텐츠의 디스플레이가능 표시자로, 수신된 전자 메시지를 보충하는 단계를 포함한다.
[0024] 일부 구현들에서, 콘텐츠를 식별하는 단계는, 텍스트가 하나 이상의 서브타이틀들 중 적어도 하나와 매칭하는지를 결정하기 위해, 수신된 전자 메시지로부터의 텍스트를, 참조되는 현재 방송되는 미디어 프로그램으로부터의 하나 이상의 서브타이틀들에 비교하는 단계; 및 텍스트가 적어도 하나의 서브타이틀과 매칭한다는 결정에 응답하여, 적어도 하나의 매칭 서브타이틀과 연관된 대응하는 제1 시간스탬프를 식별하는 단계를 포함한다.
[0025] 일부 구현들에서, 제1 시간스탬프는, 수신된 전자 메시지에 의해 참조되는 프로그램에서의 대응하는 순간을 표시하며, 적어도 하나의 매칭 서브타이틀과 관련하여 메모리에 저장된다.
[0026] 일부 구현들에서, 전자 메시지로부터의 텍스트와 하나 이상의 서브타이틀들 간의 비교는 내고장성이다.
[0027] 일부 구현들에서, 비교에 이용되는 하나 이상의 서브타이틀들은, 수신된 전자 메시지와 연관된 시간 표시자에 관하여 특정의 경과된 지속시간으로부터의 하나 이상의 서브타이틀들로 제한된다.
[0028] 일부 구현들에서, 디스플레이가능 표시자는 서브타이틀들 중 하나 이상의 서브타이틀로부터의 쿼트(quote)를 포함한다.
[0029] 일부 구현들에서, 콘텐츠를 식별하는 단계는, 적어도 제1 시간스탬프에 기초하여 현재 플레이하는 방송되는 미디어 프로그램의 스크린샷을 메모리로부터 선택하는 단계를 더 포함한다. 선택된 스크린샷은 제1 시간스탬프에 인접한 개별 제2 시간스탬프를 가지며; 디스플레이가능 표시자는 선택된 스크린샷을 포함한다.
[0030] 일부 구현들에서, 디스플레이가능 표시자는 비디오 클립에 대한 표현(representation)으로서 선택된 스크린샷을 포함한다.
[0031] 일부 구현들에서, 디스플레이가능 표시자는 비디오 클립에 대한 표현(representation)으로서 선택된 스크린샷을 포함한다.
[0032] 앞서 설명된 방법들의 하나 이상의 단계들을 실행하기 위한 명령들을 포함하는 컴퓨팅 시스템 및 비일시적 컴퓨터 판독가능 저장 매체가 또한 본원에서 개시된다.
[0033] 본 개시물의 보다 특정한 설명은 다양한 구현들의 피처들(features)을 참조로 이루어질 수 있으며, 이들 피처들 중 일부는 첨부된 도면들에 예시된다. 그러나, 첨부된 도면들은 단지 본 개시물의 몇몇 예만을 예시하며 따라서 제한적으로 고려되지 않으며, 이는 상기 설명이 다른 유효 피처들을 허용할 수 있기 때문이다.
[0034] 도 1은, 예시적인 클라이언트-서버 환경의 블록도이다.
[0035] 도 2는 또 다른 예시적인 예시적인 클라이언트-서버 환경의 블록도이다.
[0036] 도 3은 서버 시스템의 예시적인 구현의 블록도이다.
[0037] 도 4는 일부 구현들에 따른 예시적인 스크린샷들의 개략도이다.
[0038] 도 5는 서버 시스템 방법의 흐름도(flowchart representation)이다.
[0039] 도 6은 서버 시스템 방법의 흐름도이다.
[0040] 도 7은 서버 시스템 방법의 흐름도이다.
[0041] 도 8은 서버 시스템 방법의 흐름도이다.
[0042] 도 9는 서버 시스템 방법의 흐름도이다.
[0043] 도 10은 서버 시스템 방법의 흐름도이다.
[0044] 통상적 관례에 따라, 도면들에 예시된 다양한 피처들은 실척대로 도시되지 않을 수도 있다. 따라서, 다양한 피처들의 디멘전들(dimensions)은 명확화를 위해 임의대로 확대 또는 축소될 수 있다. 부가로, 도면들 중 일부는 제시된 시스템, 방법 또는 디바이스의 모든 컴포넌트들을 도시하지 않을 수도 있다. 마지막으로, 명세서 및 도면들 전반에 걸쳐 동일한 특징들을 표시하기 위해 동일한 참조번호들이 이용될 수 있다.
[0045] 본원에서 설명되는 시스템들, 방법들 및 디바이스들은, 인터넷-가능(Internet-enabled) 디바이스들의 사용자들로 하여금 방송되는 미디어 프로그램들로부터의 콘텐츠를 실시간으로 공유할 수 있게 한다. 특히, 몇몇 구현들에서, 시스템들, 방법들 및 디바이스들은, 방송되는 미디어 프로그램에 대한 뷰어(viewer)들로부터의 전자 메시지들을, 쿼트(quote)들, 스크린샷들, 비디오-스닛핏(video-snippet)들 등과 같은, 프로그램으로부터의 콘텐츠로 보충하도록 동작가능하다. 예를 들어, 방송되는 미디어 프로그램의 뷰어는, 서버 시스템에 전자 메시지를 적어도 전송하기 위해 클라이언트 디바이스(예를 들어, 랩탑, 태블릿 컴퓨터, 스마트폰)을 이용한다. 이어서, 서버 시스템은 클라이언트 디바이스로부터 수신된 전자 메시지를 파싱하여(parse), 그 전자 메시지가 특정의 현재 방송되는 미디어 프로그램과 관련되는지 여부를결정한다. 수신된 전자 메시지가 특정의 현재 방송되는 미디어 프로그램과 관련되는 것으로 결정되는 것에 응답하여, 서버 시스템은, 현재 방송되는 미디어 프로그램으로부터의 콘텐츠를 포함시킴으로써, 수신된 전자 메시지로부터, 대응하는 보충된 전자 메시지를 생성한다. 그런 다음, 서버 시스템은 보충된 전자 메시지를 디스플레이를 위한 서비스(예를 들어, 마이크로-블로그 애플리케이션)에 제공한다. 대안적으로, 수신된 전자 메시지가 특정의 현재 방송되는 미디어 프로그램과 관련되지 않는 다고 결정되는 것에 응답하여, 서버 시스템은 수신된 전자 메시지를 상기 언급된 디스플레이를 위한 서비스에 제공한다.
[0046] 첨부 도면들에 도시된 예시적인 구현들의 철저한 이해를 제공하기 위해, 다양한 상세사항들이 본원에서 설명된다. 하지만, 본 발명은 이러한 구체적인 상세사항들 없이도 실행될 수 있다. 그리고, 예시적인 구현들의 보다 적절한 양상들을 불필요하게 모호하게 하지 않도록 하기 위해, 잘 알려진 방법들, 절차들, 컴포넌트들 및 회로들은 속속들이 상세히 설명되지 않는다.
[0047] 도 1은 클라이언트-서버 환경(100)의 예시적인 구현의 블록도이다. 특정의 구체적인 피쳐들이 도시되지만, 당업자들이라면 본 개시내용으로부터, 간결함을 위해 그리고 본원에서 개시되는 구현들의 보다 적절한 양상들을 모호하게 하지 않도록 하기 위해, 다양한 다른 피쳐들이 도시되지 않았다는 것을 이해할 것이다. 그러한 목적을 달성하기 위해, 클라이언트-서버 환경(100)은 셋톱박스(102), 텔레비젼(TV)(110), 제2 스크린 클라이언트 디바이스(120)(예를 들어, 랩탑, 태블릿 컴퓨터, 스마트폰 등), 통신 네트워크(104), 미디어 모니터링 서버(130), 브로드캐스트 시스템(140), 콘텐츠 제공자(150) 및 소셜 네트워크 서버(170)를 포함한다. 제2 스크린 클라이언트 디바이스(120), 미디어 모니터링 서버(130), 브로드캐스트 시스템(140), 콘텐츠 제공자(150) 및 소셜 네트워크 서버(170)는, 서로와 그리고/또는 다른 디바이스들 및 시스템들과 정보를 교환하기 위해, 통신 네트워크(104)에 연결될 수 있다. 또한, 도 1은 상기 언급한 디바이스들 및 시스템들의 각각의 디바이스 및 시스템 중에서 단지 하나 만을 포함하지만, 당업자라면 본 개시내용으로부터, 임의의 개수의 이러한 디바이스들 및/또는 시스템들이 클라이언트-서버 환경에 제공될 수 있으며, 특히 몇몇 디바이스들은 완전히 없을 수도 있다는 것을 이해할 것이다. 다시 말해서, 클라이언트-서버 환경(100)은 본 개시내용의 보다 적절한 피쳐들을 논의하기 위해 제공되는 단지 하나의 예일 뿐이다.
[0048] 일부 구현들에서, 미디어 모니터링 서버(130)는 단일 서버 시스템으로서 구현되지만, 다른 구현들에서, 미디어 모니터링 서버(130)는 다수의 서버들의 분산형 시스템으로서 구현된다. 단지 설명의 편의를 위해, 미디어 모니터링 서버(130)는 하기에서, 단일 서버 시스템 상에 구현되는 것으로서 설명된다. 유사하게, 일부 구현들에서, 소셜 네트워크 서버(170)는 단일 서버 시스템으로서 구현되지만, 다른 구현들에서, 소셜 네트워크 서버(170)는 다수의 서버들의 분산형 시스템으로서 구현된다. 단지 설명의 편의를 위해, 소셜 네트워크 서버(170)는 하기에서, 단일 서버 시스템 상에서 구현되는 것으로서 설명된다. 유사하게, 일부 구현들에서, 브로드캐스트 시스템(140)은 단일 서버 시스템으로서 구현되지만, 다른 구현들에서, 브로드캐스트 시스템(140)은 다수의 서버들의 분산 시스템으로서 구현된다. 단지 설명의 편의를 위해, 브로드캐스트 시스템(140)은 하기에서, 단일 서버 시스템 상에 구현되는 것으로서 설명된다. 유사하게, 일부 구현들에서, 콘텐츠 제공자(150)는 단일 서버 시스템으로서 구현되지만, 다른 구현들에서, 콘텐츠 제공자(150)는 다수의 서버들의 분산형 시스템으로서 구현된다. 단지 설명의 편의를 위해, 콘텐츠 제공자(150)는 하기에서, 단일 서버 시스템 상에 구현되는 것으로서 설명된다. 또한, 브로드캐스트 시스템(140) 및 콘텐츠 제공자(150)의 기능은 단일 서버 시스템 내로 결합될 수 있다. 부가적으로 그리고/또는 대안적으로, 간결함을 위해 단지 하나의 브로드캐스트 시스템 및 단지 하나의 콘텐츠 제공자만이 도 1에 도시되었지만, 당업자라면 본 개시내용으로부터, 브로드캐스트 시스템 및 콘텐츠 제공자 각각의 더 적은 수 또는 더 많은 수가 클라이언트-서버 환경의 구현시에 존재할 수 있다는 것을 이해할 것이다.
[0049] 일부 구현들에서, 셋톱박스(102) 및 TV(110)는 결합하여 제공된다. 셋톱박스(102)는 브로드캐스트 시스템(140) 등으로부터의 미디어 콘텐츠를 포함하는 신호들을 수신 및 디코딩하도록 구성된다. 일부 구현들에서, 셋톱박스(102)는 또한, 미디어 콘텐츠 등을 포함하는 신호들을 수신하기 위해 인터넷 가능하다. 동작에 있어서, 셋톱박스(102)는 브로드캐스트 시스템(140) 등으로부터 수신되는 신호를 디코딩하고, 오디오 및 비디오 콘텐츠를 디스플레이를 위해 TV(110)에 제공한다. 도시된 예에서는 TV가 이용되었지만, 당업자라면 본 개시내용으로부터, 컴퓨터들, 랩탑 컴퓨터들, 태블릿 컴퓨터들, 스마트-폰들 등을 포함하는 임의의 개수의 디스플레이 디바이스들이, 비디오 스트림을 디스플레이하고 그리고 관련된 오디오 스트림을 플레이(play)하기 위해 이용될 수 있다는 것을 이해할 것이다. 부가적으로 그리고/또는 대안적으로, 셋톱박스(102) 및 TV(110)의 기능들은 단일 디바이스 내로 결합될 수 있다.
[0050] 일부 구현들에서, 셋톱박스(102)는, 통신 네트워크(104)에 연결될 수 있고, 비디오 스트림들을 수신할 수 있고, 비디오 스트림들로부터 정보를 추출할 수 있고, 그리고 TV(110)(또는 다른 디스플레이 디바이스)를 이용한 디스플레이를 위해 비디오 스트림들을 제시할 수 있는 임의의 컴퓨터 디바이스이다. 일부 구현들에서, 셋톱박스(102)는, 케이블 TV 및/또는 위성 TV를 위한 수신기, 디지털 비디오 리코더(DVR), 디지털 미디어 수신기, TV 튜너, 컴퓨터, 및/또는 TV 신호들을 출력하는 임의의 다른 디바이스로서 구성될 수 있다. 일부 구현들에서, TV(110)는, 인터넷에 연결가능하지 않고, 그리고 오버-디-에어 브로드캐스트 또는 위성 또는 케이블 연결을 통해 수신되는 디지털 및/또는 아날로그 TV 콘텐츠를 디스플레이하는 통상의 TV 디스플레이일 수 있다. 텔레비젼들에서 전형적인 바와 같이, TV(110)는 디스플레이(118) 및 스피커들(119)을 포함한다.
[0051] 본원에서 이용되는 바와 같이, TV 신호는, TV 채널에 대응하는 오디오 및/또는 비디오 컴포넌트들을 포함하는, 전기적, 광학적, 또는 다른 타입의 데이터 전송 매체(data transmitting medium)이다. 일부 구현들에서, TV 신호는, 지상파를 이용하여 방송되는(terrestrial over-the-air) TV 브로드캐스트 신호 또는 케이블-시스템 또는 위성 시스템 상에 분배되는/브로드캐스트되는 사인(sign)이다. 일부 구현들에서, TV 신호는 네트워크 연결을 통해 데이터로서 전송된다. 예를 들어, 셋톱박스(102)는 인터넷 연결로부터 비디오 스트림들을 수신할 수 있다. TV 신호의 오디오 및 비디오 컴포넌트들은 본원에서 종종 오디오 신호들 및 비디오 신호들로서 지칭된다. 일부 구현들에서, TV 신호는, TV(110) 상에 디스플레이되고 있는 TV 채널에 해당한다.
[0052] 제2 스크린 클라이언트 디바이스(120)는 컴퓨터, 랩탑 컴퓨터, 태블릿 디바이스, 넷북, 인터넷 키오스크, 개인용 정보 단말기(personal digital assistant), 휴대폰, 게이밍 디바이스, 또는 미디어 모니터링 서버(130)와 통신할 수 있는 임의의 다른 디바이스와 같은, 하나 이상의 통신 네트워크들(104)에 연결할 수 있는 임의의 컴퓨터 디바이스일 수 있다. 일부 구현들에서, 제2 스크린 클라이언트 디바이스(120)는 하나 이상의 프로세서들(121), 하드 디스크 드라이브와 같은 비-휘발성 메모리(122), 디스플레이(128), 스피커들(129), 및 마이크로폰(123)을 포함한다. 제2 스크린 클라이언트 디바이스(120)는 또한, 키보드, 마우스 및/또는 트랙-패드(미도시)와 같은 입력 디바이스들을 가질 수 있다. 일부 실시예들에서, 제2 스크린 클라이언트 디바이스(120)는 터치 스크린 디스플레이, 디지털 카메라 및/또는 기능성을 부가할 수 있는 임의의 개수의 보충 디바이스들을 포함한다.
[0053] 일부 구현들에서, 제2 스크린 클라이언트 디바이스(120)는 무선 또는 유선 연결에 의해 셋톱박스(102)에 연결될 수 있다. 그러한 연결이 존재하는 일부 구현들에서, 제2 스크린 클라이언트 디바이스(120)는 선택적으로, 셋톱박스(102)에 의해 제공되는 명령들, 정보 및/또는 디지털 콘텐츠(통틀어서 "제2 스크린 정보")에 따라 작동할 수 있다(그리고 그 반대도 가능하다). 일부 구현들에서, 셋톱박스(102)는, 제2 스크린 클라이언트 디바이스(120)가 디스플레이(128) 및/또는 스피커(129)에 디지털 콘텐츠를 제공하게 하는 명령들을 제2 스크린 클라이언트 디바이스(120)에 지시하며(issue), 이러한 디지털 콘텐츠는 클라이언트(102)에 의해 TV(110)에 제공되는 상보적인 디지털 콘텐츠이거나 그와 관련된다.
[0054] 일부 구현들에서, 제2 스크린 클라이언트 디바이스(120)는 클라이언트 디바이스가, 예를 들면 TV(110)의 스피커들(119)로부터 음향(오디오 콘텐츠)을 수신하는 것을 가능하게 하는 마이크로폰(123)을 포함한다. 마이크로폰(123)은 제공될 때, 제2 스크린 클라이언트 디바이스(120)가 비디오 콘텐츠와 연관되는 오디오 콘텐츠/사운드트랙을 레코딩하는 것을 가능하게 하며, 그에 따라 오디로 콘텐츠/사운드트랙은 제2 스크린 클라이언트 디바이스(120) 상에 핑거프린팅될 수 있다.
[0055] 일부 구현들에서, 제2 스크린 클라이언트 디바이스(120)는 메모리(122)에 저장되는 하나 이상의 애플리케이션들(125)을 포함한다. 프로세서(121)는 미디어 모니터링 서버(130)로부터 수신되는 명령들의 세트에 따라 하나 이상의 애플리케이션들을 실행시킨다.
[0056] 통신 네트워크(104)는 유선 및 무선 근거리 네트워크(LAN) 및/또는 광역 네트워크(WAN)의 임의의 조합, 이를테면 인터넷의 일부를 포함하여, 인트라넷, 엑스트라넷, 또는 무선 통신사에 의해 제공되는 무선 네트워크일 수 있다. 통신 네트워크(104)는 제2 스크린 클라이언트 디바이스(120)와 미디어 모니터링 서버(130) 사이에 통신 성능(communication capability)을 제공하기에 충분하다. 일부 구현들에서, 통신 네트워크(104)는 전송 제어 프로토콜/인터넷 프로토콜(TCP/IP)을 이용하여 정보를 전송하기 위해 하이퍼텍스트 전송 프로토콜(HTTP)을 이용한다. HTTP는 통신 네트워크(104)를 통해 이용가능한 다양한 리소스들에 클라이언트 디바이스(120)가 액세스하도록 허용한다. 그러나, 본원에서 설명되는 다양한 구현들은 임의의 특정의 프로토콜의 이용으로 제한되지 않는다.
[0057] 일부 구현들에서, 미디어 모니터링 서버(130)는 미디어 모니터링 서버(130)와 통신 네트워크(104) 사이의 통신을 용이하게 하는 프론트엔드 서버(134)를 포함한다. 프론트엔드 서버(134)는 제2 스크린 클라이언트 디바이스(120)로부터 전자 메시지들을 수신한다. 하기에서 보다 상세히 설명되는 바와 같이, 일부 실시예들에서, 전자 메시지는 마이크로-포스트, 소셜 네트워킹 메시지, 채팅 방 메시지, 및 인스턴트 메시지 중 적어도 하나이며; 그리고 콘텐츠 정보는 비디오 스트림, 그의 일부, 및/또는 그 일부의 참조이다. 비디오 스트림의 일부에 대한 참조는 비디오 스트림의 콘텐츠를 참조하는 시간 표시자 및/또는 디지털 마커(digital marker)를 포함할 수 있다. 일부 구현들에서, 콘텐츠 정보는 TV(110) 및 셋톱박스(102)의 조합에 의해 제공되는(즉, 플레이되는) 비디오 스트림으로부터 유도된다.
[0058] 일부 구현들에서, 프론트엔드 서버(134)는 제2 스크린 클라이언트 디바이스(120)에 명령들의 세트를 전송하도록 구성된다. 일부 구현들에서, 프론트엔드 서버(134)는 콘텐츠 파일들, 콘텐츠 파일들에 대한 링크들 및/또는 콘텐츠 파일들과 연관되는 메타데이터를 송신하도록 구성된다. "콘텐츠 파일"이라는 용어는, 비디오 파일, 이미지 파일, 음악 파일, 웹 페이지, 이메일 메시지, SMS 메시지, 콘텐츠 피드(content feed), 광고, 쿠폰, 플레이리스트, 또는 XML 문서(document)를 포함하지만, 이에 제한되지는 않는 임의의 포맷의 콘텐츠 또는 임의의 문서를 포함한다. 일부 구현들에서, 프론트엔드 서버(134)는 하나 이상의 비디오 스트림들을 전송하거나 수신하도록 구성된다. 일부 실시예들에서, 프론트엔드 서버(134)는, 통신 네트워크(104) 상에서 브로드캐스트 시스템(140) 및/또는 콘텐츠 제공자(150)로부터 직접적으로 콘텐츠를 수신하도록 구성된다.
[0059] 일부 구현들에서, 미디어 모니터링 서버(130)는, 브로드캐스트 모니터 모듈(135)을 포함하고, 브로드캐스트 모니터 모듈(135)은 방송되는 미디어 프로그래밍을 수신 및 기록하고, 방송되는 미디어 프로그램들의 핑거프린트들을 생성하고, 서브타이틀들 및/또는 클로즈드-캡션 정보를 캡쳐하고, 브로드캐스트 시스템(140) 및/또는 콘텐츠 제공자(150)에 의해 브로드캐스팅된 미디어 콘텐츠의 스크린샷들을 캡쳐하도록 구성된다. 일부 구현들에서, 미디어 모니터링 서버(130)는 콘텐츠 핑거프린트들, 서브타이틀 및/또는 클로즈드-캡션 정보, 및 스크린샷들을 저장하는 프로그램 콘텐츠 데이터베이스(132)를 포함한다. 일부 구현들에서, 프로그램 콘텐츠 데이터베이스(132)는 분산형 데이터베이스이다.
[0060] 일부 실시예들에서, 미디어 모니터링 서버(130)는 전자 메시지 프로세싱 모듈(131)을 포함한다. 동작시, 전자 메시지 프로세싱 모듈(131)은 클라이언트 디바이스(예를 들면, 클라이언트 디바이스(120))로부터 프론트엔드 서버(134)를 통해서 전자 메시지를 수신한다. 전자 메시지 프로세싱 모듈(131)은, 전자 메시지가, 예를 들면 브로드캐스트 시스템(140) 또는 콘텐츠 제공자(150)에 의해 제공되는 특정의 현재 방송되는 미디어 프로그램과 연관되는지를 결정하기 위해, 수신된 전자 메시지를 파싱한다. 예를 들면, 전자 메시지 프로세싱 모듈(131)은, 마이크로-포스트가 특정의 시트콤 또는 다른 텔레비젼 프로그램과(즉, 그에 관하여) 관련되는지를 결정하기 위해, 마이크로-포스트 등을 파싱한다. 수신된 전자 메시지가 특정의 현재 방송되는 미디어 프로그램과 연관되는 것을 결정하는 것에 응답하여, 전자 메시지 프로세싱 모듈(131)은, 수신된 전자 메시지로부터, 프로그램 콘텐츠 데이터베이스(132)로부터 검색된 현재 방송되는 미디어 프로그램으로부터의 콘텐츠를 포함함으로써, 대응하는 보충된 전자 메시지를 생성한다. 전자 메시지 프로세싱 모듈(131)은 그 후 보충된 전자 메시지를 디스플레이를 위한 서비스(예를 들면, 마이크로-블로그 애플리케이션)에 제공한다. 예를 들면, 전자 메시지는 소셜 네트워크 서버(170)에 의해 제공되는 마이크로-블로그 애플리케이션과 연관된 마이크로-블로그일 수 있다. 따라서, 클라이언트 디바이스(120)로부터 본래의 마이크로-포스트를 수신 및 포스팅하는 대신, 소셜 네트워크 서버(170)는 미디어 모니터링 서버(130)로부터의 보충된 마이크로-포스트를 수신 및 포스팅하고, 이는 특정의 현재 방송되는 미디어 프로그램으로부터의 콘텐츠를 포함한다. 대안적으로, 수신된 전자 메시지가 특정의 현재 방송되는 미디어 프로그램과 연관되지 않는 것을 결정하는 것에 응답하여, 전자 메시지 프로세싱 모듈(131)은 수신된 전자 메시지를 전술된 디스플레이를 위한 서비스(예를 들면, 전술된 바와 같은 마이크로-포스트)에 제공한다.
[0061] 일부 구현들에서, 브로드캐스트 시스템(140)은 TV 프로그램들(141)과 같은 미디어 콘텐츠를 포함한다. 즉, 브로드캐스트 시스템(140)은 텔레비젼 프로그램들과 같은 미디어 콘텐츠의 전자 카피들을 포함한다. 일부 구현들에서, 브로드캐스트 시스템(140)은 또한, TV 프로그램들(141) 중 하나 이상과 연관되는 메타데이터(142) 및 애플리케이션 프로그램 인터페이스 명령들(143)을 포함한다. 일부 구현들에서, 애플리케이션 프로그램 인터페이스 명령들(143)은, 특정의 TV 프로그램(141)을 연관된 메타데이터(142)와 링크시키고 그리고/또는 TV 프로그램(141) 및 연관된 메타데이터(142)를 외부 데이터 및/또는 서비스들, 이를테면 소셜 네트워킹 애플리케이션과 링크시키기 위해, 클라이언트 디바이스에 제공될 수 있으며 그리고/또는 클라이언트-서버 모델 등 하에서 브로드캐스트 시스템(140)에 의해 실행될 수 있는 명령들을 포함한다. 일부 구현들에서, 메타데이터(142)는 서브타이틀들 및/또는 클로즈드-캡션 정보를 포함할 수 있다. 일부 구현들에서, 서브타이틀들 및/또는 클로즈드-캡션 정보는 TV 프로그램 콘텐츠(141)에 삽입된다. 유사하게, 일부 구현들에서, 콘텐츠 제공자(150)는 부가적으로 및/또는 대안적으로, TV 프로그램들(151)과 같은 미디어 콘텐츠뿐만 아니라, TV 프로그램들(151) 중 하나 이상과 연관되는 메타데이터(152)를 포함한다.
[0062] 일부 구현들에서, 소셜 네트워크 서버(170)는 사용자들, 브랜드들, 컴파니들 및/또는 그룹들의 프로파일들을 포함하는 프로파일들(171)을 포함한다. 일부 구현들에서, 소셜 네트워크 서버(170)는, 포스팅 사용자와 연관된 다른 사용자들에 의해 시청 가능한 전자 메시지들을 사용자가 포스팅하도록 허용하는 애플리케이션을 제공한다.
[0063] 도 2는 일부 구현들에 따른 제2 스크린 클라이언트 디바이스(120)의 예시적인 스크린샷의 예의 개략도이다. 제2 스크린 클라이언트 디바이스(120)의 디스플레이(128)는 마이크로-포스트들 등을 보충하기 위한 애플리케이션의 사용자 인터페이스(220)를 디스플레이한다. 일부 구현들에서, 사용자 인터페이스(220)는 적어도 2 개의 섹션들(221 및 222)을 포함하도록 구성된다. 2 개의 섹션들이 도 2를 참조하여 설명된 예시적인 구현에 포함되지만, 더 적거나 더 많은 수의 섹션들이 다양한 다른 구현들에 따라 사용자 인터페이스에 포함될 수 있다는 것을 당업자들은 인지할 것이다.
[0064] 일부 구현들에서, 제1 섹션(221)은, 사용자 인터페이스(220)가 텔레비젼 프로그램과 동기화되었다는 것을 나타내기 위해 텔레비젼 프로그램과 연관된 이미지를 디스플레이하도록 구성된다. 예를 들면, 제1 섹션(221)은 텔레비젼 프로그램으로부터의 최근의 스크린샷(즉, 비디오 프레임)을 디스플레이할 수 있다. 부가적으로 및/또는 대안적으로, 텔레비젼 프로그램과 연관된 로고 및/또는 프로모션 이미지가 또한 디스플레이될 수 있다.
[0065] 일부 구현들에서, 제2 섹션(222)은, 사용자가 마이크로-포스트를 기록하고 이를 하나 이상의 소셜 네트워크 애플리케이션들로 포스팅하도록 허용하는 하나 이상의 필드들을 디스플레이하도록 구성된다. 예를 들면, 제2 섹션(222)은, 사용자가 마이크로-포스트 메시지를 입력할 수 있는 마이크로-포스트 애플리케이션 필드(231)를 포함한다. 부가적으로, 일부 구현들에서, 제2 섹션은 제1 및 제2 포스트 필드들(232 및 233)을 포함하고, 이것들은 사용자가 각각의 제1 및 제2 소셜 네트워크 애플리케이션들에 대한 마이크로-포스트 메시지를 입력하는 것을 가능하게 한다.
[0066] 도 3은 도 1을 참조하여 앞서 논의된 미디어 모니터링 서버(130)의 예시적인 구현의 블록도이다. 도 3에 예시된 미디어 모니터링 서버(130)는 도 1에 예시된 미디어 모니터링 서버(130)와 유사하고 이로부터 적응된다. 각각의 구현에 공통인 엘리먼트들은 공통 참조 번호들을 포함하고, 간략함을 위해 도 1과 도 3 사이의 차이들만이 여기에 설명된다. 또한, 임의의 특정의 특징들이 예시되지만, 간략함을 위해 그리고 본원에 개시된 구현의 더 적절한 양상들을 모호하게 하지 않기 위해 다양한 다른 특징들이 예시되지 않았다는 것을 당업자들은 본 개시로부터 인지할 것이다.
[0067] 이를 위해, 일부 구현들에서, 미디어 모니터링 서버(130)는 하나 이상의 프로세싱 유닛들(CPU들)(302), 하나 이상의 네트워크 또는 다른 통신 인터페이스들(308), 메모리(306) 및 이들 및 다양한 다른 컴포넌트들을 상호 접속하기 위한 하나 이상의 통신 버스들(304)을 포함한다. 통신 버스들(304)은, 시스템 컴포넌트들 사이의 통신들을 상호 접속 및 제어하는 회로(때때로 칩셋으로 불림)를 포함할 수 있다. 메모리(306)는 DRAM, SRAM, DDR RAM과 같은 고속 랜덤 액세스 메모리 또는 다른 랜덤 액세스 고체 상태 메모리 디바이스들을 포함하고, 하나 이상의 자기 디스크 저장 디바이스들, 광학 디스크 저장 디바이스들, 플래시 메모리 디바이스들과 같은 비휘발성 메모리 또는 다른 비-휘발성 고체 상태 저장 디바이스들을 포함할 수 있다. 메모리(306)는 선택적으로 CPU(들)(302)로부터 원격에 위치된 하나 이상의 저장 디바이스들을 포함할 수 있다. 메모리(306) 내의 비-휘발성 및 휘발성 메모리 디바이스(들)를 비롯해서, 메모리(306)는 비일시적인 컴퓨터 판독 가능 저장 매체를 포함한다. 일부 구현들에서, 메모리(306) 또는 메모리(306)의 비일시적인 컴퓨터 판독 가능 저장 매체는 다음의 프로그램들, 모듈들 및 데이터 구조들, 또는 운영 시스템(316)을 포함하는 그의 서브세트, 및 네트워크 통신 모듈(318)을 저장한다.
[0068] 일부 구현들에서, 메모리(306)는 또한 도 1에 관련하여 앞서 논의된 모듈들, 즉, 전자 메시지 프로세싱 모듈(131), 브로드캐스트 모니터링 모듈(135) 및 프로그램 콘텐츠 데이터베이스(132) 중 하나 이상의 가상 구현들을 포함한다. 일부 구현들에서, 전자 메시지 프로세싱 모듈(131), 브로드캐스트 모니터링 모듈(135) 및 프로그램 콘텐츠 데이터베이스(132) 각각은, 메모리(306)로부터 별개일 수 있는 하드웨어, 소프트웨어 및 펌웨어의 각각의 적절한 조합에 제공된다.
[0069] 운영 시스템(316)은 다양한 기본 시스템 서비스들을 처리하고 하드웨어 종속적인 작업들을 수행하기 위한 절차들을 포함한다.
[0070] 네트워크 통신 모듈(318)은 인터넷, 다른 광역 네트워크들, 로컬 영역 네트워크들, 도시권 네트워크들 등과 같은 하나 이상의 통신 네트워크들 및 하나 이상의 통신 네트워크 인터페이스들(308)(유선 또는 무선)을 통해 다른 디바이스들과의 통신을 용이하게 한다. 도 1을 추가로 참조하면, 네트워크 통신 모듈(318)은 프론트엔드 서버(134)에 통합될 수 있다.
[0071] 앞서 언급된 바와 같이, 프로그램 콘텐츠 데이터베이스(132)는 가령 TV 프로그램들(이에 제한되지 않음)과 같은 다양한 방송되는 미디어 프로그램들과 연관된 핑거프린트들, 스크린샷들 및 서브타이틀들 및/또는 클로즈드-캡션 정보의 적절한 조합을 저장하도록 구성될 수 있다. 예를 들면, 프로그램 콘텐츠 데이터 베이스(132)는 다양한 방송되는 미디어 프로그램들과 연관된 전자 프로그램 가이드 정보(331), 스크린샷들(332), 서브타이틀들(및/또는 클로즈드-캡션 정보)(333) 및 핑거프린트들(334)을 저장한다.
[0072] 일반적으로, 전자 프로그램 가이드들은 TV, 라디오 및/또는 다른 미디어의 사용자들에게 현재 및 다가오는 프로그래밍에 대한 디스플레이 가능하거나 및/또는 청취 가능한 스케줄링 정보의 메뉴들을 제공한다. 종종, 프로그램마다 기초하여, 프로그램 타이틀들에 부가하여, 전자 프로그램 가이드들은 캐릭터들, 플롯 라인들, 해시 태그들 등에 관한 정보를 포함한다. 이로써, 일부 구현들에서, 전자 프로그램 가이드들 내의 정보가 탐색될 수 있고, 키워드들 및 캐릭터 네임들과 같은 엘리먼트들이 프로그램 콘텐츠 데이터베이스(132)의 전자 프로그램 가이드 정보(331)에 저장된다. 일부 구현들에서, 연관된 프로그램 콘텐츠 데이터는 프로그램마다 기초하여 인덱싱된다. 예를 들면, 도 3을 추가로 참조하면, 전자 프로그램 가이드 정보(331)는 제1 프로그램과 연관된 전자 프로그램 가이드 데이터(331a), 및 N 번째 프로그램과 연관된 전자 프로그램 가이드 데이터(331a)를 포함한다. 마찬가지로, 저장된 스크린샷들(332), 서브타이틀들(333) 및 핑거프린트들(334)은 또한 프로그램마다 기초하여 인덱싱될 수 있다.
[0073] 앞서 논의된 바와 같이, 일부 구현들에서, 전자 메시지 프로세싱 모듈(131)은, 클라이언트 디바이스들로부터 수신된 전자 메시지들을 보충할 때를 결정하고 결정될 때 수신된 전자 메시지들 중 일부에 연관된 콘텐츠를 부가하기 위해 프로그램 콘텐츠 데이터베이스(132)를 사용하도록 구성된다. 이를 위해, 일부 구현들에서, 전자 메시지 프로세싱 모듈(131)은 메시지 파싱 모듈(310), 콘텐츠 매칭 모듈(311) 및 보충 모듈(312)을 포함한다.
[0074] 일부 구현들에서, 메시징 파싱 모듈(310)은 (제2 스크린 디바이스로부터의 사용자에 의해 전송된 ) 수신된 전자 메시지를 메모리에 저장되고 적어도 하나의 현재 방송되는 미디어 프로그램과 연관된 미디어 프로그램 콘텐츠 데이터에 기초하여 평가하여, 수신된 전자 메시지가 특정한 방송되는 미디어 프로그램과 연관되는지 여부를 결정한다. 예를 들어, 아래에 더 상세히 설명되는 바와 같이, 전자 메시지는, 전자 메시지 내의 키워드들 및 다른 팩터들에 대하여 분석되고, 전자 프로그램 가이드로부터의 데이터 및/또는 캡쳐된 캡션들 및/또는 클로즈드-캡션 데이터의 매칭에 기초하여 수신된 전자 메시지와 특정의 현재 방송되는 미디어 프로그램 사이의 관계를 나타내는 값(예를 들어, 스코어)을 할당받는다. 매칭 스코어를 증가시키는 일부 다른 팩터들은 다음을 포함하지만, 다음으로 제한되는 것은 아니다. 일부 브로드캐스터들은 쇼 동안에 스크린에 해시 태그 등(예를 들어, "Dancing with the Stars"에 대한 #DWTS)을 디스플레이한다. 시스템 서버들은 클라이언트 디바이스에 의해 캡쳐된 비디오 스트림의 부분에 OCR(optical character recognition)을 적용함으로써 그러한 표시자를 추출할 수 있다. 이러한 온 스크린 표시자가 있는 프로그램을 방송하는 동안 게시되는 마이크로-포스트는 그 프로그램에 대한 것일 가능성이 높다. 예를 들어, 마이크로-포스트들은 배우 이름들, 캐릭터 이름들, 작품속 광고들, 명소들, 소리들, 현장들 등에 관한 참조를 포함할 수 있다. 이와 같이, 프로그램 이름과 배우 또는 일부 다른 연관된 프로그램 엘리먼트 둘 모두를 지칭하는 마이크로-포스트는 그 프로그램에 대한 것일 가능성이 높다. 할당된 값은 수신된 전자 메시지가, 브로드캐스팅되고 있는 특정의 프로그램과 연관되는 확률을 측정하는 데에 사용될 수 있다. 이를 위해, 메시징 파싱 모듈(310)은 명령들의 세트(310a), 및 휴리스틱 및 메타데이터(310b)를 포함한다.
[0075] 일부 구현들에서, 콘텐츠 매칭 모듈(311)은, 특정의 방송되는 미디어 프로그램과 연관되는 것으로 결정된, 수신된 전자 메시지가 또한 쿼트 및/또는 캐릭터 참조를 포함하는지 여부를 결정한다. 예를 들어, 아래에 더욱 상세하게 논의되는 바와 같이, 쿼트의 존재는, 수신된 전자 메시지로부터의 텍스트를 참조된 현재 방송되는 미디어 프로그램으로부터의 하나 또는 그보다 많은 서브타이틀들에 비교하여 텍스트가 하나 또는 그보다 많은 서브타이틀들 중 적어도 하나와 매칭하는지 여부를 결정함으로써 식별된다. 유사하게, 캐릭터 참조의 존재는, 캐릭터 이름들을 수신된 전자 메시지의 텍스트와 비교함으로써 식별된다. 이를 위해, 콘텐츠 매칭 모듈(311)은 명령들의 세트(311a), 및 휴리스틱 및 메타데이터(311b)를 포함한다.
[0076] 일부 구현들에서, 보충 모듈(312)은 참조된 현재 방송되는 미디어 프로그램으로부터의 콘텐츠의 적어도 디스플레이가능한 표시자를 추가함으로써 수신된 전자 메시지로부터, 대응하는 보충된 전자 메시지를 생성한다. 예를 들어, 보충 모듈(312)은 쿼트, 스크린샷, 스크린샷에 대한 썸네일 링크, 및/또는 프로그램 콘텐츠 데이터베이스(132)로부터의 비디오 클립 식별자를 검색하고, 검색된 콘텐츠 아이템을 수신된 전자 메시지에 링크하여 보충 전자 메시지를 생성한다. 이를 위해, 보충 모듈(312)은 명령들의 세트(312a) 및 휴리스틱 및 메타데이터(312b)를 포함한다.
[0077] 일부 구현들에서, 브로드캐스트 모니터 모듈(135)은, 전자 프로그램 가이드들, 방송 중에 방송되는 미디어 프로그램, 및/또는 제3자 소스들(예를 들어, 트리뷴(Tribune) 미디어 서비스들)로부터 방송되는 미디어 프로그램들에 대한 정보를 수집하도록 구성된다. 이후, 브로드캐스트 모니터 모듈(135)은 수집된 정보를 프로그램 콘텐츠 데이터베이스(132)에 저장한다. 이를 위해, 일부 구현들에서, 브로드캐스트 모니터 모듈(135)은 모니터링 모듈(321), 콘텐츠 획득 모듈(322), 및 인덱싱 모듈(323)을 포함한다.
[0078] 일부 구현들에서, 모니터링 모듈(321)은 현재의 그리고 곧 있을 미디어 방송들을 식별한다. 예를 들어, 모니터링 모듈(321)은, 프로그램 콘텐츠 데이터 베이스(132)의 키워드들 및 캐릭터 이름들(전자 프로그램 가이드 정보(331)에 추후에 저장됨)과 같은 엘리먼트들을 식별하기 위해 전자 프로그램 가이드들과 제3자 소스들에서 정보를 탐색할 수 있다. 이를 위해, 모니터링 모듈(321)은 명령들의 세트(321a) 및 휴리스틱 및 메타데이터(321b)를 포함한다.
[0079] 일부 구현들에서, 콘텐츠 획득 모듈(322)은, 콘텐츠를 프로그램 콘텐츠 데이터베이스(132)에 추가하기 위해서, 방송 중에 현재 방송되는 미디어 프로그램들과 연관된 콘텐츠를 획득한다. 이를 위해, 콘텐츠 획득 모듈(322)은 명령들의 세트(322a) 및 휴리스틱 및 메타데이터(322b)를 포함한다. 콘텐츠 획득의 예들이 도 6 및 도 7을 참고로 하여 아래에 설명된다.
[0080] 일부 구현들에서, 콘텐츠 인덱싱 모듈(323)은, 콘텐츠 획득 모듈(322)에 의해 획득된 콘텐츠를 프로그램 콘텐츠 데이터베이스(132)로 인덱싱하여, 획득된 콘텐츠를 추호 사용을 위해 검색될 수 있도록 동작한다. 일부 구현들에서, 획득된 콘텐츠는 프로그램 단위로 인덱싱된다. 이를 위해, 콘텐츠 인덱싱 모듈(323)은 명령들의 세트(323a), 및 휴리스틱 및 메타데이터(323b)를 포함한다.
[0081] 도 1 내지 도 3을 계속 참고하면서, 도 4는 일부 구현들에 따른 TV(110) 및 제2 스크린 클라이언트 디바이스(120)의 예시적인 스크린샷들의 개략도이다. TV(110)의 디스플레이(118)는 텔레비젼 네트워크에 의해 방송되는 텔레비젼 프로그램(502)을 디스플레이한다. TV가 도시되었지만, 당업자는, 본원에 개시된 시스템들 및 방법들이 임의의 미디어 제공 디바이스와 함께 사용될 수 있다는 것을 본 개시물로부터 인식할 것이다. 제2 스크린 클라이언트 디바이스(120)의 디스플레이(128)는 텔레비젼 프로그램(502)과 연관된 마이크로-포스트들을 공유하기 위해 소셜 네트워킹 애플리케이션의 사용자 인터페이스(520)를 디스플레이한다.
[0082] 일부 구현들에서, 사용자 인터페이스(520)는 3개의 섹션들(521, 524, 525)을 포함하도록 구성된다. 3개의 섹션들이 도 4를 참고로 하여 설명된 예시적인 구현에 포함되지만, 당업자는, 더 적거나 또는 더 많은 수의 섹션들이 다양한 다른 구현들에 따른 사용자 인터페이스에 포함될 수 있다는 것을 인식할 것이다
[0083] 일부 구현들에서, 제1 섹션(521)은, 사용자 인터페이스(520)가 특정의 소셜 네트워킹 애플리케이션과 특정하게 연관된 콘텐츠를 디스플레이하고 있음을 사용자에게 표시하기 위하여, 특정의 소셜 네트워킹 애플리케이션과 연관된 이미지를 디스플레이하도록 구성된다. 예컨대, 제1 섹션(521)은 소셜 네트워킹 애플리케이션과 연관된 프로모션 이미지 및/또는 로고를 디스플레이할 수 있다.
[0084] 일부 구현들에서, 제2 섹션(524)은, 텔레비젼 프로그램(502)과 연관될 수 있는 마이크로-포스트들을 공유하기 위해 사용자가 사용하는 소셜 네트워킹 애플리케이션의 사용자 인터페이스를 디스플레이하도록 구성된다. 예컨대, 사용자가 텔레비젼 프로그램(502)과 연관된 포스트-스트림에 관심이 있을 때, 제2 섹션은 텔레비젼 프로그램과 연관된 포스트 스트림 루트(524a)를 디스플레이한다. 일부 구현들에서는, 사용자가 포스트 스트림 루트(524a)를 탐색 및 선택하는 것에 응답하여, 포스트 스트림 루트(524a)가 디스플레이될 수 있다. 일부 구현들에서는, 사용자를 관여시키는 것 없이, 클라이언트 애플리케이션이 텔레비젼 프로그램(502)에 핑거프린팅하고 그리고 소셜 네트워킹 서버로부터 포스트 스트림 루트(524a)를 요청하는 것에 응답하여, 포스트 스트림 루트(524a)가 디스플레이될 수 있다.
[0085] 포스트 스트림 루트(524a)는 하나 이상의 사용자 마이크로-포스트들과 연관될 수 있다. 도 4에 도시된 예에서, 적어도 세 개의 사용자 마이크로-포스트들(524b, 524c, 524d)이 포스트 스트림 루트(524a)와 연관된다. 위에서 논의된 바와 같이, 일부 구현들에서, 방송되는 미디어 프로그램(예컨대, 텔레비젼 프로그램(502))과 연관된 사용자 마이크로-포스트들은, 소셜 네트워킹 서비스에 의한 디스플레이 이전에 강화 또는 보충된다. 예컨대, 제1 마이크로-포스트(524b)는 쿼트(531)를 포함한다. 아래에 더욱 상세히 논의되는 바와 같이, 본래의 마이크로-포스트가 텔레비젼 프로그램의 캐릭터를 쿼트하려는 사용자 시도를 포함했다고 결정하는 것에 응답하여, 쿼트(예컨대, 쿼트(531))의 정확한 카피가 마이크로-포스트에 부가될 수 있다. 유사하게, 그리고 또한 아래에 더욱 상세히 논의되는 바와 같이, 마이크로-포스트가 캐릭터에 대한 참조를 포함한다고 결정하는 것에 응답하여, 이미지 또는 비디오 클립에 대한 링크 또는 섬네일 이미지가 사용자 마이크로-포스트에 부가될 수 있다. 예컨대, 제2 마이크로-포스트(524c)는 사용자 마이크로-포스트에 의해 참조되는 캐릭터의 스크린샷의 섬네일 이미지를 포함한다.
[0086] 일부 구현들에서, 제3 섹션(525)은, 소셜 네트워킹 애플리케이션을 사용하는 것과 연관된 다수의 선택 가능한 커맨드들을 디스플레이하도록 구성된다. 일부 구현들에서, 각각의 선택 가능한 커맨드는 아이콘 또는 버튼 등등으로 디스플레이된다. 예컨대, 도 4에 도시된 바와 같이, 제3 섹션(525)은 네 개의 선택 가능한 커맨드 버튼들 525a("Deselect"), 525b("Share with Google+"), 525c("Share with Other"), 525d("Select Another")을 포함한다. 일부 구현들에서, 선택 가능한 커맨드들은, 애플리케이션을 이용하는 상당 수의 사용자들에 의해 역사적으로 빈번하게 선택되었거나 또는 빈번하게 선택될 것으로 예상되는 커맨드들이다. 일부 구현들에서, 제3 섹션(525)은, 주변 디바이스, 예컨대 마우스 또는 키보드를 이용하는 것 그리고/또는 디스플레이(128)가 터치-스크린 디스플레이로서 인에이블링된다면 디스플레이(128)를 터치하는 것 중 적어도 하나에 의해 사용자가 선택 가능한 커맨드들 중 하나 이상을 선택하게 하도록 구성된다.
[0087] 도 5는 서버 시스템 방법의 예시적 구현의 흐름도(500)이다. 일부 구현들에서, 방법은, 방송되는 미디어 프로그램들과 연관된 다양한 타입들의 데이터를 포함하는 탐색 인덱스를 형성하기 위하여 브로드캐스트 모니터 모듈에 의해 수행된다. 방법은, 하나 이상의 현재 방송되는 미디어 프로그램 및 곧 방송되는 미디어 프로그램(one or more currently and soon-to-be broadcast media programs)과 연관된 콘텐츠 데이터를 식별하여 저장한다. 예컨대, 방법은, 키워드들, 캐릭터 이름들, 플롯 라인 정보, 및 해시 태그들과 같은 엘리먼트들을 식별하기 위해 하나 이상의 전자 프로그램 가이드들을 탐색(501)한다. 또한, 방법은, 하나 이상의 전자 프로그램 가이드들로부터 식별된 정보를 추출(502)하는 것을 포함한다. 선택적으로, 방법은, 하나 이상의 전자 프로그램 가이드들로부터 추출된 다양한 타입들의 데이터를 보충하기 위해 제3자 데이터베이스들을 탐색(503)하는 것을 포함한다. 방법은, 식별 및 추출된 데이터를 인덱싱(504)하는 것을 포함한다. 일부 구현들에서, 데이터는 프로그램에 의해 인덱싱된다. 일부 구현들에서, 데이터는 채널에 의해 또는 시간-슬롯 또는 다른 편리한 방법에 의해 인덱싱된다.
[0088] 도 6은 서버 시스템 방법의 예시적 구현의 흐름도(600)이다. 일부 구현들에서, 방법은, 방송되는 미디어 프로그램들과 연관된 다양한 타입들의 데이터를 포함하는 탐색 인덱스를 부가시키기 위하여 브로드캐스트 모니터 모듈에 의해 수행된다. 더욱 구체적으로, 방법은, 특정의 미디어 프로그램(예컨대, 텔레비젼 쇼)의 방송 중에 실시간으로 서브타이틀들 또는 클로즈드-캡션 데이터를 캡쳐하고, 그리고 캡쳐된 서브타이틀들 또는 클로즈드-캡션 데이터를 탐색 인덱스에 저장한다.
[0089] 이를 위해, 방법은, 프로그램이 현재 브로드캐스팅되고 있는지를 결정(601, 즉, 프로그램 지속시간이 유효한지의 여부를 결정)하는 단계를 포함한다. 프로그램 지속시간이 유효하다면(601 - 예), 방법은, 프로그램과 연관된 서브타이틀들 또는 클로즈드-캡션 데이터를 캡쳐하는 단계를 포함한다. 예컨대, 도 1-도 2를 참조하면, 브로드캐스트 모니터 모듈(135)은 비디오 스트림들 및 연관된 데이터(예컨대, 클로즈드-캡션 데이터를 포함함)를, 그것이 브로드캐스팅됨에 따라 수신하여 파싱하도록 동작한다. 또한, 방법은, 특정의 캐릭터들에 기인하는 쿼트들을 생성하기 위해, 캡쳐된 서브타이틀 및/또는 클로즈드-캡션 데이터를 파싱(603)하는 단계를 포함한다. 다시 말해, 캐릭터에 의한 쿼트들의 선택을 허용하기 위하여, 캡쳐된 서브타이틀들 및/또는 클로즈드-캡션 데이터는 캐릭터에 의해 정렬된다. 그 다음, 방법은, 각각의 쿼트와 연관된 개별 시간스탬프들을 갖는 탐색 인덱스에 쿼트들을 저장(604)하는 단계를 포함한다. 시간스탬프들은, 프로그램의 대응하는 순간 ― 대응하는 순간 동안, 쿼트가 사용자들에게 청취 가능했음 ― 을 각각 표시한다.
[0090] 다른 한편으로, 프로그램이 종료될 때(601 - 아니오), 방법은, 특정의 프로그램과 연관된 콘텐츠 데이터를 수집하는 것을 중단(605)하는 단계를 포함하는데, 그 이유는 프로그램 방송이 종료되었기 때문이다. 선택적으로, 방법은, 메모리 공간을 비우기 위해서, 미사용 쿼트들 및/또는 다른 데이터를 제거하기 위해 탐색 인덱스를 클리어시키거나 또는 제거(606)하는 단계를 포함한다.
[0091] 도 7은 서버 시스템 방법의 예시적 구현의 흐름도(700)이다. 일부 구현들에서, 방법은, 방송되는 미디어 프로그램들과 연관된 다양한 타입들의 데이터를 포함하는 탐색 인덱스를 부가시키기 위하여 브로드캐스트 모니터 모듈에 의해 수행된다. 더욱 구체적으로, 방법은, 특정의 미디어 프로그램(예컨대, 텔레비젼 쇼)의 방송 중에 실시간으로 스크린샷들을 캡쳐하고, 그리고 캡쳐된 스크린샷들을 탐색 인덱스에 저장한다.
[0092] 이를 위해, 방법은, 프로그램이 현재 브로드캐스팅되고 있는지를 결정(701, 즉, 프로그램 지속시간이 유효한지의 여부를 결정)하는 단계를 포함한다. 프로그램 지속시간이 유효하다면(701 - 예), 방법은, 스크린샷들 사이에 인지 가능한 차이가 존재함을 보장하기 위해 미리셋팅된 시간량 동안 대기(702)한다. 그 다음, 방법은, 미리셋팅된 지연 이후에 스크린샷을 캡쳐(703)하는 것, 그리고 개별 시간스탬프를 갖는 탐색 인덱스에 스크린샷을 저장하는 단계를 포함한다. 예컨대, 도 1-도 2를 참조하면, 브로드캐스트 모니터 모듈(135)은 비디오 스트림들 및 연관된 데이터를, 그것이 브로드캐스팅됨에 따라 수신하도록 동작하고, 그리고 매 N 초마다, 브로드캐스트 모니터 모듈(135)은 비디오 스트림으로부터의 스크린샷을 프로그램 콘텐츠 데이터베이스(132)에 저장한다. 시간스탬프들은 프로그램의 대응하는 순간 ― 대응하는 순간 동안, 스크린샷이 사용자들에게 보일 수 있었음 ― 을 각각 표시한다.
[0093] 다른 한편으로, 프로그램이 종료될 때(701 - 아니오), 방법은, 특정의 프로그램과 연관된 콘텐츠 데이터를 수집하는 것을 중단(705)하는 단계를 포함하는데, 그 이유는 프로그램 방송이 종료되었기 때문이다. 선택적으로, 방법은, 메모리 공간을 비우기 위해서, 미사용 스크린샷들 및/또는 다른 데이터를 제거하기 위해 탐색 인덱스를 클리어시키거나 또는 제거(706)하는 단계를 포함한다.
[0094] 도 8은 서버 시스템 방법의 예시적인 구현의 흐름도(800)이다. 일부 구현들에서, 방법은, 전자 메시지가 현재 방송되는 미디어 프로그램에 관련되는지를 결정하기 위해, 전자 메시지 프로세싱 모듈에 의해 수행된다. 더 구체적으로, 방법은, 수신된 전자 메시지가 특정의 현재 방송되는 미디어 프로그램과 연관되는지를 결정하기 위해, 적어도 하나의 현재 방송되는 미디어 프로그램과 연관되고 메모리에 저장된 미디어 프로그램 콘텐츠 데이터에 기초하여, 수신된 전자 메시지를 평가한다.
[0095] 이를 위해, 방법은, 프로그램이 현재 브로드캐스팅되고 있는지를 결정하는(즉, 프로그램 지속시간이 유효한지를 결정하는) 단계(801)를 포함한다. 프로그램 지속시간이 유효한 경우에(801 - 예), 방법은, 수신된 마이크로-포스트가 특정의 프로그램에 관련되는지 여부를 결정하기 위해, 마이크로-포스트(등)를 수신하는 단계(802)를 포함한다. 다른 한편으로, 프로그램이 종료된 경우에(801 - 아니오), 방법은, 프로그램 방송이 종료되었기 때문에, 수신된 마이크로-포스트들이 특정의 프로그램에 관련되는지 여부를 결정하는 것을 중단(ceasing)하는 단계를 포함한다(806). 일부 구현들에서, 쇼가 종료된 직후의 쇼에 관한 포스트들을 허용하기 위해, 프로그램 시간의 종단에 시간 마진이 부가된다. 예를 들어, 사람들이 프로그램 종료 30 분 이내에 프로그램에 대해 논평한다.
[0096] 그러나, 프로그램의 지속시간 동안에, 방법은, 특정의 현재 방송되는 미디어 프로그램과 수신된 전자 메시지 사이의 관계를 나타내는 값이 각각의 마이크로-포스트에 할당될 수 있도록, 수신된 마이크로-포스트들을 분석하는 단계(803)를 포함한다. 더 구체적으로, 수신된 마이크로-포스트의 분석은, 수신된 마이크로-포스트의 단어(word)들을 파싱하는 단계(803a), 다양한 팩터들에 대해 단어들을 마킹하는 단계(803b), 및 마이크로-포스트의 단어들이 다양한 팩터들과 어떻게 관련되는지에 기초하여, 수신된 마이크로-포스트에 스코어를 할당하는 단계(803c)를 포함한다.
[0097] 예를 들어, 필터링은, 제한 없이, 다음 중 임의의 하나를 포함할 수 있다. 일부 구현들에서, 마이크로-포스트는 프로그램 타이틀들(예를 들어, "Mad Men", "Archer", "Morning Drive", "House Hunters" 등)에 대해 매칭된다. 일부 구현들에서, 마이크로-포스트는 각각의 프로그램 타이틀들과 연관된 하나 이상의 이차 타이틀들에 대해 매칭된다(예를 들어, "Star Wars: Return of the Jedi"는 "Star Wars" 및 "Return of the Jedi" 양자 모두를 포함하는 마이크로-포스트들에 대해 매칭될 수 있다). 일부 구현들에서, 마이크로-포스트는 축약된 또는 의역된(paraphrased) 프로그램 타이틀들에 대해 매칭된다. 일부 구현들에서, 마이크로-포스트는, 프로그램에서의, 캐릭터 이름들, 배우 이름들, 호스트(host) 이름들, 게스트 이름들 등 중 하나 이상에 대해 매칭된다. 일부 구현들에서, 마이크로-포스트는, 브로드캐스터 또는 콘텐츠 창작자(content creator)에 의해 디스플레이되는 해시 태그 등에 대해 매칭된다. 일부 구현들에서, 마이크로-포스트는, 프로그램 상의, 광고자(advertiser), 캐릭터, 배우, 호스트, 및/또는 게스트 중 하나 이상에 속할 수 있는, 브로드캐스터 또는 콘텐츠 창작자에 의해 디스플레이되는 사용자 핸들(user handle)(예를 들어, "@user" 형태)에 대해 매칭된다. 일부 구현들에서, 마이크로-포스트는, 전자 프로그램 데이터로부터 추출된 프로그램 설명 데이터(program description data)에 대해 매칭된다.
[0098] 대조적으로, 마이크로-포스트에 대한 매칭 스코어에 대해 부정적인 영향(negative impact)을 미치는 용어들이 또한 존재한다. 예를 들어, 일부 구현들에서, 일반적으로 발생하는 단어들(예를 들어, "오늘")은, 이들이 탐색 결과들을 제한하는 경향이 없기 때문에, 매칭 스코어에 대해 부정적인 영향을 미친다. 부가적으로 그리고/또는 대안적으로, 일부 구현들에서, 프로그램 이름 이외에 너무 적은 텍스트를 포함하는 마이크로-포스트는 매칭 스코어에 대해 부정적인 영향을 미칠 수 있다(예를 들어, "I am watching the tonight show").
[0099] 마이크로-포스트가 스코어링되면, 방법은, 스코어가 임계치를 만족시키는지 여부를 결정하는 단계(804)를 포함한다. 스코어가 임계치를 만족시키는 경우에(804 - 예), 방법은, 수신된 마이크로-포스트를 프로그램과 연관시키는 단계를 포함한다. 결과적으로, 아래에서 더 상세히 논의되는 바와 같이, 수신된 마이크로-포스트는, 수신된 마이크로-포스트를 향상(enrich) 또는 보충할지 여부를 결정하기 위해 분석된다. 후속하여, 방법은, 프로그램의 지속시간 동안 부가적인 마이크로-포스트들을 수신하고 분석하는 단계를 포함한다. 다른 한편으로, 스코어가 임계치를 만족시키지 않는 경우에(804 - 아니오), 방법은, 프로그램의 지속시간 동안 부가적인 마이크로-포스트들을 수신하고 분석하는 단계를 포함한다.
[00100] 도 9는, 서버 시스템 방법의 예시적인 구현의 흐름도(900) 표현이다. 일부 구현들에서, 방법은, 텔레비젼 네트워크에 의해 디스플레이되는 텔레비젼 프로그램과 관련된 사용자 논평들의 공유 및 시청(viewing)을 가능하게 하기 위해, 전자 메시지 프로세싱 모듈에 의해 수행된다. 더 구체적으로, 방법은, 프로그램 콘텐츠 데이터로 마이크로-포스트를 향상 또는 보충할지 여부를 결정하기 위해, 특정의 방송되는 미디어 프로그램과 연관된 마이크로-포스트를 분석한다.
[00101] 이를 위해, 방법은, 특정의 프로그램과 연관된 마이크로-포스트를 수신하는 단계(901)를 포함한다. 일부 구현들에서, 도 8에 대하여 위에서 논의된 바와 같이, 관련된 방법은, 수신된 마이크로-포스트가 특정의 프로그램과 연관되는지 여부를 결정하기 위해 사용된다. 일부 구현들에서, 방법은, 특정의 프로그램과 연관된 식별자(예를 들어, 플래그 또는 데이터 필드)를 찾기 위해, 수신된 마이크로-포스트를 파싱하는 단계를 포함한다.
[00102] 특정의 프로그램과 연관된 각각의 수신된 마이크로-포스트에 대해, 방법은, 클로즈드-캡션 데이터 또는 서브타이틀들로부터 추출된 쿼트들에 대해 마이크로-포스트의 단어들을 비교하는 단계(902)를 포함한다. 일부 구현들에서, 비교에서 채용되는 하나 이상의 서브타이틀들은, 수신된 전자 메시지와 연관된 시간 표시자에 관한 특정의 경과된 지속시간(예를 들어, 최종 N 초)으로부터의 하나 이상의 서브타이틀들로 제한된다. 그 후에, 방법은, 마이크로-포스트에서의 단어가 임계치 내의 특정의 쿼트에 매칭하는지를 결정하는 단계(903)를 포함한다. 즉, 비교는, 철자 실수(spelling mistake)들, 문법, 및 의도적이지 않은 의역(inadvertent paraphrasing)과 같은 팩터들을 고려하기 위해, 내고장성이다. 마이크로-포스트가 임계치 내의 쿼트에 매칭하지 않는 경우에(903 - 아니오), 방법은, 수신된 마이크로-포스트를, 특정의 프로그램과 연관된 포스트 스트림에 포스팅하는 단계(908)를 포함한다.
[00103] 다른 한편으로, 마이크로-포스트가 쿼트에 매칭하는 경우에(903 - 예), 방법은, 마이크로-포스트와 식별된 쿼트를 연관시키는 단계(904)를 포함한다. 방법은, 쿼트의 시간스탬프를 식별하는 단계(905), 및 쿼트의 시간스탬프에 근접한 각각의 시간스탬프를 갖는 스크린샷을 선택적으로 검색하는 단계(906)를 포함한다. 일부 구현들에서, 향상(enrichment) 데이터의 품질을 개선하기 위해, 부가적인 로직이 적용될 수 있다. 예를 들어, 마이크로-포스트로부터의 쿼트에 매칭하는 서브타이틀의 시간스탬프를 식별하는 것에 부가하여, 쿼팅된 단어들을 포함하는, 문장들의 집합 및/또는 문장이 전체로서 식별되고 추출된다. 일부 경우들에서, 이는, 마이크로-포스트의 컨텍스트(context)가 이해될 수 있는 더 많은 정보를 제공할 수 있다.
[00104] 부가적으로 그리고/또는 대안적으로, 일부 프로그램들은, 상이한 사람들의 스피치(speech)가 상이한-색의 서브타이틀들로 표시되는 더 풍부한(richer) 서브타이틀들을 갖는다. 그러한 프로그램들에 대해, 문장의 시작으로 되돌아 가는 대신에, 마이크로-포스트의 컨텍스트를 이해하기 위한 더 많은 정보를 사용자들에게 제공하기 위해, 하나의 특정의 온-스크린 캐릭터에 의해 표명된(uttered) 문장들의 그룹의 시작으로 되돌아 가는 것이 가능하다.
[00105] 일부 구현들에서, 스크린샷을 선택하는 것은 또한 이미지 품질에 기초한다. 다시 말해서, 이 방법은, 쿼트의 시간스탬프에 근접한 최상의 이용가능 품질을 갖는 스트린샷을 평가하여 선택하는 단계를 포함한다. 예를 들어, 스크린샷 품질을 결정하는 일 방식은, 배우(actor)의 얼굴을 볼 수 있는 스크린샷들을 검출하는 것이다. 쿼트의 시간스탬프와 관련하여 선택가능한 스크린샷의 시간스탬프가 얼마나 상이하게 될 수 있을지 한정하기 위해 다양한 시간들(a range of times)이 사전설정될 수 있다. 이용가능한 적절한 프로그램 콘텐츠 데이터를 식별했으면, 이 방법은, 적어도 참조되는 현재 방송되는 미디어 프로그램으로부터의 콘텐츠의 디스플레이가능한 표시자를, 수신된 마이크로포스트에 부가함으로써 보충된 마이크로포스트를 생성하는 단계를 포함한다. 일부 구현들에서, 보충된 마이크로포스트를 생성하는 단계는, 수신된 마이크로포스트의 일부를 프로그램 콘텐츠 데이터로 교체하는 단계를 포함할 수 있다. 예를 들어, 마이크로포스트 내의 의역된 쿼트는 프로그램으로부터의 정확한 쿼트로 교체될 수 있다.
[00106] 도 10은, 서버 시스템 방법의 예시적인 구현의 플로우차트(100)이다. 일부 구현들에서, 이 방법은, 텔레비젼 네트워크에 의해 디스플레이된 텔레비젼 프로그램에 관련된 사용자 논평들의 공유 및 시청을 가능하게 하기 위해, 전자 메시지 프로세싱 모듈에 의해 수행된다. 더욱 구체적으로, 이 방법은, 마이크로포스트를 프로그램 콘텐츠 데이터로 향상시킬지 여부 또는 보충할지 여부를 결정하기 위해 특정의 방송되는 미디어 프로그램과 연관된 마이크로포스트를 분석한다.
[00107] 이를 달성하기 위해, 이 방법은 특정의 프로그램과 연관된 마이크로포스트를 수신하는 단계(1001)를 포함한다. 일부 구현들에서, 도 8을 참조하여 앞서 논의된 바와 같이, 관련된 방법은, 수신된 마이크로포스트가 특정의 프로그램과 연관되는지 또는 연관되지 않는지를 결정하기 위해 이용된다. 일부 구현들에서, 이 방법은, 특정의 프로그램과 연관된 식별자(예를 들어, 플래그 또는 데이터 필드)를 찾기위해 수신된 마이크로포스트를 파싱하는 단계를 포함한다.
[00108] 특정의 프로그램과 연관된 각각의 수신된 마이크로포스트의 경우, 이 방법은 전자 프로그램 가이드들 등으로부터 추출된 키워드들 또는 키-문구들에 마이크로포스트의 단어들을 비교하는 단계(1002)를 포함한다. 이 방법은 다음으로 마이크로포스트가 임계치 내의 특정의 키워드 또는 키-문구에 매칭하는지 여부를 결정하는 단계(1003)를 포함한다. 다시 말해서, 비교는, 철자 실수들, 문법, 및 의도적이지 않은 의역과 같은 팩터들을 고려하기 위해 내고장성이다. 마이크로포스트가 임계치 내의 키워드 또는 키-문구에 매칭하지 않으면(1003 - 아니오), 이 방법은 특정의 프로그램과 연관된 포스트 스트림에 수신된 마이크로포스트를 포스팅하는 단계(1007)를 포함한다.
[00109] 반면에, 마이크로포스트가 키워드 또는 키-문구에 매칭하면(1003- 예), 이 방법은 마이크로포스트의 시간스탬프를 식별하는 단계를 포함한다(1004). 예를 들어, 마이크로포스트는 시간스탬프를 갖는 데이터 필드를 포함할 수 있거나, 또는 시간스탬프는 마이크로포스트가 서버 시스템에 의해 수신되었던 시간일 수 있다. 이 방법은, 마이크로포스트의 시간스탬프에 근접한 개별 시간스탬프를 갖는 프로그램 콘텐츠 엘리먼트(예를 들어, 스크린샷 또는 비디오 클립)를 검색하는 단계(1005)를 포함한다. 일부 구현들에서, 스크린샷을 선택하는 것은 또한 이미지 품질에 기초한다. 다시 말해서, 이 방법은, 마이크로포스트의 시간스탬프에 근접한 최상의 이용가능한 품질을 갖는 스크린샷을 평가하여 선택하는 단계를 포함한다. 마이크로포스트의 시간스탬프와 관련하여 선택가능한 스크린샷의 시간스탬프가 얼마나 상이하게 될 수 있을지를 한정하기 위해 다양한 시간들이 사전설정될 수 있다. 이용가능한 적절한 프로그램 콘텐츠 데이터를 식별했으면, 이 방법은, 적어도, 참조되는 현재 방송되는 미디어 프로그램으로부터의 콘텐츠의 디스플레이가능한 표시자를, 수신된 마이크로포스트에 부가함으로써 보충된 마이크로포스트를 생성하는 단계(1006)를 포함한다.
[00110] 콘텐츠 핑거프린트(content fingerprint)는, 비디오 스트림 및/또는 오디오 스트림의 콘텐츠의 임의의 타입의 간결한(condensed) 또는 콤팩트한 표현 또는 서명을 포함한다. 일부 구현들에서, 핑거프린트는, 비디오 스트림 또는 오디오 스트림의 (몇 초, 몇 분, 또는 몇 시간과 같은) 클립을 나타낼 수 있다. 또는, 핑거프린트는, 비디오 스트림 또는 오디오 스트림의 단일 인스턴트(예를 들어, 비디오의 단일 프레임의 핑거프린트 또는 비디오의 그 단일 프레임과 연관된 오디오의 핑거프린트)를 나타낼 수 있다. 게다가, 비디오 콘텐츠는 시간이 경과함에 따라 변할 수 있기 때문에, 그 비디오 콘텐츠의 대응하는 핑거프린트들도 또한 시간이 경과함에 따라 변할 수 있다.
[00111] 첨부된 청구항들의 범위 내에 있는 실시예들의 다양한 양상들이 이하 설명된다. 본원에 설명된 양상들이 매우 다양한 형태들로 구현될 수 있고 본원에 설명된 임의의 특정의 구조 및/또는 기능은 단지 예시적이라는 것은 명백해야 한다. 본 개시물에 기초하여, 당업자는, 본원에 설명된 일 양상은 임의의 다른 양상들과는 독립적으로 구현될 수 있고 그리고 2 이상의 이러한 양상들은 다양한 방식들로 결합될 수 있다는 것을 인식해야 한다. 예를 들어, 본원에 설명된 임의의 수의 양상들을 이용하여 장치가 구현될 수 있고 그리고/또는 방법이 실행될 수 있다. 이에 더해, 본원에 설명된 양상들 중 하나 이상에 더해 또는 그 이외의 다른 구조 및/또는 기능을 이용하여, 이러한 장치가 구현될 수 있고 그리고/또는 이러한 방법이 실행될 수 있다.
[00112] 다양한 엘리먼트들을 설명하기 위해 용어들 "제1", "제2" 등이 본 명세서에서 사용될 수도 있지만, 이들 엘리먼트들은 이들 용어들에 의해 제한되지 않아야 함이 또한 이해될 것이다. 이들 용어들은 하나의 엘리먼트를 다른 엘리먼트와 구별하기 위해서만 사용된다. 예를 들어, "제1 접촉"의 모든 출현들이 일관되게 재명명(rename)되고 그리고 제2 접촉의 모든 출현들이 일관되게 재명명되는 한, 설명의 의미를 변경함이 없이, 제1 접촉은 제2 접촉으로 지칭될 수 있고, 유사하게 제2 접촉은 제1 접촉으로 지칭될 수 있다. 제1 접촉 및 제2 접촉은 둘 다 접촉들이지만, 이들은 동일한 접촉은 아니다.
[00113] 본원에 이용된 용어는, 특정의 실시예들을 설명하는 목적을 위한 것이며, 청구항들을 제한하도록 의도되지 않는다. 실시예들의 설명 및 첨부된 청구항들에서 이용되는 바와 같이, 단수형 표현들("a", "an" 및 "the")은, 그 문맥에서 명시적으로 달리 표시하지 않는 한, 복수형 형태들도 또한 포함하는 것으로 의도된다. 또한, 본원에 이용된 것과 같은 용어 "및/또는"은, 관련하여 열거된 항목들 중 하나 이상의 임의의 또는 모든 가능한 조합들을 지칭하고 이들을 포함하는 것으로 이해될 것이다. 본 상세한 설명에 이용될 때 용어들 "포함하다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 특징들, 정수들, 단계들, 동작들, 엘리먼트들, 및/또는 컴포넌트들의 존재를 특정하지만, 하나 이상의 다른 특징들, 정수들, 단계들, 동작들, 엘리먼트들, 컴포넌트들, 및/또는 이들의 그룹들의 존재 또는 부가를 배제하지 않음이 추가로 이해될 것이다.
[00114] 본 명세서에서 이용되는 경우, 용어 "만약(if)"은, 맥락에 따라, 언급된 선행 조건이 참(true)인 "경우(when)" 또는 "때(upon)" 또는 "결정에 대한 응답으로" 또는 "결정에 따라" 또는 "검출에 대한 응답으로"를 의미하도록 해석될 수도 있다. 유사하게, 어구 "[언급된 선행 조건이 참인 것이] 결정되면" 또는 "만약 [언급된 선행 조건이 참]이면" 또는 "[언급된 선행 조건이 참인] 경우"는, 맥락에 따라, 언급된 선행 조건이 참인 "것으로 결정한 때" 또는 "것을 결정하는 것에 대한 응답으로" 또는 "결정에 따라" 또는 "것을 검출할 때" 또는 "것을 검출하는 것에 대한 응답으로"를 의미하도록 해석될 수 있다.
[00115] 설명의 목적을 위한 전술한 설명은 특정한 실시예들을 참조하여 설명되었다. 그러나, 위의 예시적인 설명들은, 완전하도록 또는 본 발명을 기재된 명확한 형태들에 한정하도록 의도되지 않는다. 상기 교시들을 고려하여 많은 변형들 및 변경들이 가능하다. 실시예들은, 본 발명의 원리들 및 본 발명의 실제의 애플리케이션들을 가장 양호하게 설명하기 위해, 그에 의해, 고려된 특정한 사용에 적합한 바와 같은 다양한 변형들을 이용하여 본 발명 및 다양한 실시예들을 당업자가 가장 양호하게 이용할 수 있게 하기 위해 선택되고 설명되었다.

Claims (27)

  1. 특정한 방송되는 미디어 프로그램과 연관된 전자 메시지를 보충하는 방법으로서,
    프로세서 및 상기 프로세서에 의해 실행하기 위한 프로그램들을 저장하는 메모리를 포함하는 서버에서,
    사용자에 의해 구성된 전자 메시지를 수신하는 단계 ― 수신된 전자 메시지는 상기 사용자에 의해 구성된 하나 이상의 용어(term)들을 포함함 ―;
    상기 수신된 전자 메시지가 현재 방송되는 미디어 프로그램에 대한 참조를 포함하는지 여부를 결정하는 단계 ― 상기 결정하는 단계는, 상기 용어들이 상기 현재 방송되는 미디어 프로그램에 대한 참조를 포함하는지 여부를 결정하기 위해 상기 수신된 전자 메시지 내의 용어들을 분석하는 단계를 포함함 ―;
    적어도 상기 수신된 전자 메시지가 상기 참조를 포함한다는 결정에 응답하여, 상기 수신된 전자 메시지로부터 대응하는 보충 전자 메시지를 생성하는 단계 ― 상기 대응하는 보충 전자 메시지를 생성하는 단계는, 적어도 참조되는 상기 현재 방송되는 미디어 프로그램으로부터의 미디어의 디스플레이가능 표시자를 추가하는 단계를 포함함 ―; 및
    상기 보충 전자 메시지를 디스플레이를 위한 서비스에 제공하는 단계
    를 포함하고,
    상기 방법은 상기 수신된 전자 메시지의 콘텐츠에 적어도 기초하여 상기 대응하는 보충 전자 메시지를 생성할지 여부를 결정하는 단계를 더 포함하고,
    상기 대응하는 보충 전자 메시지를 생성할지 여부를 결정하는 단계는,
    상기 수신된 전자 메시지로부터의 텍스트가 상기 참조되는 현재 방송되는 미디어 프로그램으로부터의 하나 이상의 서브타이틀들 중 적어도 하나에 매칭하는지 여부를 결정하기 위해 상기 수신된 전자 메시지로부터의 텍스트를 상기 하나 이상의 서브타이틀들과 비교하는 단계, 및
    상기 텍스트가 적어도 하나의 서브타이틀에 매칭한다는 결정에 응답하여, 적어도 하나의 매칭 서브타이틀과 연관된 대응하는 제1 시간스탬프를 식별하는 단계를 포함하는,
    방법.
  2. 제1항에 있어서,
    상기 수신된 전자 메시지가 상기 참조를 포함하지 않는다는 결정에 응답하여, 상기 수신된 전자 메시지를 디스플레이를 위한 서비스에 제공하는 단계를 더 포함하는,
    방법.
  3. 제1항에 있어서,
    상기 전자 메시지는 마이크로-포스트(micro-post), 소셜 네트워킹 메시지, 채팅 방 메시지 또는 인스턴스(instant) 메시지 중 적어도 하나를 포함하는,
    방법.
  4. 제1항에 있어서,
    상기 수신된 전자 메시지가 상기 참조를 포함하는지 여부를 결정하는 단계는, 상기 수신된 메시지가 특정한 현재 방송되는 미디어 프로그램과 연관되는지 여부를 결정하기 위해, 적어도 하나의 현재 방송되는 미디어 프로그램과 연관되고 상기 메모리에 저장된 미디어 프로그램 콘텐츠 데이터에 기초하여 상기 수신된 전자 메시지를 평가하는 단계를 포함하는,
    방법.
  5. 제4항에 있어서,
    상기 수신된 전자 메시지를 평가하는 단계는,
    상기 수신된 전자 메시지와 특정한 현재 방송되는 미디어 프로그램 간의 관계를 나타내는 값을 상기 수신된 전자 메시지에 할당하는 단계;
    상기 값이 제1 임계치를 만족시키는지 여부를 결정하는 단계; 및
    상기 값이 상기 제1 임계치를 만족시킨다는 결정에 응답하여, 상기 수신된 전자 메시지가 상기 특정한 현재 방송되는 미디어 프로그램과 연관된다고 결정하는 단계를 포함하는,
    방법.
  6. 삭제
  7. 삭제
  8. 제1항에 있어서,
    상기 수신된 전자 메시지로부터의 텍스트를 상기 하나 이상의 서브타이틀들과 비교하는 단계는,
    상기 수신된 전자 메시지의 단어들을 제1 서브타이틀의 단어들과 비교하는 단계;
    상기 수신된 전자 메시지의 단어들과 상기 제1 서브타이틀의 단어들 간의 매칭 개수를 식별하는 단계; 및
    매칭되는 단어들의 개수가 미리 결정된 임계치를 초과하는 경우에 상기 수신된 전자 메시지를 쿼트(quote)로서 식별하는 단계를 포함하는,
    방법.
  9. 제8항에 있어서,
    상기 단어들을 비교하는 단계는 저 해밍 거리 세트(low Hamming distance set)를 결정하고 선택하는 단계를 포함하는,
    방법.
  10. 제1항에 있어서,
    제1 시간스탬프는 상기 수신된 전자 메시지에 의해 참조되는 상기 방송되는 미디어 프로그램의 대응하는 순간(moment)을 나타내고, 적어도 하나의 매칭하는 서브타이틀과 관련되어 상기 메모리에 저장되는,
    방법.
  11. 제1항에 있어서,
    상기 전자 메시지로부터의 텍스트와 상기 하나 이상의 서브타이틀들 간의 비교는 내고장성(fault-tolerant)인,
    방법.
  12. 제1항에 있어서,
    상기 비교에서 이용되는 상기 하나 이상의 서브타이틀들은 상기 수신된 전자 메시지와 연관된 시간 표시자에 관해 특정한 경과된 지속시간으로부터의 하나 이상의 서브타이틀들로 제한되는,
    방법.
  13. 제1항에 있어서,
    상기 제1 시간스탬프에 적어도 기초하여 현재 플레이하는 방송되는 미디어 프로그램의 스크린샷을 상기 메모리로부터 선택하는 단계를 더 포함하고,
    상기 선택되는 스크린샷은 상기 제1 시간스탬프에 근접한 개별 제2 시간스탬프를 갖는,
    방법.
  14. 제13항에 있어서,
    상기 스크린샷을 선택하는 단계는 또한 이미지 품질에 기초하는,
    방법.
  15. 제1항에 있어서,
    하나 이상의 현재 방송되는 미디어 프로그램들과 연관된 클로즈드-캡션 데이터(closed-caption data) 및 서브타이틀들 중 적어도 하나를 획득하는 단계; 및
    각각의 획득된 서브타이틀 또는 클로즈드-캡션 데이터 부분을 제공할 수 있었던 시간을 나타내는 대응하는 시간스탬프들과 함께 상기 획득된 서브타이틀들 또는 클로즈드-캡션 데이터를 포함하도록 상기 메모리에 저장된 탐색 인덱스를 업데이트하는 단계를 더 포함하는,
    방법.
  16. 제1항에 있어서,
    하나 이상의 방송되는 미디어 프로그램들이 방송될 때 상기 하나 이상의 방송되는 미디어 프로그램들로부터의 스크린샷들을 획득하는 단계 ― 상기 스크린샷들은 규칙적인 간격들로 획득됨 ―; 및
    각각의 획득된 스크린샷을 제공할 수 있었던 시간을 나타내는 대응하는 시간스탬프들과 함께 상기 획득된 스크린샷들을 포함하도록 상기 메모리에 저장된 탐색 인덱스를 업데이트하는 단계를 더 포함하는,
    방법.
  17. 제1항에 있어서,
    하나 이상의 방송되는 미디어 프로그램들이 방송될 때 상기 하나 이상의 방송되는 미디어 프로그램들로부터의 비디오 클립들(clips)을 획득하는 단계 ― 상기 비디오 클립들은 규칙적인 간격들로 획득됨 ―; 및
    각각의 획득된 비디오 클립을 제공할 수 있었던 시간을 나타내는 대응하는 시간스탬프들과 함께 상기 획득된 비디오 클립들을 포함하도록 상기 메모리에 저장된 탐색 인덱스를 업데이트하는 단계를 더 포함하는,
    방법.
  18. 제1항에 있어서,
    상기 대응하는 보충 전자 메시지를 생성하는 단계는,
    상기 참조되는 방송되는 미디어 프로그램과 연관된 콘텐츠를 식별하는 단계; 및
    적어도 상기 식별된 콘텐츠의 디스플레이가능 표시자로 상기 수신된 전자 메시지를 보충하는 단계를 포함하는,
    방법.
  19. 제18항에 있어서,
    상기 콘텐츠를 식별하는 단계는,
    상기 수신된 전자 메시지로부터의 텍스트가 상기 참조되는 현재 방송되는 미디어 프로그램으로부터의 하나 이상의 서브타이틀들 중 적어도 하나에 매칭하는지 여부를 결정하기 위해, 상기 수신된 전자 메시지로부터의 텍스트를 상기 하나 이상의 서브타이틀들과 비교하는 단계; 및
    상기 텍스트가 적어도 하나의 서브타이틀에 매칭한다는 결정에 응답하여, 적어도 하나의 매칭하는 서브타이틀과 연관된 대응하는 제1 시간스탬프를 식별하는 단계를 포함하는,
    방법.
  20. 제19항에 있어서,
    상기 제1 시간스탬프는 상기 수신된 전자 메시지에 의해 참조되는 프로그램의 대응하는 순간을 나타내고, 상기 적어도 하나의 매칭하는 서브타이틀과 관련하여 상기 메모리에 저장되는,
    방법.
  21. 제19항에 있어서,
    상기 전자 메시지로부터의 텍스트와 상기 하나 이상의 서브타이틀들 간의 비교는 내고장성인,
    방법.
  22. 제19항에 있어서,
    상기 비교에서 이용되는 상기 하나 이상의 서브타이틀들은 상기 수신된 전자 메시지와 연관된 시간 표시자에 관해 특정한 경과된 지속시간으로부터의 상기 하나 이상의 서브타이틀들로 제한되는,
    방법.
  23. 제19항에 있어서,
    상기 디스플레이가능 표시자는 상기 서브타이틀들 중 하나 이상의 서브타이틀로부터의 쿼트를 포함하는,
    방법.
  24. 제19항에 있어서,
    상기 콘텐츠를 식별하는 단계는,
    상기 제1 시간스탬프에 적어도 기초하여 현재 플레이하는 방송되는 미디어 프로그램의 스크린샷을 상기 메모리로부터 선택하는 단계를 더 포함하고,
    상기 선택되는 스크린샷은 상기 제1 시간스탬프에 근접한 개별 제2 시간스탬프를 갖고,
    상기 디스플레이가능 표시자는 상기 선택되는 스크린샷을 포함하는,
    방법.
  25. 제24항에 있어서,
    상기 디스플레이가능 표시자는 상기 선택되는 스크린샷을 비디오 클립에 대한 표현으로서 포함하는,
    방법.
  26. 삭제
  27. 삭제
KR1020157011005A 2012-09-27 2013-09-27 방송되는 미디어 관련 전자 메시징 향상 Active KR102091414B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/629,350 US20140089424A1 (en) 2012-09-27 2012-09-27 Enriching Broadcast Media Related Electronic Messaging
US13/629,350 2012-09-27
PCT/US2013/062336 WO2014052847A1 (en) 2012-09-27 2013-09-27 Enriching broadcast media related electronic messaging

Publications (2)

Publication Number Publication Date
KR20150063138A KR20150063138A (ko) 2015-06-08
KR102091414B1 true KR102091414B1 (ko) 2020-03-20

Family

ID=49328656

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020157011005A Active KR102091414B1 (ko) 2012-09-27 2013-09-27 방송되는 미디어 관련 전자 메시징 향상

Country Status (5)

Country Link
US (1) US20140089424A1 (ko)
EP (1) EP2901631B1 (ko)
KR (1) KR102091414B1 (ko)
CN (1) CN104798346B (ko)
WO (1) WO2014052847A1 (ko)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9619123B1 (en) * 2012-02-16 2017-04-11 Google Inc. Acquiring and sharing content extracted from media content
WO2014056122A1 (en) * 2012-10-08 2014-04-17 Intel Corporation Method, apparatus and system of screenshot grabbing and sharing
US20140164506A1 (en) * 2012-12-10 2014-06-12 Rawllin International Inc. Multimedia message having portions of networked media content
US20140282677A1 (en) * 2013-03-12 2014-09-18 Cbs Interactive Inc. Second screen application linked to media content delivery
CN104144195B (zh) * 2013-06-26 2016-07-13 腾讯科技（深圳）有限公司 一种微博主页展示媒体信息的方法、系统及装置
US20150089370A1 (en) * 2013-09-25 2015-03-26 Tencent Technology (Shenzhen) Co., Ltd. Method and device for playing media data on a terminal
CN103546766B (zh) * 2013-11-14 2017-02-08 腾讯科技(成都)有限公司 视频处理方法和相关设备及通信系统
US9805125B2 (en) 2014-06-20 2017-10-31 Google Inc. Displaying a summary of media content items
US10206014B2 (en) 2014-06-20 2019-02-12 Google Llc Clarifying audible verbal information in video content
CN112579825B (zh) * 2014-06-20 2022-05-27 谷歌有限责任公司 显示与设备上播放的内容有关的信息
US9838759B2 (en) 2014-06-20 2017-12-05 Google Inc. Displaying information related to content playing on a device
US20160316261A1 (en) * 2015-04-23 2016-10-27 Sorenson Media, Inc. Automatic content recognition fingerprint sequence matching
US10349141B2 (en) 2015-11-19 2019-07-09 Google Llc Reminders of media content referenced in other media content
US9858494B2 (en) * 2015-12-28 2018-01-02 Facebook, Inc. Systems and methods for analyzing rendered content
US11023514B2 (en) 2016-02-26 2021-06-01 Snap Inc. Methods and systems for generation, curation, and presentation of media collections
US10285001B2 (en) 2016-02-26 2019-05-07 Snap Inc. Generation, curation, and presentation of media collections
KR102272959B1 (ko) * 2016-02-26 2021-07-06 스냅 인코포레이티드 미디어 컬렉션들의 생성, 큐레이션 및 프리젠테이션을 위한 방법들 및 시스템들
US10535966B2 (en) * 2016-10-03 2020-01-14 Google Llc Planar electrical connector for an electronic device
US11412313B2 (en) * 2018-05-02 2022-08-09 Twitter, Inc. Sharing timestamps for video content in a messaging platform
US11157694B2 (en) 2018-08-14 2021-10-26 Snap Inc. Content suggestion system
CN109379719B (zh) * 2018-11-26 2021-11-16 努比亚技术有限公司 一种应用程序广播处理方法、设备及计算机可读存储介质
US12231745B1 (en) * 2019-01-23 2025-02-18 Amazon Technologies, Inc. Automated video summary generation using textual quotes
US11418821B1 (en) 2021-02-09 2022-08-16 Gracenote, Inc. Classifying segments of media content using closed captioning
US12132953B2 (en) 2021-02-16 2024-10-29 Gracenote, Inc. Identifying and labeling segments within video content
US20220286737A1 (en) * 2021-03-05 2022-09-08 Gracenote, Inc. Separating Media Content into Program Segments and Advertisement Segments
CN113505010A (zh) * 2021-07-27 2021-10-15 维沃移动通信（杭州）有限公司 消息管理方法、装置、电子设备和可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060123447A1 (en) * 1998-01-08 2006-06-08 Westlake Mark S Method and interface for linking terms in an electronic message to program information
US20060281415A1 (en) * 2005-06-14 2006-12-14 Nec Corporation Received signal quality display method and received signal quality display system
US20090089840A1 (en) * 2002-08-16 2009-04-02 Lakeview Capital Trust Method and apparatus for interactive programming using captioning
US20120029917A1 (en) * 2010-08-02 2012-02-02 At&T Intellectual Property I, L.P. Apparatus and method for providing messages in a social network

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5481296A (en) * 1993-08-06 1996-01-02 International Business Machines Corporation Apparatus and method for selectively viewing video information
CA2302250C (en) * 1997-09-18 2008-02-05 United Video Properties, Inc. Electronic-mail reminder for an internet television program guide
JP4281238B2 (ja) * 2000-10-06 2009-06-17 ソニー株式会社 番組情報提供装置および方法、画像記録システム、並びにプログラム格納媒体
CN1685716B (zh) * 2002-10-11 2010-09-01 索尼株式会社 网络控制确认的系统和方法、控制通信终端、服务器装置
US7610281B2 (en) * 2006-11-29 2009-10-27 Oracle International Corp. Efficient computation of document similarity
CN101911058A (zh) * 2008-01-18 2010-12-08 惠普发展公司，有限责任合伙企业 代表性数据串的产生
US9246613B2 (en) * 2008-05-20 2016-01-26 Verizon Patent And Licensing Inc. Method and apparatus for providing online social networking for television viewing
US20100269144A1 (en) * 2009-04-17 2010-10-21 Tandberg Television, Inc. Systems and methods for incorporating user generated content within a vod environment

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060123447A1 (en) * 1998-01-08 2006-06-08 Westlake Mark S Method and interface for linking terms in an electronic message to program information
US20090089840A1 (en) * 2002-08-16 2009-04-02 Lakeview Capital Trust Method and apparatus for interactive programming using captioning
US20060281415A1 (en) * 2005-06-14 2006-12-14 Nec Corporation Received signal quality display method and received signal quality display system
US20120029917A1 (en) * 2010-08-02 2012-02-02 At&T Intellectual Property I, L.P. Apparatus and method for providing messages in a social network

Also Published As

Publication number Publication date
WO2014052847A1 (en) 2014-04-03
KR20150063138A (ko) 2015-06-08
EP2901631B1 (en) 2019-11-06
US20140089424A1 (en) 2014-03-27
EP2901631A1 (en) 2015-08-05
CN104798346A (zh) 2015-07-22
CN104798346B (zh) 2019-05-28

Similar Documents

Publication Publication Date Title
KR102091414B1 (ko) 방송되는 미디어 관련 전자 메시징 향상
US11917242B2 (en) Identification and presentation of content associated with currently playing television programs
US11412300B2 (en) System and methods for analyzing content engagement in conjunction with social media
US9888279B2 (en) Content based video content segmentation
CN105874451B (zh) 用于呈现对应于点播媒体内容的补充信息的方法、系统和介质
US9306989B1 (en) Linking social media and broadcast media
EP2954693B1 (en) Processing of social media for selected time-shifted multimedia content
CN107087225B (zh) 将隐藏式字幕流用于设备元数据
US20180032622A1 (en) Displaying a Summary of Media Content Items
KR101246917B1 (ko) 미디어 재생 시스템의 사용자 간에 정보를 공유하는 방법및 시스템
US9619123B1 (en) Acquiring and sharing content extracted from media content
EP3742364B1 (en) Displaying information related to content playing on a device
US20190182517A1 (en) Providing Enrichment Data That is a Video Segment
Almeida et al. A video engine supported by social buzz to automatically create TV summaries
Oliveira et al. From Live TV Events to Twitter Status Updates-a Study on Delays
EP3044728A1 (en) Content based video content segmentation

Legal Events

Date Code Title Description
PA0105 International application

Patent event date: 20150427

Patent event code: PA01051R01D

Comment text: International Patent Application

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20180927

Comment text: Request for Examination of Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20190618

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20191217

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20200316

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20200316

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20240305

Start annual number: 5

End annual number: 5

PR1001 Payment of annual fee

Payment date: 20250305

Start annual number: 6

End annual number: 6