一種視頻監(jiān)控中的音視頻播放方法及裝置的制造方法
【專利摘要】本發(fā)明公開了一種視頻監(jiān)控中的音視頻播放方法及裝置，應(yīng)用于視頻監(jiān)控系統(tǒng)，所述音視頻播放方法包括首先接受視頻監(jiān)控系統(tǒng)中前端設(shè)備、第一播放端、智能終端的注冊，并根據(jù)智能終端連接上第二播放端后發(fā)送的請求報(bào)文，建立第一播放端和第二播放端對應(yīng)的播放設(shè)備列表；然后根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端播放前端設(shè)備采集的音視頻。本發(fā)明的裝置包括注冊模塊和播放選擇模塊。本發(fā)明的方法和裝置，能夠選擇效果最佳的播放設(shè)備來分別播放視頻和音頻，同時還能夠?qū)崿F(xiàn)不同播放設(shè)備的同步，充分利用高品質(zhì)設(shè)備，提供最好的用戶體驗(yàn)。
【專利說明】
一種視頻監(jiān)控中的音視頻播放方法及裝置
技術(shù)領(lǐng)域
[0001] 本發(fā)明屬于視頻監(jiān)控技術(shù)領(lǐng)域，尤其涉及一種視頻監(jiān)控中的音視頻播放方法及裝 置。
【背景技術(shù)】
[0002] 隨著互聯(lián)網(wǎng)的普及，視頻監(jiān)控開始廣泛應(yīng)用于家庭、教育、商業(yè)、醫(yī)療、公共場所 等。在對前端設(shè)備IPC獲取的音視頻進(jìn)行播放時，需要保證視頻的播放清晰度，保證音頻播 放的音質(zhì)。
[0003] 目前，在進(jìn)行視頻播放時，常用的選擇有高清電視機(jī)或其他高清顯示設(shè)備。而音頻 的播放，可以采用高清電視機(jī)自帶的音頻播放系統(tǒng)進(jìn)行播放。隨著高保真藍(lán)牙音箱的出現(xiàn)， 由于高保真藍(lán)牙音箱將藍(lán)牙技術(shù)應(yīng)用在傳統(tǒng)的音頻上，實(shí)現(xiàn)無線的音頻傳輸，讓使用者可 以免除惱人傳輸線的牽泮，自在地以各種方式聆聽高品質(zhì)的音樂。因此，視頻監(jiān)控在播放音 頻時，如何選擇更好的視頻設(shè)備來播放，提高用戶的音頻體驗(yàn)，是本技術(shù)領(lǐng)域的一個需要解 決的問題。
[0004] 現(xiàn)有技術(shù)一般是通過HDMI接口連接視頻監(jiān)控設(shè)備與電視機(jī)，直接由電視機(jī)來實(shí)現(xiàn) 視頻顯示和音頻播放。然而電視機(jī)自帶的音頻播放系統(tǒng)往往比高保真藍(lán)牙音箱效果差，并 且音視頻都由電視機(jī)播放，無法利用已有的高保真藍(lán)牙音箱設(shè)備，造成布線復(fù)雜，設(shè)備浪費(fèi) 的問題，用戶的體驗(yàn)也不好。

【發(fā)明內(nèi)容】

[0005] 本發(fā)明的目的是提供一種視頻監(jiān)控中的音視頻播放方法及裝置，用以解決現(xiàn)有技 術(shù)中無法利用已有的高保證藍(lán)牙音箱設(shè)備，造成布線復(fù)雜，設(shè)備浪費(fèi)的問題。
[0006] 為了實(shí)現(xiàn)上述目的，本發(fā)明技術(shù)方案如下：
[0007] -種視頻監(jiān)控中的音視頻播放方法，應(yīng)用于視頻監(jiān)控系統(tǒng)，所述音視頻播放方法 包括：
[0008] 接受視頻監(jiān)控系統(tǒng)中前端設(shè)備、第一播放端、智能終端的注冊，并根據(jù)智能終端連 接上第二播放端后發(fā)送的請求報(bào)文，建立第一播放端和第二播放端對應(yīng)的播放設(shè)備列表；
[0009] 根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端播放前端設(shè)備采集的 首視頻。
[0010] 進(jìn)一步地，所述建立第一播放端和第二播放端對應(yīng)的播放設(shè)備列表，包括：
[0011]根據(jù)第一播放端注冊信息，在播放設(shè)備列表中記錄對應(yīng)于第一播放端的視頻和/ 或音頻播放設(shè)備；
[0012] 根據(jù)智能終端連接上第二播放端后發(fā)送的請求報(bào)文，在播放設(shè)備列表中記錄對應(yīng) 于第二播放端的視頻和/或音頻播放設(shè)備，以及第二播放端的視頻和/或音頻播放設(shè)備對應(yīng) 的智能終端。
[0013] 進(jìn)一步地，所述建立第一播放端和第二播放端對應(yīng)的播放設(shè)備列表，還包括：
[0014]為播放設(shè)備列表中記錄的視頻和/或音頻播放設(shè)備設(shè)置對應(yīng)的優(yōu)先級；
[0015]周期性更新播放設(shè)備列表中各播放設(shè)備的在線狀態(tài)。
[0016] 所述根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端播放前端設(shè)備采 集的首視頻，包括：
[0017] 根據(jù)播放設(shè)備列表中播放設(shè)備的在線狀態(tài)和優(yōu)先級，從在線的播放設(shè)備中選擇優(yōu) 先的視頻和/或音頻播放設(shè)備；
[0018] 將前端設(shè)備采集的音視頻分發(fā)到選出的優(yōu)先的視頻和音頻播放設(shè)備進(jìn)行播放。 [0019]進(jìn)一步地，所述選出的視頻播放設(shè)備為第一播放端，選出的音頻播放設(shè)備為第二 播放端，所述音視頻播放方法還包括：
[0020] 對原始視音頻中的音頻數(shù)據(jù)進(jìn)行高頻調(diào)制，將原始視頻數(shù)據(jù)和高頻調(diào)制后的音頻 數(shù)據(jù)發(fā)送到第一播放端播放；
[0021] 將原始音視頻發(fā)送到智能終端，以使智能終端對原始音頻數(shù)據(jù)進(jìn)行解碼后發(fā)送給 第二播放端播放。
[0022 ]進(jìn)一步地，所述音視頻播放方法，還包括：
[0023] 在高頻調(diào)制后的音頻數(shù)據(jù)和原始音頻數(shù)據(jù)里打上相同的時間戳序號；
[0024] 接收智能終端發(fā)送的同步請求報(bào)文，根據(jù)同步請求報(bào)文調(diào)整發(fā)送到第一播放端或 第二播放端的音視頻的時間，其中所述智能終端接收第一播放端對高頻調(diào)制后的音頻數(shù)據(jù) 的無線廣播，與原始音頻數(shù)據(jù)的時間戳序號進(jìn)行比較，根據(jù)比較結(jié)果發(fā)送同步請求報(bào)文。
[0025] 本發(fā)明還提出了一種視頻監(jiān)控中的音視頻播放裝置，應(yīng)用于視頻監(jiān)控系統(tǒng)，所述 音視頻播放裝置包括：
[0026] 注冊模塊，用于接受視頻監(jiān)控系統(tǒng)中前端設(shè)備、第一播放端、智能終端的注冊，并 根據(jù)智能終端連接上第二播放端后發(fā)送的請求報(bào)文，建立第一播放端和第二播放端對應(yīng)的 播放設(shè)備列表；
[0027]播放選擇模塊，用于根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端 播放前端設(shè)備采集的音視頻。
[0028] 進(jìn)一步地，所述注冊模塊建立第一播放端和第二播放端對應(yīng)的播放設(shè)備列表，執(zhí) 行如下操作：
[0029] 根據(jù)第一播放端注冊信息，在播放設(shè)備列表中記錄對應(yīng)于第一播放端的視頻和/ 或音頻播放設(shè)備；
[0030] 根據(jù)智能終端連接上第二播放端后發(fā)送的請求報(bào)文，在播放設(shè)備列表中記錄對應(yīng) 于第二播放端的視頻和/或音頻播放設(shè)備，以及第二播放端的視頻和/或音頻播放設(shè)備對應(yīng) 的智能終端。
[0031] 進(jìn)一步地，所述注冊模塊還用于為播放設(shè)備列表中記錄的視頻和/或音頻播放設(shè) 備設(shè)置對應(yīng)的優(yōu)先級，以及周期性更新播放設(shè)備列表中各播放設(shè)備的在線狀態(tài)。
[0032] 所述播放選擇模塊根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端進(jìn) 行播放，執(zhí)行如下操作：
[0033] 根據(jù)播放設(shè)備列表中播放設(shè)備的在線狀態(tài)和優(yōu)先級，從在線的播放設(shè)備中選擇優(yōu) 先的視頻和/或音頻播放設(shè)備；
[0034]將前端設(shè)備采集的音視頻分發(fā)到選出的優(yōu)先的視頻和音頻播放設(shè)備進(jìn)行播放。
[0035]進(jìn)一步地，所述播放選擇模塊選出的視頻播放設(shè)備為第一播放端，選出的音頻播 放設(shè)備為第二播放端，所述播放選擇模塊還用于：
[0036]對原始視音頻中的音頻數(shù)據(jù)進(jìn)行高頻調(diào)制，將原始視頻數(shù)據(jù)和高頻調(diào)制后的音頻 數(shù)據(jù)發(fā)送到第一播放端播放；
[0037]將原始音視頻發(fā)送到智能終端，以使智能終端對原始音頻數(shù)據(jù)進(jìn)行解碼后發(fā)送給 第二播放端播放。
[0038]進(jìn)一步地，所述播放選擇模塊還用于：
[0039] 在高頻調(diào)制后的音頻數(shù)據(jù)和原始音頻數(shù)據(jù)里打上相同的時間戳序號；
[0040] 接收智能終端發(fā)送的同步請求報(bào)文，根據(jù)同步請求報(bào)文調(diào)整發(fā)送到第一播放端或 第二播放端的音視頻的時間，其中所述智能終端接收第一播放端對高頻調(diào)制后的音頻數(shù)據(jù) 的無線廣播，與原始音頻數(shù)據(jù)的時間戳序號進(jìn)行比較，根據(jù)比較結(jié)果發(fā)送同步請求報(bào)文。
[0041] 本發(fā)明提出了一種視頻監(jiān)控中的音視頻播放方法及裝置，通過建立第一播放端和 第二播放端對應(yīng)的播放設(shè)備列表，在播放前端設(shè)備采集的音視頻時，根據(jù)建立的播放設(shè)備 列表選擇第一播放端或/和第二播放端進(jìn)行播放，從而能夠選擇效果最佳的播放設(shè)備來分 別播放視頻和音頻，同時還能夠?qū)崿F(xiàn)不同播放設(shè)備的同步。可以實(shí)現(xiàn)在存在高保真藍(lán)牙音 箱時，優(yōu)先由藍(lán)牙音箱進(jìn)行音頻解碼，當(dāng)藍(lán)牙音箱離線則通過電視機(jī)進(jìn)行音頻解碼。本發(fā)明 的方法能夠提供充分利用高品質(zhì)設(shè)備，提供最好的用戶體驗(yàn)。
【附圖說明】
[0042] 圖1為本發(fā)明實(shí)施例視頻監(jiān)控系統(tǒng)結(jié)構(gòu)示意圖；
[0043] 圖2為本發(fā)明視頻監(jiān)控中的音視頻播放方法流程圖。
【具體實(shí)施方式】
[0044] 下面結(jié)合附圖和實(shí)施例對本發(fā)明技術(shù)方案做進(jìn)一步詳細(xì)說明，以下實(shí)施例不構(gòu)成 對本發(fā)明的限定。
[0045] 本實(shí)施例以如圖1所示的家庭內(nèi)的視頻監(jiān)控系統(tǒng)為例，該視頻監(jiān)控系統(tǒng)包括前端 設(shè)備、NVR、顯示設(shè)備、智能終端、無線音頻設(shè)備，以及無線路由器。其中前端設(shè)備為網(wǎng)絡(luò)攝像 機(jī)IPC或普通攝像機(jī)與編碼器，顯示設(shè)備一般采用高清電視機(jī)TV或其他大屏幕顯示設(shè)備，智 能終端為用戶的智能手機(jī)或智能平板電腦，無線音頻設(shè)備為高保真藍(lán)牙音箱。IPC與NVR可 以通過無線連接，也可以通過有線連接，智能手機(jī)通過無線路由器連接到NVR，TV與NVR之間 通過無線路由器連接或有線連接，高保真藍(lán)牙音箱與智能手機(jī)之間通過藍(lán)牙連接。
[0046] 本實(shí)施例的組網(wǎng)僅以家庭內(nèi)的視頻監(jiān)控系統(tǒng)，其中無線路由器采用常用的WIFI路 由器，而高保真藍(lán)牙音箱與智能手機(jī)之間通過藍(lán)牙連接，隨著技術(shù)的發(fā)展，3G/4G或其他寬 帶無線技術(shù)，只要其支持的帶寬能夠滿足實(shí)時的音視頻傳輸，都適用于本發(fā)明，這里不再贅 述。
[0047] IPC、TV和智能手機(jī)都注冊到NVR，都可以被NVR管理，IPC、TV和智能手機(jī)注冊時會 攜帶自身的設(shè)備ID標(biāo)識，NVR通過此設(shè)備ID和注冊的設(shè)備的IP地址來增刪改查設(shè)備，以及和 每臺設(shè)備進(jìn)行通信。IPC負(fù)責(zé)采集視頻和音頻，壓縮編碼后通過網(wǎng)絡(luò)發(fā)送數(shù)據(jù)流到NVR，由 NVR負(fù)責(zé)對IPC的音視頻流進(jìn)行一對多的媒體流復(fù)制分發(fā)，分發(fā)的目的設(shè)備可以是TV，也可 以是智能手機(jī)。從而可以有選擇地利用TV來播放視頻，利用高保真藍(lán)牙音箱來播放音頻，帶 給用戶良好的體驗(yàn)。
[0048] 如圖2所示，本實(shí)施例一種視頻監(jiān)控中的音視頻播放方法，應(yīng)用于NVR，包括如下步 驟：
[0049] 步驟SI、NVR接受視頻監(jiān)控系統(tǒng)中前端設(shè)備、第一播放端、智能終端的注冊，并根據(jù) 智能終端連接上第二播放端后發(fā)送的請求報(bào)文，建立第一播放端和第二播放端對應(yīng)的播放 設(shè)備列表。
[0050] 一般來說播放設(shè)備都具有視頻和音頻的播放能力，也可以僅具有一種播放能力， 但是一些設(shè)備的視頻效果好，一些設(shè)備的音頻效果好，本實(shí)施例第一播放設(shè)備和第二播放 設(shè)備就是視頻、音頻效果具有差異的播放設(shè)備。例如第一播放端為電視機(jī)、智能手機(jī)或智能 平板等，而第二播放端是高保真藍(lán)牙音箱或其他高品質(zhì)的音箱等。智能終端采用智能手機(jī) 或智能平板來實(shí)現(xiàn)，連接第二播放端，并向NVR發(fā)送請求報(bào)文，以及上報(bào)第二播放端的狀態(tài)， 向第二播放端轉(zhuǎn)發(fā)來自NVR的音頻，以及用來同步第一播放端和第二播放端。
[0051 ]容易理解的是，當(dāng)?shù)谝徊シ哦艘彩侵悄苁謾C(jī)時，智能手機(jī)可以屏蔽掉自身的音頻 模塊，將音頻發(fā)送到藍(lán)牙連接的高保真藍(lán)牙音箱，即在智能手機(jī)上播放視頻，在高保真藍(lán)牙 音箱上播放音頻。但是這種模式視頻效果不好，在本發(fā)明中不予考慮。
[0052]本實(shí)施例以下的描述中，第一播放端為電視機(jī)TV，第二播放端為高保真藍(lán)牙音箱， 智能終端為智能手機(jī)，以后不再贅述。
[0053] IPC、TV和智能手機(jī)都注冊到NVR，都可以被NVR管理，IPC、TV和智能手機(jī)注冊時會 攜帶自身的設(shè)備ID標(biāo)識，NVR通過此設(shè)備ID和注冊的設(shè)備的IP地址來增刪改查設(shè)備，以及和 每臺設(shè)備進(jìn)行通信。
[0054] 智能手機(jī)通過藍(lán)牙與高保真藍(lán)牙音箱連接，當(dāng)高保真藍(lán)牙音箱和智能手機(jī)藍(lán)牙連 接建立成功后，智能手機(jī)向NVR發(fā)送一個藍(lán)牙音頻設(shè)備新增的請求報(bào)文，請求報(bào)文里攜帶高 保真藍(lán)牙音箱設(shè)備的ID以及智能手機(jī)的MAC地址。NVR收到此報(bào)文請求后，獲取智能手機(jī)的 MAC地址和高保真藍(lán)牙音箱設(shè)備的ID。
[0055] 根據(jù)各設(shè)備的注冊信息以及智能手機(jī)的請求報(bào)文，NVR可以建立第一播放端和第 二播放端對應(yīng)的播放設(shè)備列表，即：
[0056] 根據(jù)第一播放端注冊信息，在播放設(shè)備列表中記錄對應(yīng)于第一播放端的視頻和/ 或音頻播放設(shè)備；
[0057]根據(jù)智能終端連接上第二播放端后發(fā)送的請求報(bào)文，在播放設(shè)備列表中記錄對應(yīng) 于第二播放端的視頻和/或音頻播放設(shè)備，以及第二播放端的視頻和音頻播放設(shè)備對應(yīng)的 智能終端。
[0058]本實(shí)施例第一播放端為電視機(jī)，第二播放端為高保真藍(lán)牙音箱，因此在選擇時僅 需要選擇不同的音頻播放設(shè)備，因此建立的播放設(shè)備列表如表1所示：
[0Π^0?
[0060]
[0061] 表 1
[0062] 表1為音頻播放設(shè)備列表，容易理解的是，同樣可以建立視頻播放設(shè)備列表，兩個 的和為播放設(shè)備列表。在音頻播放設(shè)備列表有高保真藍(lán)牙音箱設(shè)備Blue_Soundl，也有之前 注冊的TV設(shè)備的視頻播放設(shè)備TV_Sound。如果第二播放端同樣可以支持視頻播放，則在表1 中需要同時記錄第一播放端和第二播放端的視頻播放設(shè)備，這里不再贅述。
[0063] 容易理解的是，本實(shí)施例建立第一播放端和第二播放端對應(yīng)的播放設(shè)備列表，也 可以直接在NVR上添加第一播放端和第二播放端對應(yīng)的播放設(shè)備，這里不再贅述。
[0064] 本實(shí)施例中還設(shè)置有各個視頻、音頻播放設(shè)備的優(yōu)先級，優(yōu)先級的數(shù)值越小，則優(yōu) 先級越高。例如設(shè)置第一播放端對應(yīng)的視頻播放設(shè)備的優(yōu)先級高于第二播放端對應(yīng)的視頻 播放設(shè)備，而第二播放端對應(yīng)的音頻播放設(shè)備的優(yōu)先級高于第一播放端對應(yīng)的音頻播放設(shè) 備。在本實(shí)施例中高保真藍(lán)牙音箱的音頻播放優(yōu)先級為1，要高于TV設(shè)備的音頻播放的優(yōu)先 級3。在設(shè)置優(yōu)先級的情況下，根據(jù)優(yōu)先級的高度分別發(fā)送視頻和音頻來進(jìn)行播放，在不設(shè) 置優(yōu)先級的情況下，直接是將視頻發(fā)送到TV，而將音頻通過智能手機(jī)發(fā)送給高保真藍(lán)牙音 箱。
[0065] 從而可以根據(jù)優(yōu)先級，選擇不同的視頻播放設(shè)備或音頻播放設(shè)備來進(jìn)行播放。例 如在沒有智能手機(jī)，或沒有高保真藍(lán)牙音箱時，僅選擇TV來播放音頻和視頻;在有TV、又有 高保真藍(lán)牙音箱時，選擇TV來播放視頻，選擇與智能手機(jī)連接的高保真藍(lán)牙音箱來播放音 頻。
[0066] 為了有效識別網(wǎng)絡(luò)中的音視頻播放設(shè)備，NVR會周期性地更新播放設(shè)備列表，刷新 播放設(shè)備列表中各設(shè)備的在線狀態(tài)，如表2所;
[0067]
[0068] 表 2
[0069] 其中online表示在線，而offline表示離線。從而可以了解哪些播放設(shè)備在線，可 以進(jìn)行選擇。本實(shí)施例周期性地更新播放設(shè)備列表，例如可以30秒更新一次，或15秒更新一 次，對此不做限制。更新過程可以是播放設(shè)備自己主動上報(bào)狀態(tài)，也可以由NVR設(shè)備查詢播 放設(shè)備的狀態(tài)，這里不再贅述。當(dāng)播放列表中不包含在線狀態(tài)時，直接將音視頻發(fā)送到選定 的設(shè)備，在設(shè)備不在線時，顯示錯誤，然后自動更換其他設(shè)備來播放。
[0070]由于一個高保真藍(lán)牙音箱可能被多個智能手機(jī)綁定，但同一時刻，只能是某個智 能手機(jī)綁定的高保真藍(lán)牙音箱在線。所以NVR是通過當(dāng)前注冊的智能手機(jī)MAC和智能手機(jī)上 當(dāng)前在線的高保真藍(lán)牙音箱狀態(tài)判斷，當(dāng)前可用的高保真藍(lán)牙音箱及智能手機(jī)。在有多個 智能手機(jī)時，音頻播放設(shè)備列表如表3所示：
[0071]
[0072J 表 3
[0073] 根據(jù)表3,就可以選擇在線的智能手機(jī)，并采用與其連接的高保真藍(lán)牙音箱來播放 音頻。同時選擇TV來播放視頻。
[0074] 步驟S2、根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端播放前端設(shè) 備米集的首視頻。
[0075] 在根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端進(jìn)行播放時，根據(jù) 播放設(shè)備列表中播放設(shè)備的在線狀態(tài)和優(yōu)先級，從在線的播放設(shè)備中選擇優(yōu)先的視頻和/ 或音頻播放設(shè)備，將前端設(shè)備采集的音視頻分發(fā)到選出的優(yōu)先的視頻和音頻播放設(shè)備進(jìn)行 播放。
[0076] 本實(shí)施例中，NVR查詢播放設(shè)備列表，TV是播放視頻的優(yōu)先設(shè)備，對于音頻播放設(shè) 備，先根據(jù)設(shè)備在線狀態(tài)分析哪些音頻設(shè)備在線，再根據(jù)優(yōu)先級先獲取音頻播放的優(yōu)先設(shè) 備。分為下面兩種情況：
[0077]實(shí)施例1、高保真藍(lán)牙音箱不在線。
[0078] 在智能終端智能手機(jī)不在線時，或高保真藍(lán)牙音箱沒有插上電源或故障，在播放 設(shè)備列表中，智能手機(jī)所連接的第二播放端為離線，即高保真藍(lán)牙音箱顯示為離線，無法連 接高保真藍(lán)牙音箱來播放音頻，因此根據(jù)優(yōu)先級只能選擇第一播放端TV來播放音視頻。
[0079] 此時，NVR將音視頻發(fā)送給第一播放端TV，進(jìn)行音視頻的播放。
[0080] 實(shí)施例2、高保真藍(lán)牙音箱在線。
[0081] 這里查詢到需要音頻播放優(yōu)先使用智能手機(jī)的Blue_Soundl(藍(lán)牙音箱），視頻數(shù) 據(jù)通過TV(電視)來進(jìn)行解碼播放。
[0082]此時能夠?qū)⒁曨l發(fā)送到具有高畫質(zhì)的TV來進(jìn)行播放，且具有較大的屏幕，而將音 頻通過智能手機(jī)轉(zhuǎn)發(fā)到高保真藍(lán)牙音箱來進(jìn)行播放，具有較高的音質(zhì)。
[0083]對于實(shí)施例2,優(yōu)先的視頻播放設(shè)備為第一播放端，優(yōu)先的音頻播放設(shè)備為第二播 放端，NVR在需要播放IPC的音視頻流時，包括如下步驟：
[0084] 1)、NVR獲取音視頻數(shù)據(jù)流，對其中的音頻數(shù)據(jù)流進(jìn)行高頻調(diào)制編碼。
[0085] NVR通過網(wǎng)絡(luò)獲取IPC的一路音視頻數(shù)據(jù)流里面包括視頻和音頻，NVR獲取音頻數(shù) 據(jù)流，由于一般的視頻監(jiān)控?cái)?shù)據(jù)流中的音頻的采樣率一般為8KHZ，人耳能聽到的聲音頻率 在2Hz-20KHz之間。如果直接將獲取的音視頻數(shù)據(jù)流發(fā)送到TV端，TV端則可以直接播放視 頻和音頻，此時如果不想聽電視的音頻，可以將電視靜音處理。
[0086]本實(shí)施例優(yōu)選地，采用調(diào)頻廣播使用頻段87.5MHz-108MHz來對音頻數(shù)據(jù)重新進(jìn)行 調(diào)制編碼，即其載波的調(diào)頻的頻段采用87.5MHz-108MHz。這樣的音頻數(shù)據(jù)發(fā)送到TV后，TV播 放的音頻人耳也聽不到，所以此時用戶是無法聽到此時電視上的聲音。
[0087] 2)、NVR將原始視頻數(shù)據(jù)和高頻調(diào)制后的音頻數(shù)據(jù)發(fā)送到第一播放端播放，將原始 音視頻的原始視頻數(shù)據(jù)和原始音頻數(shù)據(jù)發(fā)送到智能終端，由智能終端對原始音頻數(shù)據(jù)進(jìn)行 解碼后發(fā)送給第二播放端播放。
[0088] 當(dāng)TV收到音視頻數(shù)據(jù)流后，進(jìn)行解碼，由于視頻在屏幕上播放，由于音頻是 87.5MHz-108MHz的高頻信號，人耳能聽到的聲音頻率在2Hz-20KHz之間，所以此時用戶是 無法聽到此時電視上的聲音。
[0089] 當(dāng)智能手機(jī)收到音視頻數(shù)據(jù)流后，只把其中的音頻數(shù)據(jù)進(jìn)行解碼，通過藍(lán)牙發(fā)送 給第二播放端高保真藍(lán)牙音箱播放。
[0090] 進(jìn)一步地，由于NVR將兩路音視頻數(shù)據(jù)分別發(fā)送到TV和智能手機(jī)，兩者之間就有可 能存在不同步的問題，表現(xiàn)為TV上播放的視頻與高保真藍(lán)牙音箱上播放的音頻不同步。因 此，本實(shí)施例NVR在對音頻數(shù)據(jù)進(jìn)行高頻調(diào)制時，在高頻調(diào)制后的音頻數(shù)據(jù)和原始音頻數(shù)據(jù) 里打上相同的時間戳序號。
[0091] 則TV端會將收到的高頻音頻，通過內(nèi)置的無線射頻模塊對外發(fā)送調(diào)頻無線，智能 手機(jī)端接收到此高頻信號，比較高頻音頻信號及原始音頻信號的時間戳序號，獲取時間差， 如果智能手機(jī)端快，則緩沖智能手機(jī)的原始音頻，如果TV端快，則智能手機(jī)通知NVR調(diào)整發(fā) 送到TV的音視頻數(shù)據(jù)流。
[0092] 具體地，包括：
[0093 ] TV端將收到的調(diào)制后的音頻，發(fā)送調(diào)頻無線廣播；
[0094] 智能手機(jī)接收到調(diào)頻無線廣播，同時獲取對應(yīng)的時間戳t2;
[0095] 智能手機(jī)獲取到原始音頻數(shù)據(jù)的時間戳tl;
[0096] 智能手機(jī)比較兩個音頻數(shù)據(jù)的時間戳，根據(jù)比較結(jié)果發(fā)送同步請求報(bào)文：
[0097] 如果t2〈tl，則表示電視端快，智能手機(jī)端慢，則智能手機(jī)端發(fā)送同步請求報(bào)文給 NVR，要求NVR發(fā)送給TV的音視頻數(shù)據(jù)流要減慢時間X = (11 -t2) /2再發(fā)送；
[0098] 如果t2>tl，則表示智能手機(jī)端快，電視端慢，則智能手機(jī)端發(fā)送同步請求報(bào)文給 NVR，要求NVR發(fā)送給智能手機(jī)的音視頻數(shù)據(jù)流要減慢時間x=(t2-tl)/2再發(fā)送。
[0099] 即智能手機(jī)接收無線調(diào)頻廣播后，比較兩個音頻數(shù)據(jù)的時間戳，根據(jù)比較結(jié)果發(fā) 送同步請求報(bào)文，NVR接收智能終端發(fā)送的同步請求報(bào)文，根據(jù)同步請求報(bào)文調(diào)整發(fā)送到第 一播放端或第二播放端的音視頻的時間。
[0100]由于NVR不斷刷新音頻設(shè)備列表，則當(dāng)音頻設(shè)備列表中的某個設(shè)備離開，則自動切 換音視頻解碼設(shè)備，例如，藍(lán)牙音箱離開，則音頻自動切換成電視機(jī)進(jìn)行音頻解碼。當(dāng)音頻 設(shè)備列表中智能手機(jī)下線或者藍(lán)牙斷開連接等情況發(fā)生，NVR在一定周期內(nèi)例如每3秒，進(jìn) 行檢測，其中在音頻設(shè)備主動離線前也會立即上報(bào)NVR設(shè)備，告知音頻設(shè)備退出，則NVR把音 頻設(shè)備表里的設(shè)備狀態(tài)，設(shè)置為Offline離線狀態(tài)。此時需要TV在播放視頻的同時也需要播 放音頻，此時NVR針對音頻的數(shù)據(jù)包，不要進(jìn)行高頻調(diào)制。
[0101] 通過本實(shí)施例的方法，可以實(shí)現(xiàn)在存在高保真藍(lán)牙音箱時，優(yōu)先由藍(lán)牙音箱進(jìn)行 音頻解碼，當(dāng)藍(lán)牙音箱離線則通過電視機(jī)進(jìn)行音頻解碼。
[0102] 對應(yīng)于上述方法，本實(shí)施例一種視頻監(jiān)控中的音視頻播放裝置，應(yīng)用于視頻監(jiān)控 系統(tǒng)，具體來說該音視頻播放裝置應(yīng)用于NVR，也可以應(yīng)用于視頻監(jiān)控系統(tǒng)中的其他服務(wù) 器，例如視頻管理服務(wù)器。
[0103] 該音視頻播放裝置包括：
[0104] 注冊模塊，用于接受視頻監(jiān)控系統(tǒng)中前端設(shè)備、第一播放端、智能終端的注冊，并 根據(jù)智能終端連接上第二播放端后發(fā)送的請求報(bào)文，建立第一播放端和第二播放端對應(yīng)的 播放設(shè)備列表；
[0105] 播放選擇模塊，用于根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端 播放前端設(shè)備采集的音視頻。
[0106] 與上述方法對應(yīng)地，本實(shí)施例注冊模塊建立第一播放端和第二播放端對應(yīng)的播放 設(shè)備列表，執(zhí)行如下操作：
[0107] 根據(jù)第一播放端注冊信息，在播放設(shè)備列表中記錄對應(yīng)于第一播放端的視頻和/ 或音頻播放設(shè)備；
[0108] 根據(jù)智能終端連接上第二播放端后發(fā)送的請求報(bào)文，在播放設(shè)備列表中記錄對應(yīng) 于第二播放端的視頻和/或音頻播放設(shè)備，以及第二播放端的視頻和/或音頻播放設(shè)備對應(yīng) 的智能終端。
[0109] 優(yōu)選地，本實(shí)施例注冊模塊還用于周期性更新播放設(shè)備列表中各播放設(shè)備的在線 狀態(tài)。
[0110] 優(yōu)選地，本實(shí)施例注冊模塊還用于為播放設(shè)備列表中記錄的視頻和/或音頻播放 設(shè)備設(shè)置對應(yīng)的優(yōu)先級；
[0111] 本實(shí)施例播放選擇模塊根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放 端進(jìn)行播放，執(zhí)行如下操作：
[0112] 根據(jù)播放設(shè)備列表中播放設(shè)備的在線狀態(tài)和優(yōu)先級，從在線的播放設(shè)備中選擇優(yōu) 先的視頻和/或音頻播放設(shè)備；
[0113]將前端設(shè)備采集的音視頻分發(fā)到選出的優(yōu)先的視頻和音頻播放設(shè)備進(jìn)行播放。
[0114] 在本實(shí)施例中，播放選擇模塊選出的視頻播放設(shè)備為第一播放端TV，選出的音頻 播放設(shè)備為第二播放端高保真藍(lán)牙音箱，則播放選擇模塊還用于：
[0115] 對原始視音頻中的音頻數(shù)據(jù)進(jìn)行高頻調(diào)制，將原始視頻數(shù)據(jù)和高頻調(diào)制后的音頻 數(shù)據(jù)發(fā)送到第一播放端播放；
[0116]將原始音視頻發(fā)送到智能終端，以使智能終端對原始音頻數(shù)據(jù)進(jìn)行解碼后發(fā)送給 第二播放端播放。
[0117] 從而在TV端播放視頻，而人耳聽不到TV的音頻，在高保真藍(lán)牙音箱上播放音頻，提 供高質(zhì)量的視頻和音頻體驗(yàn)。
[0118] 本實(shí)施例為了同步不同播放端的視頻和音頻，播放選擇模塊還用于：
[0119] 在高頻調(diào)制后的音頻數(shù)據(jù)和原始音頻數(shù)據(jù)里打上相同的時間戳序號；
[0120] 接收智能終端發(fā)送的同步請求報(bào)文，根據(jù)同步請求報(bào)文調(diào)整發(fā)送到第一播放端或 第二播放端的音視頻的時間，其中所述智能終端接收第一播放端對高頻調(diào)制后的音頻數(shù)據(jù) 的無線廣播，與原始音頻數(shù)據(jù)的時間戳序號進(jìn)行比較，根據(jù)比較結(jié)果發(fā)送同步請求報(bào)文。
[0121] 從而保證了第一播放端和第二播放端的同步。
[0122] 以上實(shí)施例僅用以說明本發(fā)明的技術(shù)方案而非對其進(jìn)行限制，在不背離本發(fā)明精 神及其實(shí)質(zhì)的情況下，熟悉本領(lǐng)域的技術(shù)人員當(dāng)可根據(jù)本發(fā)明作出各種相應(yīng)的改變和變 形，但這些相應(yīng)的改變和變形都應(yīng)屬于本發(fā)明所附的權(quán)利要求的保護(hù)范圍。
【主權(quán)項(xiàng)】
1. 一種視頻監(jiān)控中的音視頻播放方法，應(yīng)用于視頻監(jiān)控系統(tǒng)，其特征在于，所述音視頻 播放方法包括： 接受視頻監(jiān)控系統(tǒng)中前端設(shè)備、第一播放端、智能終端的注冊，并根據(jù)智能終端連接上 第二播放端后發(fā)送的請求報(bào)文，建立第一播放端和第二播放端對應(yīng)的播放設(shè)備列表； 根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端播放前端設(shè)備采集的音視 頻。2. 根據(jù)權(quán)利要求1所述的音視頻播放方法，其特征在于，所述建立第一播放端和第二播 放端對應(yīng)的播放設(shè)備列表，包括： 根據(jù)第一播放端注冊信息，在播放設(shè)備列表中記錄對應(yīng)于第一播放端的視頻和/或音 頻播放設(shè)備； 根據(jù)智能終端連接上第二播放端后發(fā)送的請求報(bào)文，在播放設(shè)備列表中記錄對應(yīng)于第 二播放端的視頻和/或音頻播放設(shè)備，以及第二播放端的視頻和/或音頻播放設(shè)備對應(yīng)的智 能終端。3. 根據(jù)權(quán)利要求2所述的音視頻播放方法，其特征在于，所述建立第一播放端和第二播 放端對應(yīng)的播放設(shè)備列表，還包括： 為播放設(shè)備列表中記錄的視頻和/或音頻播放設(shè)備設(shè)置對應(yīng)的優(yōu)先級； 周期性更新播放設(shè)備列表中各播放設(shè)備的在線狀態(tài)； 所述根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端播放前端設(shè)備采集的 音視頻，包括： 根據(jù)播放設(shè)備列表中播放設(shè)備的在線狀態(tài)和優(yōu)先級，從在線的播放設(shè)備中選擇優(yōu)先的 視頻和/或音頻播放設(shè)備； 將前端設(shè)備采集的音視頻分發(fā)到選出的優(yōu)先的視頻和音頻播放設(shè)備進(jìn)行播放。4. 根據(jù)權(quán)利要求1所述的音視頻播放方法，其特征在于，所述根據(jù)建立的播放設(shè)備列表 選擇第一播放端或/和第二播放端播放前端設(shè)備采集的音視頻，選出的視頻播放設(shè)備為第 一播放端，選出的音頻播放設(shè)備為第二播放端，所述音視頻播放方法還包括： 對原始視音頻中的音頻數(shù)據(jù)進(jìn)行高頻調(diào)制，將原始視頻數(shù)據(jù)和高頻調(diào)制后的音頻數(shù)據(jù) 發(fā)送到第一播放端播放； 將原始音視頻發(fā)送到智能終端，以使智能終端對原始音頻數(shù)據(jù)進(jìn)行解碼后發(fā)送給第二 播放端播放。5. 根據(jù)權(quán)利要求4所述的音視頻播放方法，其特征在于，所述音視頻播放方法，還包括： 在高頻調(diào)制后的音頻數(shù)據(jù)和原始音頻數(shù)據(jù)里打上相同的時間戳序號； 接收智能終端發(fā)送的同步請求報(bào)文，根據(jù)同步請求報(bào)文調(diào)整發(fā)送到第一播放端或第二 播放端的音視頻的時間，其中所述智能終端接收第一播放端對高頻調(diào)制后的音頻數(shù)據(jù)的無 線廣播，與原始音頻數(shù)據(jù)的時間戳序號進(jìn)行比較，根據(jù)比較結(jié)果發(fā)送同步請求報(bào)文。6. -種視頻監(jiān)控中的音視頻播放裝置，應(yīng)用于視頻監(jiān)控系統(tǒng)，其特征在于，所述音視頻 播放裝置包括： 注冊模塊，用于接受視頻監(jiān)控系統(tǒng)中前端設(shè)備、第一播放端、智能終端的注冊，并根據(jù) 智能終端連接上第二播放端后發(fā)送的請求報(bào)文，建立第一播放端和第二播放端對應(yīng)的播放 設(shè)備列表； 播放選擇模塊，用于根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端播放 前端設(shè)備采集的音視頻。7. 根據(jù)權(quán)利要求7所述的音視頻播放裝置，其特征在于，所述注冊模塊建立第一播放端 和第二播放端對應(yīng)的播放設(shè)備列表，執(zhí)行如下操作： 根據(jù)第一播放端注冊信息，在播放設(shè)備列表中記錄對應(yīng)于第一播放端的視頻和/或音 頻播放設(shè)備； 根據(jù)智能終端連接上第二播放端后發(fā)送的請求報(bào)文，在播放設(shè)備列表中記錄對應(yīng)于第 二播放端的視頻和/或音頻播放設(shè)備，以及第二播放端的視頻和/或音頻播放設(shè)備對應(yīng)的智 能終端。8. 根據(jù)權(quán)利要求7所述的音視頻播放裝置，其特征在于，所述注冊模塊還用于為播放設(shè) 備列表中記錄的視頻和/或音頻播放設(shè)備設(shè)置對應(yīng)的優(yōu)先級，以及周期性更新播放設(shè)備列 表中各播放設(shè)備的在線狀態(tài)； 所述播放選擇模塊根據(jù)建立的播放設(shè)備列表選擇第一播放端或/和第二播放端進(jìn)行播 放，執(zhí)行如下操作： 根據(jù)播放設(shè)備列表中播放設(shè)備的在線狀態(tài)和優(yōu)先級，從在線的播放設(shè)備中選擇優(yōu)先的 視頻和/或音頻播放設(shè)備； 將前端設(shè)備采集的音視頻分發(fā)到選出的優(yōu)先的視頻和音頻播放設(shè)備進(jìn)行播放。9. 根據(jù)權(quán)利要求6所述的音視頻播放裝置，其特征在于，所述播放選擇模塊選出的視頻 播放設(shè)備為第一播放端，選出的音頻播放設(shè)備為第二播放端，所述播放選擇模塊還用于： 對原始視音頻中的音頻數(shù)據(jù)進(jìn)行高頻調(diào)制，將原始視頻數(shù)據(jù)和高頻調(diào)制后的音頻數(shù)據(jù) 發(fā)送到第一播放端播放； 將原始音視頻發(fā)送到智能終端，以使智能終端對原始音頻數(shù)據(jù)進(jìn)行解碼后發(fā)送給第二 播放端播放。10. 根據(jù)權(quán)利要求9所述的音視頻播放裝置，其特征在于，所述播放選擇模塊還用于： 在高頻調(diào)制后的音頻數(shù)據(jù)和原始音頻數(shù)據(jù)里打上相同的時間戳序號； 接收智能終端發(fā)送的同步請求報(bào)文，根據(jù)同步請求報(bào)文調(diào)整發(fā)送到第一播放端或第二 播放端的音視頻的時間，其中所述智能終端接收第一播放端對高頻調(diào)制后的音頻數(shù)據(jù)的無 線廣播，與原始音頻數(shù)據(jù)的時間戳序號進(jìn)行比較，根據(jù)比較結(jié)果發(fā)送同步請求報(bào)文。
【文檔編號】H04B5/00GK105898233SQ201610367593
【公開日】2016年8月24日
【申請日】2016年5月27日
【發(fā)明人】周迪, 關(guān)春天
【申請人】浙江宇視科技有限公司