1.多媒體技術(shù)基礎(chǔ)

1.1.媒體與技術(shù)

1.1.媒體
維基百科：傳播信息載體
國(guó)際電信聯(lián)盟（ITU-T）：感知、表示、存儲(chǔ)和傳輸?shù)氖侄魏头椒ā?br /> 兩層含義：存儲(chǔ)信息的實(shí)體，媒質(zhì)。傳遞信息載體，媒介。

1.2.國(guó)際電話電報(bào)咨詢委員會(huì)（CCITT） 對(duì)媒體的分類
感覺(jué)媒體（Perception Medium）：直接感覺(jué)。視覺(jué)、聽覺(jué)、嗅覺(jué)、味覺(jué)、觸覺(jué)。
表示媒體（Representation Medium）：人為研究，數(shù)據(jù)編碼，媒質(zhì)。
顯示媒體（Presentation Medium）：電信號(hào)。輸入顯示媒體：鍵盤、鼠標(biāo)、掃描儀、話筒、手寫筆、攝像機(jī)。輸出顯示媒體：顯示器、打印機(jī)、繪圖儀、揚(yáng)聲器、喇叭。
存儲(chǔ)媒體（Storage Medium）：媒質(zhì)。紙張、硬盤、軟盤、磁帶、光盤、U盤、ROM、固態(tài)硬盤。硬盤接口類型：IDE（曾經(jīng)使用最廣泛）、SCSI、FC、SATA（目前普通PC硬盤主流）
傳輸媒體（Perception Medium）：無(wú)線：微波、紅外、激光、藍(lán)牙。有線：雙絞線（Twisted Pair）、同軸電纜（Coaxial Cable）、光纜（Optical Fiber Cable）。

1.3.媒體特征
可存儲(chǔ)性、可傳播性、可感知性

1.4.多媒體
能夠同時(shí)采集、處理、編輯、存儲(chǔ)、和展示兩個(gè)或以上不同類型的信息媒體的技術(shù)。
超媒體：超鏈接。

1.5.多媒體技術(shù)主要特點(diǎn)
集成性、交互性、實(shí)時(shí)性、控制性、非線性
集成性、交互性、實(shí)時(shí)性、數(shù)字化、非線性

1.6.多媒體技術(shù)的應(yīng)用
1.6.1.多媒體技術(shù)應(yīng)用最早發(fā)展最迅速的領(lǐng)域一–教育培訓(xùn)領(lǐng)域:CAI計(jì)算機(jī)輔助教學(xué)，Web3D遠(yuǎn)程教學(xué)，MOOC慕課，SPOC小規(guī)模限制性在線課程。
1.6.2.多媒體通信:一次呼叫中可以同時(shí)提供多種多媒體信息(可視電話，點(diǎn)播，電視，遠(yuǎn)程教學(xué)，遠(yuǎn)程醫(yī)療)
1.6.3.電子出版物:光盤等。
1.6.4.醫(yī)療:多媒體醫(yī)療影像系統(tǒng)，遠(yuǎn)程醫(yī)療
1.6.5.辦公自動(dòng)化:計(jì)算機(jī)局域網(wǎng)，廣域網(wǎng)，圖像處理專用系統(tǒng)，語(yǔ)音傳真，秘書系統(tǒng)，電視會(huì)議系統(tǒng)

1.2.關(guān)鍵技術(shù)

數(shù)字技術(shù)：特點(diǎn)：1.一般采用二進(jìn)制。2.抗干擾能力強(qiáng)、精度高。3.數(shù)字信號(hào)便于長(zhǎng)期存儲(chǔ)。4.保密性強(qiáng)。5.通用性強(qiáng)。
多媒體信息獲取與輸出技術(shù)
多媒體信息處理與生成技術(shù)
流媒體技術(shù)
1.3.多媒體技術(shù)發(fā)展
虛擬現(xiàn)實(shí)技術(shù)：4個(gè)重要特征一一多感知性，沉浸感，交互性，想象力(3I特性)
增強(qiáng)現(xiàn)實(shí)技術(shù)：特點(diǎn):虛實(shí)結(jié)合，實(shí)時(shí)交互，三維注冊(cè)
移動(dòng)多媒體技術(shù)：4等級(jí)-可視電話數(shù)據(jù)速率(64-384kb/s)，VCD數(shù)據(jù)速率384kb/s-2Mb/s)，DVD數(shù)據(jù)速率4-15Mb/s)，HDTV數(shù)據(jù)速率38.4Mb/s)
多媒體信息顯示技術(shù)：1.立體顯示技術(shù)一一通過(guò)立體眼鏡，頭盔等設(shè)備使人們看到立體的多媒體數(shù)據(jù)，2.OLED顯示技術(shù)一一有機(jī)發(fā)光顯示器，更輕更薄可視角度更大，可以顯著降低耗電量;3.柔性顯示技術(shù)一為未來(lái)飛機(jī)的駕駛艙設(shè)計(jì)，使用非玻璃材質(zhì)，不會(huì)影響彈射跳傘時(shí)的安全性，具有功耗低，可變形可彎曲，由柔軟材料制成的特點(diǎn)，4.觸摸屏顯示技術(shù)一新型人機(jī)交互輸入方式，堅(jiān)固耐用，反應(yīng)速度快，節(jié)省空間，易于交流。
人機(jī)交互技術(shù)：通過(guò)計(jì)算機(jī)輸入輸出設(shè)備實(shí)現(xiàn)人與計(jì)算機(jī)對(duì)話。交互方式包括:觸摸式交互，語(yǔ)音識(shí)別，體感識(shí)別等。
云計(jì)算
物聯(lián)網(wǎng)：在互聯(lián)網(wǎng)基礎(chǔ)上擴(kuò)展的網(wǎng)絡(luò)，用戶端延伸到任何物品和物品之間。三個(gè)特點(diǎn)全面感知(利用射頻識(shí)別計(jì)算、傳感器、二維碼采集動(dòng)態(tài)對(duì)象)、可靠傳送、智能控制
大數(shù)據(jù)：大數(shù)據(jù)的發(fā)展趨勢(shì)
數(shù)據(jù)的資源化，
與云計(jì)算的深度結(jié)合;
數(shù)據(jù)管理成為核心競(jìng)爭(zhēng)力;
數(shù)據(jù)質(zhì)量是商業(yè)智能成功的關(guān)鍵;
數(shù)據(jù)生態(tài)系統(tǒng)復(fù)合化程度加強(qiáng)。
LBS：基于地理位置的服務(wù)是在地理信息系統(tǒng)平臺(tái)GIS的支持下，通過(guò)無(wú)線電通信網(wǎng)絡(luò)或外部定位方式獲取移動(dòng)終端用戶的位置信息，并通過(guò)移動(dòng)終端向用戶提供相應(yīng)服務(wù)的增值業(yè)務(wù)。

2.多媒體信息處理及編輯技術(shù)

2.1.多媒體信息的種類與特點(diǎn)

視覺(jué)類：文字、圖像、圖形、視頻、動(dòng)畫、其他（視頻、符號(hào)表示的數(shù)值、圖形表示的某種數(shù)據(jù)曲線、數(shù)據(jù)庫(kù)的關(guān)系數(shù)據(jù)）
聽覺(jué)類：波形聲音、語(yǔ)音、音樂(lè)

2.2.多媒體文字信息的處理與編輯

文字信息的表示與存儲(chǔ)：
英文字符用ASCII編碼(利用7位二進(jìn)制數(shù)表示，共128個(gè)元素)漢字使用GB2312編碼方式(收錄6763個(gè)漢字)文字使用Unicode編碼(又稱國(guó)際碼，統(tǒng)一碼，單一碼，是計(jì)算機(jī)科學(xué)領(lǐng)域中的業(yè)內(nèi)標(biāo)準(zhǔn))，只規(guī)定了符號(hào)的二進(jìn)制代碼，Unicode編碼的實(shí)現(xiàn)方式為UTF(Unicode轉(zhuǎn)換格式)，最常用的實(shí)現(xiàn)編碼為UTF-8，除此外還有UTF-16,UTF-32
純文本:只保存文本，不保存格式。常見(jiàn)純文本格式擴(kuò)展 txt,asp,bat,c,prg,cmd等。編輯軟件一一記事本Notpad,TXT Editor,Notpad++,Quickpad
富文本:包括大量符號(hào)標(biāo)記，用于標(biāo)記粗體，下劃線，斜體，或特殊字符及特殊打印格式。常見(jiàn)富文本格式擴(kuò)展–RTF,DOCDOCX,PDF等。編輯軟件-Word,WPS等。

文字類型：
根據(jù)具有編輯排版格式：純文本和富文本

2.3.多媒體音頻的處理與編輯

聲音三要素:音調(diào)，響度(音量/音強(qiáng))，音色
音調(diào):聲音的高低，由頻率決定。單位—Hz
響度:人主觀感覺(jué)聲音的大小，由振幅和人與聲源的距離決定。單位一分貝/dB
音色:由發(fā)聲物體的材料，結(jié)構(gòu)決定

音效種類：波形音樂(lè)WAV、MIDI音頻（僅有音樂(lè)場(chǎng)合）、數(shù)字音頻

壓縮原理劃分：波形編碼（脈沖編碼調(diào)制PCM、自適應(yīng)增量調(diào)制ADM、自適應(yīng)差分脈沖編碼調(diào)制ADPCM）、參數(shù)編碼（線性預(yù)測(cè)編碼LPC。語(yǔ)音的基本參數(shù)：基音周期、共振峰、語(yǔ)音譜、聲強(qiáng)）、混合編碼（碼本激勵(lì)線性預(yù)測(cè)CELP、多脈沖線性預(yù)測(cè)MP-LPC、矢量和激勵(lì)線性預(yù)測(cè)VSELP）

波形聲音處理軟件：WaveEdit 、Creative WaveStudio、Adobe Audition
MIDI處理軟件：MIDI Orchestrator

人耳聽覺(jué)：20Hz~20kHz
人發(fā)出的聲音：80~3400Hz
人說(shuō)話的聲音：300~3000Hz

PCM按量化方式劃分：均勻量化、非均勻量化、自適應(yīng)量化

MIDI信息：鍵名、力度、時(shí)值長(zhǎng)短等
MIDI標(biāo)準(zhǔn)：GS標(biāo)準(zhǔn)（日本羅蘭公司1984年）、GM標(biāo)準(zhǔn)（國(guó)際MIDI生產(chǎn)協(xié)會(huì)MMA指定通用MIDI標(biāo)準(zhǔn)）、XG標(biāo)準(zhǔn)（YAMAHA公司1994年）
MIDI合成方法：頻率調(diào)制FM、波形合成
MIDI系統(tǒng)?；疽?#xff1a;音序器或音序軟件、主鍵盤、音源

數(shù)字音頻文件格式：WAV、CD、MP3、MP3 Pro、MIDI、WMA、RA

音頻處理軟件：Cakewalk、Cool EditPro/Adobe Audition、Sound Forge、Wave CN、 、FL Studio、Cubase、Nuendo、Vegas Audio、Wavelab

音頻編輯方式：數(shù)字錄音、數(shù)字音樂(lè)創(chuàng)作、聲音剪輯、聲音合成、增加特效、文件操作

2.4.多媒體圖形圖像的處理與編輯

顏色空間：
RGB：彩色顯示器、計(jì)算機(jī)圖形學(xué)。是最常用的顏色表示方法顏色范圍0-255。是一種發(fā)光的色彩模式。又稱加色模型
CMYK：主要用于印刷，是一種依靠反光的色彩模式，又稱減色模型。青一(互補(bǔ))一紅品一(互補(bǔ))一綠;黃一(互補(bǔ))一藍(lán)
YIQ、YUV、YCrCb：用于電視的顏色空間。模擬PAL和SECAM彩色電視用YUV；NTSC用YIQ、數(shù)字電視用YCrCb。
HSI、HSV：從人的視覺(jué)系統(tǒng)發(fā)出的
CIE色度模型：國(guó)際照明委員會(huì)CIE，1931年

圖像格式：PSD、TIFF、JPEG、BMP、GIF、PNG、EPS、PDF
圖像處理技術(shù)：指紋識(shí)別系統(tǒng)、文字識(shí)別技術(shù)
圖形格式：TIF、TGA、PSD、UFO、RIF、CDR、EPS

圖形圖像處理軟件：Photoshop、CorelDRAW、Illustrator

圖像處理技術(shù)：圖像增強(qiáng)、圖像恢復(fù)、圖像識(shí)別、圖像編碼、點(diǎn)陣圖轉(zhuǎn)換為矢量圖等。
圖形圖像特技處理：圖形圖像的模糊、銳化、浮雕、旋轉(zhuǎn)、透射、變形、水彩化、油畫化

2.5.多媒體視頻的處理與編輯

一般需要保持的頻率：24~30幀/秒
現(xiàn)代電影：24幀/秒
電視節(jié)目美國(guó)NTSC：近30幀/秒
PAL中國(guó)：25幀/秒

分辨率：
手機(jī)視頻:240320
SDTV 480i/p NTSC:360480
SDTV 576i/p PAL:720576
HDTV 720p:1080720
HDTV1080i/p:1920*1080
注:i指的是interlaced(交織的)，理解為“隔行掃描”，而1080p的P意為逐行掃描(Progressive scanning)。數(shù)字1080表示垂直方向有1080條掃描線
日本、韓國(guó)及東南亞地區(qū)與美國(guó)等歐美國(guó)家使用NTSC制式(一圖像總行數(shù)為525行)，使用YIQ模型，視頻信號(hào)幀速率為 29.97頓/秒，隔行掃描方式約為60 場(chǎng)/秒。
法國(guó)，東歐地區(qū)則使用SECAM制式。PAL是德國(guó)制定的彩色電視標(biāo)準(zhǔn)( 一圖像總行數(shù)為625行)，中國(guó)大部分地區(qū)使用PAL制式。SECAM和PAL均使用YUV模型，視頻信號(hào)速率為25 頓/秒，隔行掃描方式為50場(chǎng)/秒
通常膠片電影的快門速率為24頓/秒
H261標(biāo)準(zhǔn)中為了解決電視制式不同的問(wèn)題而定義了CIF視頻格式為了使同一標(biāo)準(zhǔn)既能用于PAL(625)和NTSC(525)兩種電視制式系統(tǒng)，源編碼基于中間格式CIF(Common Inermediate Format)格式，這是一種折中的定義，其分辨率來(lái)源于PAL制式定義為352x288像素，而頓速率則來(lái)源于NTSC制式，定義為30/秒
模擬視頻信號(hào)通?？梢圆捎萌N方式傳輸:分量視頻信號(hào)、復(fù)合視頻信號(hào)和分離視頻信號(hào)(S-Video)。彩色重現(xiàn)質(zhì)量從高到低分別為:分量視頻信號(hào) >分離視頻信號(hào)>復(fù)合視頻信號(hào)
視頻編輯分為:線性編輯和非線性編輯

寬高比
4：3全屏格式，1.33：1
Cinemascope 2.35
Warnerscope 1.85
Technicscope 1.75
Panascope 1.67

本地影像視頻文件格式：AVI、DV-AVI、MPEG、DIVX、MOV
網(wǎng)絡(luò)流媒體影像視頻文件格式：ASF、WMV、RM、RMVB、3GP、Flash

視頻編輯軟件：AE、Microsoft Video For Windows、Adobe Premiere

2.6.多媒體信息的組織

超媒體3個(gè)特性：多媒體信息、網(wǎng)絡(luò)結(jié)構(gòu)模式、交互特性。
超文本和超媒體系統(tǒng)的結(jié)構(gòu)三個(gè)層次：數(shù)據(jù)庫(kù)層、超文本抽象機(jī)層、用戶接口層
超文本和超媒體組成要素：節(jié)點(diǎn)、鏈、網(wǎng)絡(luò)

3.多媒體信息傳輸技術(shù)

3.1.數(shù)據(jù)通信技術(shù)

多媒體服務(wù)質(zhì)量(Qos)指網(wǎng)絡(luò)服務(wù)的良好程度，
衡量QoS的常見(jiàn)指標(biāo)為:吞吐量，差錯(cuò)率，端到端延遲，延遲抖動(dòng),帶寬，丟包率，服務(wù)可用性等。
服務(wù)質(zhì)量類型:確定型、統(tǒng)計(jì)型、盡力型

視頻通信QoS的5個(gè)級(jí)別：

QoS級(jí)別	幀率/FPS	分辨率/%	主觀評(píng)價(jià)	損害程度
5	25~30	65~100	很好	細(xì)微
4	15~24	50~64	較好	可察覺(jué)
3	6~14	35~49	一般	可忍受
2	3~5	20~34	較差	很難忍受
1	1~2	1~9	差	不可忍受

協(xié)議：
RTP/RTCP：實(shí)時(shí)傳輸協(xié)議/實(shí)時(shí)傳輸控制協(xié)議。傳輸層。
RTSP：應(yīng)用層。
RSVP：資源預(yù)留協(xié)議。網(wǎng)絡(luò)層。
SIP：會(huì)話啟動(dòng)協(xié)議。
SDP
SVP

計(jì)算機(jī)網(wǎng)絡(luò)接入技術(shù)：
H.320：窄帶綜合業(yè)務(wù)數(shù)據(jù)網(wǎng)（N-ISDN）。視頻會(huì)議占主導(dǎo)，擴(kuò)大到多點(diǎn)呼叫標(biāo)準(zhǔn)T.120，模擬電路視頻會(huì)議低速率會(huì)議標(biāo)準(zhǔn)H.324。電路交換。2Mb/秒
H.321：寬帶綜合業(yè)務(wù)數(shù)據(jù)網(wǎng)（B-ISDN）?？焖俜纸M交換。百M(fèi)每秒或者千M每秒
H.322：局域網(wǎng)（LAN）
H.323：現(xiàn)有IP網(wǎng)絡(luò)
H.324：公共交換電話網(wǎng)（PSTN）

應(yīng)用：
對(duì)稱全雙工：分布式多媒體信息系統(tǒng)、視頻會(huì)議系統(tǒng)、計(jì)算機(jī)支持的協(xié)同工作系統(tǒng)
非對(duì)稱全雙工：交互式電視系統(tǒng)ITV、點(diǎn)播電視系統(tǒng)VOD、遠(yuǎn)程教育系統(tǒng)、遠(yuǎn)程醫(yī)療診斷系統(tǒng)、遠(yuǎn)程圖書館。

多媒體通信要解決的兩個(gè)問(wèn)題：多媒體數(shù)據(jù)壓縮、高速數(shù)據(jù)通信

3.2.計(jì)算機(jī)網(wǎng)絡(luò)基礎(chǔ)

FTTH

3.3.Internet技術(shù)基礎(chǔ)

4.移動(dòng)多媒體技術(shù)基礎(chǔ)

4.1.移動(dòng)多媒體技術(shù)基礎(chǔ)

移動(dòng)互聯(lián)網(wǎng)三個(gè)層面：終端、軟件、應(yīng)用
移動(dòng)互聯(lián)網(wǎng)特征：便攜性、隱私性、應(yīng)用輕便。便攜性、移動(dòng)性、無(wú)線性、應(yīng)用豐富性及免費(fèi)性

4.2.無(wú)限移動(dòng)通信技術(shù)

中短舉例無(wú)線通信技術(shù)：紅外技術(shù)，藍(lán)牙技術(shù)，無(wú)線局域網(wǎng)標(biāo)準(zhǔn)和WIFI

移動(dòng)通信技術(shù)的發(fā)展
1.第一代移動(dòng)通信技術(shù)(1):指最初的模擬，僅限語(yǔ)音的蜂窩電話標(biāo)準(zhǔn)，制定于20世紀(jì)80年代，主要用于提供模擬語(yǔ)音業(yè)務(wù)。只有國(guó)家標(biāo)準(zhǔn)，沒(méi)有國(guó)際標(biāo)準(zhǔn)。缺點(diǎn):頻譜利用率低，業(yè)務(wù)種類有限，保密性差，設(shè)備成本高，體積笨重
2第二代移動(dòng)通信技術(shù)解決了一代的根本技術(shù)缺陷技術(shù)有:GSM技術(shù)(全球移動(dòng)通信系統(tǒng)，用戶可以從更高的數(shù)字語(yǔ)音質(zhì)量和低費(fèi)用的短信之間做選擇)，GPRS技術(shù)(通用分組無(wú)線服務(wù)技術(shù)，被描述為2.5G)，EDGE技術(shù)(從GSM到3G的過(guò)渡技術(shù)，又稱2.75代技術(shù))，CDMA技術(shù)(碼分多址技術(shù)，滿足了市場(chǎng)對(duì)移動(dòng)通信容量和品質(zhì)的高要求)，WAP技術(shù)(無(wú)線通信協(xié)議，讓使用者可以用手機(jī)之類的無(wú)線裝置瀏覽網(wǎng)頁(yè)，網(wǎng)頁(yè)必須以無(wú)線標(biāo)記語(yǔ)音wml編寫)
3.第三代移動(dòng)通信技術(shù):將無(wú)線通信與國(guó)際互聯(lián)網(wǎng)等多媒體通信結(jié)合的新一代移動(dòng)通信技術(shù)3G與2G的區(qū)別是3傳輸聲音和數(shù)據(jù)的速度提升，支持全球范圍無(wú)線漫游，處理多種媒體形式。技術(shù)基礎(chǔ):CDMA碼分多址技
主要采用FDMA頻分多址技術(shù)
主要采用TDMA時(shí)分多址技術(shù)
3G主要采用CDMA碼分多址技術(shù)
4.第四代移動(dòng)通信技術(shù):集3G與WLAN與一體，可快速傳輸數(shù)據(jù)，高質(zhì)量的音頻/視頻圖像等
5.第五代移動(dòng)通信技術(shù):實(shí)現(xiàn)千兆移動(dòng)網(wǎng)絡(luò)，人工智能，遠(yuǎn)程醫(yī)療，物聯(lián)網(wǎng)應(yīng)用

4.3.移動(dòng)多媒體終端設(shè)備及系統(tǒng)平臺(tái)

移動(dòng)多媒體終端設(shè)備:智能手機(jī)，平板計(jì)算機(jī)，可穿戴式智能設(shè)備移動(dòng)操作系統(tǒng):三大主流安卓ios，WindowsPhone

4.4.移動(dòng)多媒體技術(shù)應(yīng)用

移動(dòng)社交多維度發(fā)展
電子商務(wù)崛起:醫(yī)藥企業(yè)向電商轉(zhuǎn)型，傳統(tǒng)電商結(jié)合醫(yī)藥企業(yè)形成一站式醫(yī)藥平臺(tái)，020電商模式興起形成互聯(lián)網(wǎng)+的產(chǎn)業(yè)新形態(tài)

5.多媒體信息顯示、發(fā)布及搜索技術(shù)

5.1.多媒體信息顯示技術(shù)

顯示技術(shù)：
CRT顯示器：陰極射線管
LCD顯示器：液晶顯示器
等離子顯示器：PDP

立體顯示技術(shù)分類：視差立體顯示技術(shù)和真立體顯示技術(shù)
立體顯示效果分類：傳統(tǒng)2D顯示、雙目視差立體顯示（沉浸式系統(tǒng)、半沉浸式系統(tǒng)、自由立體顯示技術(shù)、多視點(diǎn)自由立體顯示技術(shù)）、真三維立體顯示（全息、體三維、集成成像）
立體顯示根據(jù)輔助器件分類：助視立體顯示技術(shù)和裸眼立體顯示技術(shù)

立體顯示技術(shù)的應(yīng)用領(lǐng)域
醫(yī)學(xué)
軍事
建筑
工業(yè)
影視娛樂(lè)

OLED顯示技術(shù)：按驅(qū)動(dòng)方式劃分兩種：主動(dòng)式驅(qū)動(dòng)PM-OLED（有源驅(qū)動(dòng)）和被動(dòng)式驅(qū)動(dòng)AM-OLED（無(wú)源驅(qū)動(dòng)）
觸摸屏技術(shù)：根據(jù)作用原理和傳輸信息介質(zhì)劃分：電阻式觸摸屏、電容式觸摸屏、紅外線式觸摸屏、表面聲波觸摸屏
柔性顯示技術(shù)：OLED柔性顯示、TFT-LCD顯示技術(shù)、無(wú)機(jī)EL顯示（ELD）、電子粉流體顯示技術(shù)（LPD）、、干涉調(diào)制顯示技術(shù)、電致變色顯示技術(shù)、等離子管陣列顯示技術(shù)、光子晶體顯示技術(shù)。

5.2.多媒體信息發(fā)布技術(shù)

多媒體信息發(fā)布系統(tǒng)組成:服務(wù)器，網(wǎng)絡(luò)，播放器，顯示器
多媒體信息發(fā)布系統(tǒng)適用場(chǎng)合:政府及企業(yè)樓宇(發(fā)布企業(yè)內(nèi)部信息和對(duì)外宣傳形象)，銀行專網(wǎng)，醫(yī)療行業(yè)，電梯，展覽中心(直播比賽或發(fā)布大型活動(dòng)的實(shí)況)
多媒體信息發(fā)布系統(tǒng)主流技術(shù):CDN(內(nèi)容分發(fā)網(wǎng)絡(luò))技術(shù)和P2P(對(duì)等網(wǎng)絡(luò))技術(shù)》
CDN內(nèi)容分發(fā)網(wǎng)絡(luò):基于C/S結(jié)構(gòu)的分布式媒體服務(wù)技術(shù)平臺(tái)。缺點(diǎn):成本高，可擴(kuò)展性差
P2P(對(duì)等網(wǎng)絡(luò))技術(shù):為了克服傳統(tǒng)C/S模式(所有用戶從服務(wù)器獲取內(nèi)容)在p2p網(wǎng)絡(luò)中，各設(shè)備沒(méi)有主從之分，網(wǎng)絡(luò)上任意節(jié)點(diǎn)的計(jì)算機(jī)即可作為網(wǎng)絡(luò)服務(wù)器提供資源，也可作為客戶端獲取資源
CDN內(nèi)容分發(fā)機(jī)制:基于pull方式，基于push方式，混合分發(fā)方式
CDN服務(wù)的類型:網(wǎng)頁(yè)加速(8s原則)，流媒體服務(wù)，文件傳輸加速
CDN內(nèi)容分發(fā)網(wǎng)絡(luò)的典型應(yīng)用:IPTV(交互式網(wǎng)絡(luò)電視)一-利用電信寬帶網(wǎng)絡(luò)為傳輸通道，以電視機(jī)為主要終端設(shè)備，集互聯(lián)網(wǎng)，多媒體，通信等多種技術(shù)于一體，向家庭用戶提供包括電視內(nèi)容在內(nèi)的多種交互式服務(wù),

多媒體內(nèi)容分發(fā)的主要技術(shù)
內(nèi)容路由技術(shù)
內(nèi)容分發(fā)技術(shù)
內(nèi)容存儲(chǔ)技術(shù)
內(nèi)容管理技術(shù)

多媒體信息發(fā)布系統(tǒng)的未來(lái)發(fā)展趨勢(shì)：網(wǎng)絡(luò)化、定向化、智能化、專業(yè)化

5.3.多媒體信息搜索技術(shù)

多媒體信息檢索按檢索內(nèi)容分類：
基于內(nèi)容的圖像檢索
基于內(nèi)容的音頻檢索
基于內(nèi)容的視頻檢索
基于內(nèi)容的多媒體文件檢索技術(shù)

搜索引擎的工作原理：

搜索引擎按工作方式分類：全文搜索引擎、目錄索引類搜索引擎、元搜索引擎

未來(lái)搜索引擎發(fā)展趨勢(shì)
個(gè)性化:對(duì)用戶個(gè)性化特征進(jìn)行識(shí)別，得到用戶的個(gè)性化模式，利用已有網(wǎng)絡(luò)信息進(jìn)行匹配，提供給用戶滿足其個(gè)性化需求的信息內(nèi)容。需用到的相關(guān)技術(shù):信息抽取技術(shù)，用戶行為分析，自動(dòng)聚類，網(wǎng)絡(luò)爬蟲，中文分詞技術(shù)等
智能化:自動(dòng)分析用戶輸入的自然語(yǔ)言，形成檢索策略進(jìn)行檢索。用戶無(wú)需考慮檢索規(guī)則，語(yǔ)法規(guī)則，提高搜索引擎易檢率。
社會(huì)化:體現(xiàn)在知識(shí)共享，搜索的人性化，用戶影響網(wǎng)絡(luò)排名，提供全面和精確的搜索跨語(yǔ)言檢索:以一種語(yǔ)言提問(wèn)，檢索其他語(yǔ)言描述的信息資源情境搜索:能感知人與人所處的環(huán)境，針對(duì)“此時(shí)此地”來(lái)建立模型，理解用戶查詢的目的

增強(qiáng)現(xiàn)實(shí)電子書的核心技術(shù):虛實(shí)融合技術(shù)(根據(jù)跟蹤注冊(cè)得到位置和姿態(tài)信息)、虛實(shí)配準(zhǔn)技術(shù)( 核心模塊)、 自然交互技術(shù)

6.多媒體數(shù)字版權(quán)管理技術(shù)

6.1.元數(shù)據(jù)與數(shù)字對(duì)象標(biāo)識(shí)碼

元數(shù)據(jù)：描述數(shù)據(jù)的數(shù)據(jù)。

按本身的描述方法和結(jié)構(gòu)內(nèi)容分類：
描述性元數(shù)據(jù)：標(biāo)題、作者、日期等
結(jié)構(gòu)性元數(shù)據(jù)：內(nèi)容章節(jié)、圖示、視頻段落、文件格式等。
管理性元數(shù)據(jù)：數(shù)據(jù)格式、壓縮率、認(rèn)證與安全、維護(hù)等

數(shù)據(jù)描述的層次分類：
技術(shù)層次元數(shù)據(jù)
語(yǔ)義層次元數(shù)據(jù)

按可生產(chǎn)性劃分：
可自動(dòng)生成的元數(shù)據(jù)
手工生成的元數(shù)據(jù)

按依賴性劃分：
依賴領(lǐng)域知識(shí)的元數(shù)據(jù)
依賴媒體類型的元數(shù)據(jù)

多媒體數(shù)字版權(quán)的保護(hù)的內(nèi)容
電子書籍
音頻
視頻
圖片
流媒體
游戲

元數(shù)據(jù)標(biāo)準(zhǔn)
DUBLIN CODE（DC）
TEI
MPEG-7

數(shù)字版權(quán)的體系結(jié)構(gòu)
唯一表示層：DRM三個(gè)核心實(shí)體：主體、內(nèi)容、權(quán)限
信息編碼層：包括信息（編碼）格式和元數(shù)據(jù)格式
安全編碼層：包括加密技術(shù)、數(shù)字簽名、數(shù)字水印
權(quán)限控制層
安全協(xié)議層：包括安全封裝、安全存儲(chǔ)、安全支付、安全通信協(xié)議
安全方案層：包括數(shù)字證書、身份認(rèn)證、使用控制、審計(jì)

數(shù)字作品應(yīng)用角度分類：

數(shù)字對(duì)象唯一標(biāo)識(shí)符DOI主要包括二維碼、條形碼、字符碼、網(wǎng)絡(luò)域名

6.2.數(shù)據(jù)加密技術(shù)

對(duì)稱和非對(duì)稱

數(shù)據(jù)加密三個(gè)層次：鏈路加密、節(jié)點(diǎn)加密、端到端加密。

6.3.公鑰基礎(chǔ)設(shè)施安全技術(shù)

PKI

公鑰基礎(chǔ)設(shè)施組成如下：
認(rèn)證中心CA
X.509證書
密鑰備份和恢復(fù)
證書撤銷
PKI應(yīng)用接口系統(tǒng)

公鑰基礎(chǔ)設(shè)施的應(yīng)用
VPN
安全電子郵件
Web安全
電子商務(wù)的應(yīng)用

6.4.數(shù)字簽名技術(shù)

6.5.數(shù)字水印技術(shù)

數(shù)字水印特點(diǎn)：隱蔽性、健壯性、安全性、水印容量
數(shù)字水印特點(diǎn)：安全性、隱蔽性、魯棒性、敏感性

水印特性劃分：健壯數(shù)字水印和脆弱數(shù)字水印
水印的附載的媒體劃分：圖像水印、音頻水印、文本水印、用于三維網(wǎng)格模型的網(wǎng)格水印
檢測(cè)過(guò)程劃分：明文水印和盲水印
內(nèi)容劃分：有意義水印和無(wú)意義水印
用途劃分：票據(jù)防偽水印、版權(quán)標(biāo)識(shí)水印、篡改提示水印、隱藏標(biāo)識(shí)水印
水印的隱藏位置劃分：時(shí)（空）域數(shù)字水印、頻域數(shù)字水印、時(shí)/頻域數(shù)字水印、時(shí)間/尺度域數(shù)字水印

數(shù)字水印算法：
空間域算法：LSB算法、Parchwork算法
變換域算法
壓縮域算法
NEC算法
生理模型算法

6.6.身份認(rèn)證技術(shù)

是否使用硬件劃分：軟件認(rèn)證和硬件認(rèn)證
認(rèn)證需要驗(yàn)證條件來(lái)看：單因子認(rèn)證和雙因子認(rèn)證
認(rèn)證信息來(lái)看：靜態(tài)認(rèn)證和動(dòng)態(tài)認(rèn)證
認(rèn)證手段來(lái)看：基于用戶所知道的秘密、基于用戶所擁有的令牌、基于用戶本身的生物特征

基于用戶/口令的認(rèn)證技術(shù)
基于智能卡的認(rèn)證技術(shù)：非加密存儲(chǔ)卡、加密存儲(chǔ)卡、CPU卡
基于Key的認(rèn)證技術(shù)
基于生物特征識(shí)別的技術(shù)：指紋識(shí)別技術(shù)、語(yǔ)音聲紋識(shí)別技術(shù)、視網(wǎng)膜圖樣識(shí)別技術(shù)、虹膜圖樣識(shí)別技術(shù)、臉型識(shí)別技術(shù)

7.多媒體數(shù)據(jù)壓縮編碼技術(shù)基礎(chǔ)

7.1.多媒體數(shù)據(jù)壓縮技術(shù)理論基礎(chǔ)及壓縮編碼方法分類

必要性:大數(shù)據(jù)量的圖像信息會(huì)給存儲(chǔ)器的存儲(chǔ)容量，通信線路的帶寬，以及計(jì)算機(jī)的處理速度增加極大壓力。如果沒(méi)有多媒體編碼壓縮技術(shù)的發(fā)展，大容量圖像，視頻信息的存儲(chǔ)和傳輸就難以實(shí)現(xiàn)。
可能性:視頻由一頓幀圖像組成，圖像的各像素之間存在一定的相關(guān)性，即幾余度。通過(guò)某種編碼方法提取或減少元余度可實(shí)現(xiàn)壓縮數(shù)據(jù)的目的。

常見(jiàn)數(shù)據(jù)冗余如下：
空間冗余
時(shí)間冗余
結(jié)構(gòu)冗余
知識(shí)冗余
視覺(jué)冗余
圖像區(qū)域的相同性冗余
紋理的統(tǒng)計(jì)冗余
、
聽覺(jué)冗余
信息熵冗余（編碼冗余）

圖像編碼是否有誤差：
無(wú)損編碼：霍夫曼編碼、算術(shù)編碼、行程編碼、字典編碼、統(tǒng)計(jì)編碼
有損編碼：預(yù)測(cè)編碼、變換編碼、分形編碼、基于模型編碼、其他編碼

圖像根據(jù)編碼原理劃分：
統(tǒng)計(jì)編碼（熵編碼）：霍夫曼編碼Huffman、算術(shù)編碼、香農(nóng)-費(fèi)諾編碼、游程長(zhǎng)度編碼RLC、LZW編碼、字典編碼（隱式字典和顯示字典）
預(yù)測(cè)編碼：線性預(yù)測(cè)編碼DPCM、自適應(yīng)線性預(yù)測(cè)編碼ADPCM
變換編碼：傅里葉變換FFT、離散余弦DCT（次最優(yōu)的正交交換）、卡胡南-勞夫K-L、沃爾什-哈達(dá)瑪WHT、小波WT
混合編碼：矢量量化編碼、子帶編碼SBC

根據(jù)圖像的光譜特征劃分：單色圖像編碼、彩色圖像編碼、多光譜圖像編碼

根據(jù)圖像灰度劃分：多灰度編碼和二值圖像編碼

預(yù)測(cè)編碼根據(jù)預(yù)測(cè)值是否是線性的：線性預(yù)測(cè)和非線性預(yù)測(cè)
根據(jù)預(yù)測(cè)樣本是同一幀：幀內(nèi)預(yù)測(cè)編碼和幀間預(yù)測(cè)編碼
是否有誤差：無(wú)損預(yù)測(cè)編碼和有損預(yù)測(cè)編碼（DM增量調(diào)制、DPCM差分脈沖編碼、ADPCM自適應(yīng)差分脈沖編碼）

7.2.統(tǒng)計(jì)編碼

7.3.預(yù)測(cè)編碼

7.4.變換編碼

7.5.其他編碼

7.6.視頻編碼

7.7.數(shù)據(jù)壓縮標(biāo)準(zhǔn)

國(guó)際標(biāo)準(zhǔn)化協(xié)會(huì)ISO
國(guó)際電子學(xué)委員會(huì)IEO
國(guó)際電信協(xié)會(huì)ITU
國(guó)際電報(bào)電話咨詢委員會(huì)CCITT
國(guó)際電工委員會(huì)IEC
美國(guó)國(guó)家標(biāo)準(zhǔn)協(xié)會(huì)ANSI

國(guó)際計(jì)量局BIPM
聯(lián)合國(guó)教科文組織UNESCO
國(guó)際海關(guān)組織WCO
世界衛(wèi)生組織WHO
歐洲標(biāo)準(zhǔn)化委員會(huì)CEN

靜態(tài)圖像壓縮標(biāo)準(zhǔn)：JPEG、JPEG2000
音頻編碼標(biāo)準(zhǔn)：MPEG-1（三部分）、MPEG-2、MPEG-4和MPEG-7
視頻編碼標(biāo)準(zhǔn)：H261、H263、MPEG標(biāo)準(zhǔn)（包含1，2，4）

視頻格式	圖像亮度分辨率	圖像色差分辨率	H.261是否支持	H.263是否支持
SQCIF	128*96	64*48	√	√
QCIF	176*144	88*72	√	√
CIF	352*288	176*144	√	√
4CIF	704*576	352*288	×	√
16CIF	1408*1152	704*576	×	√

8.多媒體應(yīng)用的新技術(shù)

8.1.信息可視化技術(shù)

信息可視化:將廣泛存在的非具體數(shù)據(jù)以能滿足人機(jī)交互的方式表達(dá)出使信息接收員可以方便的分析數(shù)據(jù)，找出數(shù)據(jù)規(guī)律，完成對(duì)信息的處理。信息可視化的兩大基礎(chǔ):認(rèn)知心理學(xué)和圖像設(shè)計(jì)。
可視化方式分為:一維，二維，三維，多維，時(shí)序，層次，網(wǎng)狀的信息可視化方式
信息可視化映射技術(shù)PFNET，最早被使用，它通過(guò)對(duì)事物的理解，分析，形成自己特有的網(wǎng)絡(luò)表現(xiàn)方式，進(jìn)而實(shí)現(xiàn)不同事件之間分層歸納。

8.2.人機(jī)交互技術(shù)

立體視覺(jué)顯示技術(shù)：眼鏡式3D、頭戴式HMD、裸眼3D、全息投影
自然手勢(shì)交互技術(shù)：從硬件上分為單目/雙目(leap motion)/多目視覺(jué)系統(tǒng)從手勢(shì)復(fù)雜程度上分為靜態(tài)動(dòng)態(tài)手勢(shì)識(shí)別。隨虛擬現(xiàn)實(shí)技術(shù)興趣，數(shù)據(jù)手套再次受到關(guān)注5DT(不提供力反饋),CyberGlove(提供力反饋),Dexmo(提供力反饋)。
肢體動(dòng)作交互技術(shù)：不借助交互工具，直接通過(guò)肢體動(dòng)作映射到計(jì)算機(jī)虛擬環(huán)境，是自然人機(jī)交互方式。Kinect是基于光學(xué)檢測(cè)原理的非穿戴式交互設(shè)備

8.3.虛擬現(xiàn)實(shí)技術(shù)

三個(gè)特征：沉浸性Immersion、交互性Interactivity、想象性Imagination，這是3I特性

系統(tǒng)基本組成：檢測(cè)模塊、反饋模塊、傳感器模塊、控制模塊、3D模型庫(kù)、建模模塊

按功能分類：
桌面型VR系統(tǒng)
沉浸型VR系統(tǒng)
增強(qiáng)現(xiàn)實(shí)VR系統(tǒng)
分布式VR系統(tǒng)

8.4.增強(qiáng)現(xiàn)實(shí)技術(shù)

包括的技術(shù)：顯示技術(shù)、跟蹤注冊(cè)技術(shù)、虛擬融合技術(shù)、人機(jī)交互技術(shù)
三大關(guān)鍵技術(shù)：三維注冊(cè)技術(shù)、虛實(shí)融合顯示技術(shù)、自然人機(jī)交互技術(shù)

9.信息安全性知識(shí)

9.1.信息安全性基本概念

9.2.計(jì)算機(jī)病毒防范

病毒特點(diǎn)：隱蔽性，傳染性，破壞性，潛伏性

計(jì)算機(jī)病毒構(gòu)成:感染標(biāo)志(病毒簽名)，引導(dǎo)模塊，感染模塊，破壞模塊(表現(xiàn)模塊)

病毒按破壞目標(biāo)分類：
程序型病毒
引導(dǎo)型病毒
宏病毒
特洛伊木馬病毒

9.3.入侵檢測(cè)與防范措施

檢測(cè)方法：特征檢測(cè)、統(tǒng)計(jì)檢測(cè)、專家系統(tǒng)、文件完整性檢查

9.4.加密解密機(jī)制與信息加密策略

9.5.身份驗(yàn)證和訪問(wèn)控制策略

9.6.計(jì)算機(jī)犯罪的定義、類別與主要手段

計(jì)算機(jī)犯罪手段：
數(shù)據(jù)欺騙
特洛伊木馬
香腸術(shù)
超級(jí)沖殺
異步攻擊
偽造證件

9.7.計(jì)算機(jī)職業(yè)道德

10.標(biāo)準(zhǔn)化知識(shí)

10.1.國(guó)際標(biāo)準(zhǔn)、國(guó)家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)和企業(yè)標(biāo)準(zhǔn)基本知識(shí)

根據(jù)適用范圍劃分：國(guó)家標(biāo)準(zhǔn)、行業(yè)標(biāo)準(zhǔn)、地方標(biāo)準(zhǔn)、企業(yè)標(biāo)準(zhǔn)
根據(jù)法律約束劃分：強(qiáng)制性標(biāo)準(zhǔn)、推薦性標(biāo)準(zhǔn)、標(biāo)準(zhǔn)化指導(dǎo)性技術(shù)文件
根據(jù)標(biāo)準(zhǔn)性質(zhì)劃分：技術(shù)標(biāo)準(zhǔn)、管理標(biāo)準(zhǔn)、工作標(biāo)準(zhǔn)
根據(jù)標(biāo)準(zhǔn)化對(duì)象和作用分：基礎(chǔ)標(biāo)準(zhǔn)、產(chǎn)品標(biāo)準(zhǔn)、方法標(biāo)準(zhǔn)、安全標(biāo)準(zhǔn)、衛(wèi)生標(biāo)準(zhǔn)、環(huán)境保護(hù)標(biāo)準(zhǔn)

軟件標(biāo)準(zhǔn)：
基礎(chǔ)標(biāo)準(zhǔn)
開發(fā)標(biāo)準(zhǔn)
文檔標(biāo)準(zhǔn)
管理標(biāo)準(zhǔn)

10.2.編碼標(biāo)準(zhǔn)、多媒體有關(guān)的技術(shù)標(biāo)準(zhǔn)

文本標(biāo)準(zhǔn)：ASCII等等
圖形圖像標(biāo)準(zhǔn)
聲音標(biāo)準(zhǔn)：ITU-T G系列、MPEG音頻編碼、AC-3編碼標(biāo)準(zhǔn)
視頻動(dòng)畫標(biāo)準(zhǔn)：H.26X、MPEG-X、AVS

10.3.標(biāo)準(zhǔn)化機(jī)構(gòu)

11.信息化基本知識(shí)

11.1.信息化基本概念

11.2.國(guó)民經(jīng)濟(jì)與社會(huì)信息化戰(zhàn)略

11.3.保護(hù)

12.知識(shí)產(chǎn)權(quán)的有關(guān)法律和法規(guī)

商標(biāo)權(quán)主要特征：專有性、時(shí)間性、地域性、轉(zhuǎn)讓性

13.專業(yè)英語(yǔ)