多媒体技术教程V3-ch2

1
??? ???????
2
2.1 ????????
3
2.1.1 ???????

• ??
• ???????????????
• ????????????????
• ??????
• ??????
• ?????????
• ????????????????????
• ?????????????????????
• ???????(sty1e)?????(align)???(font)?????(size)

4
2.1.1 ???????

• ??
• ?????
• ????????????,??????????????????????????
  ?????????????????????????????????,????????????????
  ????????,??????
• line(x1,y1,x2,y2,color)
• circle(x,y,r,color)

5
2.1.1 ???????

• ??
• ?????
• ?????????????(?????)
• ?????????????????????????(??????????????????)
• ???????????

6
2.1.1 ???????

• ??
• ?????
• ??????????????????,???????????????
• ??????????,???????????,?????????(pixel),????????(b
  itmap)?

7
2.1.1 ???????

• ??
• ?????????
• ???
• ?????
• ??????????????????
• ?????
• ????????
• ?????
• ??????,???11

8
2.1.1 ???????

• ??
• ?????????
• ????
• ??????????
• 2???2?
• 4?16?
• 8?256?
• 24????
• ??????
• (??????)/8 ??

9
2.1.1 ???????

• ??
• ????????
• ???????,?????????,??
• ????????????????
• ??????????????
• ???????????????????????????
• ?????????,?????????

10
2.1.1 ???????

• ??
• ?????
• ????????,?????????????????????????????,
  ????????????????

11
2.1.1 ???????

• ??
• ?????
• PAL?(625/50)
• ??25?,??????625?,?????240400???,????
  ?62??????,???????????????(Pal-B?D?G?H?I?N?NC)?
• NTSC?(525/60)
• ??30?,??????525?,?????240400???,????
  ?53??????,????????????(NTSC-M?NC?Japan?)?

12
2.1.1 ???????

• ??
• ?????
• SECAM?(625/50)
• ??25?,??????525???????625???????,???????
  ?????????
• ??????
• ??????????????????????????????????????
  ???

13
2.1.1 ???????

• ??
• ???????
• ????
• R?G?B(?????)
• Y?U?V(Y???,U?V???)
• H?S?I(?????????)
• ?????????????
• ??
• ?????????, ???????(fps)
• ?????????
• 30?/?(NTSC)?25?/?(PAL)

14
2.1.1 ???????

• ??
• ???????
• ???
• ??????????(???? )
• ????
• ????????( gt ????)
• RGB??gtYUV??gtY/C??(S??)gt????
• ????????????

?1UV????????????????C,????Y/C????,???????????S???
?2???Y???C????????,????????
15
2.1.1 ???????

• ??
• ?????
• ?????,???????????????????????????????,?
  ?????????,?????????????????? ?
• ?????????
• ????
• ???

16
2.1.1 ???????

• ??
• ???

17
2.1.1 ???????

• ??
• ???

18
2.1.1 ???????

• ??
• ??
• ????
• ??????????,???????????????,?????????

19
2.1.1 ???????

• ??
• ??
• ??
• ??????????????,???????,???????????????

• ??
• ???????,?????????????

20
2.1.1 ???????

• ??
• ???????????????
• ????
• ??????????,????,????
• 11.025KHZ? 22.05KHZ?44.1KHZ
• ????
• ???????
• 8??16?
• ???
• ????????
• ?????????5.1??

????? (??????????? ?? )/8 ??
21
2.1.2 ?????

• ??

22
2.1.2 ??????

• ??
• ??
• ????

??(??????)
23
2.1.3 ????????

• ?????????????
• ???????
• ??????????????????
• ??????????
• ???????????????
• ????????
• ????
• ??????????????
• ???????????????3?????????????

24
2.1.3 ????????

• ???????
• ??????
• ??????????????
• ?????
• ??????????
• ???????,?????????
• ???????
• ?????????
• ??????????????
• ??
• ???????,??????

25
2.2 ??????
26
2.2.1 ?????

• 1.?????
• ???????????,??????????????(?????)???(
  ?????)???(????)?
• ?????,????????????,??????????????
• ??,????????????????????

27
2.2.1 ?????

• ??????????????,??????????????????????,??????
  ???????????
• ????????????????,??,?????????????????
  ???????????????

28
2.2.1 ?????

• ???????????????????????????,??????,????????
  ??????????,????????????????????????????????????,??
  ?????,??????????????????????

29
2.2.1 ?????
30
2.2.1 ?????

• 2.????
• ????
• ????????????,?????????????????????????
  ,???????????????,??1000Hz?40?????0.5?????????0.5?
  ,?????,?????????????,?????????????????????????????
  ????????????????,????????????????????????,????????
  ????

31
2.2.1 ?????

• ??(masking)
• ??????????????????,?????????????????????
  ?????,??????????????????????????????????,?????????
  ??,?????????????,??????????????,?????????????????

32
2.2.1 ?????

• ????
• ??????????,??????????,????????????????
  ????????,???????????,??????????????????????????,??
  ???????????????????,?????????????????

33
2.2.1 ?????

• ??
• ????????,?????????????????,???????????
  ????????????,??????????????????????,?????????
• ?????????????????????,????????????????
  ???????

34
2.2.1 ?????

• ?????????
• ?????????????????????????
• ????,???????????????????,???????????,??
  ???????????????????????????????????????????,??????
  ??????????????,??????????????????,????????????????
  ??

35
2.2.1 ?????

• ????
• ??????????????,?????????????????????????????
  ?????????????,?????????????????,???????????
• ???????????????????????

36
2.2.1 ?????

• ???????
• ???????,????????????????????????????????
  ???????,???????????????????,???????????????,?????
  ???
• ??????,??????????????????????,????????
  ????????

37
2.2.1 ?????

• ???????
• ?????????,?????????????????,????????????
  ????????,?????????(audiolization)?????????????????
  

38
2.2.2 ??????????

• ????????????,???????????3?
• ???????,?????????????????????????????
• ???????,??????????????????????????????????????
• ?-???-????????????????????,???????????????????????
  ????????????????????

39
2.2.2 ??????????

• 1.?????????
• ?????,??????????????????????????????,??
  ??????????????????,??????
• ??????????????????????????????????

40
2.2.2 ??????????

• ??????????????????????????????,???????
  ???????????,?????????????????????????????????20Hz?
  20KHz,??????????,????????,???44.1KHz??????????????
  ??????????,????????????,???????????????,??????????
  ????????

41
2.2.2 ??????????
??????????
42
2.2.2 ??????????

• ????????????
• ????
• ???????????????????????,???????????,??
  ??????????????????44.1KHz,22.05kHz,?11.025kHz?
• ????
• ??????????????????????8??16?,???????25
  6???65536???

43
2.2.2 ??????????

• ???
• ???????????????????????,?????
• ???

44
2.2.2 ??????????

• 2.??????
• ????????????????????????,?????????????
  ??
• ????????(????????)?????????????,?????
  ?

45
2.2.2 ??????????

• (1)??????-MIDI
• MIDI(Music Instrument Digital
  Interface)??????????????
• MIDI??,??????????
• ??????,?????MIDI???????????????,??????
  MIDI??????MIDI?????????????,?????????????????
• MIDI???????????????????,??????????????
  ???????????????????

46
2.2.2 ??????????

• MIDI???
• ???????,MIDI??????????,??????????30?????,
  ?MIDI??????200KB,?16?CD??????WAV?????317MB
• MIDI?????????????,?????????????????????????
• ?MIDI???????,?????????????????,?????????
• MIDI??????????????????????????????????

47
2.2.2 ??????????

• (2)??????
• ??????????????????????,???????????????
  ?????????????????????,????????,?????????????
• ?????????????????????????????????,??????????
  ???????????????????????????????????,???????????,
  ??????????????????

48
2.2.3 ??????????

• 1.???????
• ?????????(Three Dimensional Virtual
  Acoustic,3DVA),????????????????????????????????
• ????????????????????????????????????,?????
  ????????????
• ? ???????????????????
• ? ??????????????????
• ? ?????????????
• ? ??????????????
• ? ????????????

49
2.2.3 ??????????

• 2.3DVA?????
• ????????????????????,????????????????
  ????ITD(Interaural Time Differences)??????????IID(
  Interaural Intensity Differences)?
• ??????????????,?????????,????,???????
  ????3o,???????????????30ms,????30ms,??????????????
  
• ?????????????,?????????????,??????????
  ?????,?????,????????,?????????????????????????

50
2.2.3 ??????????

• 3DVA??????????????????,??????????,???
  ????????????????????
• ??????????????????????????????????,???
  ?????????????,??????????,?????????????????????,???
  ??????,????????????????,??????????????????,???????
  ??????????,???????????????????????????????????????
  ?????????????????????

51
2.2.3 ??????????

• 3.HRTF??
• ??????????????????,??????????????,??
  HRTF(Head-Related Transfer Function,??????????)?
• ??????HRTF?????????????????

52
2.2.3 ??????????

53
2.3 ??????
54
2.3.1 ?????

• 1.???????
• ?????????????,????????????????????????
  ???????????????
• ????????,?????????????????????????????
  ????????????,????????????????????????????????????,
  ????????????,????????????

55
2.3.1 ?????
56
2.3.1 ?????

• 2. ????
• ??
• ?????????????
• ???????????????????,??????????????????
  ??,????????????????,??????????????????????,???????
  ????,???????,??????????????????????????????,??????
  ?
• ?????????????????

57
2.3.1 ?????

• ?????,?????????,??????????????????????
  ??,??????????????
• ????????,??????????????,??????????

58
2.3.1 ?????

• ???????
• ??????????,?????????,?????????,???????
  ?????????????????????????????????????,????????????
  ????

59
2.3.1 ?????

• ??
• ????????????????????????????????????,
  ??????????,??????????????????????????????,????????
  ?????????????????????????????????,????????????????
  ?????,???????????????????????

60
2.3.1 ?????

• ??????????????????????380???780???????
  ???????,????????????????????
• ???????????????,?????????????????,????
  ???????????????
• ???????????,?????????????????,????????
  ???????????????,????,???????????,?????????,???????
  ???????

61
2.3.1 ?????

• ??????,??????????????????,?????????????
• ??????,??????????????????,?????????????
• ?????????,????????

62
2.3.1 ?????

• ????????
• ??????????,?????????????????,?????????
  ???????????,??????????????,???????????????????????
  ?????????????????????
• ???????,??????180?,????60????????????2
  ?3?,????????????????,??????????????,??????????????
  ???

63
2.3.2 ??????

• ??????
• ??????????????,???????,???????,????????
  ?????????????????????????????,?????????,?????????,
  ??????????,?????????????????????????,?????????????
  ?,??????????????????????????

64
2.3.2 ??????

• ??????????????????????????????????????
  ?????????,????,???,??????????????????400?,????????
  ????????????200????200???????,????????????????????
  ?????????????,?????,?????????????????????525?(????
  ?)?625?(?????)?

65
2.3.2 ??????

• ??????????????,???25?(PAL)??30?(NTSC)
  ????????,???????????50??60????,???????????
• ??????????????????????????????????????
  ??????,?????????????????43,?????????169,????????
  ???21 ?

66
2.3.2 ??????

• ????
• ????????????????????????(RGB)????????
  ?,???R?G?B??????,RGB????????,??????????????RGB????
  ?????????,?????????????????,????????????RGB,???RGB
  ??????????????,????????

67
2.3.2 ??????

• ?????????????NTSC?PAL?SECAM?????/????,
  ??????????????????????????????????,?????RGB???????
  ??????????????????,?????????
• ???????????????????????NTSC???????Y,??
  ???I?Q,?YIQ???PAL???SECAM??????????????YUV,???????
  ????????YUV?YIQ???RGB???RGB?YUV?YIQ??????????

68
2.3.2 ??????

• ????
• ??????,???????????????????????????????
  ????????,??????,???????,???????????????????????,?
  ???????????????,???????????,??????????
• ?????????????????????????????

69
2.3.3 ???????

• 1.?????????
• ??????,????????,???????,??????????????
  ?????????,??????????,????????????,??????????????,?
  ???????????????????????????,???????????,??????????
  ??????????????????,???????????????????????????????
  ???,????????????????,???????,????????????????

70
2.3.3 ???????

• ??????X????????,?Y??????X?Y??????????,
  ?????????????????????????????????????????????,????
  ????,????????????????,??????????????????????,?????
  ????????????????????,??????????????,??????????????
  ?????,????,?????????????????

71
2.3.3 ???????
72
2.3.3 ???????
73
2.3.3 ???????

• 2.??
• ??(Graphics)????????,????????????????
  ?????????????????,??????????????????????????,?????
  ????

74
2.3.3 ???????

• ????????????????,????????????????????????
  ??????,????????????????????????????????????????,??
  ???????,????????????????????
• ??????????????????????????????????????
  ??????????????????????????????,?????????????????,
  ????????????????

75
2.3.3 ???????

• 3.?????
• ?????????????????????????????????????
  ?????
• ????????????,??????????,???????????????
  ??????????????,????????????,??????????,?????????
  ?

76
2.3.3 ???????

• ??????
• ??????????????,???????????????????
• I CAN SPEAK ENGLISH
• ?????,???????
• ???????,????????
• ?????,???????
• ?????????
• ????????

77
2.3.3 ???????

• ???????????????????????
• ??????????????????????,???????????,?????
• ??????????????????
• ??????????????,???????????
• ????????????????,???,??,??,????

78
2.3.4 ???????????

• 1.??????
• ?????????????,??????????????????,?????
  ?????,??????????????????????????????,???????,???
  ????????????????????
• ??(parallax)?????????????????????,????
  ???????????????????????????????????????,??????????
  ????????????

79
2.3.4 ???????????

• 2.??
• ?????????????????????????????????????
  ????????????????
• ???????????????????,????,???????
• ?????????????????????0,?????????????????0????????
  ?????
• ????????????,??????????,????????????????????????
  
• ???? ????????????????

80
2.3.4 ???????????

• ??

81
2.3.4 ???????????

• 3.???????
• (1)???
• ?????????????????????????????????
• ???????????4,???????
• ???????????4,???????
• ??????
• ????
• ?????????????????????????,???????,????
  ?????????????

82
2.3.4 ???????????

• (2)?????
• ????????????????????,?????????????????
  ??,?????????????,???????????,????????????,????????
  ?
• ?????????????????????,????????,???????
  ????????????,????????????????????????????,????????
  ????????

83
2.3.4 ???????????

• 4.???????
• ?????????????????????????????,????????
  ???????,????????????????????????????,??????,??????
  ?????????????????????????????,????????????????????
  ???????????????????,??????????????????????,???????
  ,??????????????,????????????

84
2.4 ??????
85
2.4.1 ??????

• ??????????????,??????,???????????????,
  ??????????,????????????????,??????????,???????????
  ??????

86
2.4.1 ??????

• ??????????????????????????????????????
  ????????????????????
• ??????????????????????????????????????
  ??????????????????????????????,???????????????????
  ??????????????????????????????????????????????????
  ?????????,???????????????????????,????????????????
  ??????????????????

87
2.4.2 ?????????

• 1.?????
• ???????
• ??
• ??
• ??
• ??
• ??
• ??

88
2.4.2 ?????????

• 2.????
• ????????????????????????????????????????
  ??,??????????????????????????
• ????????????????????
• ??????????????????????????????????,??
  ?????????,??????

89
2.4.2 ?????????

• ????????????????????????????,?????????
  ??????????,????????????????????????????,??????????
  ?????????????

90
2.4.3 ????

• ???????,??????????????,???????????????
  ????????????????????????????,???????????
• 1.??????????
• ??????????????????????????????????????
  ??????????????????????????????????????????????????
  ,??????????????????

91
2.4.3 ????

• ????????????,?????????????????????????
  ???????????????????????????,??????????????????????
  ???????????,??????????????????????????????????????
  ???????,????????????????????????,??????,??????????
  ???????

92
2.4.3 ????

• 2.??????
• ??????????????,???????????????????????
  ????????,???????????????,?????????????????????????
  
• ???????????????Polhemus??????,????????
  ???????????,?????????????,???????????????????

93
2.4.4 ????????

• ??????????,?????????????????,?????(???
  ?????)?????(???????)?????(??????)????????????
• 1.???
• ??????????????????(?????????????????)????
  (???????????????)??
• ?????????????????????????????????????
  ????

94
2.4.4 ????????

• ???????????????,??????????????????????
  ????,????????????,?????????????
• ????????,??????????,??????????????????
  ??????????????

95
2.4.4 ????????

• 2.????
• ????????????????????????????????????????
  ??????????????
• ????????,????????????????????????????,
  ?????????????????????????,????????????,???????????
  ?????????????????????????????????,???????????????
  ??????????????????????

96
2.4.4 ????????

• 3.????
• ????????????,???????????????????,???????
  ??????????????,?????????????????????????
• ?????????????????????????,????????????,??
  ????????1035??????????????????,????????,?????????
  ???

97
2.5 ? ?
98
????

• ?????,??????????
• ????
• ????????????????
• ????
• ???????????????
• ????
• ????????????????