1 Wstęp do Multimediów dr A. Wieczorkowska Wykład 1 Elementy przekazu multimedialnego. Zastosowania multimediów

2 A.Wieczorkowska 2 Wprowadzenie Multimedia http://wiem.onet.pl/http://wiem.onet.pl/ - ogólna nazwa technik komputerowych umożliwiających łączenie rozmaitych sposobów przekazywania informacji - dźwięku, obrazu, animacji, tekstu, słowa mówionego i innych - w jeden przekaz –połączenie wielu mediów –interakcja z użytkownikiem Zastosowania –business: trening, prezentacje, komunikacja –narzędzia edukacyjne, np. encyklopedie –rozrywka, np. gry

3 A.Wieczorkowska 3 Elementy przekazu multimedialnego tekst, grafika (również 3D), animacja, wideo, dźwięk, Internet, hypertext, hotspots, interakcja z użytkownikiem –wybór (obiektu) i kontrola, np. obroty etc.

4 A.Wieczorkowska 4 Grafika kodowanie informacji graficznej kompresja wykorzystanie właściwości wzroku w stratnym kodowaniu informacji graficznej

5 A.Wieczorkowska 5 Standardy kompresji kompresja bezstratna –GIF http://www.kailastudio.com.pl/design/htm/article/gif.htm kompresja stratna –JPEG http://galaxy.uci.agh.edu.pl/~kwant/jpeg/JPEG.html kompresja fraktalna kompresja w oparciu o analizę falkową

6 A.Wieczorkowska 6 Kolory Monitory – addytywna konstrukcja koloru –RGB (Red-Green-Blue) Druk – subtraktywna konstrukcja koloru –CMYK (Cyan-Magenta-Yellow-Black)

7 A.Wieczorkowska 7 Wyświetlanie grafiki CRT działo elektronowe LCD: http://telewizor.eu/#lcdhttp://telewizor.eu/#lcd

8 A.Wieczorkowska 8 Sumowanie przestrzenne http://psych.hanover.edu/Krantz/art/index.html

9 A.Wieczorkowska 9 Sumowanie przestrzenne Sunday Afternoon on the Island of Grand Jatte by Georges Seurat (1884-1886)

10 A.Wieczorkowska 10 Grafika 3D wykorzystanie właściwości wzroku do przedstawienia informacji 3D na ekranie http://psych.hanover.edu/Krantz/art/index. html

11 A.Wieczorkowska 11 Głębia w obrazie

12 A.Wieczorkowska 12 Głębia w obrazie (random dots stereogram)

13 A.Wieczorkowska 13 Głębia w obrazie (przesłanianie)

14 A.Wieczorkowska 14 Głębia w obrazie (przesłanianie) Madonna of the Magnificat by Sandro Botticelli.

15 A.Wieczorkowska 15 Głębia w obrazie (położenie wzgl. horyzontu)

16 A.Wieczorkowska 16 Głębia w obrazie (położenie wzgl. horyzontu)

17 A.Wieczorkowska 17 Głębia w obrazie (położenie wzgl. horyzontu) The Coast of Portrieux by Eugene Boudin

18 A.Wieczorkowska 18 Głębia w obrazie (względny rozmiar)

19 A.Wieczorkowska 19 Głębia w obrazie (względny rozmiar)

20 A.Wieczorkowska 20 Głębia w obrazie (względny rozmiar) Sculls by Gustave Caillebotte

21 A.Wieczorkowska 21 Głębia w obrazie (perspektywa)

22 A.Wieczorkowska 22 Głębia w obrazie (perspektywa)

23 A.Wieczorkowska 23 Głębia w obrazie (perspektywa) A street in Delft by Jan Vermeer

24 A.Wieczorkowska 24 Głębia w obrazie (perspektywa) Paris Street: A Rainy Day by Gustave Caillebote

25 A.Wieczorkowska 25 Głębia w obrazie (tekstura)

26 A.Wieczorkowska 26 Głębia w obrazie (cienie)

27 A.Wieczorkowska 27 Głębia w obrazie (cienie)

28 A.Wieczorkowska 28 Głębia w obrazie (perspektywa powietrzna)

29 A.Wieczorkowska 29 Głębia w obrazie (aerial perspective)

30 A.Wieczorkowska 30 Głębia w obrazie (aerial perspective) Near Salt Lake City by Albert Bierstadt

31 A.Wieczorkowska 31 Obiekty niemożliwe

32 A.Wieczorkowska 32 Właściwości wzroku: percepcja figur i tła

33 A.Wieczorkowska 33 Złudzenia optyczne

34 A.Wieczorkowska 34 Złudzenia optyczne

35 A.Wieczorkowska 35 Złudzenia optyczne

36 A.Wieczorkowska 36 Złudzenia optyczne

37 A.Wieczorkowska 37 Złudzenia optyczne

38 A.Wieczorkowska 38 Złudzenia optyczne

39 A.Wieczorkowska 39 Elementy multimediów: animacja i wideo prosta animacja http://www.javasoft.com/docs/books/tuto rial/getStarted/index.htmlhttp://www.javasoft.com/docs/books/tuto rial/getStarted/index.html filmy

40 A.Wieczorkowska 40 Kodowanie wykorzystanie podobieństw sąsiednich klatek wykorzystanie podobieństw sąsiednich fragmentów obrazu standardy kompresji –MJPEG –MPEG

41 A.Wieczorkowska 41 Dźwięk Dźwięk stereofoniczny Kodowanie dźwięku –Kodowanie stratne, wykorzystujące właściwości słuchu człowieka –Standard MP3

42 A.Wieczorkowska 42 Jak obejrzeć dźwięk: sonogram FFT [kHz] [s] sonogram (dźwięk trąbki, c 2, 523.3 Hz)

43 A.Wieczorkowska 43 Internet, hypertext, hotspots Przełączanie między stronami i elementami stron www Przeglądanie encyklopedii multimedialnych – uzyskiwanie informacji Hypertext – możliwość przygotowania w dowolnym edytorze tekstu

44 A.Wieczorkowska 44 Formaty plików multimedialnych w Internecie Grafika: GIF, JPEG Dźwięk: WAV (Windows), AU (Unix), AIFF (Macintosh), MIDI, MP3 i inne Wideo: avi, mpeg, mov, qt, rm, Div-X i inne –Źródło (2004): http://www.netdesign.beep.pl/multimedia_for maty.shtml http://www.netdesign.beep.pl/multimedia_for maty.shtml

45 A.Wieczorkowska 45 Sprzęt Komputer multimedialny –IBM PC i kompatybilne –Apple MacIntosh software –przeglądarki, przeszukiwarki, plug-ins –Java

46 A.Wieczorkowska 46 Sprzęt Sprzęt cyfrowy i analogowy –DVD, CD-ROM –Sprzęt video –Głośniki, słuchawki, monitory etc. –Połączenie z Intenetem: modemy, ISDN (Integrated Services Digital Network) etc. system cyfrowej sieci telekomunikacyjnej z integracją usług

47 A.Wieczorkowska 47 Kto stosuje multimedia? Zastosowania komercyjne –Przedstawianie informacji kioski interaktywne – multimedialne kioski informacyjne –MM na pokładach samolotów Filmy na życzenie Nauczanie na odległość

48 A.Wieczorkowska 48 Zastosowania komercyjne Informacja –Multimedialne kioski informacyjne wirtualne przyciski na monitorze dotykowym, wirtualna klawiatura Telewizja interaktywna –http://www.itvi.pl/http://www.itvi.pl/ Filmy interaktywne - kierowanie akcją Sklepy wirtualne Wideokonferencje Telefon przez Internet „Inteligentne” urządzenia domowe

49 A.Wieczorkowska 49 Multimedia w domu Biblioteka na CD –encyklopedie –encyklopedie tematyczne –książki interaktywne –atlasy, atlasy 3D + video możliwość powiększania map i planów miast informacje statystyczne

50 A.Wieczorkowska 50 Multimedia w domu Gazety internetowe Muzea interaktywne i wirtualne http://www.louvre.fr/

51 A.Wieczorkowska 51 Nauka poprzez zabawę - edutainment Rozwijanie inwencji twórczej –pisanie –tworzenie animacji –„żywe” książki – interaktywne wersje popularnych książek dla dzieci Nauka języków obcych –rozpoznawanie mowy –nauka gramatyki z wykorzystaniem animacji (czasowniki)

52 A.Wieczorkowska 52 Nauka poprzez zabawę - edutainment Matematyka –gry z liczbami Nauka innych dziedzin poprzez rzeczywistość wirtualną i książki interaktywne (biologia, fizyka) Aplikacje dla małych dzieci: nauka kolorów, zegara etc.

53 A.Wieczorkowska 53 Gry i rozrywka Role-playing games Gry shoot ‘em ups Activity games – na ekranie symulowany jest lot samolotem lub jazda samochodem Inne –Konsole gier, playstations

54 A.Wieczorkowska 54 Rzeczywistość wirtualna grafika komputerowa wideo dźwięk stereofoniczny obraz 3D VRML (Virtual Reality Modeling Language) – w MPEG-4 http://www.pjwstk.waw.pl/vrml/

55 A.Wieczorkowska 55 Rzeczywistość wirtualna - zastosowania symulatory lotów planowanie konstrukcji budynków –CAD (Computer-Aided Design) testowanie samochodów trening militarny – symulacja pola bitwy gry headset – 2 ekrany przed oczami grającego, dźwięk stereo podstawa i barierka ochronna

56 A.Wieczorkowska 56 http://www.se.rit.edu/~jrv/research/ar/introduction.html Rzeczywistość wzbogacona (augmented reality)

57 A.Wieczorkowska 57 Techniki Rozpoznawanie i synteza mowy –Sterowanie robotami i urządzeniami Grafika 3D i animacja, film Synteza audiowizualna –Awatary Użyteczność interfejsów (usability engineering) –Percepcja barwy Interfejsy dotykowe (haptic) Automatyczne rozpoznawanie/klasyfikacja –Dźwięku query-by-humming –Obrazu

58 A.Wieczorkowska 58 Higiena pracy z komputerem NIE PRZESIADYWAĆ BEZ PRZERW PO WIELE GODZIN PRZED MONITOREM KOMPUTERA !!!

59 A.Wieczorkowska 59 Literatura S. McGloughlin: Multimedia: concepts and practice, Prentice Hall, Upper Saddle River, NJ, USA, 2001 B. Hansen, The Dictionary of Multimedia, Terms and Acronyms, Fitzroy Dearborn, Chicago, 1998 C. Lewis (tech. cons.) 101 Essential Tips, Exploring Multimedia. Dorling Kindersley’97

60 A.Wieczorkowska 60 Literatura dodatkowa http://www.cs.sfu.ca/CourseCentral/365/mark/ K.Skarbek (red.): Multimedia – Algorytmy i standardy kompresji. Akademicka Oficyna Wydawnicza, Warszawa 1998 V. Subrahmanian, Principles of Multimedia Database Systems,MK 1998 K.Blair-Benson: Audio Engineering Handbook. McGraw Hill, 1990 A. Czyżewski: Dźwięk cyfrowy. Akademicka Oficyna Wydawnicza, Warszawa 1998

61 A.Wieczorkowska 61 Literatura dodatkowa H. Levkowitz, Color Theory and Modeling for Computer Graphics, Visualisation, and Multimedia Applications, Kluwer, London 1997 G.De Poli, A.Piccialli: Representations of Musical Signals, MIT Press, 1991 D.O‘Shaughnessy: Speech communication, Addison-Wesley, 1990 C.Basztura: Rozmawiać z komputerem, Wyd. Format, Wroclaw, 1992 R.Tadeusiewicz, M.Flasinski: Rozpoznawanie obrazów. PWN, W-wa, 1991 R.Tadeusiewicz: Systemy wizyjne robotów przemysłowych. WNT, W- wa, 1992 M.Stith et. al.: Music Education: An Artificial Intelligence Approach, Springer-Verlag, 1993 Tanguiane: Artificial Perception and Music Recognition, Springer- Verlag, 1993 P.Todd, D.G.Loy: Music and Connectionism, MIT Press, 1991 H.Peitgen, H.Juergens, D.Saupe: Granice chaosu – fraktale, PWN, W- wa 1995