Multimedia Data Representation

Image Data Representation

• Pixel (pel), element of images 
• Representasi Image: 2 dimensional array of pixels (bitmap) 
• Dengan cara yang sama (bitmap), image disimpan di video memory, dalam frame buffer.
• Resolusi image merujuk pada ukuran pixelnya. ,misal: 1600x1200, 640x480 
• The resolution of the video card does not have to match the desired resolution of the image, but if not enough video card memory is available, the data has to be shifted around in RAM for display 
• Aspect ratio, ex: 4:3

Image Depth 

• 1-bit Monochrome Image : binary image, 0 and 1 (black and white)
• 8-Bit Gray-Level Images : 0 – 255: black to white, 8-bit = 1 byte
• 24·Bit Color Images 
  Tiap pixel = 3 bytes 
  256x256x256 = 16,777, 216 memungkinkan untuk mengkombinasikan warna 
  Kebanyakan 24-bit image disimpan dalam 32-bit images
• 8-Bit Color Image 
  -Warna gambar yang cukup akurat dapat diperoleh dengan mengkuantisasi informasi warna itu. -File gambar tersebut menggunakan konsep tabel pencarian untuk menyimpan informasi  warnanya
  -Histogram Warna
  -Clustering, cara ini memungkinkan kita untuk memilih 256 kelompok warna yang paling penting 

Popular File Format :  • GIF • JPEG • BMP • PNG

Audio,etc

•  Audio 
  sound, esp. saat direkam, dikirim, atau direproduksi
• Sound/Bunyi 
  getaran yang melakukan perjalanan melalui udara atau media lain dan dapat didengar ketika mereka mencapai telinga seseorang atau hewan.
  suara yang dihasilkan oleh getaran terus menerus dan teratur, sebagai lawan kebisingan.
• Voice/Suara 
  suara yang dihasilkan di laring seseorang dan mengucapkan melalui mulut, sebagai pidato atau lagu.
• Speech/Ucapan /
  ekspresi atau kemampuan untuk mengungkapkan pikiran dan perasaan dengan suara mengartikulasikan.

Sound 

• Analog Signals
  Produced by micro phone (and for images, by video camera) 
• Digitize Analog Signals
  Konversi ke nomor stream
  Diskrit sampling (amplitudo dan waktu)
  Sampling: dimensi waktu
  Kuantisasi: dimensi amplitudo, 8 bit per 256 tingkat

How good is the signal? 

• 8 kHz bad cell phone 

• 16 kHz phone 

• 22kHz audio tape, WWW Audio, AM Radio 

• 44kHz CD

Popular Audio Format 

• .au (unix), 
• .aiff (MAC),
• .wav(PC) biasa digunakan dalam penelitian speech dan natural language processing. Cth: speech recognition, speaker recognition, text to speech, speech to text, voice command, dan lainnya. 
• MP3 (lossy compression), format file yang paling populer terutama di dunia penelitian music information retrieval. Cth: music and song search engine. 
• m4a (lossless compression), format file audio di sistem operasi Mac (Apple). Cth: aplikasi-aplikasi musik di Apple device.

"Semakin tinggi nilai bit depth dan dB menandakan semakin baik kualitas sinyal audio tsb(semakin bebas noise). Konsekuensi sama seperti data image kualitas semakin baik tentunya ukuran file semakin besar"