Communication Signal Design Lab.

한국어

송홍엽 교수의 잡글

DMS와 정보량

2004.04.04 02:48

송홍엽 조회 수:3574 추천:178

Discrete Memoryless Source의 앞글자입니다.
DMS는 통신이론의 중요한 개념입니다. DMS는 유한한 symbol집합 S와 S의 원소 각각에 대한 a priori probabilities
P[output=s]=p_s 로서 정의됩니다. 이전에 발생시킨 심볼이 무엇이었는지에 관계없이 항상 동일한 확률분포(a priori probabilities)에 따라서 출력 심볼을 발생시킵니다...

예를 들어 봅시다.

DMS1:
어떤 binary DMS는 출력 심볼로 0혹은 1을 발생시키고 각각은 1/2과 1/2을 발생확률로 가집니다.
오랜기간 출력 심볼의 수열을 관찰하면 대략 0의 수와 1의 수가 비슷할것입니다.

DMS2:
또 어떤 binary DMS는 출력 심볼로 a와 b를 발생시키고 각각은 1/3과 2/3을 발생확률로 가집니다.

DMS3:
세번째는 출력심볼로 0과 1을 발생시키고 각각의 심볼은 1/3과 2/3을 발생확률로 가집니다.

이러한 어떤 DMS의 출력심볼 한 개를 관찰하여 얻을 수 있는 평균 정보량은 얼마나 될까요?
각각의 심볼을 관찰했을때 얻는 각각의 정보량은 얼마나 될까요?

이러한 정보량을 과연 "정의"할 수 있을까요?

다음 글부터는 이를 천천히 논의해봅시다...
번호 제목 글쓴이 날짜 조회 수
공지 논문에 영어작문 주의사항 몇 가지 송홍엽 2008.05.22 9449
공지 젊은 학부생 여러분에게... 송홍엽 2008.11.20 6397
공지 우리학과 대학원생 모두에게 (특히, 박사과정들에게) 하고싶은 말입니다. 송홍엽 2014.01.20 8464
29 [공지] 게시판을 열면서 송홍엽 2004.03.30 3901
28 퍼즐 3 송홍엽 2004.04.15 3879
27 [퍼온글] 외국계 기업, `출신대 간판` 안 본다 송홍엽 2011.12.15 3852
26 쉬었다가는 페이지 file 송홍엽 2003.10.20 3822
25 [퍼온글] 수학의 힘 -- 동아일보 컬럼 2008.12.18 송홍엽 2008.12.18 3814
24 연구실 멤버들에게 송홍엽 2006.11.30 3792
23 Re..학위논문작성시 주의점 송홍엽 2006.09.26 3790
22 수집합이란... 송홍엽 2004.04.13 3731
21 Golomb-Puzzle 2003.12 file 송홍엽 2004.04.02 3721
20 [교양상식] 정수와 암호 송홍엽 2004.04.13 3712
19 퍼즐 2 송홍엽 2004.04.15 3678
18 [일반인을 위한 교양강좌] CDMA 통신기술 (2001.7) 송홍엽 2003.10.13 3658
17 [퍼온글]독도대첩 송홍엽 2005.03.15 3652
16 유명한 퍼즐1 송홍엽 2004.04.01 3579
» DMS와 정보량 송홍엽 2004.04.04 3574
14 손바닥/손등 게임 송홍엽 2005.09.30 3512
13 [펀글-조선일보] 대중적인 책 내면 ‘이단아’ 취급 송홍엽 2006.09.18 3504
12 Re..랜덤변수의 variance가 0이면? 김태환 2005.07.30 3496
11 [소고] 수학이란.... 송홍엽 2004.04.13 3493
10 디지털 이야기... 송홍엽 2003.10.06 3405