출원번호 : 10-2013-0053056 (2013년05월10일)
등록번호 : 10-1462199 (2014년11월10일)
특허권자 : 주식회사 스튜디오엑스코
요약 : 본 발명은 자율적인 행동 학습(Q-Learning)을 이용한 협력 통신을 위한 릴레이 선택 장치 및 그 방법에 관한 것이다. 본 발명에 따른 협력 통신을 위한 릴레이 선택 방법은, 모든 릴레이가 협력 통신에 참여하고, 모든 릴레 이의 인덱스 집합을 정의하는 단계; Q-테이블을 초기화하고, 초기 상태를 랜덤하게 선택하는 단계; 및 모든 릴레이 선택 구간 동안 협력 릴레이 개수를 선택하는 단계를 포함하고, 상기 협력 릴레이 개수를 선택하는 단계는 현재 상태에서 가능한 모든 행동들로부터 하나의 행동을 선택하는 단계; 상기 선택된 행동을 이용하여 다음 상태로 이동하는 단계; 가능한 모든 행동들에 기반하여 상기 다음 상태 가운데 Q 값의 최대값을 가지는 행동을 선택하는 단계; 상기 Q 값을 업데이트하고, 상기 Q-테이블에서 최대의 Q 값을 가지는 협력 릴레이 개수를 선택하는 단계;
및 다음 상태를 현재 상태로 선택하는 단계를 포함한다.
이와 같이 본 발명에 따르면, 물리 계층 관점에서 자율적인 행동 학습(Q-Learning)을 위한 상태, 행동, 보상값을 명확하게 정의하고 전체 알고리즘을 단계화할 수 있고, 자율적인 행동 학습(Q-Learning)을 이용한 제안 기법은 수학적인 분석을 통해서 릴레이를 선택하는 기법과 비교했을 때 시스템의 복잡도를 효율적으로 저감시키며 유사한 심벌오율(Symbol Error Rate) 성능을 낼 수 있다. 또한, 자율적인 행동 학습(Q-Learning) 알고리즘은 차세대 무선통신 시스템의 성능 향상을 위해서 효과적으로 사용될 수 있다.
1020130053056
