6G 비가시선 환경 RIS 최적화 DRL
6G 무선 네트워크는 밀리미터파 및 테라헤르츠 대역에서 물리적 장애물에 취약함에도 불구하고 초고속 데이터 전송률과 끊김 없는 연결을 요구합니다. 재구성 가능한 지능형 표면(RIS)은 수동 반사를 통해 전자기파를 프로그래밍 방식으로 조향하여 비가시선(NLOS) 환경의 한계를 완화하는 핵심 기술로 부상했습니다. 그러나 동적 다중 사용자 환경에서 고차원 RIS 위상 편이를 실시간으로 최적화하는 것은 NP-난제이며, 기존 수학적 최적화 방식으로는 효율적인 해결이 어렵습니다. 본 논문은 다중 사용자 링크의 합산 전송률 성능 최적화를 위한 새로운 심층 강화 학습(DRL) 프레임워크를 제안합니다. 이 프레임워크는 TD3 아키텍처를 활용하며, 견고한 연결성을 보장하기 위해 실시간 환경 피드백과 불완전한 채널 상태 정보(CSI)를 통합합니다. 시뮬레이션 결과, 제안된 DRL-RIS 프레임워크는 합산 전송률 성능에서 현저한 이득을 달성했습니다. 또한, 기존 볼록 최적화 기반 기술보다 계산 지연 시간과 에너지 효율성 측면에서 우수한 성능을 보였습니다. 이 연구는 6G 네트워크의 NLOS 환경에서 RIS 기반 연결성을 강화하는 데 기여하며, DRL을 활용한 무선 통신 시스템 최적화의 새로운 가능성을 제시합니다.