7.5.1 Learning to Communicate

이 연구 이전에도 agent끼리 협력하기 위해 communication해야하는 상황에 대한 많은 연구가 있었으나 이는 toy problem에 한정되어 있었습니다. 이런 연구들은 특히 주로 cheap-talk communication channel을 사용하였는데, 이는 Chapter 6에 나온 RIAL과 DIAL도 포함됩니다. 이번 연구에서는 cheap-talk channel을 사용하는 것보다 실제 environment와 상호작용하는 action을 관찰하면서 배우는 것에 초점을 맞춥니다. 이는 이전에 해결하려했던 'hat game'이라는 문제의 설정과 비슷한데, 이는 Bayesian beliefs를 사용하는 것이 아닌 DRQN의 적용으로 해결하려한 연구가 있습니다. 또한 Nayyar의 연구에서는 common information이라는 아이디어는 사용했으나, 실제 high-dimensional한 상황에서의 적용에 대한 method를 내놓진 못했습니다.