공유기에 따른 속도 성능

안녕하세요. 제가 사용하고 있는 공유기가 n604+라는 것인데요. 이공유기에 대략 4~6명 정도가 붙어서 사용을 합니다. 그런데 1~2명정도 붙어서 사용할땐 괜찮은데... 4명 6명이 동시에 인터넷을 사용하면 인터넷 속도가 현저히 떨어 집니다. 인터넷 속도 측정기로 측정해 봤는데 접속자 수에 따라서 속도가 많이 달라지더라고요. 그래서 여줘보는게 한회선으로 여러명이 사용하면 느려질수 밖에 없는 건가요? 아니면 공유기 성능으로 커버할 수 있는 부분인가요? 만약 공유기 성능으로 커버할 수 있는 부분이라면 지금 저희 상황에 맞는 공유기 모델 추천 부탁 드립니다. 6명정도 동시 사용해서 인터넷 속도가 떨어지지 않는 모델로요.