Skillingaryd klart för nedflyttning efter förlust