AC 算法的 critic 网络不对吧？应该使用 v 计算 td_error，r + gamma * q 是什么？

—