自己的小组长非常难相处，应该怎么做？

我们部门有几个小组，每个小组有一个资深的组长，以及几个短则入职几个月长则入职几年的组员，虽说是小组，但其实组内合作和组外合作频率差不多，所以我的理解一个组的可能只是便于沟通和安排工作。
现在的问题是，我入职一年多一来的这个组的组长，已经成功逼退了好几个组员了，有刚来几天的，也有几个月的，也有两三年之久的。我一开始也是不知道其中的原委，后来我和同事问了几句才知道，最近几年离职的同事(在我来这家公司之前的，以及我在这家公司的这段时间)有超过半数是从我这个组离开的，而且离开的原因几乎都是无法晋升，而不是有更好的橄榄枝。
就拿我听来的一个以前的，素未谋面的老员工，年年无法得到晋升，和他同时期入职的其他组的同事已经升了一次或两次了，但就因为各种原因无法晋升。
我也越发有这种感觉了，比如两个差不多的工作，如果是我的组长给我布置，我发现完成难度会比其他人给我布置的更大，比如组长的任务需要两周完成，而其他人布置的同样的任务一周就能完成还高效。而算绩效的时候是不管任务难度的，只看工作的量，导致任务难度提高的一个很大的原因是：我们的组长刻意把一些简单问题复杂化，美其名曰“锻炼新人能力”，自己负责一些更简单的工作。
和我有同期入职的同事，他们的工作任务都很轻松，只有我每天上班如上坟，他们似乎很不能理解，我又不能说让他们和我调换小组长。
这种情况可以和领导反应一下，让领导给我换一个组？在不影响工作进度的前提下。但是如果和领导反应，领导会不会产生一种现在年轻人抗压能力差的感觉，然后也对我产生看法？如果说理由的话，用什么理由比较好，总不能说自己和这个组长处不来或者性格不搭吧。