Reference for Chagigah 33:1

רב אשי אמר אפילו תימא צדדין מותרין כל דבהדי גבה כגבה דמי:

Rav Ashi said, "Even if you say the sides are permissible [for leaning], all that is on the level of the back is like the back."

Jastrow