Reference for Chullin 228:13

התם גט שיחרור הוא דקא גרים דהא עבד בן משוחררת אחי שפחה יוכיח שמותר פרי עם פרי ואסור פרי עם האם

But is not the fruit with the fruit forbidden only by reason of the 'mother'?

Jastrow