It is permissible to take someone else to the house of one who you are certain will approve of that and will not mind. It is recommended to gather to eat

وَحَدَّثَنِي حَجَّاجُ بْنُ الشَّاعِرِ، حَدَّثَنَا يُونُسُ بْنُ مُحَمَّدٍ، حَدَّثَنَا حَرْبُ بْنُ مَيْمُونٍ، عَنِ النَّضْرِ بْنِ أَنَسٍ، عَنْ أَنَسِ بْنِ مَالِكٍ، عَنِ النَّبِيِّ صلى الله عليه وسلم فِي طَعَامِ أَبِي طَلْحَةَ نَحْوَ حَدِيثِهِمْ ‏.‏