סימן מב סעיף כ

אִם אוֹכְלִין בַּחֲבוּרָה וְיָצְאוּ קְצָת מֵהֶם עַל דַּעַת שֶׁיַּחְזְרוּ לְכָאן, כֵּיוָן שֶׁנִּשְׁאַר אֲפִלּוּ רַק אֶחָד מֵהֶן כָּאן בִּמְקוֹמוֹ, לֹא נִתְבַּטְלָה הַקְּבִיעוּת. וּכְשֶׁחוֹזְרִין, לִקְבִיעוּתָן, חוֹזְרִין וְלֹא הֲוֵי הֶפְסֵק.

If a group of people eat together and some of them leave the table with the intention of returning, even if only one of the group remains at the original place, there is no disruption to the status of the place they established; and when they return, they return to their original status and their leaving is not considered an interruption.

תנא דבי אליהו כל השונה הלכות בכל יום מובטח לו שהוא בן העולם הבא שנאמר הליכות עולם לו אל תקרי הליכות אלא הלכות (נדה ע"ג.)