Slaves in Greece were not a rare thing to see. It is certain that rural slavery was very common in Athens. It is estimated that every citizen in Athens had at least 1 slave so, to answer your question, high class people were not the only ones to have slaves.
A slaves principal use was for agricultural purposes usually but if there was a wealthy slave owner with dozens of slaves then there would be a foreman who oversaw all responsibilities of the other slaves. I haven't heard that slaves were "in the family" but you thought right when you questioned whether they do no manual labor. 
ග්‍රීසියේ වහලුන් දකින්නට දුර්ලභ දෙයක් නොවීය. ග්‍රාමීය වහල්භාවය ඇතන්ස්හි ඉතා සුලභ වූ බව නිසැකය. ඇතන්ස්හි සෑම පුරවැසියෙකුටම අවම වශයෙන් වහලුන් 1 දෙනෙකු සිටින බව ගණන් බලා ඇත, එබැවින් ඔබේ ප්‍රශ්නයට පිළිතුරු දීමට නම්, වහලුන් සිටියේ උසස් පන්තියේ මිනිසුන්ට පමණක් නොවේ. වහලෙකුගේ ප්‍රධාන භාවිතය සාමාන්‍යයෙන් කෘෂිකාර්මික කටයුතු සඳහා වූ නමුත් දුසිම් ගනනක් වහලුන් සිටින ධනවත් වහල් හිමිකරුවෙකු සිටියේ නම් අනෙක් වහලුන්ගේ සියලු වගකීම් අධීක්ෂණය කරන ප්‍රධානියෙකු සිටී. වහලුන් &quot;පවුලේ&quot; සිටින බව මම අසා නැත, නමුත් ඔවුන් අතින් වැඩ කරන්නේ නැද්ද යන්න ඔබ ප්‍රශ්න කරන විට ඔබ සිතුවේ හරි ය. 