I am not a psychologist, but generally it is because you are seeing something your brain considers valuable or possibly dangerous.  If a man stares at a woman with large breasts, then it is because his brain considers it something valuable and wants it.  You will focus more easily on something or someone that you find inherently valuable compared to something you consider important like math.  Your brain wants the large breasted woman so it will encourage you to focus on that object and retrieve it.

Now if you see something out of the ordinary like a kid wearing some crazy braces with a head set for their jacked up teeth, then you brain is assessing it for possible danger.  You inherently won't trust it even if you consciously know that the 12 year old with extreme dental issues is not a threat to you.  

Either way you are assessing whatever you stare at and your brain considers it too important to just glance at and look away.
මම මනෝ විද්‍යාඥයෙක් නොවෙමි, නමුත් සාමාන්‍යයෙන් එසේ වන්නේ ඔබේ මොළය වටිනා හෝ අනතුරුදායක යැයි සලකන දෙයක් ඔබ දකින බැවිනි. පිරිමියෙකු විශාල පියයුරු ඇති කාන්තාවක් දෙස බලා සිටින්නේ නම්, එසේ වන්නේ ඔහුගේ මොළය එය වටිනා දෙයක් ලෙස සලකන අතර එයට අවශ්‍ය බැවිනි. ඔබ ගණිතය වැනි වැදගත් යැයි සලකන දෙයකට සාපේක්ෂව ඔබට ආවේණිකව වටිනා යමක් හෝ යමෙකු කෙරෙහි ඔබ වඩාත් පහසුවෙන් අවධානය යොමු කරනු ඇත. ඔබේ මොළයට විශාල පියයුරු ඇති කාන්තාව අවශ්‍ය වන බැවින් එය එම වස්තුව කෙරෙහි අවධානය යොමු කර එය නැවත ලබා ගැනීමට ඔබව දිරිමත් කරනු ඇත. දැන් ඔබ සාමාන්‍ය නොවන දෙයක් දුටුවහොත්, ළමයෙකු තම කොස් උස් වූ දත් සඳහා හිස් සෙට් එකක් සහිත පිස්සු වරහන් පැළඳ සිටින බවක්, එවිට ඔබේ මොළය එය විය හැකි අනතුරක් තක්සේරු කරයි. අන්ත දන්ත ගැටළු ඇති 12 හැවිරිදි දරුවා ඔබට තර්ජනයක් නොවන බව ඔබ දැනුවත්ව දැන සිටියත් ඔබ සහජයෙන්ම එය විශ්වාස නොකරනු ඇත. කෙසේ වෙතත්, ඔබ දෙස බලා සිටින ඕනෑම දෙයක් ඔබ තක්සේරු කරන අතර ඔබේ මොළය එය දෙස බලා අහක බලා ගැනීම ඉතා වැදගත් යැයි සලකයි.