title: Pandas stack/groupby to make a new dataframe
body: <p>I have a problem of creating and rearrange a dataset. I Looked at the pandas groupby function and think it might help me do it but I am to inexperienced to make it happen.
  I have created an example of my problem below:
  my df:</p>
  
  <pre><code>     vehicle  color  a  b  c  d  A1  A2  A3  B1  B2  B3  C1  C2  C3  D1  D2  D3
  resp                                                                           
  1       bike  green  5  4  1  3   3   4   5   3   5   3 NaN NaN NaN NaN NaN NaN
  2       walk    red  5  3  3  3   4   5   3   3   5   4 NaN NaN NaN NaN NaN NaN
  3        car  green  4  2  3  3   4   3   5   4   5   5 NaN NaN NaN NaN NaN NaN
  4        car   blue  4  5  4  4 NaN NaN NaN NaN NaN NaN   5   5   5   3   3   4
  5        bus  black  2  4  4  3 NaN NaN NaN   2   3   3   2   2   1 NaN NaN NaN
  6        car    red  4  2  3  3   3   4   4 NaN NaN NaN   4   4   4 NaN NaN NaN
  7        bus   blue  5  5  2  3   3   3   5   4   3   2 NaN NaN NaN NaN NaN NaN
  8       walk    red  3  3  4  3 NaN NaN NaN   5   5   5   5   3   3 NaN NaN NaN
  9        car   blue  5  3  4  3   3   3   3 NaN NaN NaN   4   3   4 NaN NaN NaN
  </code></pre>
  
  <p>The dataset contains respondents and answers to a questionare. What I would like to do is to make a new dataframe with resp as index and the data from how the respondents answered rearranged.
  The data in columns a,b,c,d, vehicle and color are stacked for the respondents (Hope thats the right way to express it) in the new dataframe. Also the values from columns A to C are in the new frame under columns BL_val. Only the data that corresponds from Capital letter (A1-D3) to small letter (a,b,c,d) are filled in. The rest are NAN.</p>
  
  <p>I would like to create a new dataframe from this and it shoul look like:</p>
  
  <p>ds:</p>
  
  <pre><code>     vehicle  color sl  sl_val  BL_val1  BL_val2  BL_val3
  resp                                                     
  1       bike  green  a       5        3        4        5
  1       bike  green  b       4        3        5        3
  1       bike  green  c       1      NaN      NaN      NaN
  1       bike  green  d       3      NaN      NaN      NaN
  2       walk    red  a       5        4        5        3
  2       walk    red  b       3        3        5        4
  2       walk    red  c       3      NaN      NaN      NaN
  2       walk    red  d       3      NaN      NaN      NaN
  3        car  green  a       4        4        3        5
  3        car  green  b       2        4        5        5
  3        car  green  c       3      NaN      NaN      NaN
  3        car  green  d       3      NaN      NaN      NaN
  4        car   blue  a       4      NaN      NaN      NaN
  4        car   blue  b       5      NaN      NaN      NaN
  4        car   blue  c       4        5        5        5
  4        car   blue  d       4        3        3        4
  5        bus  black  a       2      NaN      NaN      NaN
  5        bus  black  b       4        2        3        3
  5        bus  black  c       4        2        2        1
  5        bus  black  d       3      NaN      NaN      NaN
  6        car    red  a       4        3        4        4
  6        car    red  b       2      NaN      NaN      NaN
  6        car    red  c       3        4        4        4
  6        car    red  d       3      NaN      NaN      NaN
  7        bus   blue  a       5        3        3        5
  7        bus   blue  b       5        4        3        2
  7        bus   blue  c       2      NaN      NaN      NaN
  7        bus   blue  d       3      NaN      NaN      NaN
  8       walk    red  a       3      NaN      NaN      NaN
  8       walk    red  b       3        5        5        5
  8       walk    red  c       4        5        3        3
  8       walk    red  d       3      NaN      NaN      NaN
  9        car   blue  a       5        3        3        3
  9        car   blue  b       3      NaN      NaN      NaN
  9        car   blue  c       4        4        3        4
  9        car   blue  d     NaN      NaN      NaN      NaN
  </code></pre>
  
  <p>I really need some help with this, I cant figure it out!!</p>