morou com a mãe em Salvador até os oito anos. Quando a sua mãe, líder rebelde teve que fugir para o Rio de Janeiro, buscando escapar da forte perseguição policial, Luiz foi entregue ao seu pai, jogador compulsivo e afogado em dívidas. Em 1840, aos 10 anos, foi vendido como escravo doméstico pelo próprio pai para pagar uma dívida de jogo. Ele foi transportado da Bahia para o Rio de Janeiro, onde foi vendido ao alferes Antônio Pereira Cardoso e depois passou por diversas cidades de São Paulo até ser levado ao município de Lorena.