Nos últimos anos o poder de processamento dos smartphones cresceu vertiginosamente, permitindo-lhes executar tarefas cada vez mais complexas. Entretanto, a forma de interação dos usuários com estes dispositivos móveis não seguiu a mesma velocidade de evolução, sendo ainda baseada em teclados ou toques na tela. Este trabalho propõe um sistema de interação com smartphones baseado em Visão Computacional, em que a mão do usuário é rastreada e seis gestos podem ser realizados para o controle do dispositivo. Este trabalho é muito útil para profissionais da área de Engenharia de Computação, especialmente aqueles que trabalham com Visão Computacional e Processamento de Imagens, bem como para estudantes de graduação, metrado e doutorado interessados nestas áreas.