Os meios de interação entre usuário/computador são predominantemente através de teclados, mouse, keypads, etc. Recentemente vem surgindo meios alternativos de interação com o computador, como os gestos que produzem comandos, usando técnicas de reconhecimento de padrões e visão computacional. Neste trabalho é desenvolvido um ambiente virtual cuja interação com o usuário acontece através do reconhecimento de posturas de mão predefinidas. Esse sistema é construído sobre a base de algoritmos de segmentação de forma que a mão do usuário fosse capturada através de uma webcam, caracterizada usando momentos de Hu e representada em uma rede neural Perceptron multicamada para sua classificação. Para a interação dos objetos no ambiente virtual 3D, as posições são obtidas a partir das variações das imagens da mão capturas pela webcam.