html Teatro de sombras com dedos · Banco de experimentos com gestos
AHALab / Teatro de sombras com os dedosComposição de escrita em chinês ↗ · Desenhe minha sombra chinesa ↗ · Banco de experimentos de gestos

Manipulação de fantoches com câmera

Escolha um personagem, estenda a mão e experimente

O dedo médio vira a cabeça, dedos indicador e anelar movem ambos os braços,
Polegar e mindinho movem as duas pernas; a palma move junto com o personagem.

Vincule um personagem a cada mão. Quando a mão sair temporariamente da câmera, o programa manterá o personagem; ao retornar, tente reconciliar novamente.
Esses bonecos de sombra são baseados em personagens tradicionais chineses; você também pode desenhar seus próprios personagens.

Personagem 1: Sun Wukong · Linha de manipulação do fantoche exibida por padrão

Selecionado: Sun Wukong
Pré-visualização da câmera · Processamento local
Arranjar palco Cenário e adereços

Depois de organizar tudo, o programa manterá seu cenário e não trocará mais os objetos automaticamente. O cenário é salvo neste navegador; no máximo 12 itens.

Mova as mãos do personagem próximas ao objeto, feche os dedos para pegar, abra a mão para soltar. Segure firmemente ao meio fechar, solte ao abrir; também pode mover enquanto segura. Para treino com o mouse, os botões podem ser usados.

Clique para reproduzir e começar a ouvir.

YuE2 Música chinesa tradicional como trilha, quatro seções já concluídas na audição.Registro de produção de trilha sonora
Prática com mouseMini-jogo 'Pegue a Lua' 0 / 5

Controle com os dedos

Ao praticar com o mouse, arraste o controle deslizante e observe cada linha de controle do fantoche. Após ligar a câmera, o controle será feito diretamente com os dedos.

No modo de câmeras, curvar o polegar ou abri-lo para fora da palma consegue movimentar a perna esquerda. O zoom padrão é 2x; reduza se houver tremores visíveis. O controle deslizante do mouse ainda indica o alcance total de movimento.

Adereços e conjunto completo de movimentos

Primeiro abra a mão, depois mantenha o gesto de V ou o polegar erguido por cerca de meio segundo: pular e girar, respectivamente. Depois de fechar o punho, abra a mão usando um acessório. Cada ação só pode ser disparada novamente depois de abrir a mão.

Também é possível pressionar o botão primeiro para testar o movimento.

01 / Prática e observação

Clique diretamente na sombra para selecionar um personagem, depois troque o objeto ou pressione o botão de ação. Com o mouse você também pode arrastar, usar as setas para mover e a barra de espaço para acender a lua.

Regras do mini jogo de pegar a lua: mova o peito do personagem para dentro do círculo de luz, una o polegar e o indicador e mantenha por um instante. O mouse pressionado ou a barra de espaço podem substituir a pinça.

02 / Calibrar o alcance de movimento das mãos

Ative a câmera, permitindo que apenas uma mão entre na imagem. Coloque a palma em um canto superior esquerdo e inferior direito da área de movimento confortável, registrando sequencialmente.

Área de atividade padrão: horizontal de 10 a 90%, vertical de 15 a 85%.

03 / mude um parâmetro e veja como o movimento muda

Compare o tremor ao parar com a velocidade de acompanhamento. Alterar apenas um parâmetro por vez e registrar os resultados para o mesmo conjunto de alvos.

04 / Colete meus gestos, teste o resultado do reconhecimento

Ligue a câmera, permitindo que apenas uma mão apareça na tela. Coletar separadamente as quatro categorias: mão aberta, pinça, punho e “outras”; após contagem regressiva de 1,5 segundos em cada tentativa, colete 20 amostras de características. Recomenda-se trocar o ângulo três vezes para cada categoria e depois pedir a um colega que não participou da coleta para testar.

Pode ser ativado após pelo menos 20 amostras por categoria. O modelo é mantido apenas na memória desta página, não será carregado.

Regra padrão · Ainda não coletada

Este é um pequeno modelo kNN local baseado em pontos-chave; rejeita o acionamento quando a distância é muito grande, há confusão de categorias ou divergência entre vizinhos. Ele não pode corrigir mãos invisíveis ou esqueleto errado, nem garante automaticamente maior precisão que as regras padrão. Os quatro tipos de botão indicam etiquetas de amostra; coloque movimentos naturais e ações não alvo em "Outro".