Gestos · Voz · No aparelho

Desenhe um sinal. O celular obedece.

O Sigil pilota o celular com sinais desenhados no ar e com a sua voz. Tudo o que ele vê e ouve fica no aparelho.

Baixar para Android Veja como funciona

Prévia para Android com mãos ao vivo, voz e modelo no aparelho.

  • 21 pontos por mão
  • Modelos no celular
  • Sem conta, sem nuvem

00O sinal

Quatro leituras da marca

  1. 01 · Uma letra

    O S de SIGIL.

    Dois traços em volta de um ponto de luz. A espinha do S nunca é desenhada: a luz é a espinha.

  2. 02 · Um gesto

    Dois traços, um ponto.

    A ponta de um dedo fechando sobre um ponto, como o polegar e o indicador se encontram na pinça.

  3. 03 · Um cursor

    A luz é o cursor.

    O ponto segue o seu indicador pela tela e é o núcleo da Esfera de Controle.

  4. 04 · Um selo

    Gire. Continua igual.

    Meia volta não muda o sinal, como deve ser um selo. Em latim, sigillum é um pequeno selo. Em português, a palavra lembra sigilo.

01Como funciona

De um sinal no ar a um toque na tela.

Três etapas, e todas rodam no celular.

Um app de música em um celular. O cursor holográfico entra como um rastro de luz e se encaixa no botão de tocar, que acende como uma lente de vidro.

  1. 01 · Ver

    A câmera vê a sua mão.

    A câmera frontal encontra 21 pontos na sua mão, de 30 a 60 vezes por segundo. Os quadros são lidos na memória e descartados.

  2. 02 · Entender

    Gestos viram intenções.

    Um classificador pequeno lê poses e movimentos: uma pinça, um deslize, um círculo no ar. O app aberto decide o que cada sinal quer dizer.

  3. 03 · Agir

    As ações acontecem.

    O cursor se encaixa nos alvos, então a pinça cai onde você mirou. Tudo o que envia, publica ou paga espera o seu sim.

Da câmera à ação

  1. Câmera frontal
  2. 21 pontos da mão
  3. Filtro One Euro
  4. Classificador de gestos
  5. Perfil do app
  6. Ação

02Os gestos

14 sinais, uma mão.

Cada sinal é feito com a palma voltada para a câmera, do jeito que ela vê você. E cada um também tem um caminho pelo toque e outro pela voz.

Gesto 03 / 14

Pinça

Reconhecido quando
As pontas do polegar e do indicador se tocam e abrem de novo em até 300 ms.
O que faz
Toca onde está o cursor. O toque cai onde você mirou 90 ms antes, antes de os dedos começarem a fechar.

Volta 90 ms

Nenhum sinal dispara enquanto a sua mão vai até a tela, quando duas mãos se sobrepõem ou nos 300 ms seguintes ao último. Perder a mão de vista nunca confirma uma ação.

03A Esfera de Controle

Abra a mão. A esfera responde.

Um globo de vidro se abre onde está a sua mão, sobre o app em uso, com as ações que fazem sentido agora.

A Esfera de Controle: um globo de vidro com o ponto de luz no centro, um anel de status e seis ações rápidas em órbita. Concluir está aceso sob o cursor, o app aparece acima e as pessoas recentes abaixo.

  1. 01 · Chamar

    Mostre a mão aberta.

    Depois de 400 ms parada, a esfera se abre onde está a sua mão. Dizer “Sigil” também funciona.

  2. 02 · Oferecer

    Seis ações, escolhidas pelo app.

    No Mensagens: Responder, Ler em voz alta e Concluir. As pessoas recentes ficam abaixo da órbita, só com as iniciais.

  3. 03 · Escolher

    Aponte. Faça a pinça. Pronto.

    O cursor se encaixa na ação. Quem já tem prática desliza até ela sem olhar.

Chamar
Mantenha a mão aberta e parada por 400 ms, diga “Sigil” ou faça um toque longo na borda da tela.
Escolher
Aponte e faça a pinça, ou faça a pinça no centro e deslize até a ação sem olhar. Também dá para dizer o nome dela ou tocar.
Fechar
Feche a mão, deslize dois dedos para baixo ou diga “Sigil, fechar”. Sem mão e sem voz por 8 segundos, ela fecha sozinha.

A marca em movimento

Respirando: uma respiração lenta a cada 5,2 segundos.

Os arcos se abrem 8 graus e pulsam com a sua voz. Por 8 segundos, os pedidos seguintes dispensam a palavra de ativação.

Os arcos giram em volta do ponto, uma volta a cada 1,6 segundo. Depois de 1,2 segundo, a legenda diz “Resolvendo.”

O ponto brilha uma vez e se acomoda em 320 ms.

Com movimento reduzido, a marca fica parada e o rótulo indica o estado.

04Perfis por app

Cada app fala a sua língua.

O Sigil sabe qual app está aberto e carrega o perfil dele. No Instagram, um deslize rápido leva ao próximo Reel; no YouTube, dois dedos pulam para o próximo vídeo. Apps sem perfil usam o perfil geral.

Três cartões de vidro, Leitor, Música e Câmera, cada um ligando gestos a ações naquele app. O perfil Música está ativo e aceso à frente.
FIG. 04O perfil muda junto com o app aberto.

Pacote Androidcom.whatsapp, com.whatsapp.w4b

WhatsApp: gestos e as suas ações
GestoAção
Deslize rápido para a direitaDesliza para a direita a partir do cursor, para responder àquela mensagem
Dois dedos para a esquerdaDesliza a tela para a esquerda
Dois dedos para a direitaDesliza a tela para a direita

O resto vem do perfil geral. Os planos de voz usam o campo de busca, a caixa de mensagem e o botão de enviar do WhatsApp, e continuam parando antes do envio.

src/app-profiles/profiles/youtube.json
{
  "id": "youtube",
  "packages": ["com.google.android.youtube"],
  "bindings": {
    "flick_up": { "type": "swipe", "direction": "up" },
    "swipe_two_left": {
      "type": "media", "action": "next"
    },
    "pinch_hold": {
      "type": "media", "action": "play_pause"
    }
  }
}

Um arquivo JSON por app, validado por um schema na inicialização. Nenhum gesto envia, publica ou paga sozinho.

05Da voz à ação

Diga uma vez. Veja cada passo.

Feche a mão ou diga “Sigil” e peça. O pedido vira um plano curto de passos visíveis, e o plano para antes de qualquer coisa sair do seu celular.

À esquerda, a Esfera de Controle ouve. A voz sai dela como uma onda que vira uma linha de luz passando por quatro nós de vidro: abrir Mensagens, encontrar Ana, escrever o recado, enviar.

  1. 01 · Pedir

    Diga uma vez.

    “Avise a Ana que vou chegar dez minutos atrasado.” A fala vira texto no próprio celular.

  2. 02 · Planejar

    Veja cada passo.

    O pedido vira uma corrente de passos. Cada nó só acende quando o seu passo termina de verdade.

  3. 03 · Confirmar

    Nada é enviado sem o seu sim.

    Antes de enviar, a corrente para e pergunta. A pinça, um toque ou “sim” seguem em frente, e 8 segundos de silêncio cancelam.

Experimente a corrente

Simulação

“Sigil, manda para a Ana no WhatsApp que estou a caminho.”

    {$store.chain.steps.map((step, i) => (
  1. {step.num} {step.label}
    2. ))}

Pronto. Nada roda até você pedir.

Uma simulação no seu navegador. No celular, o mesmo plano roda dentro do WhatsApp, um passo visível de cada vez.

06No aparelho

Visto pelo seu celular. Guardado nele.

Rastreamento da mão, reconhecimento de fala e modelo de linguagem rodam no celular. Sem conta, sem servidor, sem gravação.

Um celular guarda uma esfera neural luminosa. Quadros da câmera pela esquerda e uma onda de voz pela direita entram e ficam ali dentro. A nuvem fica do lado de fora, marcada como desnecessária.
FIG. 06Os quadros da câmera e a voz entram e ficam. A nuvem não é necessária.

  • Os quadros ficam na memória

    Os quadros da câmera são processados e descartados. Só 42 números por quadro, os pontos da sua mão, chegam à interface.

  • A palavra de ativação fica no celular

    O detector da palavra roda no aparelho e descarta o tempo todo o áudio que vem antes dela.

  • Sem conta, sem métricas

    Nada da sua tela é enviado, registrado ou contado. Os dados de ajuste ficam no celular.

  • A câmera nunca se esconde

    Um aviso de rastreamento fica na tela enquanto a câmera está ligada. Um toque ou as palavras “desligar câmera” param tudo.

Um modelo do tamanho do seu celular.

O Sigil escolhe o maior nível que cabe em 35 por cento da memória do celular. Os modelos só são baixados com a sua permissão, pelo Wi-Fi por padrão, e são verificados antes do uso.

8 GB

O Sigil reserva para si 2,8 GB

Níveis de modelo por memória do celular
NívelO que rodaDownloadMemória máxima
Só regrasA partir de 3 GBRastreamento da mão, o reconhecedor de fala do sistema e um interpretador de regras para inglês e portuguêscerca de 8 MBcerca de 60 MB
LeveA partir de 6 GBRastreamento da mão, Whisper base e Qwen2.5 1.5Bcerca de 1,07 GBcerca de 1,4 GB
CompletoA partir de 8 GBCabe neste celularRastreamento da mão, Whisper small e Qwen2.5 3Bcerca de 2,15 GBcerca de 2,6 GB

07Plataformas

Honesto sobre cada plataforma.

Controlar outros apps só é possível no Android. No iPhone, o Sigil funciona dentro das próprias telas e pelos Atalhos, e deixa isso claro.

Android

Controle total.

Por um serviço de Acessibilidade que você mesmo ativa, o Sigil toca, desliza, rola, digita e volta, vai ao início ou aos apps recentes em qualquer app. O cursor aparece sobre todos os apps, e a câmera continua ligada com uma notificação visível que você pode parar.

  • Declarado como ferramenta de acessibilidade para controle sem as mãos
  • Ativado por você, em Configurações, Acessibilidade
  • Age só onde você aponta e só quando você pede

iOS

Dentro do Sigil e pelos Atalhos.

O iOS não deixa um app ler, tocar ou desenhar sobre outros apps, nem usar a câmera em segundo plano. No iPhone, o Sigil acompanha a sua mão dentro das próprias telas, abre apps e buscas por links, executa os seus Atalhos e oferece as suas ações como App Intents para o app Atalhos e o botão de Ação.

  • Gestos, cursor e esfera dentro do Sigil
  • Planos de voz por links e Atalhos
  • Passos que o iOS não permite aparecem como falha, nunca como falso sucesso
O que cada plataforma permite
RecursoAndroidiOS
Cursor e Esfera de ControleSobre todos os appsDentro do Sigil
Gestos em outros appsSim, pela AcessibilidadeNão
Planos de vozPasso a passo, em qualquer appPor links e Atalhos
Câmera com outros apps abertosSim, com uma notificação visívelNão
Modelos no celularSimSim

08Acompanhe o projeto

Construído em aberto.

A prévia para Android já segue sua mão, toca, ouve e entende tudo no celular. Agora ajustamos o rastreamento em mais aparelhos e preparamos as lojas.

  1. M1 · Pronto

    Esqueleto

    Motor de gestos com testes, perfis por app, planejador, política de confirmação, executor de planos e o módulo de controle do Android.

  2. M2 · Pronto

    Mãos ao vivo

    Rastreamento da mão com MediaPipe na câmera, calibrado para cada pessoa.

  3. M3 · Pronto

    Android de ponta a ponta

    Gestos e planos agindo no WhatsApp, YouTube, TikTok e Chrome em celulares de verdade.

  4. M4 · Pronto

    Linguagem no aparelho

    Fala e um modelo com chamada de ferramentas no celular, dimensionados pela memória.

  5. M5 · A seguir

    Lojas

    App Intents e Atalhos no iOS, e a revisão de acessibilidade no Google Play.