A tecnologia Apple por trás das suas notas de reunião com IA

O Quiet Scribe é construído só com frameworks da Apple: o Speech transcreve, os Foundation Models no aparelho escrevem a ata e o Translation traduz. Não há SDKs de terceiros nem servidores do Quiet Scribe, então as suas reuniões são processadas pelo seu próprio iPhone, iPad ou Mac.

O que isso significa para você

As escolhas técnicas se traduzem em alguns fatos simples.

Seu aparelho faz o trabalho

A transcrição e a ata são produzidas pelo chip do seu iPhone, iPad ou Mac. O seu áudio não é enviado a um serviço de transcrição.

Sem fila de upload

Não há arquivo para enviar nem fila em servidor. A transcrição leva cerca de metade da duração da reunião, e reuniões longas podem levar alguns minutos a mais para serem resumidas.

Tradução sem serviço na nuvem

As traduções são feitas no seu aparelho pelo framework Translation da Apple. Na primeira vez que você usa um idioma, o sistema pede para baixá-lo.

Do relógio direto para o iPhone

As gravações do Apple Watch vão diretamente para o iPhone emparelhado. Nenhum servidor intermediário participa.

Private Cloud Compute opcional, desativado por padrão

No iOS e no macOS 27 ou posterior, onde estiver disponível, um ajuste opcional permite que reuniões longas usem o Private Cloud Compute da Apple. Só o texto é enviado, nunca áudio nem fotos, a Apple não o armazena, e cada reunião mostra onde foi processada.

Como as peças se combinam

Do toque em gravar até a ata pronta:

  1. Gravar

    O AVAudioEngine grava o microfone; no Mac, os taps do Core Audio adicionam o áudio da chamada; no Apple Watch, o WatchConnectivity entrega a gravação ao iPhone.

  2. Transcrever

    O SpeechAnalyzer produz a transcrição no aparelho, e a separação de falantes identifica quem falou e quando.

  3. Entender

    Os Foundation Models transformam a transcrição, os seus marcadores, o contexto da reunião e o texto de fotos e documentos em ata, tarefas, decisões e insights.

  4. Agir

    EventKit, App Intents, Translation e o menu de compartilhamento levam os resultados para o Calendário, os Lembretes, a Siri, outros idiomas, PDF e e-mail.

Para desenvolvedores: os frameworks e como se encaixam

O Quiet Scribe é um app em Swift para iOS, iPadOS, macOS e watchOS sem nenhuma dependência externa. Estas são as tecnologias da Apple que ele combina.

Speech (SpeechAnalyzer e SpeechTranscriber)

Transcrição no aparelho. Os modelos de idioma são baixados pelo inventário de recursos do sistema, e o idioma falado pode ser detectado entre inglês e espanhol antes da transcrição.

Foundation Models

O modelo de linguagem da Apple, no próprio aparelho, escreve o resumo, a ata, as tarefas, as decisões e os insights com geração guiada. Reuniões longas são divididas em partes e depois combinadas, e o Ask responde a perguntas com base na transcrição.

Private Cloud Compute

Uma rota opcional para reuniões longas no iOS e no macOS 27 ou posterior, desativada por padrão, limitada a texto e usada só onde estiver disponível. Se não estiver disponível, o processamento volta para o aparelho. No Apple Watch com watchOS 27 ou posterior, o Ask pode usá-lo quando o iPhone não está por perto, com aviso antes e depois.

Separação de falantes com Accelerate

Os falantes são separados no aparelho extraindo características acústicas do áudio e agrupando-as com o Accelerate. No Mac, as faixas do microfone e do áudio do sistema também distinguem a sua voz da chamada.

Translation

O framework Translation da Apple traduz cada entregável e a transcrição em memória, no aparelho; as traduções não são salvas nem sincronizadas.

Vision

O texto de fotos de quadros, slides e documentos é reconhecido no aparelho e usado como referência para a ata.

App Intents, Siri e Atalhos

No iPhone, os App Shortcuts expõem a gravação, os marcadores, o Ask, a abertura de uma reunião e o compartilhamento de tarefas à Siri e ao app Atalhos. No Apple Watch, os intents iniciam, param e marcam uma gravação, inclusive pelo botão de Ação do Apple Watch Ultra.

ActivityKit e WidgetKit

Uma Atividade ao Vivo mostra a gravação na Tela Bloqueada e na Dynamic Island; widgets e complicações do relógio mostram a próxima reunião e um botão Gravar.

Core Audio process taps

No Mac, o áudio do sistema é captado com Core Audio process taps e o microfone com AVAudioEngine, em faixas separadas, sem gravação de tela e sem drivers virtuais.

WatchConnectivity

As gravações feitas no Apple Watch são transferidas como arquivos para o iPhone emparelhado, que devolve ao relógio um resumo compacto das reuniões recentes.

SwiftData e CloudKit

As reuniões são armazenadas com SwiftData e sincronizadas pelo banco de dados privado do CloudKit do usuário. Os arquivos de áudio ficam fora da sincronização.

EventKit

Lê os próximos eventos para vincular gravações a reuniões e cria eventos e lembretes somente quando o usuário pede.

Liquid Glass

A interface do iPhone e do iPad usa Liquid Glass nos controles de gravação, nos marcadores ao vivo e nas telas de reunião.

Icon Composer

O ícone do app é um arquivo em camadas do Icon Composer, com efeitos de vidro e variantes padrão, escura e colorida.

Evaluations

Uma suíte de testes interna, criada com o framework Evaluations do Xcode, executa os fluxos reais da ata e do Ask com o modelo no aparelho e os pontua com limites mínimos. É uma ferramenta de qualidade; o usuário nunca a vê.

O que não prometemos

Transcrições automáticas e atas geradas por IA podem conter erros, especialmente com falas sobrepostas, ruído ou nomes incomuns. Revise as atas importantes antes de compartilhá-las. Não publicamos porcentagens de precisão nem benchmarks que não medimos.