Saltare al contenuto principale
Indietro ai plugin
@capgo/capacitor-llm
Istruzioni
@capgo/capacitor-llm

LLM

Esegui modelli di linguaggio di grandi dimensioni localmente sul dispositivo con supporto per l'intelligenza Apple e MLX

Guida

Tutoriale su LLM

Testare sul dispositivo

Scarica l'app Capgo, poi scansa il codice QR code.

Collegamento QR di anteprima del plugin LLM code

Utilizza @capgo/capacitor-llm

Interfaccia del plugin LLM per l'interazione con i modelli linguistici di dispositivo.

Installa

bun add @capgo/capacitor-llm
bunx cap sync

Cos'è che questo plugin espone

  • createChat - Crea una nuova sessione di chat.
  • sendMessage - Invia un messaggio all'AI in una sessione di chat specifica.
  • getReadiness - Ottiene lo stato di disponibilità del LLM.
  • setModel - Imposta la configurazione del modello - iOS: utilizza "Intelligenza Apple" come percorso per il modello di sistema, o fornisce il percorso al modello MediaPipe - Android: percorso a un file del modello MediaPipe (in directory di asset o file).

Esempio di utilizzo

createChat

Crea una nuova sessione di chat.

import { CapgoLLM } from '@capgo/capacitor-llm';

await CapgoLLM.createChat();

sendMessage

Spedisce un messaggio all'AI in una sessione di chat specifica.

import { CapgoLLM } from '@capgo/capacitor-llm';

await CapgoLLM.sendMessage({} as { chatId: string; message: string });

getReadiness

Ottiene lo stato di disponibilità dell'LLM.

import { CapgoLLM } from '@capgo/capacitor-llm';

await CapgoLLM.getReadiness();

setModel

Imposta la configurazione del modello - iOS: utilizza "Intelligenza Apple" come percorso per il modello di sistema, o fornisce il percorso al modello MediaPipe - Android: percorso a un file di modello MediaPipe (in directory di asset o file).

import { CapgoLLM } from '@capgo/capacitor-llm';

await CapgoLLM.setModel({} as ModelOptions);

Riferimento Completo

Continua a utilizzare @capgo/capacitor-llm

Se stai utilizzando Utilizza @capgo/capacitor-llm per pianificare il pannello di controllo e le operazioni di API, connettilo con @capgo/capacitor-llm per il dettaglio di implementazione in @capgo/capacitor-llm, Iniziare per il dettaglio di implementazione in Iniziare, API Panoramica per il dettaglio di implementazione in API Panoramica, Introduzione per il dettaglio di implementazione in Introduzione, e API Chiavi per il dettaglio di implementazione in API Chiavi.