Metriche per la ricerca Dalle metriche agli approfondimenti utilizzabili Visualizzazione e segnalazione delle analisi di ricerca

Ottenere informazioni dettagliate con l'analisi delle ricerche

Puoi utilizzare Amazon Kendra Search Analytics per ottenere informazioni dettagliate su come l'applicazione di ricerca aiuta con successo o meno gli utenti a trovare informazioni.

Amazon Kendra L'analisi fornisce un'istantanea del modo in cui gli utenti interagiscono con l'applicazione di ricerca e dell'efficacia della configurazione dell'applicazione di ricerca. Puoi visualizzare i dati delle metriche utilizzando l'GetSnapshotsAPI o selezionando Analytics nel pannello di navigazione della console.

Puoi eseguire il rendering dei dati generati da GetSnapshots sulla tua dashboard personalizzata. Oppure puoi utilizzare la dashboard delle metriche fornita nella console, che include grafici visivi. Con una dashboard visiva, puoi cercare tendenze o modelli nel comportamento degli utenti nel tempo o far emergere problemi con la configurazione dell'applicazione di ricerca. Ad esempio, un grafico a linee che mostra un numero costante di query al giorno e un aumento costante potrebbe indicare un aumento dell'adozione e dell'utilizzo. D'altra parte, un calo improvviso potrebbe indicare che c'è un problema che deve essere esaminato.

Puoi utilizzare le metriche per stabilire connessioni tra diversi punti di dati per risolvere problemi relativi al modo in cui gli utenti richiedono informazioni o scoprono opportunità di business. Ad esempio, il documento «How does AI work?» è il documento più cliccato nei risultati di ricerca e la query più cercata è «Come funziona l'apprendimento automatico?». Questo ti informa sui termini e sulla lingua preferiti utilizzati dai tuoi utenti. Puoi integrare questi termini nei tuoi documenti o utilizzare sinonimi personalizzati per questi termini per rendere i documenti più ricercabili per gli utenti.

Metriche per la ricerca

Sono disponibili 10 metriche per analizzare le prestazioni dell'applicazione di ricerca o le informazioni che gli utenti stanno cercando. Per recuperare i dati delle metriche, specificate il nome della stringa dei dati metrici che desiderate recuperare quando chiamate. GetSnapshots

È inoltre necessario fornire un intervallo di tempo o una finestra temporale per visualizzare i dati delle metriche. L'intervallo di tempo utilizza il fuso orario dell'indice. È possibile visualizzare i dati nelle seguenti finestre temporali:

THIS_WEEK: La settimana corrente, che inizia la domenica e termina il giorno precedente alla data corrente.
ONE_WEEK_AGO: La settimana precedente, che inizia la domenica e termina il sabato successivo.
TWO_WEEKS_AGO: La settimana precedente, con inizio la domenica e termine il sabato successivo.
THIS_MONTH: Il mese corrente, che inizia il primo giorno del mese e termina il giorno precedente la data corrente.
ONE_MONTH_AGO: Il mese precedente, che inizia il primo giorno del mese e termina l'ultimo giorno del mese.
TWO_MONTHS_AGO: Il mese precedente al mese precedente, che inizia il primo giorno del mese e termina l'ultimo giorno del mese.

Nella console, le finestre orarie supportate sono Questa settimana, Settimana precedente, Questo mese, Mese precedente.

Percentuale di clic

La percentuale di interrogazioni che portano a fare clic su un documento nei risultati di ricerca. Ciò consente di capire se la configurazione dell'applicazione di ricerca aiuta gli utenti a trovare informazioni pertinenti alle loro ricerche. Per le query che restituiscono risposte immediate, gli utenti potrebbero non aver bisogno di fare clic su un documento per ulteriori informazioni. Per ulteriori informazioni, consulta Percentuale di risposta istantanea. È necessario chiamare SubmitFeedbackper assicurarsi che venga raccolto il feedback tramite clic.

Per recuperare i dati sulla percentuale di clic utilizzando l'API, specifica as. GetSnapshots metricType AGG_QUERY_DOC_METRICS Puoi anche visualizzare questa metrica nella console selezionando Analytics nel pannello di navigazione.

Frequenza di clic pari a zero

La percentuale di query che portano a zero clic nei risultati della ricerca. Questo ti aiuta a comprendere le lacune nei tuoi contenuti che forniscono risultati di ricerca non pertinenti. Per le query che restituiscono risposte immediate, gli utenti potrebbero non aver bisogno di fare clic su un documento per ulteriori informazioni. Per ulteriori informazioni, consulta Percentuale di risposta istantanea. Inoltre, le impostazioni di ricerca, come l'ottimizzazione delle configurazioni, potrebbero avere un impatto sul modo in cui i documenti vengono restituiti nei risultati della ricerca.

Per recuperare dati con una percentuale di clic pari a zero utilizzando l'GetSnapshotsAPI, specifica as. metricType AGG_QUERY_DOC_METRICS Puoi anche visualizzare questa metrica nella console selezionando Analytics nel pannello di navigazione.

Tasso di risultati di ricerca pari a zero

La percentuale di query che portano a zero risultati di ricerca. Questo ti aiuta a comprendere le lacune nei tuoi contenuti senza fornire risultati di ricerca pertinenti.

Per recuperare i dati sulla percentuale di risultati di ricerca pari a zero utilizzando l'GetSnapshotsAPI, specifica as. metricType AGG_QUERY_DOC_METRICS Puoi anche visualizzare questa metrica nella console selezionando Analytics nel pannello di navigazione.

Percentuale di risposta istantanea

La percentuale di domande con risposta immediata o domande frequenti restituite. Questo ti aiuta a comprendere il ruolo delle risposte istantanee nella fornitura di informazioni.

Per recuperare i dati sulla percentuale di risposta istantanea utilizzando l'GetSnapshotsAPI, specifica metricType asAGG_QUERY_DOC_METRICS. Puoi anche visualizzare questa metrica nella console selezionando Analytics nel pannello di navigazione.

Le domande più frequenti

Le 100 principali query ricercate dai tuoi utenti. Questo ti aiuta a capire quali sono le query più popolari e il tipo di informazioni a cui i tuoi utenti sono maggiormente interessati.

Le metriche includono il numero di volte in cui viene effettuata la ricerca nella query, la percentuale di clic su un documento, la percentuale di clic non effettuati su un documento, la profondità media di clic nei risultati di ricerca per la query, la percentuale di risposte istantanee alla query e l'affidabilità media dei primi 10 risultati di ricerca per una query.

Per recuperare i dati sulle query principali utilizzando l'API, specifica as. GetSnapshots metricType QUERIES_BY_COUNT Puoi anche visualizzare questa metrica nella console selezionando Analytics nel pannello di navigazione della console, quindi selezionando Prime query in Elenchi di query.

Le principali query con zero clic

Le 100 principali query che hanno portato a zero clic nei risultati di ricerca. Questo ti aiuta a comprendere eventuali lacune nei tuoi contenuti, dovute alla mancanza di documenti pertinenti ad alcune query o alla configurazione dell'applicazione di ricerca che restituisce risultati di ricerca irrilevanti. Per le query che restituiscono risposte immediate, potrebbe non essere necessario che gli utenti facciano clic su un documento per ottenere ulteriori informazioni. Per ulteriori informazioni, consulta Percentuale di risposta istantanea.

Le metriche includono il numero di volte in cui la query porta a zero clic, la percentuale di zero clic per la query, la percentuale di risposte istantanee per la query e l'affidabilità media dei primi 10 risultati di ricerca per una query.

Per recuperare i dati sulle query principali con zero clic utilizzando l'GetSnapshotsAPI, specifica as. metricType QUERIES_BY_ZERO_CLICK_RATE Puoi anche visualizzare questa metrica nella console selezionando Analytics nel pannello di navigazione della console, quindi selezionando Prime query a zero clic in Elenchi di query.

Query principali con zero risultati di ricerca

Le 100 principali query che hanno portato a zero risultati di ricerca. Questo ti aiuta a comprendere eventuali lacune nei tuoi contenuti, laddove non ci sono documenti pertinenti per alcune domande. In alternativa, i tuoi utenti potrebbero utilizzare termini specializzati che potrebbero non portare a risultati di ricerca, richiedendoti di creare sinonimi personalizzati per gestire questa situazione.

Le metriche includono il numero di volte in cui la query porta a zero risultati di ricerca, la percentuale di zero risultati di ricerca per la query e la proporzione di volte in cui la query viene cercata rispetto a tutte le query.

Per recuperare i dati sulle query principali con zero risultati di ricerca utilizzando l'GetSnapshotsAPI, specifica as. metricType QUERIES_BY_ZERO_RESULT_RATE Puoi anche visualizzare questa metrica nella console selezionando Analytics nel pannello di navigazione della console, quindi selezionando Query con i primi zero risultati in Elenchi di query.

I documenti sono stati cliccati in alto

I primi 100 documenti più cliccati nei risultati di ricerca. Questo ti aiuta a capire quali documenti o risultati di ricerca sono più pertinenti per i tuoi utenti quando richiedono informazioni.

Le metriche includono il numero di volte in cui si fa clic sul documento, il numero di Mi piace che un documento riceve dagli utenti (pollice rivolto verso l'alto), il numero di «Mi piace» che un documento riceve dagli utenti (pollice rivolto verso il basso).

Per recuperare i dati sui documenti più cliccati utilizzando l'API, specifica as. GetSnapshots metricType DOCS_BY_CLICK_COUNT Puoi anche visualizzare questa metrica nella console selezionando Analytics nel pannello di navigazione della console, quindi selezionando Documenti più cliccati in Elenchi Query.

Interrogazioni totali

Il numero totale di query ricercate dai tuoi utenti. Questo ti aiuta a capire il livello di coinvolgimento degli utenti con la tua applicazione di ricerca.

Per recuperare i dati sul totale delle query utilizzando l'GetSnapshotsAPI, specifica as. metricType AGG_QUERY_DOC_METRICS Puoi anche visualizzare questa metrica nella console selezionando Analytics nel pannello di navigazione.

Documenti totali

Il numero totale di documenti presenti nell'indice. Ciò consente di confrontare la dimensione dell'indice con il numero totale di query per verificare se esiste un numero di documenti appropriato per il volume di query.

Per recuperare i dati sul totale dei documenti utilizzando l'GetSnapshotsAPI, specifica as. metricType AGG_QUERY_DOC_METRICS Puoi anche visualizzare questa metrica nella console selezionando Analytics nel pannello di navigazione.

Esempio di recupero dei dati metrici

Il codice seguente è un esempio di recupero dei dati sulle principali query del mese precedente.

Console

Per recuperare le query principali del mese precedente

Nel riquadro di navigazione a sinistra, in Indici, seleziona l'indice, quindi seleziona Analytics.
Nella pagina Analytics, seleziona il pulsante Questa settimana per modificare la finestra temporale per il recupero dei dati impostandola su Mese precedente.
Nella pagina Analytics, in Elenchi di query, seleziona Query principali.

CLI

Per recuperare le query principali del mese precedente


aws kendra get-snapshots \
--index-id index-id \
--interval "ONE_MONTH_AGO" \
--metric-type "QUERIES_BY_COUNT"

Python

Per recuperare le query principali del mese precedente


import boto3

kendra = boto3.client("kendra")

index_id = "index-id"
interval = "ONE_MONTH_AGO"
metric_type = "QUERIES_BY_COUNT"

snapshots_response = kendra.get_snapshots(
    IndexId = index_id,
    Interval = interval,
    MetricType = metric_type
)

print("Top queries data: " + snapshots_response["snapshotsData"])

Java

Per recuperare le query principali del mese precedente


package com.amazonaws.kendra;

import software.amazon.awssdk.services.kendra.KendraClient;
import software.amazon.awssdk.services.kendra.model.GetSnapshotsRequest;
import software.amazon.awssdk.services.kendra.model.GetSnapshotsResponse;

public class TopQueriesExample {
    public static void main(String[] args) {
        KendraClient kendra = KendraClient.builder().build();

        String indexId = "indexID";
        String interval = "ONE_MONTH_AGO";
        String metricType = "QUERIES_BY_COUNT";

        GetSnapshotsRequest getSnapshotsRequest = GetSnapshotsRequest
            .builder()
            .indexId(indexId)
            .interval(interval)
            .metricType(metricType)
            .build();

        GetSnapshotsResponse getSnapshotsResponse = kendra.getSnapshots(GetSnapshotsRequest);

        System.out.println(String.format("Top queries data: ", getSnapshotsResponse.snapshotsData()))

Dalle metriche agli approfondimenti utilizzabili

Le informazioni fruibili sono informazioni significative estratte da dati grezzi e vengono utilizzate per guidare le azioni o le decisioni. Per estrarre significato dalle metriche e utilizzarle per ottenere informazioni fruibili, è importante non solo esaminare le metriche in modo isolato, ma anche stabilire connessioni tra le metriche.

Ad esempio, la query principale con zero clic è «Quali aree sono attualmente disponibili?». Tuttavia, ha anche un tasso di risposta istantanea del 100%. Ciò suggerisce che gli utenti ricevano la risposta a questa domanda senza dover fare clic su un risultato di ricerca o su un documento che fornisce informazioni sulle aree disponibili. Se si considerasse solo l'utilizzo di zero clic, non si capirebbe la storia completa e si potrebbero trarre conclusioni errate sul successo della configurazione dell'applicazione di ricerca nella gestione di questa query.

Un altro esempio di intuizione utilizzabile è la scoperta di un'opportunità di business. Le aziende spesso cercano opportunità per far crescere i propri clienti analizzando le metriche di ricerca. Il documento più cliccato è «Regioni disponibili». Inoltre, la maggior parte delle domande più ricercate riguarda domande sulla disponibilità dei prodotti nella regione dell'Oceania, con percentuali di risposta istantanea del 100% e un'elevata percentuale di clic per ulteriori informazioni sulle regioni disponibili come parte della risposta. Ciò indica che c'è interesse e domanda per il tuo prodotto o servizio in questa regione.

Visualizzazione e segnalazione delle analisi di ricerca

Esistono cinque metriche che includono dati sulle tendenze che puoi visualizzare e cercare tendenze o modelli nel tempo. Se utilizzi la console, vengono forniti grafici dei dati sulle tendenze. Se utilizzi le API, puoi recuperare i dati sulle tendenze per creare grafici o visualizzazioni personalizzati. La maggior parte dei grafici nella console riporta i punti dati giornalieri nella finestra temporale prescelta.

La console fornisce una dashboard delle metriche in cui puoi selezionare un grafico e un elenco principale che desideri visualizzare. Puoi esportare le metriche mostrate nella dashboard in formato CSV selezionando Esporta nella home page di Analytics. Puoi includere questi report nei tuoi documenti o presentazioni aziendali.

Puoi visualizzare le seguenti metriche:

Grafico delle interrogazioni totali

Un grafico a linee del numero di interrogazioni emesse ogni giorno. Il grafico ti aiuta a visualizzare i modelli di coinvolgimento quotidiano degli utenti. Alcuni esempi includono un aumento o una diminuzione costante del coinvolgimento degli utenti o un drastico calo a 0 domande a causa di un arresto anomalo dell'applicazione di ricerca o di problemi con il sito web.