Componente Solr Dataproc facoltativo

Puoi installare componenti aggiuntivi come Solr quando crei un cluster Dataproc utilizzando la funzionalità Componenti facoltativi. In questa pagina viene descritto il componente Solr.

Il componente Apache Solr è una piattaforma di ricerca aziendale open source. Il server Solr e l'UI web sono disponibili sulla porta 8983 nei nodi master del cluster.

File permanenti come permanente:per impostazione predefinita, Solr scrive e legge i file di log dell'indice e delle transazioni in HDFS. Per salvare i file di Solr, utilizza un percorso Cloud Storage come directory home di Solr impostando la dataproc:solr.gcs.path proprietà cluster quando installi il componente.

Installa il componente

Installa il componente quando crei un cluster Dataproc. I componenti possono essere aggiunti ai cluster creati con Dataproc versione 1.3 e successive.

Consulta la pagina relativa alle versioni di Dataproc supportate per la versione del componente inclusa in ogni release dell'immagine Dataproc.

Comando gcloud

Per creare un cluster Dataproc che include il componente Solr, utilizza il comando gcloud dataproc clusters create cluster-name con il flag --optional-components. Il comando di esempio di seguito utilizza il flag facoltativo properties per impostare un percorso di Cloud Storage come directory home del Solr.

Quando crei il cluster, usa il comando gcloud dataproc clusters create con il flag --enable-component-gateway, come mostrato di seguito, per abilitare la connessione alla UI web di Solr utilizzando il gateway dei componenti.

gcloud dataproc clusters create cluster-name \
    --region=region \
    --optional-components=SOLR \
    --enable-component-gateway \
    ... other flags

Aggiungi la --properties="dataproc:solr.gcs.path=gs://bucket-name/" proprietà cluster al comando gcloud dataproc clusters create per impostare un bucket Cloud Storage in cui verranno archiviati i documenti Solr (home directory Solr).

API REST

Il componente Solr può essere specificato tramite l'API Dataproc utilizzando SoftwareConfig.Component come parte di una richiesta clusters.create.

Nell'ambito della tua richiesta clusters.create, puoi:

1. Imposta la proprietà EndpointConfig.enableHttpPortAccess su true per abilitare la connessione all'interfaccia utente web di Solr utilizzando Component Gateway.
2. Imposta la "dataproc:solr.gcs.path=gs://bucket-name" proprietà cluster nel campo SoftwareConfig.Component.properties per impostare un bucket Cloud Storage in cui verranno archiviati i documenti del Solr (home directory Solr).

Console

1. Attiva il componente e il gateway del componente.
   • Nella console Google Cloud, apri la pagina Crea un cluster di Dataproc. Viene selezionato il riquadro Configura cluster.
   • Nella sezione Componenti:
     • In Componenti facoltativi, seleziona Solr e altri componenti facoltativi da installare sul tuo cluster.
     • In Gateway gateway dei componenti, seleziona Abilita gateway dei componenti (vedi Visualizzazione e accesso agli URL dei componenti).