Implantar o conector do Microsoft SharePoint local

É possível configurar o Google Cloud Search para retornar resultados do conteúdo local do SharePoint da sua organização, além do conteúdo do Google Workspace. Você usa o conector do SharePoint local para Google Cloud Search e o configura para acessar uma fonte de dados específica do SharePoint.

Considerações importantes

Configurações do SharePoint honradas

O conector do SharePoint local para Cloud Search sempre respeita a configuração Visibilidade da pesquisa no SharePoint, que não pode ser substituída. Para documentos de rascunho, as permissões na conta de usuário (usada pelo conector para acessar o SharePoint Online) controlam quais documentos de rascunho são indexados e retornados. Se a conta tiver apenas permissões "Leitura completa", o conector respeitará as configurações de "Visibilidade do item de rascunho" no SharePoint.

Também é possível configurar o conector para limitar os resultados com base no acesso da conta de usuário. É possível usar principais do Google e principais externos para definir ACLs. Para aplicar o corte de segurança ao conteúdo do SharePoint, sincronize as seguintes identidades externas com o Diretório do Google:

  • Usuários do Active Directory
  • Grupos do Active Directory
  • Grupos locais do SharePoint (com usuários e grupos do Active Directory como membros)

Para sincronizar usuários e grupos do AD, use o Google Cloud Directory Sync, ativando grupos mapeados por identidade. Para sincronizar os grupos locais do SharePoint, use o conector de identidade do SharePoint.

O conector também precisa realizar a pesquisa com o AD para buscar mais informações e sincronizar os principais. Por exemplo, a pesquisa com AD permite que o conector faça o seguinte:

  • Mapeie o SID de um grupo de domínio para o sAMAccountName correspondente.
  • Mapear um usuário sAMAccountName para o endereço de e-mail para associações a grupos locais do SharePoint.

Otimização da rede de pesquisa

Você pode melhorar a experiência dos usuários configurando o conector para que ele retorne resultados de pesquisa mais relevantes.

Para usar a API, defina valores para os parâmetros de geração HTML no arquivo de configuração do conector do SharePoint Online. Esses parâmetros permitem definir quais campos têm maior ou menor impacto nas correspondências.

Para configurar um esquema, siga as instruções em Criar e registrar um esquema. Ao configurar um esquema:

  • Para mapear os nomes dos tipos de conteúdo do SharePoint para as definições de objeto correspondentes, o conector normaliza os nomes de tipo de conteúdo excluindo caracteres não suportados. Para definições de objetos, a API Cloud Search aceita apenas caracteres A-Z, a-z e 0-9 como válidos. Por exemplo, o tipo de conteúdo "Anúncios" é mapeado para a definição de objeto "Anúncios". O tipo de conteúdo "Artigo de notícias" é mapeado para "NewsArticle" (sem espaço).

  • Quando o conector não consegue fazer a correspondência de uma definição de objeto com uma definição de objeto, o conector usa o tipo de objeto substituto (itemMetadata.objectType). Saiba mais sobre os parâmetros de configuração de metadados.

  • Para mapear nomes de propriedades do SharePoint para definições de propriedade, o conector normaliza os nomes de propriedades decodificando caracteres de codificação hexadecimal e removendo prefixos "ows_" e, em seguida, excluindo caracteres não suportados (todos os caracteres, exceto A-Z, a-z e 0-9, como caracteres válidos).

Gerenciamento de mensagens do Microsoft Outlook

Quando o conector encontra arquivos .msg do Microsoft Outlook enquanto indexa o conteúdo, ele substitui o tipo de mídia dos arquivos e os indexa como application/vnd.ms-outlook..

Configurações de vários locatários

Se o SharePoint for uma implantação multilocatária, em que vários sites de clientes estiverem hospedados no mesmo aplicativo da Web, você precisará configurar o modo de conjunto de sites no arquivo de configuração. Em implantações de vários locatários, você recebe permissões apenas para o conjunto de sites e não pode receber permissões de Leitura completa, conforme exigido pelo conector do SharePoint On-Prem.

Para ativar o modo de coleta de sites:

  • Conceder permissões de administrador de conjunto de sites à conta de usuário do conector.
  • Defina sharepoint.server no seu arquivo de configuração do conector para o URL do conjunto de sites, como http://sharepoint.example.com/sites/sitecollection. O URL não precisa usar exatamente o mesmo caso do SharePoint.
  • Defina sharepoint.siteCollectionOnly no arquivo de configuração do conector como true.

Se você tiver vários conjuntos de sites para indexar em um ambiente multilocatário, será necessário configurar uma instância de conector para cada um dos conjuntos de sites.

Limitações conhecidas do conector

  • O tempo que o conector leva para detectar alterações nos itens nos bancos de dados aumenta com o número de bancos de dados que ele monitora.
  • O consumo de memória aumenta com o número de usuários e grupos únicos usados nas ACLs para cada conjunto de sites.
  • É possível configurar o conector com identidades de apenas um domínio do Active Directory.
  • Alguns principais comuns do Active Directory e do Windows, como Everyone, BUILTIN\Users e All Authenticated Users, não são compatíveis.
  • As notificações de exclusão não são instantâneas. O conector pode levar mais de quatro horas para reconhecer que um usuário excluiu conteúdo do repositório de origem.

Requisitos do sistema

Requisitos do sistema
Sistema operacional
  • Windows Server 2016.
  • Ubuntu
  • Red Hat Enterprise Linux 5.0
  • SUSE Enterprise Linux 10 (64 bits)
Software
  • Servidor SharePoint
    • SharePoint Server 2016
    • SharePoint Server 2013
  • Java JRE 1.8 instalado no computador que executará o conector do SharePoint local para Google Cloud Search.
Autenticação
  • NTLM
  • Kerberos
  • HTTP básico
  • ADFS

Implantar o conector

Pré-requisitos

  1. Crie uma chave privada do Google Workspace que contenha o ID da sua conta de serviço. Para saber como conseguir uma chave privada, acesse Configurar o acesso à API Google Cloud Search.

  2. O administrador do Google Workspace precisa adicionar uma fonte de dados para pesquisar. Registre o ID da fonte de dados.

  3. Se o conector retornar resultados baseados em ACLs (os resultados não são públicos), o administrador do Google Workspace precisará criar duas origens de identidade e fornecer os IDs a você:

    • Uma origem de identidade para sincronizar usuários e grupos do Active Directory
    • Uma origem de identidade para grupos locais do SharePoint

    O administrador também precisa conseguir e fornecer o ID de cliente do Google Workspace da sua organização a você.

    Saiba como conseguir esses valores em Mapear identidades de usuários no Cloud Search.

  4. Configure uma conta de usuário para o conector que tenha permissões de Leitura completa no aplicativo da Web do SharePoint na política do usuário.

  5. Se o aplicativo da Web do SharePoint não tiver um conjunto de sites raiz, crie um.

  6. Se algum conjunto de sites estiver bloqueado para gravação, faça login no servidor do SharePoint com uma conta que tenha privilégios de administrador e execute o script PrepareWriteLockedSites.ps1.

  7. Para acessar as métricas da fonte de dados e informar a configuração do conector, faça login no servidor do SharePoint com uma conta que tenha privilégios de administração do farm e execute diagnose_sp.ps1.

    A saída informa o número de aplicativos da Web, documentos e associações a grupos de usuários. Use essas informações para estimar o número de instâncias de conector necessárias, os requisitos de memória e o número de documentos.

Etapa 1. Instale o software do conector do SharePoint local para Google Cloud Search

  1. Clone o repositório do conector que está no GitHub.

    $ git clone https://github.com/google-cloudsearch/sharepoint-connector.git
$ cd sharepoint-connector

  2. Confira se é a versão desejada do conector:

    $ git checkout tags/latest_version

    Em que: latest_version = um valor como v1-0.0.5

  3. Crie o conector.

    $ mvn package

    Para pular testes ao criar o conector, execute mvn package -DskipTests em vez de mvn package.

  4. Copie o arquivo ZIP do conector para o diretório de instalação local:

    $ cp target/google-cloudsearch-sharepoint-connector-latest_version.zip installation-dir
$ cd installation-dir
$ unzip google-cloudsearch-sharepoint-connector-latest_version.zip
$ cd google-cloudsearch-sharepoint-connector-latest_version

Etapa 2: Criar o arquivo de configuração do conector do SharePoint local

  1. No mesmo diretório da instalação do conector, crie um arquivo. O Google recomenda que você nomeie o arquivo connector-config.properties para que nenhum outro parâmetro de linha de comando seja necessário para executar o conector. Se você planeja executar muitas instâncias de conector, adicione detalhes ao nome para distingui-lo.

  2. Adicione parâmetros como pares de chave-valor ao conteúdo do arquivo, como no exemplo a seguir:

    ### Sharepoint On-Prem Connector configuration ###

# Required parameters for data source access
api.sourceId=08ef8becd116faa4546b8ca2c84b2879
api.serviceAccountPrivateKeyFile=service_account.json
api.identitySourceId=08ef8becd116faa475de26d9b291fed9

# Required parameters for SharePoint on-premises access
sharepoint.server=http://sp-2016:32967/sites/doc-center-site-collection
sharepoint.siteCollectionOnly=true
sharepoint.username=contoso\\admin
sharepoint.password=pa$sw0rd
sharepoint.stripDomainInUserPrincipals=true

# Required parameters for AD lookup
adLookup.host=dc.contoso.com
adLookup.username=contoso\\admin
adLookup.password=pa$sw0rd
api.referenceIdentitySources=CONTOSO,contoso
api.referenceIdentitySource.contoso.id=08ef8becd116faa5d3783f8c5a80e5aa
api.referenceIdentitySource.CONTOSO.id=08ef8becd116faa5d3783f8c5a80e5aa

# Optional parameters for schema mapping
contentTemplate.sharepointItem.title=Title
contentTemplate.sharepointItem.unmappedColumnsMode=APPEND

    Para descrições detalhadas de cada parâmetro, acesse a referência dos parâmetros de configuração.

  3. (Opcional) Configure outros parâmetros do conector, conforme necessário. Para mais detalhes, acesse Parâmetros do conector fornecidos pelo Google.

Etapa 3. Para HTTPS, adicione o SharePoint como um host confiável

Se o SharePoint estiver configurado para usar HTTPS, consiga um certificado do SharePoint para adicioná-lo como um host confiável do conector.

  1. No computador que executará o conector, abra um navegador e acesse o SharePoint.

  2. Na página de aviso aberta, clique em Entendo os riscos e Adicionar exceção. A página mostra a mensagem "Esta conexão não é confiável", porque o certificado é autoassinado e não está assinado por uma autoridade de certificação confiável.

  3. Quando o botão Ver estiver disponível, clique nele.

  4. Acesse a guia Detalhes e clique em Exportar.

  5. Salve o certificado no diretório do conector com o nome sharepoint.crt.

  6. Clique em Fechar e em Cancelar para fechar as janelas.

  7. Abra um prompt de comando e digite o seguinte:

    $ keytool -importcert -keystore cacerts.jks -storepass changeit -file sharepoint.crt -alias sharepoint

    Quando a mensagem "Confiar neste certificado?", responda sim.

Etapa 4. Configurar a geração de registros

  1. No diretório que contém o binário do conector, crie uma pasta chamada logs.

  2. No mesmo diretório (não em logs), crie um arquivo codificado em Latin1 chamado logging.properties.

  3. Adicione o texto abaixo a logging.properties:

    handlers = java.util.logging.ConsoleHandler,java.util.logging.FileHandler
# Default log level
.level = INFO
# uncomment line below to increase logging level for SharePoint APIsa
#com.google.enterprise.cloudsearch.sharepoint.level=FINE

# uncomment line below to increase logging level to enable API trace
#com.google.api.client.http.level = FINE
java.util.logging.ConsoleHandler.level = INFO
java.util.logging.FileHandler.pattern=logs/connector-sharepoint.%g.log
java.util.logging.FileHandler.limit=10485760
java.util.logging.FileHandler.count=10
java.util.logging.FileHandler.formatter=java.util.logging.SimpleFormatter

Etapa 5: Configurar o conector de identidade do SharePoint On-Prem

Esta etapa é necessária para aplicar ACLs baseadas em identidade do SharePoint local aos resultados de pesquisa. Se você configurar o conector com ACLs públicas, poderá pular esta etapa.

  1. No mesmo diretório da instalação do conector do SharePoint Online, crie um arquivo e o nomeie como sharepoint-onprem-identity-connector.config.

  2. Adicione parâmetros como pares de chave-valor ao conteúdo do arquivo, como no exemplo a seguir:

    ### SharePoint On-prem identity connector configuration ###

# Required parameters for data source access
api.customerId=C05d3djk8
api.serviceAccountPrivateKeyFile=service_account.json
api.identitySourceId=08ef8becd116faa475de26d9b291fed9

# Required parameters for SharePoint access
sharepoint.server=http://sp-2016:32967/sites/doc-center-site-collection
sharepoint.siteCollectionOnly=true
sharepoint.username=contoso\\admin
sharepoint.password=pa$sw0rd
sharepoint.stripDomainInUserPrincipals=true

# Required parameters for AD lookup
adLookup.host=dc.contoso.com
adLookup.username=contoso\\admin
adLookup.password=pa$sw0rd
api.referenceIdentitySources=CONTOSO,contoso
api.referenceIdentitySource.contoso.id=08ef8becd116faa5d3783f8c5a80e5aa
api.referenceIdentitySource.CONTOSO.id=08ef8becd116faa5d3783f8c5a80e5aa

    Os valores são quase iguais aos do conector do SharePoint On-Prem, exceto pelo fato de que, em vez de api.sourceId, o parâmetro é api.customerId. O valor de api.customerId é o ID de cliente que você recebeu do administrador do Google Workspace.

Etapa 6. Iniciar o conector do SharePoint On-Prem

Nas etapas a seguir, mapeie os principais no Active Directory local e no conjunto de sites do SharePoint para identidades no serviço do Cloud Identity. Essa sincronização é feita com o Google Cloud Directory Sync (GCDS) e o conector de identidade do SharePoint local.

Depois que o GCDS sincronizar usuários e grupos, execute o conector de identidade do SharePoint local para sincronizar os grupos de conjuntos de sites do SharePoint. Por fim, execute o conector do SharePoing no local para indexar e exibir resultados aos usuários do Cloud Search.

  1. Caso ainda não tenha feito isso, configure e execute o GCDS. Ative os grupos com identidades mapeadas.

  2. Execute o conector de identidade do SharePoint On-Prem:

    $ java -Djava.util.logging.config.file=logging.properties -cp "google-cloudsearch-sharepoint-connector-version.jar" com.google.enterprise.cloudsearch.sharepoint.SharePointIdentityConnector -Dconfig=sharepoint-onprem-identity-connector.config

  3. Execute o conector do SharePoint On-Prem. Use a sintaxe de comando para a segurança do seu site do SharePoint:

    • HTTP (não é necessário um host confiável):

      $ java -Djava.util.logging.config.file=logging.properties -jar google-cloudsearch-sharepoint-connector-v1-version.jar

    • HTTPS (adicione o SharePoint como o host confiável):

      $ java -Djavax.net.ssl.trustStore=cacerts.jks -Djavax.net.ssl.trustStoreType=jks -Djavax.net.ssl.trustStorePassword=changeit -Djava.util.logging.config.file=logging.properties -jar google-cloudsearch-sharepoint-connector-v1-version.jar

Referência dos parâmetros de configuração

Acesso à fonte de dados

Configuração Parâmetro
ID da origem de dados api.sourceId=1234567890abcdef

Obrigatório. O ID da fonte de dados do Google Cloud Search configurado pelo administrador do Google Workspace.
Caminho para o arquivo de chave privada da conta de serviço api.serviceAccountPrivateKeyFile=PrivateKey.json

Obrigatório. O caminho para o arquivo de chave da conta de serviço do Google Cloud Search.

Acesso do SharePoint local

Configuração Parâmetro
URL do servidor do SharePoint sharepoint.server=http://yoursharepoint.example.com/

Obrigatório. O URL do servidor do SharePoint como um nome de host totalmente qualificado, como http://yoursharepoint.example.com/. Se o nome do host não for totalmente qualificado, defina a substituição de DNS no host do conector.
Nome de usuário do SharePoint sharepoint.username=YOURDOMAIN\\ConnectorUser

Obrigatório quando você executa o conector no Linux ou em uma máquina Windows que não faz parte do domínio do AD do SharePoint Server.
Senha do SharePoint sharepoint.password=user_password

Obrigatório quando você executa o conector no Linux ou em uma máquina Windows que não faz parte do domínio do AD do SharePoint Server.
Usar a autenticação em tempo real para se conectar ao SharePoint sharepoint.username=AdaptorUser Live Authentication Id

sharepoint.password uS3R_passWoRD

sharepoint.formsAuthenticationMode=LIVE
Usar a autenticação do ADFS para se conectar ao SharePoint sharepoint.username=AdaptorUser@yourdomain.com

sharepoint.password=uS3R_passWoRD

sharepoint.sts.endpoint=https://adfs.example.com/adfs/services/trust/2005/usernamemixed

sharepoint.sts.realm=urn:myserver:sharepoint ou https://yoursharepoint.example.com/_trust

sharepoint.formsAuthenticationMode=ADFS

Indexação de coleções de sites

Configuração Parâmetro
Tipo de índice sharepoint.siteCollectionOnly=boolean

Opcional, exceto para implantações do SharePoint com vários locatários (saiba mais). Defina como verdadeiro para que o índice do conector sharepoint.server seja definido como um conjunto de sites, e não como um servidor virtual. O padrão é nulo (detectado automaticamente).

Mapeamento de identidade do SharePoint

Configuração Parâmetro
ID da origem de identidade api.identitySourceId=1234567890abcdef

Obrigatório. ID da origem de identidade para sincronizar os grupos locais do SharePoint.O ID da origem do Google Cloud Search configurado pelo administrador do Google Workspace, conforme descrito em Adicionar uma origem de dados para pesquisar.
Origens de identidade de referência api.referenceIdentitySources=CONTOSO,contoso

Uma lista delimitada por vírgulas de origens de identidade de referência para principais do Active Directory. O valor corresponde ao nome NETBIOS do Active Directory dos principais do Active Directory de referência.
IDs da origem de identidade de referência api.referenceIdentitySource.DOMAIN.id=identity-source-id

Obrigatório. O ID da origem de identidade para sincronizar os principais do Active Directory.

Pesquisa do Active Directory

Configuração Parâmetro
Host do Active Directory adLookup.host=host

Obrigatório. Nome do host do Active Directory, como dc.contoso.com ou endereço IP.
Porta de pesquisa do Active Directory adLookup.port=port

Opcional. O padrão é 389. Use 686 para SSL.
Método de pesquisa do Active Directory adLookup.method=value

Opcional. O padrão é "standard". Para conexões HTTPS, defina como "ssl".
Usuário de pesquisa do Active Directory adLookup.username=CONTOSO\user1

Obrigatório. Usuário autorizado a realizar pesquisas do Active Directory.
Senha de pesquisa do Active Directory adLookup.password=password123

Obrigatório. Senha do usuário especificada por adLookup.user.

Geração de conteúdo HTML

Configuração Parâmetro
Campo de título do modelo HTML contentTemplate.sharePointItem.title=Title

O campo do SharePoint a ser usado como título do modelo HTML para o HTML gerado.
Campos de alta qualidade de pesquisa de conteúdo HTML contentTemplate.sharePointItem.quality.high=highField1[,highField2,...]

Uma lista de campos separados por vírgulas a serem incluídos no HTML gerado como campos de alta qualidade. Quando os termos da consulta de pesquisa correspondem a esses campos, os resultados recebem uma classificação mais alta.
Campos de média qualidade de pesquisa de conteúdo HTML contentTemplate.sharePointItem.quality.medium=mediumField1[,mediumField2,...]

Uma lista de campos separados por vírgulas a serem incluídos no HTML gerado como campos de qualidade média.
Campos de baixa qualidade de pesquisa de conteúdo HTML contentTemplate.sharePointItem.quality.low=lowField1[,lowField2,...]

Uma lista de campos separados por vírgulas a serem incluídos no HTML gerado como campos de baixa qualidade.
Colunas não mapeadas de conteúdo HTML contentTemplate.sharepointItem.unmappedColumnsMode=APPEND

Como o conector lida com colunas não mapeadas. O valor é APPEND (padrão) ou IGNORE.

  • APPEND: o conector gera conteúdo HTML com todos os campos, incluindo os campos que não estão definidos com um nível de qualidade (alto, médio ou baixo).
  • IGNORE: o conector gera conteúdo HTML apenas com campos mapeados.