text: (window.webpackJsonp=window.webpackJsonp||[]).push([[65],{217:function(e,a,r){"use strict";r.r(a);var o=r(0),t=Object(o.a)({},function(){var e=this,a=e.$createElement,r=e._self._c||a;return r("ContentSlotsDistributor",{attrs:{"slot-key":e.$parent.slotKey}},[r("h1",{attrs:{id:"gerar-n-gramas"}},[e._v("Gerar N-Gramas")]),e._v(" "),r("p",[e._v("Gera N-gramas a partir de um vetor de texto. Sendo que N-gramas são todas as combinações possíveis de palavras adjacentes e N representa o número de palavras a serem agrupadas. Veja no exemplo abaixo um 3-grama da frase “Ser ou não ser eis a questão”.")]),e._v(" "),r("p",[e._v("“Ser ou não”, “ou não ser”, “não ser eis”, “ser eis a”, “eis a questão”.")]),e._v(" "),r("h3",{attrs:{id:"conectores"}},[e._v("Conectores")]),e._v(" "),r("table",[r("thead",[r("tr",[r("th",[e._v("Entrada")]),e._v(" "),r("th",[e._v("Saída")])])]),e._v(" "),r("tbody",[r("tr",[r("td",[e._v("Dados a serem ordenados")]),e._v(" "),r("td",[e._v("Dados ordenados")])])])]),e._v(" "),r("h3",{attrs:{id:"tarefa"}},[e._v("Tarefa")]),e._v(" "),r("p",[e._v("Nome da Tarefa")]),e._v(" "),r("h3",{attrs:{id:"aba-execucao"}},[e._v("Aba Execução")]),e._v(" "),r("table",[r("thead",[r("tr",[r("th",[e._v("Parâmetro")]),e._v(" "),r("th",[e._v("Detalhe")])])]),e._v(" "),r("tbody",[r("tr",[r("td",[r("strong",[e._v("Número de elementos por n-grama")])]),e._v(" "),r("td")]),e._v(" "),r("tr",[r("td",[r("strong",[e._v("Atributos")])]),e._v(" "),r("td",[e._v("Atributos contendo vetores de texto para gerar os n-gramas")])]),e._v(" "),r("tr",[r("td",[r("strong",[e._v("Nome(s) do(s) novo(s) atributo(s)")])]),e._v(" "),r("td",[e._v("Nome do novo atributo. Pode-se adicionar mais de um nome separado por vírgula caso tenha sido selecionado mais de um atributo")])])])]),e._v(" "),r("p",[r("router-link",{attrs:{to:"/spark/"}},[e._v("Aba Aparência")])],1),e._v(" "),r("p",[r("router-link",{attrs:{to:"/spark/"}},[e._v("Aba Resultados")])],1),e._v(" "),r("h2",{attrs:{id:"exemplo-de-utilizacao"}},[e._v("Exemplo de Utilização")]),e._v(" "),r("p",[r("strong",[e._v("Objetivo:")]),e._v(" Gerar N-gramas a partir de um vetor de texto."),r("br"),e._v(" "),r("strong",[e._v("Base de Dados:")]),e._v(" "),r("router-link",{attrs:{to:"/spark/"}},[e._v("Quotes")])],1),e._v(" "),r("p",[r("img",{attrs:{src:"/img/spark/pre-processamento-de-dados/operacoes-textuais-gerar-n-gramas/image3.png",alt:"Fluxo de trabalho"}})]),e._v(" "),r("ol",[r("li",[r("p",[e._v("Use a função "),r("router-link",{attrs:{to:"/spark/"}},[e._v("Ler dados")]),e._v(" e selecione a base "),r("em",[e._v('"quotes"')]),e._v("."),r("br"),e._v(" "),r("img",{attrs:{src:"/img/spark/pre-processamento-de-dados/operacoes-textuais-gerar-n-gramas/image5.png",alt:"Operação Ler dados"}})],1)]),e._v(" "),r("li",[r("p",[e._v("Use a operação de "),r("router-link",{attrs:{to:"/spark/"}},[e._v("Dividir texto por delimitador")]),e._v(". Selecione "),r("em",[e._v("“Simples, usando espaços como delimitadores”")]),e._v(" para o campo "),r("strong",[e._v("Tipo")]),e._v(". Preencha "),r("em",[e._v("“value”")]),e._v(" no campo "),r("strong",[e._v("Atributos")]),e._v(". No campo "),r("strong",[e._v("Tamanho mínimo das partes (tokens)")]),e._v(" preencha o valor "),r("em",[e._v("“2”")]),e._v("."),r("br"),e._v(" "),r("img",{attrs:{src:"/img/spark/pre-processamento-de-dados/operacoes-textuais-gerar-n-gramas/image1.png",alt:"Operação Dividir texto por delimitador"}})],1)]),e._v(" "),r("li",[r("p",[e._v("Adicione a operação "),r("router-link",{attrs:{to:"/spark/"}},[e._v("Gerar N-Gramas")]),e._v(". Preencha "),r("em",[e._v("2")]),e._v(" no campo "),r("strong",[e._v("Número de Elementos por n-grama")]),e._v(". Selecione o atributo "),r("em",[e._v("“value_tokenized”")]),e._v(" para o campo "),r("strong",[e._v("Atributos")]),e._v("."),r("br"),e._v(" "),r("img",{attrs:{src:"/img/spark/pre-processamento-de-dados/operacoes-textuais-gerar-n-gramas/image2.png",alt:"Operação Gerar N-Gramas"}})],1)]),e._v(" "),r("li",[r("p",[e._v("Execute o fluxo e observe os resultados."),r("br"),e._v(" "),r("img",{attrs:{src:"/img/spark/pre-processamento-de-dados/operacoes-textuais-gerar-n-gramas/image4.png",alt:"Resultado"}})])])]),e._v(" "),r("hr"),e._v(" "),r("p",[e._v("Dúvidas e/ou sugestões envie um e-mail para suporte@lemonade.org.br")])])},[],!1,null,null,null);a.default=t.exports}}]);