La minería de texto (TM) es el proceso de extraer información útil, patrones o conocimiento de textos no estructurados.
Consta de tres etapas:
1. Obtener datos: E1 Reconocimiento Óptico de Caracteres
(OCR) s una tecnología que permite convertir imágenes de texto
en texto ditable. También en conocido como extracción de texto
de imágenes.
2. Explorar los datos: Representación gráfica o visual de los datos para
su interpretación. Los métodos más comunes son el Análisis de
sentimientos, la Nube de palabras y el Topic Modeling.
3. Análisis predictivo: Son las técnicas y modelos estadísticos para
predecir resuktados futuros. Los modelos más usados son el random
forest, redes neuronales y regresiones.
#install.packages("tidyverse") #Manipulación de datos
library(tidyverse)
#install.packages("tesseract") #Reconocimiento óptico
library(tesseract)
#install.packages("magick") #Imagenes PNG
library(magick)
#install.packages("officer") #Office (Word)
library(officer)
#install.packages("pdftools") #PDF
library(pdftools)
#install.packages("purrr") #Para la función "map" para aplicar una función a cada elemento de un vector
imagen1 <-image_read("C:\\Users\\USUARIO\\Downloads\\imagen1.PNG")
texto1 <-ocr(imagen1)
texto1
## [1] "Linear regression with one variable x is also known as univariate linear regression\nor simple linear regression. Simple linear regression is used to predict a single\noutput from a single input. This is an example of supervised learning, which means\nthat the data is labeled, i.e., the output values are known in the training data. Let us\nfit a line through the data using simple linear regression as shown in Fig. 4.1.\n"
doc1 <- read_docx() #Crea un documento de Word en blanco
doc1 <- doc1 %>% body_add_par(texto1) #Pega el texto en el doc1
#print(doc1, target= "Sesión 1 Raúl IA con imacto empresarial.docx") #Guarda el doc en la compu
imagen2 <-image_read("C:\\Users\\USUARIO\\Downloads\\imagen2.PNG")
tesseract_download("spa")
## Training data already exists. Overwriting C:\Users\USUARIO\AppData\Local\tesseract5\tesseract5\tessdata/spa.traineddata
## [1] "C:\\Users\\USUARIO\\AppData\\Local\\tesseract5\\tesseract5\\tessdata/spa.traineddata"
texto2 <-ocr(imagen2,engine=tesseract("spa"))
texto2
## [1] "Un importante, y quizá controversial, asunto político es el que se refiere al efecto del salario mínimo sobre\nlas tasas de desempleo en diversos grupos de trabajadores. Aunque este problema puede ser estudiado con\ndiversos tipos de datos (corte transversal, series de tiempo o datos de panel), suelen usarse las series de\ntiempo para observar los efectos agregados. En la tabla 1.3 se presenta un ejemplo de una base de datos\nde series de tiempo sobre tasas de desempleo y salarios mínimos.\n"
doc2 <- read_docx() #Crea un documento de Word en blanco
doc2 <- doc2 %>% body_add_par(texto2) #Pega el texto en el doc1
print(doc2, target= "Sesión 1 (texto 2) Raúl IA con imacto empresarial.docx") #Guarda el doc en la compu
#De PDF a texto en word
pdf_eso <- pdf_convert("C:\\Users\\USUARIO\\Downloads\\eso.pdf", dpi=600) %>% map(ocr)
## Converting page 1 to eso_1.png... done!
## Converting page 2 to eso_2.png... done!
#Repetir pasos previos para convertir imágenes a texto en word.
imagen1.1 <-image_read("C:\\Users\\USUARIO\\Downloads\\eso_1.png")
tesseract_download("spa")
## Training data already exists. Overwriting C:\Users\USUARIO\AppData\Local\tesseract5\tesseract5\tessdata/spa.traineddata
## [1] "C:\\Users\\USUARIO\\AppData\\Local\\tesseract5\\tesseract5\\tessdata/spa.traineddata"
texto1.1 <-ocr(imagen1.1,engine=tesseract("spa"))
doc1.1 <- read_docx() #Crea un documento de Word en blanco
doc1.1 <- doc1.1 %>% body_add_par(texto1.1) #Pega el texto en el doc1
imagen1.2 <-image_read("C:\\Users\\USUARIO\\Downloads\\eso_2.png")
texto1.2 <-ocr(imagen1.2,engine=tesseract("spa"))
doc1.2 <- read_docx() #Crea un documento de Word en blanco
doc1.2 <- doc1.2 %>% body_add_par(texto1.1) %>% body_add_par(texto1.2)#Pega el texto en el doc1
print(doc1.2, target= "ESO ejercicio clase.docx") #Guarda el doc en la compu
#install.packages("syuzhet") #ANÁLISIS DE SENTIMIENTOS
library(syuzhet)
#install.packages("tm") #Minería de texto
library(tm)
## Cargando paquete requerido: NLP
##
## Adjuntando el paquete: 'NLP'
## The following object is masked from 'package:ggplot2':
##
## annotate
#install.packages("wordcloud") #Nube de palabras
library(wordcloud)
## Cargando paquete requerido: RColorBrewer
#install.packages("RColorBrewer") #Colores de la nube de palabras
library("RColorBrewer")
texto <- pdf_eso
texto_palabras <-get_tokens(texto)
emociones <- get_nrc_sentiment(texto_palabras, language= "spanish" )
#Alegría, trsiterza, ira, miedo, sorpresa, asco, anticipación, confianza
barplot(colSums(prop.table(emociones[,1:8])))
sentimientos <- (emociones$negative*-1)+emociones$positive
simple_plot(sentimientos)
palabras <-texto_palabras
texto <-removeWords(palabras,
c(stopwords("spanish"),"hacia","habia","hecho"))
wordcloud(words=palabras,min.freq=2, rot.per =0, random.order = FALSE)