El Reconocimiento Ćptico de Caracteres (OCR) es una tecnologĆa utilizada para convertir diferentes tipos de documentos, como de imĆ”genes, documentos impresos escaneados, fotografĆas de textos, archivos PDF o imĆ”genes capturadas con una cĆ”mara, en datos editables y buscables.
La Mineria de Datos (TM) es el proceso de extraer información útil, patrones o conocimientos de textos no estructurados.
Consta de 3 etapas: 1. Obtener datos: El reconocimiento Ćptico de Caracteres (ORC) es una tecnologĆa que permite convertir imagenes de texto editable. TambiĆ©n es conocido como extracción de texto de imagenes. 2.ā ā Explorar datos: Representación grĆ”fica o visual de los datos para su interpretación. Los mĆ©todos mĆ”s comunes son el Ćnalisis de Sentimientos, la Nube de Palabaras y el Topic Modeling. 3.ā ā AnĆ”lisis predictivo: Son las tĆ©cnicas y modelos estadĆsticos para predecir resultados futuros. Los modelos mĆ”s usados son el Random Forest, redes neuronales y regresiones.
#install.packages("tidyverse") # Manipulacion de datos
library(tidyverse)
## āā Attaching core tidyverse packages āāāāāāāāāāāāāāāāāāāāāāāā tidyverse 2.0.0 āā
## ā dplyr 1.1.4 ā readr 2.1.5
## ā forcats 1.0.0 ā stringr 1.5.1
## ā ggplot2 3.5.2 ā tibble 3.3.0
## ā lubridate 1.9.4 ā tidyr 1.3.1
## ā purrr 1.1.0
## āā Conflicts āāāāāāāāāāāāāāāāāāāāāāāāāāāāāāāāāāāāāāāāāā tidyverse_conflicts() āā
## ā dplyr::filter() masks stats::filter()
## ā dplyr::lag() masks stats::lag()
## ā¹ Use the conflicted package (<http://conflicted.r-lib.org/>) to force all conflicts to become errors
#install.packages("tesseract") # OCR
library(tesseract)
#install.packages("magick") # PNG
library(magick)
## Linking to ImageMagick 6.9.12.93
## Enabled features: cairo, fontconfig, freetype, heic, lcms, pango, raw, rsvg, webp
## Disabled features: fftw, ghostscript, x11
#install.packages("officer") # Office (Word)
library(officer)
#install.packages("pdftools") # PDF
library(pdftools)
## Using poppler version 23.04.0
#install.packages("purrr") # Para la función "map" para aplicar una función a cada elemento de un vector
library(purrr)
#install.packages("syuzhet") # Analisis de sentimientos
library(syuzhet)
#install.packages("tm")
library(tm) # Mineria de datos
## Loading required package: NLP
##
## Attaching package: 'NLP'
##
## The following object is masked from 'package:ggplot2':
##
## annotate
#install.packages("wordcloud") # Nube de palabras
library(wordcloud)
## Loading required package: RColorBrewer
#install.packages("RColorBrewer") # Paletas de colores
library(RColorBrewer)
#install.packages("tm")
library(tm)
imagen1 <- image_read( "/Users/ximenabbm/Downloads/imagen1.PNG")
texto1 <- ocr(imagen1)
texto1
## [1] "Linear regression with one variable x is also known as univariate linear regression\nor simple linear regression. Simple linear regression is used to predict a single\noutput from a single input. This is an example of supervised learning, which means\nthat the data is labeled, i.e., the output values are known in the training data. Let us\nfit a line through the data using simple linear regression as shown in Fig. 4.1.\n"
doc1 <- read_docx() #Crea un documento de word en blanco
doc1 <- doc1 %>% body_add_par(texto1) #Pega el texto en el documento
print(doc1, target = "texto1.docx") #Guarda el documento en la computadora
imagen2 <- image_read("/Users/ximenabbm/Downloads/imagen2.PNG")
tesseract_download("spa") #Descarga el paquete de idioma espaƱol
## Training data already exists. Overwriting /Users/ximenabbm/Library/Application Support/tesseract5/tessdata/spa.traineddata
## [1] "/Users/ximenabbm/Library/Application Support/tesseract5/tessdata/spa.traineddata"
texto2 <- ocr(imagen2, engine = tesseract("spa")) #Especifica el idioma espaƱol
texto2
## [1] "Un importante, y quizĆ” controversial, asunto polĆtico es el que se refiere al efecto del salario mĆnimo sobre\nlas tasas de desempleo en diversos grupos de trabajadores. Aunque este problema puede ser estudiado con\ndiversos tipos de datos (corte transversal, series de tiempo o datos de panel), suelen usarse las series de\ntiempo para observar los efectos agregados. En la tabla 1.3 se presenta un ejemplo de una base de datos\nde series de tiempo sobre tasas de desempleo y salarios mĆnimos.\n"
doc2 <- read_docx() #Crea un documento de word en blanco
doc2 <- doc2 %>% body_add_par(texto2) #Pega el texto en el documento
print(doc2, target = "texto2.docx") #Guarda el documento en la computadora
pdf_eso <- pdf_convert("/Users/ximenabbm/Downloads/eso.pdf") %>% map(ocr)
## Converting page 1 to eso_1.png... done!
## Converting page 2 to eso_2.png... done!
#Repetir pasos previos para convertir imagenes a texto en Word
texto <- pdf_eso
texto_palabras <- get_tokens(texto)
emociones <- get_nrc_sentiment(texto_palabras, language = "spanish")
#AlegrĆa, Tristeza, Miedo, Sorpresa, Ira, Asco, Anticipación, Confianza
barplot(colSums(prop.table(emociones[,1:8])))
sentimientos <- (emociones$negative *-1)+emociones$positive
simple_plot(sentimientos)
# Nube de palabras
palabras <- texto_palabras
palabras <- removeWords(palabras, c(stopwords("spanish"), "habia", "hacia", "casi"))
wordcloud(words=palabras, min.freq=2, rot.per=0, random.order=FALSE)