TeorĂ­a

El Reconocimiento Ă“ptico de CarĂ¡cteres (OCR) es una tecnologĂ­a Ă³ptica para convertir diferentes tipos de documentos, como imĂ¡genes, documentos impresos escaneados, fotografĂ­as de texto, archivos PDF o imĂ¡genes capturadas con una cĂ¡mara, en datos editables y buscables.

La MinerĂ­a de Datos (TM) es el proceso de extraer informaciĂ³n Ăºtil, patrones o conocimiento de textos no estructurados.

Consta de 3 etapas:
1. Obtener datos: El Reconocimiento Ă“ptico de Caracteres (OCR) es una tecnologĂ­a que permite convertir imĂ¡genes de texto en texto editable. TambiĂ©n es conocido como extracciĂ³n de texto de imĂ¡genes.
2. Explorar datos: RepresentaciĂ³n grĂ¡fica o visual de los datos para su interpretaciĂ³n. Los mĂ©todos mĂ¡s comunes son el AnĂ¡lisis de Sentimientos, la Nube de Palabras y el Topic Modeling.
3. AnĂ¡lisis predictivo: Son las tĂ©cnicas y modelos estadĂ­sticos para predecir resultados futuros, los modelos mĂ¡s usados son Random Forest, redes neuronales y regresiones.

Instalar paquetes y llamar librerĂ­as

# install.packages(c("tidyverse","tesseract","magick","officer","pdftools","purrr","syuzhet","tm","wordcloud","RColorBrewer"))
library(tidyverse)
library(tesseract)
library(magick)
library(officer)
library(pdftools)
library(purrr)
library(syuzhet)
library(tm)
library(wordcloud)
library(RColorBrewer)

De imagen PNG a texto en Word

imagen1 <- image_read("~/Library/CloudStorage/OneDrive-InstitutoTecnologicoydeEstudiosSuperioresdeMonterrey/SEM 7/M2/imagen1.PNG")
texto1  <- ocr(imagen1)
texto1
## [1] "Linear regression with one variable x is also known as univariate linear regression\nor simple linear regression. Simple linear regression is used to predict a single\noutput from a single input. This is an example of supervised learning, which means\nthat the data is labeled, i.e., the output values are known in the training data. Let us\nfit a line through the data using simple linear regression as shown in Fig. 4.1.\n"
doc1 <- read_docx() # Crea un documento de Word en blanco
doc1 <- doc1 %>% body_add_par(texto1) # Pega el texto en el documento
# print(doc1, target = "~/Library/CloudStorage/OneDrive-InstitutoTecnologicoydeEstudiosSuperioresdeMonterrey/SEM 7/M2/texto1.docx") # Guarda el documento en la computadora

De imagen PNG en Español a texto en Word

imagen2 <- image_read("~/Library/CloudStorage/OneDrive-InstitutoTecnologicoydeEstudiosSuperioresdeMonterrey/SEM 7/M2/imagen2.PNG")

tesseract_download("spa")  # descarga OCR en español si no estĂ¡ ya instalado
## [1] "/Users/annaduran/Library/Application Support/tesseract5/tessdata/spa.traineddata"
texto2 <- ocr(imagen2, engine = tesseract("spa"))
texto2
## [1] "Un importante, y quizĂ¡ controversial, asunto polĂ­tico es el que se refiere al efecto del salario mĂ­nimo sobre\nlas tasas de desempleo en diversos grupos de trabajadores. Aunque este problema puede ser estudiado con\ndiversos tipos de datos (corte transversal, series de tiempo o datos de panel), suelen usarse las series de\ntiempo para observar los efectos agregados. En la tabla 1.3 se presenta un ejemplo de una base de datos\nde series de tiempo sobre tasas de desempleo y salarios mĂ­nimos.\n"
doc2 <- read_docx() # Crea un documento de Word en blanco
doc2 <- doc2 %>% body_add_par(texto2) # Pega el texto en el documento

# print(doc2, target = "~/Library/CloudStorage/OneDrive-InstitutoTecnologicoydeEstudiosSuperioresdeMonterrey/SEM 7/M2/texto2.docx")

De PDF a texto en Word

pdf_eso <- pdf_convert("~/Library/CloudStorage/OneDrive-InstitutoTecnologicoydeEstudiosSuperioresdeMonterrey/SEM 7/M2/eso.pdf") %>% map(ocr)
## Converting page 1 to eso_1.png... done!
## Converting page 2 to eso_2.png... done!

AnĂ¡lisis de Emociones y Sentimientos

texto <- pdf_eso
texto_palabras <- get_tokens(texto)
emociones <- get_nrc_sentiment(texto_palabras, language="spanish")
# AlegrĂ­a, Tristeza, Ira, Miedo, Sorpresa, Asco, AnticipaciĂ³n, Confianza
barplot(colSums(prop.table(emociones[,1:8])))

sentimientos <- (emociones$negative * -1) + emociones$positive
simple_plot(sentimientos)

Nube de Palabras

palabras <- texto_palabras
palabras <- removeWords(palabras, c(stopwords("spanish"), "habia", "hacia", "casi"))
wordcloud(words=palabras, min.freq=2, rot.per=0, random.order=FALSE) # 1-3 para textos pequeños

LS0tCnRpdGxlOiAiT0NSIgphdXRob3I6ICJBbm5hIER1csOhbiBBMDEyODU2NzQiCmRhdGU6ICJgciBTeXMuRGF0ZSgpYCIKbGFuZzogZXMKb3V0cHV0OgogIGh0bWxfZG9jdW1lbnQ6CiAgICB0b2M6IFRSVUUKICAgIHRvY19mbG9hdDogVFJVRQogICAgY29kZV9kb3dubG9hZDogVFJVRQogICAgdGhlbWU6IHNpbXBsZXgKLS0tCgpgYGB7ciBzZXR1cCwgaW5jbHVkZT1GQUxTRX0Ka25pdHI6Om9wdHNfY2h1bmskc2V0KG1lc3NhZ2UgPSBGQUxTRSwgd2FybmluZyA9IEZBTFNFKQojIEJlc3QtZWZmb3J0IGxvY2FsZTsgaWdub3JlIGlmIGl0IHdhcm5zIG9uIHlvdXIgT1MKdHJ5KFN5cy5zZXRsb2NhbGUoIkxDX0NUWVBFIiwgImVzX01YLlVURi04IiksIHNpbGVudCA9IFRSVUUpCm9wdGlvbnMoZW5jb2RpbmcgPSAiVVRGLTgiKQojIHNtYWxsIGhlbHBlciB0byBub3JtYWxpemUgc3RyaW5ncyB0byBVVEYtOApmaXhfdXRmOCA8LSBmdW5jdGlvbih4KSBlbmMydXRmOChpY29udih4LCB0byA9ICJVVEYtOCIpKQpgYGAKCiFbXShodHRwczovL3QzLmZ0Y2RuLm5ldC9qcGcvMDAvNzYvMzcvODIvMzYwX0ZfNzYzNzgyMjZfRmRVNnZXNkt5UWZLaFZnaEQxWGdjdzZsOWtFUFJsWlguanBnKQoKIyA8c3BhbiBzdHlsZT0iY29sb3I6IzUyOEI4QjsiPjxiPiBUZW9yw61hIDwvYj48L3NwYW4+CkVsICoqUmVjb25vY2ltaWVudG8gw5NwdGljbyBkZSBDYXLDoWN0ZXJlcyAoT0NSKSoqIGVzIHVuYSB0ZWNub2xvZ8OtYSDDs3B0aWNhIHBhcmEgY29udmVydGlyIGRpZmVyZW50ZXMgdGlwb3MgZGUgZG9jdW1lbnRvcywgY29tbyBpbcOhZ2VuZXMsIGRvY3VtZW50b3MgaW1wcmVzb3MgZXNjYW5lYWRvcywgZm90b2dyYWbDrWFzIGRlIHRleHRvLCBhcmNoaXZvcyBQREYgbyBpbcOhZ2VuZXMgY2FwdHVyYWRhcyBjb24gdW5hIGPDoW1hcmEsIGVuIGRhdG9zIGVkaXRhYmxlcyB5IGJ1c2NhYmxlcy4KCkxhICoqTWluZXLDrWEgZGUgRGF0b3MgKFRNKSoqIGVzIGVsIHByb2Nlc28gZGUgZXh0cmFlciBpbmZvcm1hY2nDs24gw7p0aWwsIHBhdHJvbmVzIG8gY29ub2NpbWllbnRvIGRlIHRleHRvcyBubyBlc3RydWN0dXJhZG9zLgoKQ29uc3RhIGRlIDMgZXRhcGFzOiAgCjEuIE9idGVuZXIgZGF0b3M6IEVsIFJlY29ub2NpbWllbnRvIMOTcHRpY28gZGUgQ2FyYWN0ZXJlcyAoT0NSKSBlcyB1bmEgdGVjbm9sb2fDrWEgcXVlIHBlcm1pdGUgY29udmVydGlyIGltw6FnZW5lcyBkZSB0ZXh0byBlbiB0ZXh0byBlZGl0YWJsZS4gVGFtYmnDqW4gZXMgY29ub2NpZG8gY29tbyBleHRyYWNjacOzbiBkZSB0ZXh0byBkZSBpbcOhZ2VuZXMuICAKMi4gRXhwbG9yYXIgZGF0b3M6IFJlcHJlc2VudGFjacOzbiBncsOhZmljYSBvIHZpc3VhbCBkZSBsb3MgZGF0b3MgcGFyYSBzdSBpbnRlcnByZXRhY2nDs24uIExvcyBtw6l0b2RvcyBtw6FzIGNvbXVuZXMgc29uIGVsIEFuw6FsaXNpcyBkZSBTZW50aW1pZW50b3MsIGxhIE51YmUgZGUgUGFsYWJyYXMgeSBlbCBUb3BpYyBNb2RlbGluZy4gIAozLiBBbsOhbGlzaXMgcHJlZGljdGl2bzogU29uIGxhcyB0w6ljbmljYXMgeSBtb2RlbG9zIGVzdGFkw61zdGljb3MgcGFyYSBwcmVkZWNpciByZXN1bHRhZG9zIGZ1dHVyb3MsIGxvcyBtb2RlbG9zIG3DoXMgdXNhZG9zIHNvbiBSYW5kb20gRm9yZXN0LCByZWRlcyBuZXVyb25hbGVzIHkgcmVncmVzaW9uZXMuICAKCiMgPHNwYW4gc3R5bGU9ImNvbG9yOiNBNTJBMkE7Ij48Yj4gSW5zdGFsYXIgcGFxdWV0ZXMgeSBsbGFtYXIgbGlicmVyw61hcyA8L2I+PC9zcGFuPgpgYGB7ciBtZXNzYWdlPUZBTFNFLCB3YXJuaW5nPUZBTFNFfQojIGluc3RhbGwucGFja2FnZXMoYygidGlkeXZlcnNlIiwidGVzc2VyYWN0IiwibWFnaWNrIiwib2ZmaWNlciIsInBkZnRvb2xzIiwicHVycnIiLCJzeXV6aGV0IiwidG0iLCJ3b3JkY2xvdWQiLCJSQ29sb3JCcmV3ZXIiKSkKbGlicmFyeSh0aWR5dmVyc2UpCmxpYnJhcnkodGVzc2VyYWN0KQpsaWJyYXJ5KG1hZ2ljaykKbGlicmFyeShvZmZpY2VyKQpsaWJyYXJ5KHBkZnRvb2xzKQpsaWJyYXJ5KHB1cnJyKQpsaWJyYXJ5KHN5dXpoZXQpCmxpYnJhcnkodG0pCmxpYnJhcnkod29yZGNsb3VkKQpsaWJyYXJ5KFJDb2xvckJyZXdlcikKYGBgCgojIDxzcGFuIHN0eWxlPSJjb2xvcjojQTUyQTJBOyI+PGI+IERlIGltYWdlbiBQTkcgYSB0ZXh0byBlbiBXb3JkIDwvYj48L3NwYW4+CmBgYHtyfQppbWFnZW4xIDwtIGltYWdlX3JlYWQoIn4vTGlicmFyeS9DbG91ZFN0b3JhZ2UvT25lRHJpdmUtSW5zdGl0dXRvVGVjbm9sb2dpY295ZGVFc3R1ZGlvc1N1cGVyaW9yZXNkZU1vbnRlcnJleS9TRU0gNy9NMi9pbWFnZW4xLlBORyIpCnRleHRvMSAgPC0gb2NyKGltYWdlbjEpCnRleHRvMQpkb2MxIDwtIHJlYWRfZG9jeCgpICMgQ3JlYSB1biBkb2N1bWVudG8gZGUgV29yZCBlbiBibGFuY28KZG9jMSA8LSBkb2MxICU+JSBib2R5X2FkZF9wYXIodGV4dG8xKSAjIFBlZ2EgZWwgdGV4dG8gZW4gZWwgZG9jdW1lbnRvCiMgcHJpbnQoZG9jMSwgdGFyZ2V0ID0gIn4vTGlicmFyeS9DbG91ZFN0b3JhZ2UvT25lRHJpdmUtSW5zdGl0dXRvVGVjbm9sb2dpY295ZGVFc3R1ZGlvc1N1cGVyaW9yZXNkZU1vbnRlcnJleS9TRU0gNy9NMi90ZXh0bzEuZG9jeCIpICMgR3VhcmRhIGVsIGRvY3VtZW50byBlbiBsYSBjb21wdXRhZG9yYQpgYGAKCiMgPHNwYW4gc3R5bGU9ImNvbG9yOiNBNTJBMkE7Ij48Yj4gRGUgaW1hZ2VuIFBORyBlbiBFc3Bhw7FvbCBhIHRleHRvIGVuIFdvcmQgPC9iPjwvc3Bhbj4KYGBge3J9CmltYWdlbjIgPC0gaW1hZ2VfcmVhZCgifi9MaWJyYXJ5L0Nsb3VkU3RvcmFnZS9PbmVEcml2ZS1JbnN0aXR1dG9UZWNub2xvZ2ljb3lkZUVzdHVkaW9zU3VwZXJpb3Jlc2RlTW9udGVycmV5L1NFTSA3L00yL2ltYWdlbjIuUE5HIikKCnRlc3NlcmFjdF9kb3dubG9hZCgic3BhIikgICMgZGVzY2FyZ2EgT0NSIGVuIGVzcGHDsW9sIHNpIG5vIGVzdMOhIHlhIGluc3RhbGFkbwp0ZXh0bzIgPC0gb2NyKGltYWdlbjIsIGVuZ2luZSA9IHRlc3NlcmFjdCgic3BhIikpCnRleHRvMgoKZG9jMiA8LSByZWFkX2RvY3goKSAjIENyZWEgdW4gZG9jdW1lbnRvIGRlIFdvcmQgZW4gYmxhbmNvCmRvYzIgPC0gZG9jMiAlPiUgYm9keV9hZGRfcGFyKHRleHRvMikgIyBQZWdhIGVsIHRleHRvIGVuIGVsIGRvY3VtZW50bwoKIyBwcmludChkb2MyLCB0YXJnZXQgPSAifi9MaWJyYXJ5L0Nsb3VkU3RvcmFnZS9PbmVEcml2ZS1JbnN0aXR1dG9UZWNub2xvZ2ljb3lkZUVzdHVkaW9zU3VwZXJpb3Jlc2RlTW9udGVycmV5L1NFTSA3L00yL3RleHRvMi5kb2N4IikKYGBgCgojIDxzcGFuIHN0eWxlPSJjb2xvcjojQTUyQTJBOyI+PGI+IERlIFBERiBhIHRleHRvIGVuIFdvcmQgPC9iPjwvc3Bhbj4KYGBge3J9CnBkZl9lc28gPC0gcGRmX2NvbnZlcnQoIn4vTGlicmFyeS9DbG91ZFN0b3JhZ2UvT25lRHJpdmUtSW5zdGl0dXRvVGVjbm9sb2dpY295ZGVFc3R1ZGlvc1N1cGVyaW9yZXNkZU1vbnRlcnJleS9TRU0gNy9NMi9lc28ucGRmIikgJT4lIG1hcChvY3IpCgpgYGAKCiMgPHNwYW4gc3R5bGU9ImNvbG9yOiNBNTJBMkE7Ij48Yj4gQW7DoWxpc2lzIGRlIEVtb2Npb25lcyB5IFNlbnRpbWllbnRvcyA8L2I+PC9zcGFuPgpgYGB7cn0KdGV4dG8gPC0gcGRmX2Vzbwp0ZXh0b19wYWxhYnJhcyA8LSBnZXRfdG9rZW5zKHRleHRvKQplbW9jaW9uZXMgPC0gZ2V0X25yY19zZW50aW1lbnQodGV4dG9fcGFsYWJyYXMsIGxhbmd1YWdlPSJzcGFuaXNoIikKIyBBbGVncsOtYSwgVHJpc3RlemEsIElyYSwgTWllZG8sIFNvcnByZXNhLCBBc2NvLCBBbnRpY2lwYWNpw7NuLCBDb25maWFuemEKYmFycGxvdChjb2xTdW1zKHByb3AudGFibGUoZW1vY2lvbmVzWywxOjhdKSkpCnNlbnRpbWllbnRvcyA8LSAoZW1vY2lvbmVzJG5lZ2F0aXZlICogLTEpICsgZW1vY2lvbmVzJHBvc2l0aXZlCnNpbXBsZV9wbG90KHNlbnRpbWllbnRvcykKYGBgCgojIDxzcGFuIHN0eWxlPSJjb2xvcjojQTUyQTJBOyI+PGI+IE51YmUgZGUgUGFsYWJyYXMgPC9iPjwvc3Bhbj4KYGBge3IgbWVzc2FnZT1GQUxTRSwgd2FybmluZz1GQUxTRX0KcGFsYWJyYXMgPC0gdGV4dG9fcGFsYWJyYXMKcGFsYWJyYXMgPC0gcmVtb3ZlV29yZHMocGFsYWJyYXMsIGMoc3RvcHdvcmRzKCJzcGFuaXNoIiksICJoYWJpYSIsICJoYWNpYSIsICJjYXNpIikpCndvcmRjbG91ZCh3b3Jkcz1wYWxhYnJhcywgbWluLmZyZXE9Miwgcm90LnBlcj0wLCByYW5kb20ub3JkZXI9RkFMU0UpICMgMS0zIHBhcmEgdGV4dG9zIHBlcXVlw7FvcwpgYGAKCg==