NLP

Aula 01 - O que é Processamento Natural de Linguagem

Aula 02 - Aplicações e Tarefas

Aplicações de NLP - Aula Inaugural do Curso de Processamento oferecido pela USP - Um pouco longo, traz um pouco da criação dos primeiros corretores em língua portuguesa.

Ferramentas online para exercitar expressões regulares

• https://regex101.com/

• https://regexr.com/

• https://regex-generator.olafneumann.org/ : Gerar "autômato" e código

• https://pythex.org/

Sequência de Vídeos sobre Expressões Regulares da UFMG

Aula 01 - Introdução às Expressões Regulares

Aula 02 - Expressões Regulares: Disjunção

Aula 03 - Expressões Regulares: Múltiplos Padrões e Marcadores

Aula 04 - Expressões Regulares: Quantificadores

Aula 05 - Expressões Regulares: Agrupamento e Substituição

Aula 06 - Expressões Regulares: Caracteres Especiais e Avaliação

Materiais Didáticos

Material da W3School: Visão geral, rápida e com exercícios.

O assunto principal é sobre a distância de Levenshtein

• Wikipedia

• Biblioteca editdistance

• Biblioteca nltk.metrics

• Biblioteca Levenshtein

Aula 01 - Distância de Edição, Introdução UFMG

Aula 02 - Distância de Edição: Exemplos em Python

Aula 03 - Distância de Edição: Aplicações

Aula 01 - Segmentação e Padronização de Textos: Types vs. Tokens

Aula 02 - Segmentação e Padronização de Textos: Tokenização e Capitalização

Aula 03 - Segmentação e Padronização de Textos: Lematização, Stemming e Segmentação de Frases

Aula 01 - Modelos de Linguagem Introdução

Aula 02 - Modelos de Linguagem Exercícios Resolvidos

Aula 03 - Modelos de Linguagem Probabilidade Logarítmica

Aula 04 - Modelos de Linguagem Implementação em Python

Aula 05 - Modelos de Linguagem - Avaliação do Modelo

Aula 06 - Generalização

BERT

Transformers

Curso em Português

• Python para Processamento de Linguagem Natural: Edição Comemorativa dos 50 anos do ICMC

• Playlist do Curso de Linguística Computacional da UFMG

• Material da Disciplina de Processamento de Linguagem Natural - USP 2021/2

Curso em Inglês

• Curso NLP de Stanford

Computer Science Master: Contém alguns códigos em Python sobre temas como Bag Of Words, Word2Vec, TF-IDF, entre outros.

• Analisador de Corpus

  • Site para Download

  • Vídeo sobre utilização do Antcon - UFMG

• Visualizador Word Embedding

• Visualizador WebVector

• Tradutor vencedor de 2020

• Jogo Online Utilizando Word Embeddings

• Word2Vec exemplo com Colab - Glove

• Gensim Word2Vec Tutorial

Material da UFMG do Curso de Processamento de Linguagem Natural

PlayList do curso completo de Linguística Computacional da UFMG

Playlists em Português - Selecionadas

• Processamento de Linguagem Natural - Aprendiz do Futuro: Técnicas avançadas, transcoder, BERT, GPT3, RNN, ...

• Processamento de Linguagem Natural - IA Expert: NLTK, BERT, PageRank, Mineração de Texto, Remoção de StopWords, ...

Site Dinamarques com Recursos Online

[1] MIKOLOV, Tomas et al. Efficient estimation of word representations in vector space. arXiv preprint arXiv:1301.3781, 2013.

[2] BUDANITSKY, Alexander; HIRST, Graeme. Evaluating wordnet-based measures of lexical semantic relatedness. Computational linguistics, v. 32, n. 1, p. 13-47, 2006.

[3] Oram, P. (2001). WordNet: An electronic lexical database. Christiane Fellbaum (Ed.). Cambridge, MA: MIT Press, 1998.

• Regis, Lucas Gresner. RecruitAi Glove NLP Task Force: a One-Liner Text Normalize. TCC. UFPE

• BRANCO, António et al. The Portuguese Language in the Digital Age. Heidelberg: Springer, 2012.

• Livro Interativo de Data Science

• https://jupyterbook.org/intro.html

• 
  

• Centro de Linguística da Universidade de Lisboa: Contém corpus, ferramentas, wordnet em português entre outros.

• Esforço da Comunidade Européia para Línguas

• Politiquices

• Association for Computational Linguistics - organização internacional que representa o campo de NLP. Contém diversos recursos tais como conferências e workshops na área, WIKI com diversos recursos, Antologia com a literatura da área de mais de 50 anos.

• LanguageLog Blog com posts relacionados a NLP

• Sociedade Internacional de Linguística. Internacional Brasil

• Linguistica Data Consortium - TreeBank da Universidade da Pensilvânia

• European Language Resources Agency com diversos textos anotados

• OLAC: Open Language Archives Community

• Locais com links para diversos corpora

• Busca no Google Portuguese+Corpora

• Etnologue - Recursos Linguísticos

• Global WordNet

• Open Word Net para o Português

• Introdutórios

  • O que é e qual sua importância by SAS (Português)

  • Uma mergulhada na NLP : Visão Geral e bem ilustrado com timeline. Em Inglês. Parte 01 Parte 02

  • Introução a NLP by IBM

• Timeline

  • Avanços recentes em 8 marcos by Sebastian Ruder

  • Breve introdução com histórico ilustrado

  • Timeline na visão de ChatBot

• Vídeos de Machine Learning sobre NLP

  • DevDojo Text Classification - Play List

• NLTK

• Breve referência de Ferramentas para NLP para Python

• Hugging Faces para NLP

• Word2Vec Ilustrado

• Word2VEC Alura

• Uma breve introdução aos algoritmos de word embeddings

• Exemplo Hands On Colab com TensorFlow

• Hands On Berkeley de W2V com implementação de algoritmos básicos

• Hands On W2V

• Word2Vec Explained

• WordEmbeddings para o Português

• WordEmbeddings do NILC para o Português

[1] RAO, Delip; MCMAHAN, Brian. Natural language processing with PyTorch: build intelligent language applications using deep learning. " O'Reilly Media, Inc.", 2019.

[2] Jurafsky, D. e Martin, J. H. Speech and language processing: An introduction to natural language processing, computational linguistics, and speech recognition

[3] Indurkhya, N. e Damerau, F. J. (2010). Handbook of natural language processing. Chapman and Hall/CRC.

[4] Bird, S., Klein, E., & Loper, E. (2009). Natural language processing with Python: analyzing text with the natural language toolkit. " O'Reilly Media, Inc.".