alan-barzilay / nlportugues

NLPortuguês - Aprenda PLN em português! Esse repositório contem os materiais e exercícios do curso NLPortuguês, hospedado tambem no coursera sob o nome Processamento Neural de Linguagem Natural em Português I.

---

Este repositório contém os materiais e exercícios do curso NLPortuguês, hospedado tambem no coursera sob o nome Processamento Neural de Linguagem Natural em Português I. Para consultar os slides utilizados nas aulas, eles estão disponíveis neste repositório e no site oficial do curso.

Instalação do ambiente

No coursera oferecemos links para notebooks do colab onde o aluno pode explorar os notebooks jupyter das listas semanais e os auto corretores para as diferentes entregas.

Caso o aluno deseje realizar as listas de maneira local, a maneira mais fácil é fazer um fork deste repositório e criar um novo venv com os mínimos requisitos em sua máquina.

• Para criar um venv basta utilizar o comando python -m venv nome_do_venv na pasta desejada.
• Então ative o venv com source nome_do_venv/bin/activate

Para instalar as bibliotecas necessárias basta utilizar o comando pip install -r requirements.txt, independente de estar usando um venv ou não.

Para poder utilizar seu venv como um kernel de Jupyter notebook, você precisará executar o comando ipython kernel install --user --name=nome_do_venv. Para mais detalhes, esse link pode ser útil.

Financiamento

Esse curso foi baseado na matéria MAC5725 - Linguística Computacional ministrada no Instituto de Matemática e Estatística da Universidade de São Paulo (IME-USP), o qual recebeu financiamento pelo prêmio Faculty Awards to Support Machine Learning Courses, Diversity, and Inclusion at Universities da empresa Google AI.

---

Acknowledgments and Funding

This course was based on the graduate course MAC5725 - Linguística Computacional ministered at the Institute of Mathematics and Statistics of the University of São Paulo (IME-USP) that received funding from the "Faculty Awards to Support Machine Learning Courses, Diversity, and Inclusion at Universities" from Google AI.

nlportugues's Issues

image lint report - consertar no site alguma hora

---

Image #2 & #3
Missing src attribute

Older browsers or other user agents which don’t understand the srcset attribute should get a fallback image.
The sizes attribute has to match the width of the image

The size of the image doesn’t match the sizes attribute (max-width: 740px) 280px, (max-width: 1200px) 35vw + 1rem, 436px. At a viewport of 1000x563 the image was 366 pixels wide instead of the specified 0 (Infinity% difference). The affected viewports are 760x428-1200x1600.

Try using sizes="(min-width: 1280px) 436px, (min-width: 800px) calc(30.43vw + 53px), 274px" instead.

The sizes attribute is a hint for browsers which should tell them how large the image will be displayed. If it doesn’t match the real size, browsers cannot select the correct image source.

<img
class="foto"
srcset="imgs/codigo-280.avif 280w, imgs/codigo-480.avif 480w"
sizes="(max-width: 740px) 280px, (max-width:1200px) 35vw + 1rem, 436px"
alt="Código python em um editor de texto"
loading="lazy"

[Semana 05] Notebook quebra com a versão do tensorflow >= 2.3.0

Opa! Não sabia o melhor lugar para reportar isso, mas na versão mais recente do tensorflow (release 2.3.0 em diante), o método get_writer foi removido da API de callbacks e isso faz o notebook quebrar :(

Curso Processamento Neural de Linguagem Natural em Português I (Coursera)

Estou enfrentando um problema de verificação na entrega da semana 04 no curso "Processamento Neural de Linguagem Natural em Português I" no Coursera.

Os códigos sgd.py e word2vec.py geram resultados corretos quando executados localmente, no entanto, ao realizar a entrega, ocorre erro.

No fórum outros colegas também estão enfrentando o mesmo problema. Gostaria gentilmente que verificasse essa situação quando possível.

Agradeço pela atenção.

ModuleNotFoundError: No module named 'utils.gradcheck'

Hello,

I encountered an error today while trying to execute python run.py, in the EP1 folder:

Traceback (most recent call last):
  File "C:\Users\victo\OneDrive\Desktop\NLPortugues-master\NLPortugues-master\EP 1\run.py", line 11, in <module>
    from word2vec import *
  File "C:\Users\victo\OneDrive\Desktop\NLPortugues-master\NLPortugues-master\EP 1\word2vec.py", line 6, in <module>
    from utils.gradcheck import gradcheck_naive, grad_tests_softmax, grad_tests_negsamp
ModuleNotFoundError: No module named 'utils.gradcheck'

Is it safe to remove the import line for utils? The necessary functionalities from utils are already implemented throughout the file.

Thanks!

errata video Modulo 1 - Problemas I

Coursera eh horrivel entao vou registrar aqui essa errata para n esquecermos. Ja q ela exige editar o video e no momento estamos sem um editor de video, eh um pouco mais trabalhosa do q corrigir um typo.

Aos 0:48 do vídeo Problemas I, entendo que foi dito o número errado, mas de uma maneira que pode confundir bastante quem está aprendendo.
O contexto é distinguir as definições de "ocorrência de palavra" e "tipo de palavra". Foi dita a frase "Então, se eu tenho 'o menino viu o vizinho', eu tenho quatro ocorrências de palavras.", mas de fato são cinco ocorrências (tanto que mais à frente é mencionada a "quinta ocorrência"). O que são quatro são os tipos de palavra.
Sugiro fazer uma correção, já vi correções no Coursera em que a pessoa "dubla" a própria voz (para que se ouça "cinco" nessa frase nesse momento, não "quatro").

Instrucoes para re-submissao da entrega semana 4 (word2vec)

Esse curso tinha alguns problemas e inconsistencias com o coursera na sua versao original, caso vc esteja re-submetendo seu trabalho você apenas terá que fazer pequenas modificações muito simples e rápidas nos arquivos sgd.py e wordvec.py (remover a importacao de utils, adicionar a funcao main e substituir o string que eh impresso a cada 100 iteracoes no arquivo sgd).

Vc pode se guiar pelos novos templates se achar mais fácil, os arquivos deste repositorio foram atualizados.

Segue aqui o commit com as alterações realizadas, a titulo de referencia:
666dc31
a01c183

Problemas com o 'vetores_de_palavras.png'

Estou enfrentando um problema de verificação na entrega da semana 04 no curso "Processamento Neural de Linguagem Natural em Português I" no Coursera.

Tanto na plataforma quanto localmente os arquivos 'sgd.py' e 'word2vec.py' detêm resultados corretos, no entanto, ao entregar a imagem 'vetores_de_palavras.png' não obtenho qualquer tipo de nota, o contador de notas fica zerado como mostra o anexo.

Se for possível, gostaria que analisassem este problema.
Desde já, grato pela atenção.

PS: Estou incluindo também no anexo os arquivo 'sgd.py', 'word2vec.py' e 'vetores_de_palavras.png' para possível análise. No entanto, como o GitHub não suporta a extensão '.py', a extensão destes arquivos estará como '.txt'.

word2vec.txt
sgd.txt