NLP/AI/Statistics

리눅스에서 실행 결과 혹은 그 과정을 영상으로 녹화하는 방법으로 Kazam을 소개하고자 한다. Kazam은 화면 전체, 일부 등을 골라서 캡쳐나 영상 녹화가 가능해서 편리하다. Kazam 설치 과정은 다음과 같다. $ sudo apt-get update $ sudo apt-get install kazam $ kazam 위와 같이 설치를 완료한 후, 마지막처럼 kazam을 실행시켜주면 된다. kazam을 실행시키면 위와 같은 창이 뜨는데, 전체 화면을 녹화할 경우 fullscreen, 일부분을 녹화할 경우 area를 선택해서 부분을 드래그 하고 ENTER 하면 그 부분만 녹화가 진행된다. capture 버튼을 눌러 시작해도 되고 ctrl+window+r 의 단축키를 사용해도 녹화가 시작된다. 녹화 종료는 ..

python에서 작업하는 도중에 segmentation fault (core dumped) 문제가 발생했다. 이는 대부분 C에서 발생하는 문제라고 하는데, python에서도 종종 발생한다고 한다. segmentation fault는 스크립트에서 어디가 문제인지조차 알려주지 않기 때문에 debug를 통해 어디가 문제인지 확인하는 것이 중요하다. gdb라는 것을 사용하여 segmentation fault의 오류 발생 시점이 어디인지 알 수 있다. #. 실행시키고자 하는 python파일 이름을 text.py라고 가정한다. $ mkdir -p ~/.config/gdb $ cd ~/.config/gdb $ wget https://hg.python.org/cpython/rawfile/3.6/Tools/gdb/lib..

어떤 package를 설치하려고 하는데 pip3 에러가 뜨는 경우가 발생하여 이를 정리하고자 한다. 새로운 docker 환경에서 특정 url을 불러오는 newspaper package를 설치하는 과정에서 에러가 발생했고 이를 pip가 설치되어 있지 않?기 때문에 python버전에 맞는 pip를 다시 설치해줄 필요가 있다. $ sudo apt-get remove python3-pip $ sudo apt-get install python3-pip 우선, 기존에 설치되어 있던 것과 꼬일 수 있기 때문에 기존의 것을 삭제하고 아래의 코드와 같이 다시 재설치한다. 그러면 pip3를 사용하여 package 설치가 가능해진다.

Title: 한국어 어휘 의미망을 활용한 CRF 모델 기반 개체명 인식 (CRF based Named Entity Recognition Using a Korean Lexical Semantic Network) Authors: Seoyeon Park, Cheolyoung Ock Published: Journal of KIISE, Vol. 48, No. 5, pp. 556-567, 2021. Paper: https://www.kci.go.kr/kciportal/ci/sereArticleSearch/ciSereArtiView.kci?sereArticleSearchBean.artiId=ART002716508 한국어 어휘 의미망을 활용한 CRF 모델 기반 개체명 인식 한국어 어휘 의미망을 활용한 CRF 모델 기반..

GPT-1: Improving language understanding by generative pre-training GPT-2: Language models are unsupervised multitask learners GPT-3: Language models are few-shot learners Slideshare: https://www.slideshare.net/DanbiCho2/gpt-models Gpt models I summarized the GPT models in this slide and compared the GPT1, GPT2, and GPT3. GPT means Generative Pre-Training of a language model and was implemented b..

간혹 기존에 작업하는 코드를 원격으로 수정하는 과정에서 Taberror가 발생하는 경우가 있다. (데스크탑에서의 Tab 크기와 원격에서의 Tab크기가 달라서 발생하는 것 같았다.) 그래서 이 글에서는 vim을 사용하는 과정에서 Tab 크기를 동일하게 처리하는 방법을 소개한다. 우선 .vimrc 파일을 연다. $ vim .vimrc 흔히 Tab을 space 4개로 처리하기 때문에 아래의 내용을 .vimrc에 작성한다. (만약 Tab을 space 8개로 처리하고 싶다면 4 대신 8로 작성하면 된다.) set smartindent set tabstop = 4 set expandtab set shiftwidth = 4 # 들여쓰기 작성 후 보통 바로 적용이 되지만 혹시라도 적용이 안되었다면 $ source .v..

Title: Attention boosted deep networks for video classification Authors: You, J., and Korhonen, J. Published: In 2020 IEEE Internationl conference on image processing (ICIP), pp. 1761-1765, 2020. Paper: ieeexplore.ieee.org/abstract/document/9190996 Attention Boosted Deep Networks For Video Classification Video classification can be performed by summarizing image contents of individual frames int..

Title: A survey on deep learning based approaches for action and gesture recognition in image sequences Authors: Asadi-Aghbolaghi, M., Clapes, A., Bellantonio, M., etc. Published: In 2017 12th IEEE international conference on automatic face & gesture recognition, pp. 476-483. Paper: ieeexplore.ieee.org/abstract/document/7961779 A Survey on Deep Learning Based Approaches for Action and Gesture Re..

Title: Electra: pre-training text encoders as discriminators rather than generators Authors: Clark, K., Luong, M.T., Le, Q.V., and Manning, C.D. Published: In arXiv preprint arXiv:2003.10555, 2020. Paper: arxiv.org/abs/2003.10555 ELECTRA: Pre-training Text Encoders as Discriminators Rather Than Generators Masked language modeling (MLM) pre-training methods such as BERT corrupt the input by repla..

Title: A survey on automatic detection of hate speech in text Authors: Fortuna, P., and Nunes, S. Published: In ACM Computing Surveys (CSUR), Vol. 51(4), pp. 1-30, 2018. Paper: dl.acm.org/doi/abs/10.1145/3232676 A Survey on Automatic Detection of Hate Speech in Text | ACM Computing Surveys Preview is not available. By clicking download,a new tab will open to start the export process. The process..