you've got to find what you love. you've got to find what you love.

가끔씩 운영하는 웹사이트에 bot으로 공격이 들어올 경우가 있어서 처리방법을 기록해둡니다.  리눅스 ec2에는 iptables 이 기본적으로 설치되어있었습니다.    iptables 규칙확인 sudo iptables -L -v -n   차단할 ip 확인 아파치 로그 기본 위치 : /etc/httpd/logs/access_log 여기에서 아래와 같이 공격이 들어오는 ip를 확인할 수 있습니다.  172.**.**.*** - - [27/Aug/2024:15:32:24 +0900] "GET / HTTP/1.1" 200 ..   특정 IP 주소 차단하기 sudo iptables -A INPUT -s [차단할 IP 주소] -j DROP   간단하게 공격하는 IP를 차단할 수 있습니다.

flair는 사용 태그 개수가 적어서 한국어 특화된 개체명인식기를 찾다 발견했습니다.   https://github.com/eagle705/pytorch-bert-crf-ner.git GitHub - eagle705/pytorch-bert-crf-ner: KoBERT와 CRF로 만든 한국어 개체명인식기 (BERT+CRF based Named Entity RecognKoBERT와 CRF로 만든 한국어 개체명인식기 (BERT+CRF based Named Entity Recognition model for Korean) - eagle705/pytorch-bert-crf-nergithub.com  우성 저장소를 클론하고..  git clone https://github.com/eagle705/pytorch-be..

최근에 진행하는 프로젝트에서 다양한 태그(사람, 회사, 조직 등)를 지원하면서 성능이 좋은 한국어 NER 모델이 필요해졌습니다.  최근에 나온 NER 모델 위주로 사용방법과 성능 관련 내용을 정리해보겠습니다.    Flair 소개    Flair는 자연어 처리(NLP) 작업을 간단하고 직관적으로 수행할 수 있도록 하는 Python 기반의 라이브러리입니다. 문장 임베딩(sentence embeddings), 이름된 엔티티 인식(NER), 텍스트 분류(text classification), 품사 태깅(POS tagging) 등의 작업을 지원합니다. 성능이 괜찮고 사용이 간단하다고 해서 사용해봤습니다.   https://github.com/flairNLP/flair GitHub - flairNLP/flair:..