개체명인식1

• 

  국립국어원 말뭉치 개체 추출 import os, glob import json import pandas as pd from tqdm.auto import tqdm tqdm.pandas() # 폴더 안에 파일들을 각각 읽기 위함 DATA_PATH = './kor_ner_data' folders = os.listdir(DATA_PATH) folder_1_path = os.path.join(DATA_PATH, folders[0]) folder_2_path = os.path.join(DATA_PATH, folders[1]) folder_1_file_list = os.listdir(folder_1_path) folder_2_file_list = os.listdir(folder_2_path) # 확실히 800MB가 넘는 파일들을 다루다보니 주.. Machine Learning/DL - NLP 2022. 12. 26.