지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 저널정보
- Korean Institute of Information Scientists and Engineers Journal of KIISE Journal of KIISE Vol.48 No.9
- 발행연도
- 2021.9
- 수록면
- 1,052 - 1,060 (9page)
- DOI
- 10.5626/JOK.2021.48.9.1052
이용수
초록· 키워드
오류제보하기
기존의 TF-IDF 기반의 문서 클러스터링 기법은 문서의 문맥 정보인 co-occurrence와 word-order에 대한 정보를 충분히 활용하지 못하고, “차원의 저주”로 인해 성능이 저하되는 문제가 있다. 이를 극복하기 위해서 워드 임베딩 벡터를 가중 평균을 하거나, Word Mover‘s Distance(WMD)를 사용한 기법들이 제안되었는데 제안된 기법들은 문서 간 분류에서는 좋은 성능을 보이지만, 문서 집단을 파악해야 하는 문서 클러스터링 에서는 좋은 성능을 보이지 못했다. 따라서 본 연구에서는 LDA를 활용하여 문서집단을 집단의 대표 문서인 토픽 문서로 새롭게 정의하여 토픽 문서를 기반으로 WMD를 계산하는 것으로 기존 문제를 해결한다. 하지만 WMD가 많은 계산량을 필요로 하기 때문에, 이를 해결하기 위해 각 문서를 토픽 문서와의 WMD값을 축으로 하는 저차원 공간으로 매핑하는 하는 것으로 계산량을 줄이면서 충분한 성능을 보이는 공간 변환 기법을 제시한다.
목차
요약
Abstract
1. 서론
2. 관련 연구
3. 공간 변환을 통한 문서 클러스터링 기법
4. 실험 및 성능 평가
5. 결론 및 향후 연구
References
참고문헌 (20)
참고문헌 신청
C. C. Aggarwal and C. Zhai, Mining text data, Springer Science & Business Media, 2012.
A. Andoni, "Nearest neighbor search: the old, the new, and the impossible," Ph.D. dissertation, Massachusetts Institute of Technology, 2009.
D. M. Blei, A. Y. Ng, and M. I. Jordan, "Latent dirichlet allocation," Journal of Machine Learning Research, Vol. 3, pp. 993-1022, 2003.
A. M. d. J. C Cachopo et al., "Improving methods for single-label text categorization," Instituto Superior Técnico, Portugal, 2007.
I. T. Jolliffe, "Principal components in regression analysis," Principal Component Analysis, Springer, New York, NY, pp. 129-155, 1986.
A. Andoni, "Nearest neighbor search: the old, the new, and the impossible," Ph.D. dissertation, Massachusetts Institute of Technology, 2009.
D. M. Blei, A. Y. Ng, and M. I. Jordan, "Latent dirichlet allocation," Journal of Machine Learning Research, Vol. 3, pp. 993-1022, 2003.
A. M. d. J. C Cachopo et al., "Improving methods for single-label text categorization," Instituto Superior Técnico, Portugal, 2007.
I. T. Jolliffe, "Principal components in regression analysis," Principal Component Analysis, Springer, New York, NY, pp. 129-155, 1986.
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
LDA 와 WMD 기반의 유사 문서 검색 알고리즘에 관한 연구
한국통신학회 학술대회논문집
2022 .02
-
복합 문서의 의미적 분해를 통한 다중 벡터 문서 임베딩 방법론
지능정보연구
2019 .09
-
잘 정의된 분류체계가 없는 문서들을 위한 문서 분류 기법
한국통신학회 학술대회논문집
2018 .06
-
문서 유사도를 통한 관련 문서 분류 시스템 연구
방송공학회논문지
2019 .01
-
MS-Word 문서 접근 제어시스템 설계
한국정보통신학회논문지
2018 .10
-
문서의 벡터표현을 통한 블로그 문서 분류
한국지능시스템학회 학술발표 논문집
2015 .10
-
자동 문서 분류를 위한 딥러닝 기반의 문서 제목 검출 기법
전자공학회논문지
2018 .09
-
XML 문서 키워드 가중치 분석 기반 문단 추출 모델
한국정보통신학회논문지
2017 .11
-
효율적인 문서 구성을 위한 TF-IDF 알고리즘 기반 문서 제안 시스템의 설계
한국컴퓨터정보학회 학술발표논문집
2022 .07
-
WMD 위기상황관리(CM) 발전방안 연구
대한토목학회 학술대회
2021 .10
-
휴리스틱 클러스터링을 활용한 다중 문서 요약 시스템 : 반도체 산업 사례
디지털콘텐츠학회논문지
2022 .08
-
전역 토픽의 지역 매핑을 통한 효율적 토픽 모델링 방안
지능정보연구
2017 .09
-
문서 내부 정보를 이용한 의미 확장 기반의 문서 요약
한국정보과학회 학술발표논문집
2019 .06
-
한국어 기술문서 분석을 위한 BERT 기반의 분류모델
한국전자거래학회지
2020 .02
-
역인덱스 기반 상향식 군집화 기법을 이용한 대규모 학술 핵심어 분석
한국산학기술학회 논문지
2018 .11
-
유사도 기반 클러스터링을 활용한 효율적이고 효과적인 문서 중복 제거 기법
한국정보과학회 학술발표논문집
2021 .06
-
Feature Expansion based on LDA Word Distribution for Performance Improvement of Informal Document Classification
Journal of KIISE
2016 .09
-
문서 처리 자동화를 위한 인보이스 이미지의 구조 인식 방법
한국산업정보학회논문지
2023 .04
-
희소한 텍스트 데이터 분석을 위한 로버스트 일반화 선형모형
한국지능시스템학회 논문지
2020 .10
-
효과적인 특허 문서분류를 위한 기법 비교
한국정보과학회 학술발표논문집
2019 .06
이 논문의 저자 정보
이 논문과 함께 이용한 논문
e커머스 고객들을 위한 딥러닝 기반의 허위 후기 필터링 및 하이브리드 추천시스템
김선준
,
임성훈
대한산업공학회 추계학술대회 논문집
2020
.11
광고 글 필터링 모델 적용 및 성능 향상 방안
박래근
,
윤혁진
,
신의철
외 2명
한국산학기술학회 논문지
2020
.11
LDA 와 WMD 기반의 유사 문서 검색 알고리즘에 관한 연구
김동희
,
유명식
한국통신학회 학술대회논문집
2022
.02
무인항공기의 효율적인 감시정찰을 위한 머신러닝 기반 차원축소 기법
안명기
,
김재경
,
권철희
한국통신학회 학술대회논문집
2019
.06
다양한 딥러닝 알고리즘과 활용
김지원
,
표현아
,
하정우
외 2명
정보과학회지
2015
.08
최근 본 자료
댓글(0)
0