본문 바로가기
Study/소프트웨어공학&비즈니스애널리틱스 (최성철 교수님) 2023-2

사용할 AWS DB 서비스

by JejuSudal 2023. 11. 7.

 

EC2 RDS S3 SageMaker
  • 크롤링 컨테이너
  • Docker 컨테이너로 구성성
  • 주요 데이터 저장 DB
  • 객체 스토리지 : 파일자체로 저장
  • ML KoBERT model 서버 관리 및 학습
  • 크롤링 데이터 바로 RDS에 저장
  • 비정형 데이터 저장 : FE vue.js, BE node.js python 저장
  • 정제된 크롤링 데이터
  • 저장 데이터 형태 : 관계형, 텍스트 (뉴스 기사, 키워드, 관련 기사수, 워드 클라우드 저장 주소)
  • 크롤링 xlsx 파일
  • 수정 ML KoBERT 모델 저장
 
728x90