TEAM EDA

1. 절대경로 찾기 import os os.getcwd() '/home/ubuntu/Upstage AI : 수식인식기' 2. 압축 풀기 from zipfile import ZipFile dataset = ZipFile('/home/ubuntu/Upstage AI : 수식인식기/train_dataset.zip') dataset.extractall('/home/ubuntu/Upstage AI : 수식인식기/') dataset.close() '/home/ubuntu/Upstage AI : 수식인식기/train_daset' 폴더가 생성됨

본 포스터는 한빛미디어에서 [나는 리뷰어다]를 통해 책을 지원받아 작성한 리뷰 포스터입니다. 먼저 저는 대학원생이고 스파크의 경우 아예 처음이었습니다. 1. 소개 Apach Spark는 SQL, 머신러닝 등을 위한 대규모 데이터 처리 분석 엔진입니다. 한마디로 빅데이터를 분석하기 위한 언어입니다. 보통 Hadoop과 스파크 둘 중 하나의 언어를 사용하는데, 구글 클라우드 잼의 글에서는 아래와 같이 비교를 한다고 합니다. Hadoop은 주로 디스크 사용량이 많고 맵리듀스 패러다임을 사용하는 작업에 사용됩니다. Spark는 더 유연하지만 대체로 더 많은 비용이 드는 인메모리 처리 아키텍처입니다. 각 기능을 이해하고 있으면 언제 어떤 것을 구현할지 결정하는 데 도움이 됩니다. 출처 : https://cloud..

NIPA 서버 사용도중에 NVIDIA-SMI Driver가 실행되지 않는 문제 발생 NVIDIA-SMI has failed because it couldn't communicate with the NVIDIA driver. Make sure that the latest NVIDIA driver is installed and running해결책 : NVIDIA Driver를 다시 설치 apt --installed list | grep nvidia-driver -> 문제 : WARNING: apt does not have a stable CLI interface. Use with caution in scripts. -> 설치된 nvidia-driver를 확인하는 것으로 확인안해도 무방하고 아래의 명렁..