ETC22 Windows 배치 파일 - 파일 복사 (copy, xcopy, robocopy) ## 네이버 블로그에 포스팅한 내용 옮겨오기 1. copy: 하나 이상의 파일을 복사 가장 기본적인 파일 복사 명령어 (하위 폴더 복사는 X) 확장자가 없는 파일도 확장자를 임의로 추가하여 복사할 수 있음copy "복사할 파일 경로" "붙여넣기할 폴더 경로(파일명 지정 가능)"copy "C:\Program Files\AAA\file" "D:\backup\%date%\file.txt" 2. xcopy: 파일과 디렉토리 트리를 복사 copy 명령어에서 폴더 복사 기능을 포함한 명령어xcopy "복사항 파일 경로" "붙여넣기할 폴더 경로"xcopy "C:\Program Files\AAA" "D:\backup\%date%" 3. robocopy: 견고한 파일 복사 기본 제공되는 copy 명령어 중 멀티.. 2024. 5. 1. 13:20 Spark 설치 Process 2022.12.05Spark 설치 Process 기록 1. java 17 설치 및 환경변수 설정 2. spark 설치 및 환경변수 설정 (버전 : spark-3.0.3-bin-hadoop3.2) 3. winutils.exe - Hadoop 폴더에 다운 및 환경변수 설정 (하둡 버전 3.2로 맞춰야함-확인) 4. Scala 3 설치 및 환경변수 설정 <b.. 2024. 4. 4. 22:30 CentOS 7에 Docker 설치 CentOS 7에 Docker 설치하기 1. Docker 설치 -- 저장소 설정 sudo yum install -y yum-utils sudo yum-config-manager \ --add-repo \ https://download.docker.com/linux/centos/docker-ce.repo -- Docker 엔진 설치 sudo yum install docker-ce docker-ce-cli containerd.io docker-compose-plugin yum list docker-ce --showduplicates | sort -r sudo yum install docker-ce-18.03.1 docker-ce-cli-18.03.1 containerd.io docker-compose-plu.. 2024. 3. 28. 20:52 콘웨이 법칙 콘웨이 법칙 시스템을 설계하는 조직은 그 조직의 의사소통 구조를 닮은 구조의 디자인을 만들게 된다. -> 조직의 결합도(의사소통)가 제품의 품질의 영향을 미친다. ※ 역콘웨이 법칙 : 시스템 구조에 따라 조직 구조를 변경 참고자료 https://yozm.wishket.com/magazine/detail/1494/ 2024. 3. 11. 15:50 캐싱 전략 1. 캐시 (Cache) 데이터를 미리 복사해놓는 임시 저장소 Cache Lookup : 데이터 주소를 바탕으로 캐시에 접근하는 과정 ... Cache Hits와 Miss로 이어짐 Cache Hits : 캐시에 찾는 데이터가 존재하는 경우 Cache Miss : 캐시에서 데이터를 찾을 수 없는 경우 Cache Replacement : 캐시가 가득 차서 이전 개체를 제거해야 하는 경우 > Cache Hits 시 캐시 스토어에서 바로 가져온다. > Cache Miss 시 해당 처리 시에는 DB에서 가져온 후, 그 이후는 캐시의 데이터를 업데이트하여 Hits 할 수 있도록 함. 2. 캐시 종류 - 로컬 캐시 서버 내에서 접근하는 캐시 속도 빠름 쓰기 동작 시 데이터 일관성 깨지므로 캐시 동기화 비용 발생 - .. 2024. 2. 22. 14:22 데이터 분석가 요구 역량 데이터 분석가가 갖춰야 할 9가지 역량 - Hard Skill 1) 사용 언어 - SQL : 데이터 추출 및 분석 시 활용 - Python : 전처리 + 요인 분석, 예측 모델링 등의 심화 분석 시 활용 2) 통계학 - 상관관계, 회귀분석, 인과관계 등의 통계적 개념 - 가설 검정 관련 기초 통계학 3) 도메인 및 비즈니스에 대한 이해 - 산업에 따라 정의되는 문제가 상이해짐 - 비즈니스 지표 및 KPI 성공 지표에 대한 파악은 서비스 전반 이해에 꼭 필요함 4) 분석 툴 - SaaS 툴 : 구글 애널리틱스, 앰플리튜드 등 - BI 툴 : 태블로 등 * 분석 툴 활용 시에 필요한 데이터 마트 설계 및 구축 자동화 방법 습득도 도움 5) 데이터 엔지니어링 - 업무 자동화 스킬 : 일회성 분석(Ad-hoc).. 2024. 2. 21. 13:31 Windows 성능모니터 카운터 성능 측정 시 주요 사용하는 Windows 성능모니터 카운터 리스트 \Processor(_Total)\% Processor Time \Processor Information(_Total)\% Processor Time \Memory\% Committed Bytes In Use \Memory\Available Bytes \Network Interface(*)\Bytes Total/sec \PhysicalDisk(_Total)\% Disk Time \PhysicalDisk(_Total)\% Disk Read Time \PhysicalDisk(_Total)\% Disk Write Time \LogicalDisk(_Total)\% Disk Read Time \LogicalDisk(_Total)\% Disk Wr.. 2024. 2. 14. 15:49 A/B 테스트 2023.06.23 (금) 본 게시물은 위키독스 『A/B 테스트 따라하기』 를 참고하였습니다. 1. A/B 테스트란? - 기존 소프트웨어와의 변경 사항이 유의미한지 검증하는 무작위 대조 실험 - 무작위 대조 실험에서 독립변수는 최대한 통제하고, 통제할 수 없는 독립변수는 무작위화함 -> A/B 테스트를 하는 목적 1) 인과관계 추론 : 상관 관계를 인과관계로 오인하는 오류를 막기 위 2) 예상치 못한 영향 감지 2. A/B 테스트 조건 - 지표 정의 1) 목표 지표 (=성공 지표=핵심 지표) : 정량화된 궁극적인 지표 2) 요인 지표 (=사인 포스트 지표=간접 지표=예측 지표) : 목표 지표의 한계 보완, 목표 지표와 상관 관계, 목표 지표보다 더 민감하게 움직임 3) 방어 지표 (=가드레일 지표) : .. 2024. 2. 14. 15:13 Cold Start 문제 및 해결 방안 2023.08.03 Cold Start란? ▶ 새로운 사용자에 대한 충분한 정보가 수집되지 않아 적절한 제품을 추천해주지 못하는 문제 ▶ 초기 구축 시 데이터가 없는 경우, 신제품이 출시되어 사용자 정보가 없는 경우, 새로운 사용자의 접근으로 인해 정보가 없는 경우 등에서 발생 해결 방법 ▶ 기존 유저와 신규 유저에 대해 상이한 추천 시스템 적용 (=하이브리드 추천 시스템) ▣ 읽어보면 좋을 자료 https://medium.com/uplusdevu/%EB%A8%B8%EC%8B%A0%EB%9F%AC%EB%8B%9D-%EC%8B%9C%EA%B3%84%EC%97%B4-%EC%98%88%EC%B8%A1%EC%9D%98-cold-start-%EB%AC%B8%EC%A0%9C-%ED%95%B4%EA%B2%B0-e06.. 2024. 2. 14. 13:30 이전 1 2 3 다음
