끄적 끄적 로깅! 로깅!

1. SRE/DEVOPS의 개념과 SRE는 무엇을 하는가? SRE는 클래스 DevOps는 구현 지표 정의와 모니터링 하드웨어 리소스 가용량 계획 형상 변경 관리 장애 처리 문화 확립 2. SRE는 어떻게 일하는가? 부서 간 단절 줄이기(오너쉽 공유) 정상적으로 실패받아들이기(에러 버짓 등의 개념 도입) 점진적인 변경 구현(작은 단위 변경으로 리스크 최소화) 자동화 및 툴링(수작업을 줄여서 리스크 최소화 및 업무 절감) 모든것을 수치화(지표뿐만 아니라, 수동 작업시간 장애시간 등 모든 것을 데이터화) 3. SRE의 주요 지표 SLI/SLO SLI(Service Level Indicator) 서비스에 대한 수준을 측정하여, 정량적으로 정의한 지표 응답시간 에러율 처리량 가용성 내구성 SLO(Service L..

New-Object System.Net.Sockets.TcpClient("1.1.1.1", 21) 파워쉘에서 FTP 포트 오픈 시에 1New-Object : Exception calling ".ctor" with "2" argument(s): "An operation on a socket could not be performed because the system lacked sufficient buffer space or because a queue was full cs 에러가 발생하였습니다. 1netstat -ancs netstat로 확인해보니, 무지하게 많은 포트가 TIME_WAIT 상태로 오픈되어있었고, 그로 인해서 더이상 포트를 열수 없는 상태였습니다.왜 이런 일이 발생했는지 조사해보니 윈도우즈 ..

fabric 설치 1pip install fabriccs install.py(fabfile.py) 스크립트 작성123456789101112131415161718192021222324252627from fabric.state import outputfrom fabric.api import run, env, put, sudo #env.hosts=[# "root@server-001.test.com"#]#env.password = "passwd" #env.warn_only = True#output.status = False#output.everything = Falseenv.disable_known_hosts = Trueenv.reject_unknown_hosts = False def install_daemon..

CDH5.8 버전 업데이트 하고, Zeppline 재컴파일 후 mvn clean package -Pspark-1.6 -Dhadoop.version=2.6.0-cdh5.8.0 -Phadoop-2.6 -Pvendor-repo -DskipTests Zeppline 에서 pyspark 실행시 아래 발생 Py4JJavaError: An error occurred while calling o0.textFile.: com.fasterxml.jackson.databind.JsonMappingException: Could not find creator property with name 'id' (in class org.apache.spark.rdd.RDDOperationScope) at [Source: {"id":"2"..