Popit (Page 29)

Coursera Machine Learning으로 기계학습 배우기 : week4

개요 지난 시간에 이어 Coursera Machine Learning으로 기계학습 배우기 : week4 정리를 진행한다. 목차 해당 포스팅은 연재글로써 지난 연재는 아래의 링크를 참고한다. * Coursera Machine Learning으로 기계학습 배우기 : week1 * Coursera Machine Learning으로 기계학습 배우기 : week2 * Coursera Machine Learning으로 기계학습 배우기 : week3 글을 읽기에 앞서… * 본글은 필자가 코세라 기계학습을 공부를 하는 과정에서 개념을

Logstash 필터 grok 특징 하나

윈도우 이벤트 로그의 Elasticsearch 연동 시, winlogbeat를 이용하면 한글 인코딩같은 거 신경 안 써도 되고 정말 편하다. 특히 로그 필드 정규화는 이래도 되나 싶을 정도로 알아서 다 해준다. 이래저래 이벤트 로그는 다루기 참 편한 것 같다. Logparser만 있어도 거의 RDB처럼 분석할 수 있으니까. 그런데 nxlog 등을 통해 이미 이벤트 로그를

다양한 아기발걸음으로 배우기

지난 주에 있던 일이다. 동료 중국 개발자에게 모듈 개념 구현을 설명하기 위해 코드 리뷰를 했다. 코드를 보며 다룬 대화의 내용을 대략 묘사하면 아래 그림과 같다. 모듈화의 기준은 무엇인가? 애초에 M(앞서 언급한 중국 개발자)이 짠 코드는 위 그림과 조금 차이가 있었다. M이 짠 코드는 Tenancy 모듈(우리는 REST API를

소소한 인텔리J 팁 공유(auto import 처리)

개요 멜론에서 intelliJ로 개발하다 동료들을 당황시킨 경험이 있어 해결책을 찾아보고 공유합니다. 편의상 경어체는 생략합니다. 현상 인텔리J를 사용하다 auto import 기능 사용시 import시 개별 개별 클래스의 import가 아니라 패키지가 *패턴으로 전체 다 import 하는것으로 IDE가 치환해 버리는 현상이 발생하였다. 문제점 위의 현상은 아래와 같은 이슈가 있다. * 소스코드 공동 관리시 이클립스를 쓰는

[개발바보들]ES2015 리팩토링 – 2. 빠레꽁(var let const)

개발 바보들의 keen입니다. 이 글은 ES2015 리팩토링 두번째 글입니다. 개발 바보들 블로그에서 아래의 링크를 클릭해서 방문할 수 있습니다. 첫번째에서 두번째 오기까지 굉장한 오랜 시간이 걸렸지만 세번째는 그렇지 않을 것입니다. 몸풀기빠레꽁 본문 JavaScript 는 언제나 쉽지만 또 언제나 어렵다. 이런 개념을 처음 갖게 된게 아마도 변수가 내가 생각하는데로 작동하지 않던 시점이었던

[해결방안] docker를 운영하다 용량이 꽉찼을때

개요 멜론 빅데이터 쪽 docker 사용 장비에서 /var/lib/docker 하위 경로로 인해 해당 마운트의 디스크가 꽉 찼다는 연락을 받았다. 이에 따라 해결책을 모색한 뒤 포스팅 한다. 해결책 안쓰는 이미지와 컨테이너 삭제하기 아래 명령어로 안쓰는 이미지와 컨테이너를 삭제 할 수 있다. 자세한 사용법은 링크를 참고한다. $ docker system prune -a -f

Coursera Machine Learning으로 기계학습 배우기 : week3

개요 지난 시간에 이어 Coursera Machine Learning으로 기계학습 배우기 : week3 정리를 진행한다. 목차 해당 포스팅은 연재글로써 지난 연재는 아래의 링크를 참고한다. * Coursera Machine Learning으로 기계학습 배우기 : week1 * Coursera Machine Learning으로 기계학습 배우기 : week2 글을 읽기에 앞서… * 본글은 필자가 코세라 기계학습을 공부를 하는 과정에서 개념을 확고히 정리하기 위하는데 목적이 있다. (필자가

제일 쉬운 로그 분석

popit에 처음 글 올립니다. 저는 주로 IDS 등 네트워크 보안장비 로그 분석하는 일을 해왔구요. 앞으로 로그 분석이나 보안 관련된 개인적인 경험을 풀어볼까 합니다. 첫번째 주제는 '보안 분야의 로그 분석에 대한 인식'입니다. 지적 많이 해주시구요. 편의상 경어는 생략합니다. 어느 기관 강의하러 갔다가 생긴 일 좀 높으신 듯한 분과

kubernetes wc[defunct] 프로세스 버그 관련

현재 운영하는 서비스가 kubernetes 기반으로 운영되고 있는데 최근 예상하지 못한 장애 상황이 발생하여 조치한 내용을 공유해 드립니다. 장애 상황 * docker container가 운영되고 있는 서버에서 모든 명령(top 등) 수행시 다음과 같은 에러 메시지가 출력됨 "resource temporarily unavailable" * /var/log/syslogs 에도 동일한 메시지가 많이 나타남 * 각 docker container는

Kafka 운영자가 말하는 Topic Replication

이번 글에서는 kafka에서 사용하는 replication에 대해 알아보도록 하겠습니다. 예전부터 해당 내용에 대해 정리해서 글을 올리려고 했었는데, 생각보다 많이 늦어졌습니다. kafka에 대한 예전 글들도 있으니 참고하시면 좋을 것 같습니다. Kafka 운영자가 말하는 처음 접하는 Kafka Kafka 운영자가 말하는 Kafka Consumer Group Kafka 운영자가 말하는 Producer ACKS Kafka 운영자가 말하는 Kafka 서버

Coursera Machine Learning으로 기계학습 배우기 : week2

개요 지난 시간에 이어 Coursera Machine Learning으로 기계학습 배우기 : week2 정리를 진행한다. 목차 해당 포스팅은 연재글로써 지난 연재는 아래의 링크를 참고한다. * Coursera Machine Learning으로 기계학습 배우기 : week1 글을 읽기에 앞서… * 본글은 필자가 코세라 기계학습을 공부를 하는 과정에서 개념을 확고히 정리하기 위하는데 목적이 있다. (필자가 나중에 내용을 다시 찾아보기 위한 목적이

[딮러닝/영상처리] Convolution & Correlation 이해하기

CNN과 영상처리에 대해서 공부하면서, Convolution에 대한 내용을 정리한 내용입니다. 제가 잘못 이해하고 있는 부분에 대해서는 언제든지 지적해주시면 감사하겠습니다. 1. Convolution & Correlation 1-1. Convolution, 합성곱 위키피디아에서 Convolution(영문)을 찾아보면 보면 정의는 다음과 같이 되어있습니다. - 1D Convolution - 2D Convolution 1-2. Correlation, 상관분석 수식 정의는 다음과 같습니다. - 1D Correlation

Latest