Latest

Hive 와 Druid로 울트라-빠른 OLAP 분석하기-1편

Hive 와 Druid로 울트라-빠른 OLAP 분석하기-1편

다음 글은 https://hortonworks.com/blog/apache-hive-druid-part-1-3/  포스팅에 대한 요약글이다. 아직 part1 만 시작한 글이지만 얼마나 좋길래? 울트라란 용어를 남발하였는지 살펴 보기로 하자. 한줄 요약하자면 SQL-on-Hadoop기술의 de-facto Hive와 OLAP engine Druid가 만나 초고속 분석을 제공한다는 이야기이다. Druid는 고성능 컬럼 기반 분산 데이터

By jerryjung
InteliiJ 디버깅하기

InteliiJ 디버깅하기

안녕하세요? 이번 시간엔 intellij의 debugging 을 간단하게 진행해보려고 합니다. 모든 코드는 Github에 있기 때문에 함께 보시면 더 이해하기 쉬우실 것 같습니다.굉장히 기초적인 수준이지만, System.out.println으로 디버깅 하셨던 분들에게 도움이 될것 같아 정리하였습니다. 주요 단축키 꼭 디버깅이 아니더라도 아래 단축키 정도는 익혀두면 여러모로 쓸 곳이 많다. * shift + shift : 전체

By jojoldu
실리콘밸리의 IPO 열풍

실리콘밸리의 IPO 열풍

최근 미국 테크 기업들의 IPO 열풍이 뜨겁다. 한동안 불안했던 주식시장 때문에 상장을 미루어왔던 실리콘밸리의 “유니콘” 기업들이 최근 잇달아 상장하면서 투자자들의 많은 관심을 받고 있다. 대표적인 예로 Twilio와 Nutanix가 작년 8월과 9월에, 그리고 올해에도 Snap과 Cloudera가 3월과 4월에 각각 나스닥 문을 두드렸다. IPO는 초기 투자자들뿐만 아니라 오랫동안 일해온 직원들이 주식옵션을 통해

By 박철수
DB 데이터를 Hadoop에 저장 시 삽질 두가지.

DB 데이터를 Hadoop에 저장 시 삽질 두가지.

최근 SQLServer에 저장된 데이터를 HDFS로 저장하는 작업을 하고 있습니다. 최근까지 잘 동작하는 프로그램에 다음 두가지 문제가 발생하여 삽질한 내역을 공유합니다. 1. 데이터 건수가 맞지 않는 문제 2. 잘못된 일자가 저장되는 문제 DB to HDFS DB에 저장되고 있는 데이터를  HDFS에 저장할 때 많이 사용하는 방법이 DB의 레코드 중에 생성 일자 또는

By 김형준
개발자가 배우는 R : 7강, 가설, 그래프 배워보기

개발자가 배우는 R : 7강, 가설, 그래프 배워보기

개요 이번 포스팅에는 앞으로 배울 회귀분석 등에 필요한 가설에 대한 통계학의 기본 이론과 그래프(plot)를 그리는 방법을 알아본다. 코드중심의 설명이기 때문에 본문 보다는 코드의 주석이 집중적으로 추가되어 있으니 참고 바란다. 가설검증 통계 데이터에서 인사이트르 얻기 위해 가설을 세우는 방법을 잠깐 알아보자. 이때, 검증자가 주장하고 싶은 가설을 H1, 반대되는 가설을

By 광식 이
딥러닝 프레임워크 조사와 몇가지 홍보

딥러닝 프레임워크 조사와 몇가지 홍보

지난 4월 18일, 페이스북은 새로운 오픈소스 딥러닝 프레임워크인 Caffe2를 발표했다. 이로써 익혀야 할 도구가 하나 더 늘어난 듯 하다. 2015년부터 쏟아지기 시작한 딥러닝 프레임워크 전쟁에서 텐서플로우가 우위에 섰지만, 최근 주목을 받고 있는 Chainer, MXNet와 PyTorch 등도 조금씩 사용자층을 확대하고 있다. 이 글에서는 범람하고 있는 딥러닝 도구들을 간략히 비교하고, 관련 책과

By 송 준이
Hadoop에서 FileSystem 객체에 대한 Tip 몇가지

Hadoop에서 FileSystem 객체에 대한 Tip 몇가지

징검다리 연휴이기는 하지만 그래도 오늘은 평일이기 때문에 출근하신 분들을 위해  Hadoop에서 파일 처리시 간단한 팁 하나 공유합니다. 문제 정의 Hadoop 파일 처리하는 Application 개발 시 Hadoop File System의 동작 원리를 제대로 이해하지 못하면 데이터가 제대로 저장되지 않는 경우가 많습니다. Hadoop File API를 이용하여 파일에 데이터를 저장하는 경우 Hadoop이 일반적인 파일시스템과

By 김형준
[리니지2 레볼루션] 원하는 마을로 텔레포트 하기

[리니지2 레볼루션] 원하는 마을로 텔레포트 하기

PC 버전에 존재하던 NPC 대화 후 텔레포트 기능이 모바일 버전에서는 지원되지 않는다. 따라서 멀리 떨어진 마을로 가야하는 경우, 열심히 뛰어가야 하는 경우가 많은데 아래 내용을 알고 있다면 그러지 않아도 된다. 의외로 모르는 사람이 많아서 정리해 본다. 첫번째 방법 : 지도의 포털 활용 이동하고자 하는 맵의 지도를 클릭한 후 포탈 탭에서 가고자하는

By 괴도루팡
2017 NDC 참관 후기

2017 NDC 참관 후기

위의 사진은 날도 조코 푸르른 넥슨코리아의 전경(..) 말로만 듣던 NDC를 처음으로 참관해봤다. 작년에는 표를 구했는데 개인사정으로 못 보게 되어 리플레이로만 봤었는데, 실제로 참관해보니 재밌었다. 그리고 넥슨에서 일하게 된 지 이제 4개월 쯤 되었는데, 같은 팀원분들이 발표를 준비하는 과정에서부터 발표하기까지를 가까이에서 관찰해볼 수 있었던 것도 좋았다. 그리고 팀원분들이 다 존잘이셔서 '

By 강한별
[리니지2 레볼루션] UR 등급 제작 핵심 정리

[리니지2 레볼루션] UR 등급 제작 핵심 정리

아래 글은 공카 공지사항과 마그달레나님의 글을 보고 정리한 내용입니다.4 월 29일 업데이트로, 레볼루션 최상위 등급인 UR 등급이 공개되었습니다.UR등급 제작은 [대장간] -> [제작]을 통해서 진행하실 수 있습니다.제작에 필요한 재료는 빛나는 승급석, 제작재료, 장비 결정체, 레시피 등 총 4가지 입니다. ■ 레시피 레시피는 미확인 레시피, 찢어진 레시피 조각, 미확인

By 괴도루팡
[리니지2 레볼루션] 파티 플레이 개선 내용 정리 (4/29일 업데이트)

[리니지2 레볼루션] 파티 플레이 개선 내용 정리 (4/29일 업데이트)

4/29일 업데이트 이후 가중 중요한 두가지 파티 플레이 개선 내용을 정리 합니다. 인터페이스가 약간 개선되었지만 그것은 그리 큰 변화는 아니며 핵심은 아래 두가지로 요약 가능 주위에 있는 캐릭터 클릭 후 그 파티에 참가가 가능 위 그림에서 처럼 파티가 되어 있지 않은 상태에서 이미 파티를 하고 있는 캐릭터 클릭 후

By 괴도루팡