개발노하우/Open.Source
-
[LOGSTASH] logstash 전달용 nginx log conf개발노하우/Open.Source 2016. 11. 8. 19:05
map $upstream_response_time $upstream_response_time_without_hyphen { default $upstream_response_time; "" 0;} map $request_time $request_tirme_without_hyphen { default $request_time; "" 0;} log_format json '{"x_request_id": "$request_id", ' '"connections_active": "$connections_active", ' '"remote_addr": "$remote_addr", ' '"remote_user": "$remote_user", ' '"body_bytes_sent": "$body_bytes_sent", ' ..
-
Hadoop-2.6.4 + Zookeeper-3.4.8 + Spark-1.6.1 install개발노하우/Open.Source 2016. 6. 13. 15:02
들어가며, 본 포스트는 처음 하둡을 접하고 테스트 기반을 위한 설치 과정을 적은 내용입니다. 다소 미흡한 점이나 오류가 있을 수 있습니다. 또한 현재 이 글을 쓰고 있는 시점에 Hadoop은 2.7.2(25 January, 2016) 까지 나와있는 상태이며, Hadoop-2.7.2버전으로 Spark(1.6.1)를 함께 사용하려 했으나, 번번히 실패하였고 포기하여 2.6.4버전으로 설치를 진행하였습니다. (혹시 hadoop 2.7.2에 spark 1.6.1을 올리신 분이 계시다면 노하우좀 알려주세요..ㅜㅠ)mvn -Pyarn -Phadoop-2.6 -Dhadoop.version=2.7.2 -Phive -Phive-thriftserver -DskipTests clean install 목표 - Hadoop y..
-