개인정보 취급 및 처리방침
'(주)디에스앤지시스템'은 (이하 "회사"는) 이용자의 개인정보를 중요시하며, "정보통신망 이용촉진 및 정보보호 등에 관한 법률", "개인정보보호법"등 관련 법령에 의거하여 개인정보 취급 및 처리방침을 재정하고 이를 준수하고 있습니다. 회사는 개인정보 취급 및 처리방침을 통하여 이용자가 제공하는 개인정보가 어떠한 용도와 방식으로 이용되고 있으며, 개인정보보호를 위해 어떠한 조치가 취해지고 있는지 알려드립니다. 또한 개인정보를 보호하고 이와 관련한 고충을 신속하고 원활하게 처리할 수 있도록 합니다. 본 개인정보 취급 및 처리방침은 관련 법령, 정부의 정책변경 및 회사 내부 운영방침의 수정에 따라 변경될 수 있습니다. 회사는 개인정보 취급 및 처리방침을 개정하는 경우 회사 홈페이지 공지사항(또는 개별공지)을 통하여 고지하겠습니다. 이용자께서는 홈페이지 방문 시 이를 수시로 확인해 주시기 바랍니다. ※ 본 방침은 : 2015년 11월 01일 부터 시행됩니다. 1. 개인정보 수집 항목 (주)디에스앤지시스템은 적법하고 공정한 수단에 의하여 최소한의 개인정보만을 수집하고 있으며, 수집하는 개인정보 항목은 아래와 같습니다. <견적문의> - 성명, 소속명, 전화번호, 이메일 <기술문의> - 성명, 소속명, 전화번호, 이메일 <전화상담요청> - 성명, 소속명, 전화번호 <세미나 참가 및 기타 이벤트 신청> - 성명, 소속명, 전화번호, 소속 전화번호, 이메일, 직급 (추가정보 수집 시 별도 동의에 의해 수집) <서비스 이용 시 자동수집> - IP Address, 쿠키, 방문 일시, 서비스 이용 기록, 불량 이용 기록 2. 개인정보 수집방법 ① (주)디에스앤지시스템은 적법하고 공정한 동의절차를 통하여 아래와 같이 개인정보를 수집하고 있습니다. 가. 회사 홈페이지(모바일, WEB), 이메일, 블로그 등을 통한 정보 수집 ② (주)디에스앤지시스템은 이용자가 회사의 개인정보 수집이용 동의서의 내용에 대해 "동의" 또는 "동의하지 않음"을 선택할 수 있는 절차를 마련하고 있습니다. 3. 개인정보의 수집 및 이용목적 (주)디에스앤지시스템은 필요한 최소한의 범위 내에서 다음 각 호의 목적으로 개인정보를 수집 및 이용하고 있습니다. 그 밖에 인권 및 사생활 침해가 우려되는 개인정보는 일체 수집하지 않습니다. ① 홈페이지 운영 및 관리 : 각종 상담 및 문의에 대한 통지, 내용확인, 고충처리, 마케팅 및 광고 등 원활한 의사소통을 목적으로 개인정보를 처리합니다. ② 기타 : 행사·이벤트 진행 및 경품 배송 등을 목적으로 개인정보를 처리합니다. 4. 개인정보의 보유 및 이용기간 (주)디에스앤지시스템은 원칙적으로 개인정보 수집 및 이용 목적이 달성된 때에는 해당 이용자의 개인정보를 지체 없이 파기합니다. 단, 상법 등 관련 법령의 규정 및 회사 내부장침에 의해 보존할 필요가 있는 경우 회사는 일정 기간 동안 해당 이용자의 개인정보를 아래와 같이 보관합니다. ① 행사 및 이벤트 정보 : 이벤트 종료 후 6개월 ② 재화 또는 서비스 제공 : 재화, 서비스 공급완료 및 요금결재, 정산 시 까지 단, 계약, 대금결제, 재화 등의 공급기록(5년) 등 법령에서 보유를 정한 정보의 경우 해당 기간까지 ③ 관련법령에 의한 정보보유 사유 가. 계약 또는 청약철회 등에 관한 기록 : 5년 (전자상거래 등에서의 소비자보호에 관한 법률) 나. 대금결제 및 재화 등의 공급에 관한 기록 : 5년 (전자상거래 등에서의 소비자보호에 관한 법률) 다. 소비자의 불만 또는 분쟁처리에 관한 기록 : 3년 (전자상거래 등에서의 소비자보호에 관한 법률) 5. 개인정보의 파기절차 및 방법 (주)디에스앤지시스템은 원칙적으로 개인정보 수집 및 이용 목적이 달성된 후에는 이용자의 개인정보를 다음과 같은 방법으로 지체 없이 파기합니다. ① 파기절차 : 이용자가 입력한 개인정보는 목적이 달성된 후 별도의 DB로 옮겨져 (종이의 경우 별도의 서류) 내부 방침 및 기타 관련 법령에 의한 정보보호 사유에 따라 일정 기간 보관하거나 즉시 파기됩니다. 동 개인정보는 법률에 의한 경우가 아니고서는 보유되는 것 이외의 다른 목적으로 이용되지 않습니다. ② 파기방법 : 종이에 출력된 개인정보는 분쇄기로 분쇄하거나 소각을 통하여 파기합니다. 전자적 파일형태로 저장된 개인정보는 기록을 재생할 수 없는 기술적 방법을 사용하여 삭제합니다. 6. 개인정보의 취급위탁 ① (주)디에스앤지시스템은 서비스 향상을 위해서 이용자의 개인정보를 필요한 경우 동의 등 법률상의 요건을 구비하여 외부에 수집·취급·관리 등을 위탁하여 처리할 수 있습니다. ② 위탁업무, 수탁자, 위탁하는 업무의 내용 등에 관한 사항을 서면, 전자우편, 전화 또는 홈페이지를 통해 게시합니다. ③ 회사는 관계 법령에 따라 위탁계약 시 개인정보가 안전하게 관리될 수 있도록 필요한 사항을 규정하고 있습니다. 또한 공유하는 정보는 당해 목적을 달성하기 위하여 필요한 최소한의 정보에 국한됩니다. 7. 제 3자에 대한 제공 및 공유 ① (주)디에스앤지시스템은 이용자의 동의가 있거나 관련 법령의 규정에 의한 경우를 제외하고는 이용자들의 개인정보를 "3. 개인정보의 수집 및 이용목적"에서 고지한 범위 내에서 사용하며, 이용자의 사전 동의 없이는 동 범위를 초과하여 이용하거나 원칙적으로 이용자의 개인정보를 외부에 공개하지 않습니다. ② 다만, 아래의 경우에는 예외로 합니다. 가. 개인정보의 제3자 제공을 이용자가 사전에 동의한 경우 ③ 다음의 경우에는 관련 법령의 규정에 의하여 이용자의 동의 없이 개인정보를 제공할 수 있습니다. 가. 수사상의 목적으로 법령에 정해진 정차와 방법에 따라 수사기관으로부터의 요구가 있는 경우 나. 통계작성, 학술연구, 시장조사를 위하여 특정 개인을 식별할 수 없는 형태로 광고주, 협력사나 연구단체 등에 제공하는 경우 다. 회사는 이용자의 동의 없이 관계법령에 의하거나 수사기관의 요청에 의해 정보를 제공한 경우에도 이를 당사자에게 고지하는 것을 원칙으로 운영하고 있습니다. 그러나, 법률상의 근거에 의해 부득이하게 고지를 하지 못할 수도 있습니다. 화사는 본래의 수집목적 및 이용목적에 빈하여 무분별하게 정보가 제공되지 않도록 최대한 노력하겠습니다. ④ 그 밖에 개인정보 제3자 제공이 필요한 경우에는 합당한 절차를 통한 이용자의 동의를 얻어 제3자에게 개인정보를 제공할 수 있습니다. 8. 정보주체의 권리·의무 및 그 행사방법 이용자는 개인정보주체로서 언제든지 등록되어 있는 이용자의 개인정보를 열람하거나 정정·삭제, 처리정지, 동의철회를 요청할 수 있습니다. 개인정보 열람, 정정·삭제, 처리정지, 동의철회를 하고자 할 경우 대표전화(02-6309-1830) 또는 개인정보보호책임자 및 담당자에게 서면(개인정보보호법 시행규칙 별지 제8호 서식), 전화, 이메일로 연락하시면 지체 없이 조치하겠습니다. ① 이용자가 개인정보의 오류에 대한 정정을 요청한 경우, 회사는 정정을 완료하기 전까지 해당 개인정보를 이용 또는 제공하지 않습니다. 또한 오류가 있는 개인정보를 제 3자에게 이미 제공한 경우에는 정정 처리결과를 제3자에게 지체 없이 통지하여 정정이 이루어지도록 조치하겠습니다. ② 회사는 이용자에 의해 삭제 요청된 개인정보를 이 방침과 관계 법령에 명시된 바에 따라 처리하고, 그 외의 용도로 열람 또는 이용할 수 없도록 처리하고 있습니다. ③ 회사는 개인정보의 분실, 도난, 누출이 확인될 시 명의 도용, 스팸, 전화사기 등 개인정보 누출로 인한 2차 피해 확산을 방지하기 위해 이용자에게 해당사실을 통지하고 주무부처인 행정자치부 및 한국인터넷진흥원에 신고합니다. 가. 통지 및 신고 항목 : 누출정보, 누출시점, 이용자 조치 방법, 회사 조치 방법, 이용자 상담처 나. 통지 및 신고 방법 - 통지방법 : 전자 우편 (단, 상기 통지 수단에 대한 정보가 부재, 오류인 경우 홈페이지 공지사항으로 대신합니다.) - 신고방법 : 한국인터넷진흥원 권장에 따라 신속한 접속 및 처리를 위해 인터넷 웹사이트에 신고합니다. 다. 누출된 개인정보 항목과 시점을 구체적으로 알 수 없는 경우, 당시까지 확인된 사항을 통지 및 신고하고 추가로 확인되는 사항은 확인되는 즉시 추가로 통지 및 신고할 수 있습니다. ④ 이용자는 개인정보를 최신의 상태로 정확하게 입력하여 불의의 사고를 예방해 주시기 바랍니다. 이용자가 입력한 부정확한 정보로 인해 발생하는 사고의 책임은 이용자 자신에게 있으며 타인 정보의 도용 등 허위정보를 입력할 경우 이용자격이 상실될 수 있습니다. ⑤ 이용자는 개인정보를 보호받을 권리와 함께 스스로를 보호하고 타인의 정보를 침해하지 않을 의무도 가지고 있습니다. 만약 이 같은 책임을 다하지 못하고 타인의 정보 및 존섬성을 훼손할 시에는 『정보통신망이용촉진및정보보호등에관한법률』등에 의해 처벌받을 수 있습니다. ※ 이용자 개인정보 도용 시 대처 방법 안내 회사는 이용자가 타인의 개인정보를 도용하여 이용하였음을 알게 된 때 지체 없이 서비스 이용정지 등 필요한 조치를 취합니다. 또 자신의 개인정보 도용을 인지한 이용자가 서비스 이용정지 등을 요구하는 경우에도 업체는 즉시 조치를 취합니다. 9. 쿠키의 운영 및 활용 ① (주)디에스앤지시스템은 홈페이지 이용자에게 보다 나은 서비스를 제공하기 위하여 '쿠키(cookie)'를 사용합니다. 쿠키는 웹사이트를 운영하는데 이용되는 서버가 이용자의 PC에 보내는 아주 작은 텍스트 파일로서 이용자의 PC에 저장됩니다. ② 회사는 원칙적으로 쿠키를 이용하여 이용자의 개인정보를 수집하지 않습니다. 다만, 이용자의 홈페이지 접속빈도, 방문시간, 이용자 규모 등을 파악하여 홈페이지 개선 및 보완을 위한 척도로 활용합니다. ③ 이용자께서는 쿠키 설치에 대한 선택권을 가지고 있습니다. 따라서 이용자는 웹 브라우조에서 옵션을 설정함으로써 모든 쿠키를 허용하거나, 쿠키가 저장될 때마다 확인을 거치거나, 아니면 모든 쿠키의 저장을 거부할 수도 있습니다. 다만, 쿠키의 저장을 거부할 경우에는 일부 서비스 이용에 어려움이 발생할 수 있습니다. ※ 쿠키 설치 허용 여부를 지정하는 방법 (Internet Explorer의 경우) 01. [도구] 메뉴에서 [인터넷 옵션]을 선택 02. [개인정보]를 클릭 03. [고급]을 클릭 04. 쿠키 허용여부를 선택 10. 개인정보보호를 위한 기술 및 관리적 대책 (주)디에스앤지시스템은 이용자의 개인정보를 취급함에 있어 개인정보가 분실, 도난, 누출, 변조 또는 훼손되지 않도록 안전성 확보를 위하여 다음과 같은 기숧적, 관리적, 물리적 대책을 강구하고 있습니다. ① 해킹이나 바이러스 등에 대비한 기술적 대책 회사는 최신 백신프로그램을 이용하여 이용자의 개인정보나 자료가 유·누출되거나 훼손되지 않도록 방지하고 있으며, 기타 시스템적으로 보안성을 확보하기 위한 가능한 모든 기술적 장치를 갖추려 노력하고 있습니다. ② 개인정보에 대한 접근 제한 회사는 개인정보처리시스템에 대한 접근권한의 부여, 변경, 말소를 통하여 개인정보에 대한 접근통제를 위하여 필요한 조치를 하고 있으며, 침입차단시스템을 이용하여 외부로부터의 무단 접근을 통제하고 있습니다. ③ 내부관리계획의 수립 및 시행 회사는 개인정보의 안전하고 체계적인 관리를 위하여 내부관리계획을 수립하여 시행하고 있습니다. 또한 개인정보보호를 위해 내부관리규칙 및 관련 법령에서 정하는 개인정보보호규정을 성실히 이행하는지 주기적으로 자체 감사를 실시하고 있습니다. ④ 개인정보 취급자의 최소화 및 교육 가. 회사는 개인정보를 취급하는 직원을 최소한의 인원으로 제한하고 해당 직원에 대한 정기적인 교육을 통해 이용자의 개인정보를 안전하게 관리할 수 있도록 하고 있습니다. 나. 개인정보 취급자의 업무 인수인계는 보안이 유지된 상태에서 철저하게 이루어지고 있으며, 입·퇴사 후 개인정보 유출 등 사고에 대한 책임을 명확히 하고 있습니다. ⑤ 비인가자에 대한 출입통제 회사는 개인정보를 보관하고 있는 물리적 보관 장소를 별도로 두고 이에 대한 출입을 철저히 통제하고 있습니다. 그 외 회사는 이용자의 부주의나 인터넷상의 문제로 일어난 일에 대해서는 책임을 지지 않습니다. 이용자께서는 자신의 개인정보를 보호받을 권리와 함께 스스로를 보호하고 타인의 정보를 침해하지 않을 의무도 가지고 있습니다. 11. 링크사이트 회사는 이용자에게 다른 회사의 웹사이트 또는 자료에 대한 링크를 제공할 수있습니다. 이 경우 회사는 외부사이트 및 자료에 대한 아무런 통제권이 없으므로 그로부터 제공받는 서비스나 자료의 유용성에 대해 책임질 수 없으며 보증할 수 없습니다. 회사가 포함하고 있는 링크를 클릭하여 타 웹사이트의 페이지로 옮겨갈 경우 해당 웹사이트의 개인정보취급방침은 회사와 무관하므로 새로 방문한 사아티의 정책을 검토해 보시기 바랍니다. 12. 게시물 ① 회사는 이용자의 게시물을 소중하게 생각하며 변조, 훼손, 삭제되지 않도록 최선을 다하여 보호합니다. 그러나 다음의 경우는 그렇지 아니합니다. 가. 스팸(SPAM)성 게시물 (예 : 행운의 편지, 8억 메일, 특정사이트 광고 등) 나. 타인을 비방할 목적으로 허위 사실을 유포하여 타인의 명예를 훼손하는 글 다. 동의 없는 신상공개 회사의 저작권, 제 3자의 저작권 등 권리를 침해하는 내용, 기타 게시판 주제와 다른 내용의 게시물 라. 회사는 바람직한 게시판 문화를 활성화하기 위하여 동의 없는 타인의 신상 공개 시 특정 부분을 삭제하거나 기호 등으로 수정하여 게시할 수 있습니다. 마. 다른 주제의 게시판으로 이동 가능한 내용일 경우 해당 게시물에 이동 경로를 밝혀 오해가 없도록 하고 있습니다. 그 외의 경우 명시적 또는 개별적인 경고 후 삭제 조치할 수 있습니다. ② 근본적으로 게시물에 관련된 제반 권리와 책임은 작성자 개인에게 있습니다. 또 게시물을 통해 자발적으로 공개된 정보는 보호받기 어려우므로 정보 공개 전에 심사숙고 하시기 바랍니다. 13. 만 14세 미만 아동의 개인정보보호 ① 만 14세 미만 아동의 경우, 회사는 사전에 법정대리인(부모님 등)의 동의를 구한 후에 만 14세 미만 아동의 개인정보를 수집하고 있습니다. 이러한 경우 법정대리인의 동의를 받기 위하여 필요한 최소한의 정보(성명, 연락처)를 법정대리인의 동의 없이 해당 아동으로부터 직접 수집할 수 있습니다. ② 만 14세 미만 아동의 법정대리인은 아동으 개인정보의 열람, 정정, 동의 철회 등을 요구할 수 있으며, 이러한 요청이 있을 경우 회사는 법정대리인 확인 후 지체 없이 해당 조치를 취하도록 하겠습니다. 또한, 만 14세 미만 아동의 개인정보는 법정대리인의 동의 없이 제3자에게 제공하거나 공유하지 않습니다. 14. 광고성 정보의 전송 (주)디에스앤지시스템은 이용자의 명시적인 수신거부의사에 반하여 영리목적의 광고성 정보를 전송하지 않습니다. 회사는 행사·이벤트 응모 안내 등 온라인 마케팅을 위해 광고성 정보를 이메일, 문자 등으로 전송하는 경우 이용자가 쉽게 알아볼 수 있도록 다음과 같이 조치합니다. ① 제목 : '(광고)' 문구를 제목란에 표시하지 않을 수 있으며, 본문란의 주요 내용을 표시합니다. ② 본문 : 이용자가 수신거부의 의사표시를 할 수 있는 전송자의 명칭, 이메일 주소, 연락처를 기재하고, 수신거부의 의사를 쉽게 표시할 수 있는 방법을 명시합니다. 15. 개인정보보호 책임자 및 관리부서 (주)디에스앤지시스템은 이용자의 개인정보를 보호하고 개인정보와 관련한 불만사항 및 문의를 처리하기 위하여 다음과 같이 관련 부서 및 개인정보보호 책임자를 지정하고 있습니다. [개인정보관리책임자/관리자] 성명 : 서지원 소속부서 : 온라인 사업부 전자우편 : dsng_support@dsngsystem.co.kr 전화번호 : 02-6309-1831 팩스번호 : 02-6309-1836 또한 이용자는 기타 개인정보 침해에 대한 민원이나 상담이 필요한 경우에는 아래 외부기관으로 문의하실 수 있습니다. · 한국인터넷진흥원 (http://www.kisa.or.kr) · 한국정보진흥원 (http://www.nia.or.kr) · 개인정보침해신고센터 (http://privacy.kisa.or.kr) · 대검찰청 인터넷범죄수사센터 (http://www.spo.gp.kr) · 경찰청 사이버테러대응센터 (http://www.ctrc.go.kr) 16. 개인정보 취급 및 처리방침의 변경 (주)디에스앤지시스템은 관련 법령 및 ㅎ쇠사 정책에 의해 내용의 추가, 삭제, 정정이 있을 시 시행 7일 전부터 변경사항을 홈페이지를 통하여 고지할 것입니다. 본 개인정보 취급 및 처리방침은 시행일로부터 적용되며, 종전의 개인정보 취급 및 처리방침은 본 개인정보 취급 및 처리방침으로 대체됩니다. 시행일 : 2015-11-01
디에스앤지
고객의 미래가 디에스앤지의 미래입니다.
보도자료
빅데이터 열기 온몸으로...'하둡서밋 2016' 참관기
작성자 : 작성일 : 2016.07.20 조회수 : 1411
2016년 07월 07일
빅데이터 열기 온몸으로...'하둡서밋 2016' 참관기
하둡 서밋 2016은 올해로 9해째 열리고 있다. 최근 빅 데이터 열기를 반영하듯이 해가 갈수록 규모가 커지고 있다. 올 행사 스폰서 참여 기업은 전년 대비 25%가량 늘었다. 그뿐만 아니라 올해 처음으로 하둡 서밋에 참석한 이들의 수도 많다.
올 행사는 더블린, 산호세, 도쿄를 돌며 이어진다. 산호세에서 열린 하둡 서밋 2016에는 4천 명이 참석해 170개가 넘는 세션을 듣는다. 지난달 28일 행사 첫날부터 흥미로운 이야기가 행사장을 오갔다.
■주목할 변화
기조 연설을 맡은 호튼웍스 허브 큐니츠 대표는 주목할 추이 세 가지로 고객이 데이터로 비즈니스를 바꾸고 있다는 것, 기술이 아니라 사업 측면의 이야기들이 더 많이 들리기 시작했다는 것, 보안과 거버넌스 측면에서 빅 데이터가 기업 환경에 뿌릴 내릴 만반의 준비가 되었다는 것, 하둡 생태계가 빠르게 확장되고 있는 것을 꼽았다.
▲ 미국 캘리포니아주 산호세에서 개최된 하둡 서밋 2016 행사장 전경 |
■10주년 청소년기를 맞은 하둡
2016년은 하둡이 탄생 10주년을 맞이한 해이다. 또한 하둡 서밋을 야후와 공동 주관해온 호튼웍스가 다섯 살이 되는 해이기도 하다. 첫날 기조 연설 무대에 오른 호튼웍스의 허브 큐니츠 대표는 데이터 혁명이 세상의 모든 것을 바꾸고 있다는 말고 함께 데이터를 어떻게 쓸 것인가에 대한 고민은 이제 막 시작되고 있다고 강조했다.
그는 사업 모델에 데이터 활용 전략을 반영하는 기업이 늘고 있는 것이 그 증거이며, 앞으로 더 많은 조직이 기업, 공급망, 고객을 망라하는 데이터 여정(data journey)에 오를 것이라 말했다.
이처럼 더 많은 위치에 있는 데이터를 더 자세하게 보려는 기업의 욕구는 첨단 데이터 아키텍처 도입을 앞당길 촉매다. 그동안 빅 데이터는 구현에 초점이 맞추어졌다. 기존 접근 방식은 데이터 수집, 처리, 분석 절차가 주된 관심사였다면, 첨단 데이터 아키텍처는 데이터의 위치와 종류에 관계없이 모든 데이터를 원하는 방식으로 처리하고 분석하는 것이 목표다.
▲ 하둡 서밋 2016에는 전세계 수많은 개발자들이 빅데이터의 열기를 느끼고자 성황을 이뤘다. |
■새로운 10년을 준비하는 하둡 커뮤니티, 엔터프라이즈 시장으로 힘찬 도약 준비
열 살이 된 하둡은 앞으로 어떻게 발전할까? 행사장을 가득 메운 이들은 세 가지 방향에 공감했다.
호튼웍스 CEO인 롭 비어든은 하둡의 응용 분야가 다양해질 것이란 점을 첫 번째 방향으로 소개했다. 일례로 다양한 원천 정보를 수집하고, 이들 데이터에 예측 기반 모델을 적용해 금융이나 통신 사기를 탐지하고자 하는 곳이 늘고 있다. 실제로 금융, 보험 업계에서는 빅 데이터를 점점 지능화되는 사기 범죄 예방을 위한 최선으로 보고 있다.
두 번째로 제시된 하둡의 미래는 100배 더 쉬운 빅 데이터다. 서로 다른 기술과 플랫폼을 연결하는 수고를 덜 수 있는 기술이 하둡은 어렵고 복잡하다는 편견을 깰 것이다. YARN과 암바리(Ambari)를 통해 빅 데이터 애플리케이션과 서비스를 배포하고, 사설과 공용 클라우드에 흩어진 하둡 클러스터를 마치 하나처럼 바라보고 관리하는 데모는 참관객들이 시선을 잡기에 충분했다.
세 번째 하둡의 미래 모습은 엔터프라이즈이 눈높이에 맞는 디자인 원칙 적용, 재사용성과 호환성 보장, 보안성 확보에 모자람이 없는 것이다. 그동안 모두가 우려한 보안도 앞으로 걸림돌이 되지 않을 전망이다. 호튼웍스 롭 비어든은 컬럼 수준의 암호화나 데이터 일부를 다른 값으로 치환해 식별을 어렵게 하는 마스킹 기법 등 보안 기능 강화와 함께 아파치 레인저(Ranger) 프로젝트를 통해 향후 빅 데이터도 강력한 사용자 인증 기반의 접근 통제로 순간 해결될 것이라고 힘주어 말했다. 빅 데이터 사업의 발목을 잡았던 개인정보보호 등 각종 보안 규제를 충족시킬 수 있는 기술적 제반 기술이 커뮤니티 차원을 넘어서고 있다.
▲ 하둡 서밋 2016 기조연설을 듣고 있는 청중들. |
■사실상의 표준으로 자리 잡고 있는 YARN
기조 연설 후 오후 세션은 총 63개의 기술, 비즈니스 세션이 진행되었다. 행사 첫날 세션을 큰 흐름으로 보면 사실상의 표준으로 자리 잡고 있는 하둡 2의 핵심 요소인 YARN, IoT(사물인터넷)와 빅 데이터의 상승 효과를 시장의 화두로 분류할 수 있다.
먼저 YARN의 경우 구글, 넷플릭스 등에서 자사의 대규모 환경에 적용하고 있다는 내용이 이번 행사에서 소개되었다. YRAN은 다양한 데이터 처리 엔진을 단일 플랫폼상에서 운영할 수 있도록 돕는 리소스 관리자이다.
YARN을 적용하면 SQL, 실시간 스트리밍, 배치 작업 등 여러 데이터 처리 엔진을 모두 개별적인 하둡 클러스터로 돌리는 것이 아니라 단일 플랫폼으로 묶어 운영할 수 있다. 하둡 클러스터 구축과 운영의 어려움으로 꼽히던 호환성 보장, 자원 최적화, 통합 관리 등을 해결에 뜻을 모은 오픈 소스 커뮤니티를 통해 개발되었다.
YRAN은 여러 기업에서 차세대 데이터 아키텍처의 핵심으로 수용하고 있다. 구글의 클라우드 데이터 플랫폼인 Cloud Dataproc의 경우 많은 수의 코어에서 YARN을 운영하고 있다. 또한 넥플릭스의 경우 페타바이트 규모의 ETL 작업을 YARN과 스파크(Spark) 조합으로 처리하고 있다. 이외에도 IBM, 피보탈 등 솔루션 업체에서도 YARN을 적극적으로 지원하고 있다.
YARN이 사실상의 표준이 된 것과 관련해 호튼웍스 북아시아 총괄 부사장인 브라이언 번즈는 "2년 전 하둡 서밋에서 YARN이 관심을 끌었는데, 2년이 지난 현재 모두가 다 쓰는 시장의 주류가 되었다. 2년 뒤 또 다른 주류가 될 주제는 아마 NiFi 일 것이다."라고 말했다.
▲ YARN은 다양한 데이터 처리 엔진을 단일 플랫폼 상에서 운영해 주는 리소스 관리자다. |
■NSA 덕에 유명해진 NiFi의 유행 예감
NiFi는 미국 국가안보국(NSA)이 네트워크 모니터링을 위해 만든 기술이다. NSA는 이 기술을 아파치 재단을 통해 공개했다. 이후 온야라(Onyara)라는 기업이 아파치 탑레벨 프로젝트인 NiFi 개발을 주도했고, 호튼웍스가 온야라를 인수하면서 NiFi가 엔터프라이즈 시장으로 영역을 확장하고 있다. 이번 행사에서는 NiFi와 스파크를 이용한 스마트 홈 구현, NiFi를 통한 IoT와 스트리밍 데이터 분석 방안 등에 대한 세션이 마련되었다.
■춘추전국 시대 맞은 스트리밍 분석
한편 이번 행사에서는 실시간 스트리밍 분석 관련 사례 발표도 많았다. 교통, 자동차, 에너지, 의료, 제조 분야에서 어떻게 실시간 데이터 스트리밍 분석을 하는지에 대한 실제 예가 GE, 포드, SAS 등의 기업에서 마련한 세션에서 발표되었다.
참고로 데이터 스트리밍은 현재 빅 데이터 시장에서 관심이 높은 분야다. 수많은 아이디어가 나오고 있고, 여러 신생 기업에서 하둡 플랫폼에 연결해 쓸 도구와 애플리케이션을 선보이고 있다. 스트리밍 솔루션은 향후 IoT 시장과 맞물려 더욱 큰 시장 잠재력을 갖게 될 전망이다.
박창선기자 july7sun@gmail.com