본문 바로가기
728x90
반응형

hadoop study9

Hadoop Study Session #3-1 하둡 (Hadoop) 개요 본 포스팅은 제가 2013년 네이버 하둡스터디 카페에 포스팅했던 공개 강의 글입니다. This is a public lecture that I posted on Hadoop Study Cafe of Naver in 2013. 이전 세션에서는 클라우드 컴퓨팅과 빅데이터, 구글 시스템 소프트웨어에 대해서 알아보았습니다. 아래 링크를 통해 이전 세션 글을 보고 오시면 더욱더 많은 도움이 될 것 같습니다. 2023.12.22 - [hadoop study] - Hadoop Study Session #2 구글 시스템 소프트웨어 (Google System Software) Hadoop Study Session #2 구글 시스템 소프트웨어 (Google System Software) 본 포스팅은 제가 2013년 네이버.. 2023. 12. 24.
Hadoop Study Session #2 구글 시스템 소프트웨어 (Google System Software) 본 포스팅은 제가 2013년 네이버 하둡스터디 카페에 포스팅했던 공개 강의 글입니다. This is a public lecture that I posted on Naver Hadoop Study Cafe in 2013. 안녕하세요 하둡 스터디 카페 운영자 김현욱 입니다. 이번 세션에서는 하둡에 대해 본격적으로 알아보기에 앞서 구글 시스템 소프트웨어에 대해 알아보도록 하겠습니다. 하둡은 구글 시스템 소프트웨어의 클론 프로젝트라는 것은 알고 계실겁니다. 내부적으로 저장, 분석하는 모든 것이 용어만 틀리지 똑같은 개념입니다. 그렇다면 구글 시스템 소프트웨어는 어떻게 등장하게 된 것일까요? 구글의 최대 핵심 프로젝트이자 수익모델은 검색 기능입니다. 구글의 검색 시스템은 웹상의 html을 수집하는 크롤러, 수집된.. 2023. 12. 22.
Hadoop Study Session #1-3 빅데이터 (BigData) 주요 기술 본 포스팅은 제가 2013년 네이버 하둡스터디 카페에 포스팅했던 공개 강의 글입니다. This is a public lecture that I posted on Naver Hadoop Study Cafe in 2013. * 본 세션 자료의 대부분의 내용 및 그림은 한빛교육센터에서 진행(4~5월)한 클라우드 빅 데이터 에코 시스템 과정 강의자료를 바탕으로 인용 및 제작되었음을 밝힙니다. 이번 세션에서는 먼저 빅데이터가 어떻게 분석되고 처리되는지에 대해 살펴보고 빅데이터의 주요 기술에 대해 살펴보도록 하겠습니다. 빅데이터의 처리 및 분석은 아래 [그림 1]과 같이 내부, 외부 데이터를 로그 수집기, 통합, 웹 로봇, RSS Feed, Open API등을 이용하여 수집하고, 배치처리 즉, Hadoop과 Glu.. 2023. 12. 19.
Hadoop Study Session #1-2 빅데이터(BigData) 등장 배경과 중요성 본 포스팅은 제가 2013년 네이버 하둡스터디 카페에 포스팅했던 공개 강의 글입니다. This is a public lecture that I posted on Naver Hadoop Study Cafe in 2013. 이전시간에는 빅데이터의 개념과 특징을 살펴보았습니다. 이번세션에서는 빅데이터의 등장 배경과 중요성에 대해서 알아보도록 하겠습니다. 빅데이터라는 용어는 실제로 하둡의 근원이 되는 구글에서는 사용하지 않았습니다. 자연스럽게 데이터가 커지기 시작하며, 단순히 큰 데이터를 빅데이터라고 부르기 시작하였고 이러한 큰 데이터를 처리하기 위한 기술 등을 산업계에서 빅데이터로 부르며 용어가 퍼져나가게 되었습니다. 그렇다면 빅데이터가 왜 등장하게 되었는가.. 아주 많은 이유가 있지만.. 그중에서도 몇가지 .. 2023. 12. 19.
Hadoop Study Session #1-1 빅데이터 (BigData) 본 포스팅은 제가 2013년 네이버 하둡스터디 카페에 포스팅했던 공개 강의 글입니다. This is a public lecture that I posted on Naver Hadoop Study Cafe in 2013. 이번 세션에서는 하둡에 대해 본격적으로 공부하기 이전에 빅데이터에대해 알아보는 시간을 가지도록 하겠습니다. 하둡을 본격적으로 공부하기 전에 빅데이터를 알아야 하는 이유는.. 하둡 자체가 빅데이터를 저장하고 처리, 분석하기 위한 프레임 워크이기 때문입니다. 이에 빅데이터를 이해하셔야지만 하둡을 도입하고 구축하고 운영하실 수 있습니다. 이번 세션 이전에 Cloud Computing 공개 강의 게시판에 포스팅한 Cloud Computing 공개 강의 자료를 꼭 읽어보시기 바랍니다. 하둡, 빅데.. 2023. 12. 19.
Cloud Computing Study Session #1-4 클라우드 컴퓨팅 (Cloud Computing) 서비스 및 구조 본 포스팅은 제가 2013년 네이버 하둡스터디 카페에 포스팅했던 공개 강의 글입니다. This is a public lecture that I posted on Naver Hadoop Study Cafe in 2013. * 본 세션 자료의 대부분 그림은 2013년 1월 숭실대학교에서 개최한 클라우드 컴퓨팅 및 보안 실무 Workshop 자료를 인용하여 수정하였음을 밝힙니다. 이번 세션에서는 클라우드 컴퓨팅의 서비스와, 구조에 대해서 알아보는 시간을 갖도록 하겠습니다. 클라우드 컴퓨팅에서의 주요 서비스 구성은 아래 [그림1]과 같습니다. 클라우드 컴퓨팅을 구성하는 주요 서비스로는 가상 서비스(CPU, 메모리, 디스크, 네트워크)를 지원히기 위한 Server 서비스, 백업 및 복구를 위한 Auto-Recov.. 2023. 12. 19.
Cloud Computing Study Session #1-3 클라우드 컴퓨팅 (Cloud Computing) 분류 더보기 본 포스팅은 제가 2013년도에 운영하던 하둡스터디 카페에 포스팅했던 공개강의 글입니다. 이번 세션에서는 클라우드 컴퓨팅 기술과 서비스가 어떻게 분류되어 지는지에 대해 알아보도록 하겠습니다. 일반적으로 클라우드 컴퓨팅은 서비스의 전달 방식(자원의 성격)과 배치 방식(소유 방식)으로 구분 및 분류 할 수 있습니다. 서비스 전달방식은 어떤 서비스를 전달하느냐에 따라 Software as a Service(SaaS), Platform as a Service(PaaS), Infrastructure as a Service(IaaS)로 분류합니다. IaaS는 서버, 스토리지, 데이터베이스 등과 같은 시스템이나 서비스를 구축하는데 필요한 IT자원을 서비스 형태로 제공하는 것입니다. 각 자원에 대해 사용한 만큼.. 2023. 12. 19.
Cloud Computing Study Session #1-2 클라우드 컴퓨팅 (Cloud Computing) 개념 본 포스팅은 제가 2013년 네이버 하둡스터디 카페에 포스팅했던 공개 강의 글입니다. This is a public lecture that I posted on Naver Hadoop Study Cafe in 2013. 이번세션에서는 클라우드 컴퓨팅에 대한 개념을 자세히 말씀 드리고 기존 컴퓨팅 기술과 어떤 차이가 있는지 알아보는 시간을 가지겠습니다. 클라우딩 컴퓨팅이라는 용어가 나온지 3년여 정도의 시간이 지났지만 아직도 클라우드 컴퓨팅은 정의하기 가장 어려운 IT용어 중 하나가 되어 버렸습니다. 이유는 클라우드 컴퓨팅이 너무 많은 개념을 포괄하고 있으며, 개발자, 시스템관리자, 하드웨어 제공업체, 보안 업체, 기업의 정보 관리 책임자, 컴퓨팅 서비스 제공업체, 솔루션 업체 등 IT시스템과 관련된 모든.. 2023. 12. 19.
Cloud Computing Study Session #1-1 클라우드 컴퓨팅 (Cloud Computing) 소개 본 포스팅은 제가 2013년 네이버 하둡스터디 카페에 포스팅했던 공개 강의 글입니다. This is a public lecture that I posted on Naver Hadoop Study Cafe in 2013. 하둡은 클라우드 컴퓨팅의 분산 컴퓨팅 기술 중 주요한 기술입니다. 따라서 하둡을 시작하기 전에 클라우드 컴퓨팅에 대해 간단히 이해를 도와드릴 수 있는 시간을 가지기 위해 이번 글을 포스팅 하도록 하겠습니다. 이번 세션에서는 하둡을 공부하기 전에 클라우드 컴퓨팅에 대해서 알아보는 시간을 가지도록 하겠습니다. [그림 1] 클라우드 컴퓨팅 개요 클라우드 컴퓨팅!!(Cloud Computing)이란 스토리지, 서버, 소프트웨어를 인터넷을 통해 빌려쓰고 사용자가 사용한 만큼 비용을 지불하는 서비스.. 2023. 12. 19.
728x90
반응형