디지털 Transformation, 데이터센터 & Cloud, 베트남

5. Windows Azure CDN Smooth Streaming 서비스 (IIS)
    - 개발자가 IIS Smooth Streaming 인코딩된 비디오를 Windows Azure 스토리지 계정으로 업로드하고, 비디오 서비스를 Silverlight, iOS,
       안드로이드  Honeycomb 클라이언트로 전송 가능한 서비스

감사합니다.

Information as a Service, Data as a Service라고도 부를 수 있을 것 같습니다. 웹 페이지, IT 시스템 등에서 가장 핵심이 되는 것이 무엇일까요? 아주 화려한 UI, UX, 프로그램 코드? 물론 다 중요하지만 핵심은 데이터 입니다. 알맹이가 없는 밤이 버려지는 것처럼 데이터가 없는 UI는 공허한 하나의 껍데기가 될 수 밖에 없는 것이죠.

데이터의 범위, 분류를 해보는 것은 너무도 방대한 일이기에 굳이 그렇게 하지 않겠습니다. 간단히, 신문사의 기사, 방송국의 뉴스, 영화, 또는 통계청의 각종 통계자료, 국세청의 데이터, 국방부에서 공개하는 데이터, 미국 NASA의 우주 사진 등 방대한 자료를 개별 회사, 또는 정부기관에서 가지고 있습니다. 그런데 문제는 각 조직이 보유하고 이는 데이터의 포맷이 다른 것이 현실입니다. 국방부에서 공개하는 데이터를 가지고 제가 어떤 조작을 해서 의미 있는 정보를 만들어보고자 할 때 어떤 특정한 포맷 없이 구성되어 있을 수 있고, XML로 구성되어 있거나 ATOM으로 구성되어 있을 수 있을 것 입니다. 즉, 각 조직이 어떤 파일 포맷을 갖고 있느냐에 따라 굉장히 성가시고 다루기 어려운 것이 사실 입니다.

또 다른 골치거리는 각 기관별로 찾아 다니면서 어떤 자료가 공개되어 있는지 찾는 것도 쉬운 일은 아니죠.
이럴 때 정부기관, 기업들의 데이터 중 공개 가능하거나 판매하고자 하는 정보가 마켓플레이스에 모두 모여 있다면 데이터를 서비스로 구매해서, 가공하여 또 그 데이터를 판매하는 일이 가능할 것 입니다. 이것을 Data as a Service라고 부르는데, 마이크로소프트의 클라우드 플랫폼, Windows Azure Platform과 SQL Azure를 이용하여 Code name Dallas가 발표되었습니다. 앞에서 설명한 것처럼 데이터, 이미지, 실시간 웹 서비스도 포함되어 있습니다. 한 장소에서 통합된 프로비저닝과 빌링 프레임웍이 포함되어 있다는 것도 주요한 특징입니다. Dallas API를 이용하여 개발자나 정보근로자가 어떤 플랫폼, 즉 웹, 모바일 등에 관계 없이 프리미엄 콘텐츠를 소비할 수 있습니다.

시나리오

1. 소비자나 비즈니스에 활용 가능한 차세대 킬러 애플리케이션을 만드는데 필요한 컨텐츠 확보 가능
2. 현재 애플리케이션이나 리포트의 품질을 향상시킬 수 있는 가치 있는 데이터를 찾아 구매 가능
3. 이종의 데이터 집합을 결합하여 비즈니스 성능과 프로세스를 향상 시킬 수 있는 통찰력 획득
4. Blob, 구조, 비구조적 데이터와 실시간 웹서비스를 API를 이용하여 가시적으로 탐색
5. 리포팅과 분석을 위해 마이크로소프트 오피스, SQL 서버 내부에 있는 제 3의 데이터를 쉽게 사용 가능
예를 들면, UN의 Energy Statistics 데이터베이스를 확인해보도록 하겠습니다. 215개 국가별, 지역별 소비량에 대해 확인할 수 있는 건데, 이 데이터가 지금 Dallas에 무료로 올라와 있습니다.

http://pinpoint.microsoft.com/en-US/PartnerDetails.aspx?PartnerId=12884901889&LocId=1249835483137
구독을 하면 아래와 같이 Dallas 창을 통해 원하는 데이터를 조회하거나 다운 받을 수 있습니다. 현재는 대부분 Free로 제공하고 있죠. UN의 WHO Data를 원하는 값, 예를 들면 대한민국의 2006년 기준 예상수명 값을 조회한 데이터 입니다. 82살이라고 나오네요. 이런 값을 전체적으로 가져와서 애플리케이션의 데이터로 활용하면 재미있는 Data 서비스를 만들 수 있지 않을까요? 향후에 상용화도 가능하겠죠. 이건 너무 무궁무진해서 생각하는 만큼 비즈니스가 될 것 같은데, 어떻게 생각하세요? 의료, 법률, 통계청 각종 통계 데이터, 기상청 날씨 데이터 등등 제가 그냥 생각하는 것도 만만치 않게 많네요. 이후에 재미있는 사례가 올라오면 좀 더 공유해보도록 하겠습니다.

2009년 11월 17일, 마이크로소프트의 클라우드 컴퓨팅, Windows Azure Platform 정식 서비스가 개시 되었습니다.
PDC(Professional Developer COnference) 2009, 이튿날 키노트를 담당한 서버 최고 책임자, President Bob muglia의 인터뷰 기사를 전달해드리려고 합니다.  (Seattle Times)
제 개인적인 의견도 포함해서 정리해봤습니다.

시나리오는 다음과 같습니다.
한 남자가 구름 복장의 옷을 입고 있고, 이 사람은 여러 시스템간의 서로 다른 아이덴티티 이슈로 괴로워하고 있습니다. 그 사람에게 인생 상담을 해주는 형태로 클라우드 컴퓨팅 세션의 키노트가 시작됩니다.

Q: 클라우드 복장을 한 사람을 인생 상담하는 형태로 진행됐는데, 그렇게 한 이유가 무엇인가?

A: 클라우드는 많은 사람을 혼란스럽게 만들고 있고, 실제로 시장에 등장한지 벌써 꽤 오랜 시간이 지났음에도 많은 사람들이 다르게 정의를 내리고 있다. 나는 IT 산업의 진화를 계속 지켜보고 있고, 18개월 전에 내려졌던 정의를 돌이켜봤을 때 많은 사람들이 이해하기 어렵다는 것도 알고 있다.
(여전히 많은 사람들이 편하게 정의 내리고 있는 것이 사실 입니다)

Q: 누군가가 클라우드가 뭐예요? 라고 묻는다면 뭐라고 답하겠는가?

A: 모든 유형의 사용자, 모든 유형의 회사에게 제공할 수 있는 아주 광범위한 것이다. 소비자들이 온라인 서비스를 사용하는 유형을 보면 거의 다 클라우드 기반이다. 이메일, 트위터, 페이스북, 온라인 쇼핑 등
사람들이 애플리케이션을 개발하면 웹에 우선 올리고 있고, 개발자들이 원하는 것은 구동하는데 소요되는 비용을 줄이고 효과적으로 운영하는 것이다.

주말에 집에서 인터넷 뱅킹을 주로 사용한다. 하지만, 한 달에 한 번 또는 가끔 사이트를 개편하거나 업데이트 중이라 사용할 수 없다는 메시지를 받곤 한다. 하지만, 실제로는 일어나지 말아야 하는 일이다. 마이크로소프트의 검색엔진 Bing이나 구글이 다운되는 것을 바라지 않을 것이다.

또한, 믿을 수 없을 만큼 방대한 양의 컴퓨팅 파워를 쉽게 얻을 수 있게 된다. 유전자 분석 등의 방대한 컴퓨팅 요구사항, 시장 및 트렌드 분석 등에 대해서도 쉽게 시뮬레이션을 이용할 수 있다. 비용은 단기간, 장기간에 관계없이 사용한 시간에 비례해서 비용을 지불하면 되는 것이다.

Q: 마이크로소프트가 바라 보는 클라우드 컴퓨팅 시장의 크기는?

A: 클라우드 컴퓨팅은 소프트웨어가 향후 진화해 나갈 미래의 모습이다. PC에 설치하는 소프트웨어가 사라지거나 하지는 않을 것이고, 바로 그 소프트웨어가 클라우드 서비스와 연결되어 나가는 형태로 진화할 것이다.
바로 내년에 마이크로소프트의 매출의 절반이 클라우드 창출되거나 하지는 않겠지만, 앞으로 10년 후의 모습에서는 그 정도 까지 성장할 가능성이 있다고 생각한다.

Q: 마이크로소프트는 어느 정도의 투자를 했나?

A: 굉장히 많은 투자인데, 그 중 가장 큰 영역은 데이터센터가 될 것이다. 마이크로소프트는 전 세계의 여러 곳에 대규모 데이터센터를 구축했고, 현재도 진행하고 있다. 북미의 시카고, 샌앤토니오, 퀸시 센터, 유럽의 더블린, 암스테르담, 아시아의 홍콩과 싱가폴이 대표적이고, 그 이외에도 여러개의 데이터센터가 Windows Azure 서비스를 담당할 것이다. 서버 제조업체로부터 가장 많은 서버를 구매하는 회사가 마이크로소프트였다, 짐작이 되는가?

Q: 다른 공유할 내용은?

A: 가장 중요한 메시지는 마이크로소프트가 전체 산업계가 앞으로 나아갈 수 있도록 하기 위해 엄청난 이노베이션을 하고 있다는 것이다. 현재 하고 있는 일을 계속 추진할 것이고, 파트너와 함께 해나갈 것이다. 우리는 새로운 세계를 만들어가고 있다. 이러한 노력으로 인해 소프트웨어가 전달되는 방식이 변화해 갈 것인데, 고객이 클라우드로 이전하는 것을 마이크로소프트가 함께 할 것이다. 다시 강조하지만, 소프트웨어와 서비스는 함께 연동되어 발전해 나갈 것이고, 우리는 이것을 소프트웨어 플러스 서비스라고 부른다.

마이크로소프트의 Public Cloud, Windows Azure와 Azure Services Platform의 가격정책이 WPC(Worldwide Partner Conference) 2009 행사에서 공개되었습니다.
아직은 Azure가 테스트 상태인 CTP(Community Technology Preview) 버전이기 때문에 무료로 사용하실 수 있습니다.
올해 11월에 예정된 PDC(Professional Developer Conference)에 맞춰 상용화 될 예정입니다.

마이크로소프트의 클라우드 컴퓨팅은 크게 3가지 유형의 가격 정책으로 나뉘어져 있습니다.

1. 사용한 만큼 비용 지불 (Consumption)
   - Pay as you go 모델, 즉 클라우드 컴퓨팅의 가장 보편적인 방식

2. 월별로 정해진 비용을 지불하는 방식 (Subscription)

   - 1번 방식을 통하면 매월 지불하는 비용이 달라지므로, 지출에 대한 예측이 어렵습니다.
     월정액 방식을 선호하는 고객이 선호하는 방식

3. 볼륨 라이선스

   - 엔터프라이즈 고객이 맺고 있는 EA(Enterprise Agreement) 방식으로 계약을 체결하는 방식

2,3번에 대한 정확한 가격은 PDC2009에 맞춰 발표될 예정입니다. 이번에 발표된 가격 정책은 1번에 해당하는 내용입니다.

CTP 기간 동안에는 아래와 같이 사용량에 제한이 있습니다.
- Total compute usage: 2000 VM hours
- Cloud storage capacity: 50GB
- Total storage bandwidth: 20GB/day

Windows Azure:

Compute = $0.12 / hour

Storage = $0.15 / GB stored / month
Storage Transactions = $0.01 / 10K
Bandwidth = $0.10 in / $0.15 out / GB

산정방식

     Compute: 애플리케이션이 Azure에 배포되어 있을 때의 시간을 계산함. 만약, 개발이나 테스트 중일

경우에는 배포했던 것을 제거한 후 개별 로컬 머신 에서 개발 및 테스트하는 것이 유리함,

     Storage: 30GB의 데이터를 Azure에 하루 동안 저장했다면 30일 기준으로 1GB로 비용 청구됨, 30일 내내 사용했다면 30GB로 비용 청구됨, 즉 30GB * $0.15 = $4.5
스토리지 트랜잭션, 즉 신규, 수정, 읽기, 삭제 등의 트랜잭션도 별도로 빌링이 되는데 10,000건에 $0.01 입니다.

     대역폭: 30일 동안 인터넷을 통해 애저로 유입되고 나가는 총 데이터를 기준으로 비용 정산됩니다.

SQL Azure

웹 Edition:

T-SQL 기반의 관계형 데이터베이스 1GB까지

Self-managed DB, 자동 고가용성, 백업 제공

사용한 만큼 비용을 지불하고, 자동으로 확장됨

웹 애플리케이션에 적합

비즈니스 Edition:

T-SQL 기반의 관계형 데이터베이스 10 GB까지

Self-managed DB, 자동 고가용성, 백업 제공

사용한 만큼 비용을 지불하고, 자동으로 확장됨

자동 파티션, CLR 등의 기능은 추후에 추가 예정

솔루션을 개발하는 ISV의 LOB 애플리케이션에 적합

.NET Services:

메시지 (Access Control, Orchestration, 메시지 큐): .NET Services를 사용하면 개발자들이 현재 운영중인 소프트웨어 자산이나
사용자가 클라우드 애플리케이션 및 데이터베이스에 쉽게 연결할 수 있습니다. 클라우드와 직접 운영 중인 On-premise와의
통신은 주로 메시지를 통해 이루어지게 됩니다.
사용한 만큼 비용을 지불하는 방식은 애플리케이션이 사용하는 메시지의 숫자를 기준으로 과금 하는 것을 의미합니다.
메시지는 서비스 버스의 메시지와 Access Control 토큰이라고 보시면 됩니다. 1달동안 10만개 기준으로 과금이 이루어 집니다.
예를들면,

 . 95,000개의 메시지를 사용했다면, 100,000개 기준으로 빌링 + 나가고 들어온 메시지 대역폭 비용

 . 150,000개의 메시지를 사용했다면 200,000개 기준으로 빌링 + 나가고 들어온 메시지 대역폭 비용

자, 이제 가장 중요한 서비스 수준 협약 (SLA)에 대한 부분이 남았군요.

Service Level Agreements (SLA)

Windows Azure:

Windows Azure는 Compute와 Storage를 위한 SLA가 별도로 존재합니다. Compute에 대해서는 2개 이상의 역할 인스턴스를 배포하고,
Fault 및 Upgrade 도메인을 사용하는 경우 99.95%의 가동율을 보장합니다.
또한, 역할 인스턴스가 작동하지 않는 경우 적절한 조치를 취하기 위해 2분 이내에 탐지한 후 문제를 해결하기 위해 모니터링을 실시할 것 입니다.
Storage 영역은 데이터의 추가, 수정, 조회, 삭제 요청이 제대로 동작하게 하기 위해 99.9%의 가동율을 보장합니다.

SQL Azure:

99.9%의 가동율을 보장 합니다.

.NET Services:

특성 상 On-premise와 클라우드 상의 엔드포인트가 많기 때문에 정확한 가동율 보장은 어렵지만,
기본적으로 Windows Azure가 제공하는 SLA를 기준으로 생각하시면 됩니다

마이크로소프트의 클라우드 컴퓨팅 플랫폼, Windows Azure, Azure Services Platform에 대해서는 이제 알고 계실텐데요, 마이크로소프트의 아키텍트인 알렉세이가 올 여름에 Azurelignt을 발표하겠다고 하네요.
해당 블로그를 방문하시면 더 많은 정보를 얻으실 수 있습니다.

“‘Azurelight’ is an easy-to-use application for providing basic product support in the cloud, collecting feedback about products and exchanging opinions with other users. It’s also intended to be used by developers as a reference application utilizing both Windows Azure and Silverlight for rich yet scalable and highly available business solutions.”

그러니까, 애저라이트는 제품에 대한 지원 업무를 수행할 수 있는 클라우드 서비스인데, 제품에 대한 피드백을 수집하거나 다른 사용자와 의견을 교환할 수 있게 해주는 거죠.

Azureline는 마이크로소프트의 여러 기술 기반위에 만들어졌는데요, Windows Azure, Silverlight 플러그인 등이 사용되었습니다. 또한, ADO.NET Entity Framework, ADO.NET Data Services, SQL Data Services 등의 기반 서비스를 사용하고 있습니다.

클라우드 컴퓨팅은 클라우드 사업자가 모든 인프라, 플랫폼을 제공하는 “공용 클라우드”와 기업이 자체 클라우드 환경을 구축하는 “사설 클라우드”의 두 가지 유형이 존재합니다.

그 중에서 사설 클라우드는 데이터센터를 자체 운영하는 엔터프라이즈 및 IDC들이 구축할 것으로 예상된다고 말씀드렸는데요, 마이크로소프트 서버 및 툴 총책임자인 President Bog Muglia께서 사설 클라우드 구축에 관해 아래와 같이 밝혔습니다.

"We will move more and more into managing pools of resources," Muglia said. Traditional data centers, and even most virtualized data centers, require administrators to manage servers as discrete entities and to move applications manually. Private clouds will take a much more flexible, scalable, automated approach and draw computing power from pools of resources, rather than discrete servers, and will adopt many of the best practices of public cloud vendors.

요약해보면 이렇습니다. 전통적인 데이터센터, 가상화를 적용한 데이터센터의 경우 관리자가 각 서버 자원들을 직접 관리하면서 그 위에 구동되는 애플리케이션을 수동으로 배포하고 있는데, 사설 클라우드 환경을 적용한 경우 개별 서버에 대한 관리가 아닌 모든 자원들을 Pool 개념으로 묶어서 훨씬 더 유연하고, 확장 가능하며 자동화된 접근 방식을 사용할 수 있다는 거죠.

IT 운영관점의 변화라고 볼 수 있을 것 같은데요 지금까지는 서버 워크로드를 어디에, 어떻게 배치하여 구동할 것인가에 집중하고 있었다면 앞으로는 이러한 일들을 컴퓨터가 대행하게 될 거라는 겁니다. 예를들면, 현재 버전의 가상 머신 관리자(VMM)은 가상서버를 어디에 배치할 것인지를 배치 마법사(Placement Wizard)가 추천하면 관리자가 적용하는 방식으로 이루어지지만, 향후 버전에서는 마법사가 없어지고 프로세스가 자동화될 것으로 보여집니다. 데이터센터 관리자가 자원 풀에 물리적 서버를 추가해놓으면 관리 소프트웨어가 이러한 자원을 가장 최적화하여 사용하는 개념입니다.

시스템 센터는 윈도우, 리눅스 서버등 이기종 환경을 관리할 수 있어야 겠죠. 물론, 현재 시스템 센터도 크로스 플랫폼 확장 add-on을 통해 리눅스 환경을 관리할 수 있습니다.
물론 Windows Server 2008 R2, 새로운 시스템센터 만으로 사설 클라우드를 바로 현실로 만들기는 어렵다고 설명했는데, 그 이유는 애플리케이션이 확장, 병렬 프로세싱을 사용하도록 설계되지 않으면 원하는 형태로 구축이 안될 거라는 거죠. 마이크로소프트 역시 병렬 프로그래밍 패러다임, Oslo 모델링 플랫폼, .Net 프레임웍 등을 통해 애플리케이션이 여러 서버를 가로지르면 구동 가능하도록 개발할 수 있도록 하는데 많은 노력을 기울이고 있습니다.

언제 사설 클라우드 구축이 가능한 Windows  Server R2, System Center가 준비될 것인지에 대해서는 아직 정확한 일정은 없지만, 가까운 미래에 사설 클라우드 구축 역시 하나의 주요한 움직임이 될 것이라고 생각됩니다.