본문 바로가기

azure

 (79)
[클라우드 운영]Azure Advisor 하나 썼을 뿐인데, 클라우드 비용이 내려간다 ~ *글 최초 발행일자: 2019.03.27* 클라우드 같은 서비스는 아는 만큼 알뜰하게 쓸 수 있습니다. 이 정도면 되겠지 ~ 대충 필요한 만큼 쓰다 보면 어느 순간 세어나가는 비용이 생기죠. 이런 낭비를 막는 것도 사실 일입니다. 다행히 Azure를 쓴다면 좋은 방법이 있습니다. 애저 어드바이저(Azure Advisor)가 그 방법입니다. 애저 어드바이저는 단어 뜻과 같이 '조언'을 해주는 서비스입니다. 무엇에 대한 조언이냐 하면 현재 구독 중인 클라우드 서비스의 상태에 대한 조언을 받습니다. 크게 고가용성, 보안, 성능, 비용 측면에서 조언을 해주는 데요, 조언의 기준은 간단합니다. 해당 구독과 구성을 놓고 어느 부분을 최적화할 것인지를 알려 줍니다. 이를 참조하면 튜닝의 고수가 아니라도 고가용성, 보..
[클라우드 운영]그라파나(Grafana) 사용자를 위한 기쁜 소식 - Azure에 올린 시스템과 애플리케이션 모니터링 및 성능 관리도 이제 그라파나 대시보드로 모아 보기 가능! *글 최초 발행일자: 2017.11.14* 그라파나(Grafana)로 시스템과 애플리케이션 모니터링하고 성능 관리하는 분들이 늘고 있습니다. 오픈 소스여서 좋고, 대시보드 멋지고, 온프레미스와 클라우드를 하나로 통합해 보기 편하고... 장점이 많으니 시스템 관리자들이 선호하는 것도 이해가 됩니다. 오늘 소식은 애저(Azure)의 그라파나 지원 소식입니다. 쓰고 보니 '지원'이라는 단어보다는 '연계'가 더 어울리겠군요. 이제 그라파나로 애저에 올린 가상 머신(VM), 컨테이너 그리고 각종 자원 여기에 애플리케이션까지 상태 모니터링과 성능 관리를 통합해 볼 수 있습니다. Azure Service& Azure Application Insight를 통해 수집되는 각종 상태 및 성능 정보 그라파나로 연계해 보기가..
클라우드에 올린 MariaDB에 대한 효과적인 접근 제어 방법 하나 - VNet 서비스 엔드 포인트 활용하기 *글 최초 발행일자: 2019.03.05* 데이터베이스는 위치가 어디건 철저한 접근 제어를 해야 하는 중요 시스템입니다. 온프레미스, 클라우드 모든 환경에 대한 철저한 접근 제어와 권한 관리가 이루어져야 데이터 유출 등의 사고를 막을 수 있죠. 관련해 오늘 포스팅에서는 Azure Database for MariaDB로 인터넷 연결을 통해 접근하지 못하게 격리하는 방법을 소개합니다. ​ 애저가 제공하는 VNet 서비스 엔드포인트를 이용하면 사용자가 만든 가상 네트워크 내의 서브넷 환경에서만 Azure Database for MariaDB에 연결할 수 있도록 구성할 수 있습니다. 이렇게 하면 데이터베이스 트래픽이 애저 네트워크 내에서만 일어납니다. 이를 도시화하면 다음과 같이 그릴 수 있습니다. 이해가 쉽게..
Azure Database for MariaDB 등장! 오픈 소스 데이터베이스 매니지드 서비스 대유행 *글 최초 발행일자: 2018.12.20* MariaDB 이제 애저에서도 매니지드로 이용할 수 있습니다. Azure Database for MariaDB의 SLA가 99.99%라 하니 믿고 써도 불안하지 않을 듯싶네요. 마이크로소프트에 따르면 현재 MariaDB 기반으로 운영하는 애플리케이션을 아주 간단히 짚어 올려 옮기듯(lift-and-shift) 방식으로 애저에서 운영할 수 있다고 합니다. 이거 해봐야 얼마나 쉬운지 알 것 같고요, 매니지드 서비스라 기본적인 운영과 보안에 대해 신경 쓸 일은 확실히 줄어들 것 같습니다. 요즘 분위기는 클라우드 사업자 간에 우리가 지원하는 오픈 소스 데이터베이스가 이렇게 많아요! 이런 식의 신경전을 벌이는 것 같습니다. 오픈 소스 데이터베이스는 매니지드 서비스로 제공..
Azure SQL Data Warehouse ~ 클라우드 기반 DW 시장 불꽃 튀는 경쟁 시대 *글 최초 발행일자: 2018.11.13* 요즘 클라우드 기반 데이터웨어하우스(DW) 시장 분위기가 심상치 않습니다. 클라우드 선두 주자들이 각자 기술 역량을 총동원해 자동화 기반의 경제적이고, 성능 좋은 DW 서비스의 장점을 알리느라 바쁩니다. 마이크로소프트의 무기는 Azure SQL Data Warehouse입니다. 성능이야 뭐 TPC-H, TPC-DS 등의 벤치마크를 통해 검증되었죠. 사용 기업도 늘고 있는 추세인데요, 포춘 1000대 기업에 속하는 Anheuser Busch InBev, Thomson Reuters, ThyssenKrupp 등에서 쓰고 있다고 합니다. Azure SQL Data Warehouse는 2018년 4월 Gen2 버전이 발표되면서 관심을 끌기 시작했습니다. Gen2의 주요..
불붙은 클라우드 기반 DW 성능 경쟁 - 애저가 아마존 Redshift를 앞서가나요 ~ ~ *글 최초 발행일자: 2018.07.23* 최근 클라우드 기반 데이터웨어하우스 서비스 경쟁이 갈수록 치열해지고 있습니다. 한동안 아마존 Redshift가 주도하나 싶더니, 오라클이 최근 오라클 오토노머스 데이터웨어하우스를 공개하면서 전통적인 강자(?)의 면모를 보여 주었죠. 이 경쟁에 마이크로소프트가 '나도 있다'라는 강력한 메시지를 보내고 있습니다. 마이크로소프트가 앞세우는 것은 성능과 가성비입니다. 마이크로소프트가 제공하는 클라우드 기반 데이터웨어하우스 서비스 이름은 '애저 SQL 데이터웨어하우스(Azure SQL Data Warehouse)'입니다. 이 서비스 관련 벤치마크 결과를 마이크로소프트가 공개했는데요, 그 수치가 인상적입니다. 공정을 기하기 위해 기가옴 리서치(Gigaom Research)..
애저 HDInsight 새소식, 아파치 스파크 2.3 지원됩니다! 스파크 기반 머신 러닝, IoT 등 활용 시나리오가 더욱 풍성 ~ *글 최초 발행일자: 2018.07.12* 마이크로소프트가 제공하는 매니지드 기반 빅 데이터 서비스인 애저 HDInsight가 아파치 스파크 2.3.0을 공식 지원합니다. 스파크 2.3.0 버전의 주요 개선 사항은 크게 세 가지입니다. 첫 번째는 파이썬 UDF를 이용하는 데이터 엔지니어는 10배에서 최대 100배까지 빨라진 데이터 처리 속도를 경험할 수 있다는 것입니다. 이에 따라 데이터 엔지니어는 스파크 기반 머신 러닝 환경에 텐서플로우 등의 프레임워크를 통합해 운영하기 좋아졌습니다. 흔히 머신 러닝 파이프라인이라고 하죠. 다음 그림 보면 이해가 쉬울 것입니다. 스파크 기반 머신 러닝 파이프라인에 각종 프레임워크를 연결해 써도 될 만큼 데이터 처리 속도가 좋아졌습니다. 두 번째 개선 사항은 비즈니스 분..
Azure Data Factory 버전 2 발표! 마우스 드래그앤드롭으로 70개가 넘는 소스에서 데이터 수집 및 통합 *글 최초 발행일자: 2018.06.28* 다양한 데이터 원천에서 데이터를 추출하고 변환해 적재하는 ETL 작업 ~ 참 손 많이 가는 일이죠. 클라우드에서는 이게 참 쉽습니다. 애저 환경의 경우 애저 데이터 팩토리(ADF) 기능을 지원하는데요, 최근 버전 2가 공식 발표되었습니다. ADF v2에 추가된 신 기능을 보면 '와우 ~' 소리가 좀 나옵니다. 데이터 원천을 지정하고, 정한 일정에 맞춰 데이터를 추출하고 변환해 통합하는 일련의 작업들이 정말 간단합니다. 여러 데이터 원천을 대상으로 ETL 작업을 하는 데이터 파이프라인을 이렇게 쉽게 그려도 되나 싶을 정도입니다. 간단히 주요 개선 사항을 보시죠. 첫 번째는 사용자 인터페이스(UI)입니다. 새로운 UI는 정말 직관적입니다. 데이터 소스를 지정하고 데..

티스토리툴바