본문 바로가기

IT유지보수

(7)
Apache Airflow ~ 이제는 비트나미 패키지로 Azure 환경에서 더 편하게 쓰자! *글 최초 발행일자: 2019.04.10* 아파치 에어플로우(Apache Airflow), ETL 파이프라인과 머신 러닝 워크플로우 관리 도구로 요즘 관심을 두는 분들이 많죠. 아파치 에어플로우는 오픈 소스이다 보니 누구나 접근하기도 좋죠. 그래서 파이프라인 최적화와 워크플로우 자동화기 팔요한 이들이 이런 저런 아이디어를 내어 다양한 활용 사례가 나오고 있는 그런 도구입니다. ​ 애저 환경에 아파치 에어플로우를 배포하려면 고민해야 할 것들이 좀 있습니다. 아파치 에어플로우 사용을 위한 환경을 조성하려면 다음과 같은 요소를 조합해야 합니다. 관련해 배포를 더 쉽게 할 수 있게 돕는 템플릿도 있긴 한데, 이 템플릿은 개발이나 테스트 용도로는 좋은데 프로덕션 환경에 쓰기에는 조금 그렇습니다. 프로덕션 환경에 ..
OSS Database trend and growth, 오픈소스 데이터베이스 시장 현황 분석 *글 최초 발행일자: 2019.04.04* 자기 것만 고집하기로 소문난 Microsoft가 “I love open source” 혹은 “I love Linux!”라는 문구를 스스럼없이 쓰고, 작년에는 천문학적인 돈을 투자해 오픈소스 커뮤니티의 상징처럼 여겨지는 GitHub (깃허브)를 인수했죠. 데이터베이스 SW 시장의 터줏대감이라는 Oracle 웹사이트에도 오픈소스 DB 이야기가 많은 부분을 차지하고 있습니다. 이 정도면, 오픈소스가 IT 역사의 한 페이지를 장식하는 큰 흐름이 되었다고 해야 할 것 같습니다. 오픈소스 전문 기업인 락플레이스의 역할이 더욱 중요해지는 시기가 오고 있는 것 같습니다. 그래서 오늘 포스트에서는 오픈소스 데이터베이스 시장의 현황을 정리해 보았습니다. ​ 1. Opensourc..
PostgreSQL을 위한 오픈 소스 에디터, Azure Data Studio를 강추하는 이유 *글 최초 발행일자: 2019.03.28* PostgreSQL을 사용 중이신가요? 커맨드라인 툴, psql 등을 주로 쓰시나요? 이 도구들도 강력하지만 뭔가 더 직관적이고 편한 툴을 찾고 있나요? 그렇다면 Azure Data Studio를 한번 써보세요. 커맨드라인 툴이 최고라고 생각하는 분들도 때때로 아주 편하게 쓸 수 있는 훌륭한 도구입니다. 오픈 소스라 따로 알아보고 부서에서 사용을 승인받을 이유도 없습니다. ​ PostgreSQL과 개발자, 관리자를 더 가깝게 만들어 주는 툴 ​ 마이크로소프트가 최근 PostgreSQL을 위한 Azure Data Studio 프리뷰를 공개했습니다. 이 도구는 크로스 플랫폼을 지원하는 편집기로 데이터 지향적인 애플리케이션 개발 생산성을 높이기 위한 목적으로 개발되었..
장애 나기 전에 미리미리 백업받자! Azure Backup for SQL Server *글 최초 발행일자: 2019.03.19* 요즘 대형 장애가 하루가 멀다고 일어납니다. 최근 마이스페이스(Myspace)가 2016년 이전에 올린 사용자 데이터를 다 날리는 대형 사고가 일어났습니다. 이런 뉴스를 볼 때마다 관리자는 가슴을 쓸어내립니다. 백업만이 살길이다!를 속으로 되새기면서 말이죠. 관련해 오늘은 Azure Backup for SQL Server가 공식 발표되었다는 소식을 전합니다. ​ 온프레미스에서 데이터베이스 서버 백업하려면 복잡하죠. 백업 솔루션을 구매해야죠, 백업 미디어를 장착한 스토리지도 마련해야죠, 백업 대상 시스템에 일일이 에이전트도 설치해야죠 ~ 할 일이 많습니다. 클라우드는 여러모로 온프레미스에서 시스템을 운영할 때보다 편한 것이 많습니다. 단, 서비스 사업자가 어떤 기..
클라우드에 올린 MariaDB에 대한 효과적인 접근 제어 방법 하나 - VNet 서비스 엔드 포인트 활용하기 *글 최초 발행일자: 2019.03.05* 데이터베이스는 위치가 어디건 철저한 접근 제어를 해야 하는 중요 시스템입니다. 온프레미스, 클라우드 모든 환경에 대한 철저한 접근 제어와 권한 관리가 이루어져야 데이터 유출 등의 사고를 막을 수 있죠. 관련해 오늘 포스팅에서는 Azure Database for MariaDB로 인터넷 연결을 통해 접근하지 못하게 격리하는 방법을 소개합니다. ​ 애저가 제공하는 VNet 서비스 엔드포인트를 이용하면 사용자가 만든 가상 네트워크 내의 서브넷 환경에서만 Azure Database for MariaDB에 연결할 수 있도록 구성할 수 있습니다. 이렇게 하면 데이터베이스 트래픽이 애저 네트워크 내에서만 일어납니다. 이를 도시화하면 다음과 같이 그릴 수 있습니다. 이해가 쉽게..
Azure Database for PostgreSQL 성능 개선 팁 - 커넥션 풀링 사용하기 *글 최초 발행일자: 2019.02.11* 오픈 소스를 Azure에서 잘 활용하는 것, 참으로 중요한 일이죠. 관련해 Azure Database for PostgreSQL 성능 개선 팁을 하나 소개합니다. ​ 서버 자원 측면에서 볼 때 PostgreSQL의 커넥션 맺기는 비용이 많이 드는 작업입니다. 새로운 커넥션 연결을 위해 메모리 할당이 필요하기 때문인데요, 이런 이유로 트랜잭션 처리가 잦은 애플리케이션의 경우 연결 지연(latency)과 데이터베이스 쓰루풋 성능 저하 문제를 겪을 수 있습니다. 이는 곧 사용자가 느끼는 애플리케이션 체감 성능이 낮아지는 결과로 이어지죠. ​ 사용자 경험에 영향을 주지 않기 위해 트랜잭션 처리가 많은 애플리케이션을 사용할 때 커넥션 풀링(Connection Poolin..
IOPS에 민감한 빅 데이터, DB, DW 등을 운영하기 딱 좋은 'Lsv2-시리즈' 가상 머신 *글 최초 발행일자: 2019.02.04* 애저 Lsv2-시리즈 가상 머신 상품이 프리뷰를 마치고 공식 발표되었습니다. Lsv2-시리즈는 쓰루풋과 IOPS 부문에서 높은 성능을 요구하는 워크로드를 위한 맞춤형 가상 머신입니다. AMD EPYCTM 75511 프로세서에서 구동되며 8개에서 최대 88개의 vCPU로 구성해 사용할 수 있습니다. 각 VM에는 8GB의 메모리가 지원되고, 8개의 vCPU 단위로 1.92TB 용량의 NVMe SSD M.2 스토리지 장치가 연결됩니다. 최대 구성인 80개의 vCPU를 선택할 경우 19.2TB의 스토리지 용량을 사용할 수 있습니다. 사양을 보면 딱 최고의 쓰루풋과 IOPS를 뽑아내기 위한 상품이란 것을 알 수 있습니다. 최대 성능 병목 구간을 NVMe SSD로 잡아내었..