티스토리

DEVOPS Engineers
검색하기

블로그 홈

DEVOPS Engineers

midasitwebop.tistory.com/m

Devops Engineer Paul 과 June의 기술블로그 입니다.

구독자
6
방명록 방문하기
공지 [공지필독] Paul && June ⋯ 모두보기

주요 글 목록

  • AWS Certified Solutions Architect - Professional (SAP-C01) (2021-07-30) - 750$ 사용기 누군가 그랬습니다 '자격증이 실무 역량을 드러내는 것은 아니잖아!' 자기 합리화를 했다고 그리고 그분의 바람처럼 저도 인형뽑기?를 할 수 있게 되었습니다. https://www.bogeun.io/f125f7f0-49d9-407f-ac25-4f38720844ea AWS Certified Solutions Architect - Associate (SAA-C02) (2021-05-30) June 2, 2021 By Bogeun Kim (bokunn91@gmail.com) www.bogeun.io AWS에는 여러 Certified가 존재하지만, 대체로 Solutions Architect가 표준이라 느껴질 만큼 지원 및 합격이 몰려있습니다. (외에도 전문 분야는 존재) 그중 AWS 솔루션 아키텍트 어소시에이트에 .. 공감수 6 댓글수 1 2021. 8. 1.
  • NCP 도입일지 - 공공기관용 NCP에서 모니터링 구축 도전기 1(Feat. zabbix, grafana) NCP. Naver Cloud Platform 환경. 현재 우리는 멀티?클라우드 환경을 사용중이다. NCP 환경에서의 통합 모니터링을 통한 운영이 필요해 보여 모니터링 환경을 구축하기로 했다. (NCP에서 제공하는 기본 monitoring 기능으로는 한계가 있다) 모니터링 도구를 구축하는데 언급되었던것은 Prometheus / Grafana 조합과, Zabbix / Grafana 조합이였다. 현재 AWS에서 zabbix를 사용하고 있었기에, Prometheus를 도입해 보려했으나, 아직은 미지?의 세계였기에 고심끝에 zabbix를 선택하게 되었다능...(Prometheus도 언젠가는 도전) Zabbix란? Grafana? 방화벽 정보. 출발지 도착지 포트 zabbix server zabbix agent .. 공감수 2 댓글수 0 2021. 1. 10.
  • S3 삭제된 파일 파이썬으로 복구하기(feat. python) S3 기능중 버저닝 기능이 활성화되어 있다면, 파일이 삭제되도 복구할 수 있다. 단, 버저닝된 파일조차 영구삭제가 가능하기 때문에 영구삭제하면 복구 불가 버저닝 기능이 활성화되어 있는 상태에서 파일 또는 폴더가 삭제된다면 삭제마커가 생성된 채로 버저닝된다. 아래 그림은 버저닝 리스트 보기를 활성화한 상태로 같이 Type 부분에 Delete marker라고 찍히고 삭제되어 있는 모습을 볼수있다. 파일이 한두개면, 그냥 버저닝 리스트 활성상태에서 체크박스 체크해서 Delete를 해버리면 리스트로 다시 돌아오는것을 알수 있다. 단, 파일이 복수개이고, 폴더가 복수개인 경우는 수동으로 하기가 힘들기 때문에 SDK를 통해서 수행하는것이 편하다. 참고. CLI로 찾아 삭제하는법(단건삭제) #aws s3api del.. 공감수 3 댓글수 1 2020. 11. 24.
  • S3 Glacier Valut 사용방법 Valut(볼트) 즉, WORM 즉, Write, Once Read Many 딱 한번 기록하고 여러 번 읽는다 생성된 파일에 대해 삭제/변조가 불가능하며 읽기만 가능. S3의 option으로 볼트 기능이 제공되기도 하고, S3 Glacier의 볼트 기능이 있는데 아마 볼트 전용으로 사용하느냐 마느냐의 차이가 아닐까 싶다.(S3 glacier 서비스가 좀 더 복잡한듯;;;) S3에서 볼트 기능을 활성화시 버저닝 기능이 강제로 활성화된다. 다만 볼트로 인해 파일삭제가 불가능한 범위는 Glacier 클래스의 파일만 해당되는듯 싶다. 즉, 일반 Standard 클래스 파일은 볼트적용이 안됨. S3 / S3 Glaicer 볼트 기능 차이 S3 - 볼트활성화 - Glacier type 업로드 볼트기능 ON시켜서 버.. 공감수 1 댓글수 0 2020. 11. 19.
  • AWS EC2를 EIP를 사용하여 메일(mail) 발송 서버로 만들기 참으로 오래 걸렸다 AWS의 EC2 서버를 메일 발송서비스로 만들기 위해 많은 정보가 있었으나, step별로 잘 정제된 내용이 없었다. (사실 있었지만 내가 못 알아들어먹음....그리고 AWS의 일시적 버그인지 오류인지 시간이 오래걸려서 내가 맞는 작업을 하는것인지 헷갈렸다..이부분은 뒤에..) 어떤 Step을 밟아야 하는지 이것을 해야하는지 메일 발송 프로토콜 자체가 쉬운것이 아니라 알아보면 알아볼 수 록 어지러웠다. 참고로 메일 서비스는 자체 개발 또는 AWS 지원서비스가 아닌, 메일전문 업체의 발송모듈을 사용한다. Route53을 이용하여 도메인관리를 하고, 국내외 메일발송을 하기위해서는 여러가지 약속된 프로토콜을 등록해야한다. 그래서 아주 쉽고 Easy 한 설명을 해보고자 한다 1. EIP(Ela.. 공감수 1 댓글수 2 2020. 11. 17.
  • [AWS S3, NCP Object Storage] CLI를 사용한 SSE-C 암호화 각 클라우드 플랫폼에서는 클라우드형 스토리지 서비스를 제공한다. AWS - S3, NCP - Object Storage 라는 서비스를 제공하고 있다. SSE-C란? Server Side Encserver side encryption with customer provided key의 약자로 고객에게 제공된 고객의 키(AES256)의 암호키를 이용한 암호화 방식을 말한다. 각 스토리지에는 다양한 타입의 파일이 업로드 될 수 있는데, 보안상 파일을 평문그대로 업로드 하지 않고 암호화하여 업로드 할 수 있도록 Side 서비스를 제공한다. 단, AWS의 경우 현재는 S3내 암호화 옵션을 활성화하면 업/다운로드 되는 파일에 대해 자동으로 암/복호화를 수행해주기 때문에 별도의 작업이 필요없어서 SSE-C를 굳이 사용.. 공감수 0 댓글수 1 2020. 9. 2.
  • NCP(NAVER CLOUD PLATFORM) 구축기 #1 6개월전 작성하다가 멈췄던 구축기... NCP 에 대해 솔직담백한 이야기 에 대한 이모저모고모 NCP란? NAVER CLOUD PLATFORM으로 https://www.ncloud.com/ NAVER CLOUD PLATFORM cloud computing services for corporations, IaaS, PaaS, SaaS, with Global region and Security Technology Certification www.ncloud.com 네이버 클라우드 플랫폼으로 국내에 몇 안되는 인프라 클라우드 서비스이다. NCP를 구축 하는 이유? 국내 클라우드 인프라를 써야하는 이유가 생겼고?(보안과 관련한 SAAS CSAP 등등) AWS Azure GCP 등 외국계열의 클라우드 서비스에서는.. 공감수 1 댓글수 0 2020. 3. 30.
  • AWS CLI 명령어 자동완성 기능(aws completer) AWS CLI를 사용하다 보면 AWS CLI command refernce 사이트를 들락거리기 마련이다. https://docs.aws.amazon.com/ko_kr/cli/latest/index.html AWS CLI Command Reference — AWS CLI 1.18.17 Command Reference docs.aws.amazon.com 리눅스 기반 시스템에서 보통 Tab을 클릭하면 내가 작성한 키워드에 대해 똑같은 키워드를 가지고 있는 리스트를 보여주는 기능들이 존재하는데 AWS CLI에서도 마찬가지 기능이 존재하여 소개하고자 한다. 방법. ##1 echo $SHELL #사용중인 shell 확인 ###bin/bash ##2 which aws_completer #which문으로 aws_com.. 공감수 0 댓글수 0 2020. 3. 10.
  • RDS SSL/TLS 인증서 재부팅없이 교체하기 주의. 재부팅이 없이 된다는것을 보여주기 위해 3306 포트로의 ping 체크를 했으나 이렇게 ping 테스트를 할경우 DB connection error 제한에 따른 모든 유저의 접근차단이 됨. 해당 block을 해제하는 방법은 다음에 소개하겠음 AWS RDS에서 SSL/TLS 인증서 기반으로 접근하는 방법을 제공하며, 해당 인증서의 만료로 교체 이슈가 있다. 메일 및 여러가지 공지를 띄우고 있으며 최대한 빨리 교체하라 하고 있다. 테스트 결과 업데이트는 약 1~2분내 업데이트 되며 상태에는 재부팅이라고 뜨지만 ping 1개정도가 빠진다.(수차례 테스트) 이러한 것도 불안한 무중단 시스템의경우는 해당 방법을 통해 교체하는것을 제시한다. 단, 테스트 결과 인증서가 교체되기는 하나 실제로 사용이 가능하지 .. 공감수 2 댓글수 0 2020. 1. 15.
  • AWS MFA 강제화 설정 MFA란? 더보기 MFA 란? "Multi Factor Authentication" 의 약자 입니다. 은행 로그인 할 때 보안을 강화하기 위해 OTP(One Time Password) 단말기를 쓰는 것과 동일합니다. 예전에는 보안카드 라는 것을 발급했지만, 이것은 탈취당하기 쉬운 정보이죠. 그렇기 때문에 "초단위 또는 분단위로 바뀌는 숫자"로 인증번호를 대체하여 보안을 강화하는 방법 입니다. 이러한 MFA는 하드웨어만 있는게 아니고 스마트폰에 앱을 설치하여 동일한 효과를 낼 수 있습니다. 라고 한다. 기본적으로 어떤 중요 서비스에 접근시에 OTP 등을 통한 2factor 인증이 기본이다 요새는. 하여 AWS console또한 2차 인증을 통해 접근을 해야 하는데 해당 정책을 강제화 할 수 있다. aws .. 공감수 0 댓글수 2 2019. 12. 6.
  • AWS Console 접근 IP 제한 방법 AWS를 운영하면서 가장 중요한 것중 하나가 보안이다. 따라서 VPC 부터 서버까지 모든 영역에 보안적 요소가 빠지지 않는 부분이 없다. 하지만 정작 해당 서비스를 컨트롤 할 수 있는 AWS 콘솔은 기본적으로 전구간에서 접속이 가능하다. 하여, AWS 콘솔도 접근을 해야 하는 대역으로만 압축을 해야 한다. aws 공식 사이트에 가면 https://docs.aws.amazon.com/ko_kr/IAM/latest/UserGuide/reference_policies_examples_aws_deny-ip.html AWS: 소스 IP를 바탕으로 AWS에 대한 액세스 거부 - AWS Identity and Access Management AWS: 소스 IP를 바탕으로 AWS에 대한 액세스 거부 이 예제에서는 다음.. 공감수 0 댓글수 0 2019. 12. 5.
  • 테라폼을 이용한 infra 구축 #2_테라포밍 설치 및 사용법 이전글. 2019/11/20 - [Paul Granduer Lee /AWS 이모저모] - 테라폼을 이용한 infra 구축 #1_테라폼 설치 및 기본 사용법 terraforming 즉, 테라포밍 이란? 테라폼 사용을 용이하도록 tf 파일 및 tfstate 파일을 쉽게 생성 및 가져올수 있도록 만들어진 도구 다운로드. https://github.com/dtan4/terraforming http://terraforming.dtan4.net/ gitgub을 통해서 clone을 받던지 테라포밍 사이트에서 zip파일을 다운받던지 하면 됨. 단 ruby 기반으로 동작하기 때문에 ruby 설치후 명령어를 통한 install 방법도 있고 이게 가장 간단 할 수 도 있음. ruby 설치. https://rubyinstal.. 공감수 0 댓글수 0 2019. 11. 21.
  • 테라폼을 이용한 infra 구축 #1_테라폼 설치 및 기본 사용법 테라폼(terraform)이란? 쉽게 설명하자면 Infra 구성값을 미리 코드화 시켜놓고 해당 코드를 수행하게 함으로 infra 구성이 되게끔 하는 infra as a code, 즉 코드로 인프라를 구성하는 시스템이다. infra 관리할 리소스가 적다면 클라우드 시스템의 UI를 통해 하나씩 만들어가면 되겠지만, 차후 관리할 infra의 규모가 커지고 기존에 관리하던 리소스들도 많아지면 해당 infra 관리 및 구축을 일일이 하기란 어려울 것이다. 하여, aws자체 적으로 제공하는 cloudformaion , chef, puppet, ansible, terraform 과 같은 infra를 코드화 시켜서 관리하자라는 목적을 둔 도구들이 생겨나기 시작했다. 각 도구들은 각각 장단점 및 특성이 있다고 한다. 일.. 공감수 1 댓글수 0 2019. 11. 20.
  • aws_허용된cloudfront를 통한 s3접근방법 대명사로 불리는 CDN이라는 기술이 있다. CDN이란? Content Delivery Network의 약자로 음원, 영상 등 10메가 이상의 대용량 파일을 안정적으로 제공하기 위해 구상된 기술로, 구상 과정에서 자주 사용되는 파일의 병목현상을 해결할 수 있음이 확인되었다. 사실 대용량 파일뿐만 아니라 네트워크 트래픽 자체를 줄이기 위한 기술로 caching과 비슷하다. 자주 쓰이는 contents들을 중간중간에 replica로 만들어 놓아서 클라이언트가 replica에 접근할 수 있도록 하여 트래픽을 줄인다 cloudfront란? AWS에서 서비스하는 CDN 기술 쉽게 말하자면 수많은 엄청난 정적 컨텐츠를 부르기 위한 호출을 서버가 감당하기 힘들때? cloudfront 를 통해 정적컨텐츠를 제공하면 서버.. 공감수 1 댓글수 0 2019. 11. 11.
  • s3 암호화 kms/aws 사용시 문제점 AWS s3 암호화에서 제공하는 기본 옵션인 kms/aws (kms/s3)를 사용하게 될 때 문제점이 있다. ELB 등 로그 생성이 불가하다는 것이다.(iam계정 소유자라 하더라도 파일 업로드가 안되는등의 문제도 있다고 한다.) ELB의 Access logs를 활성하 하고 kms/aws(default) 로 암호화된 s3 bucket을 지정할 경우 이러한 메세지와 함께 적용이 되지 않는다. aws에 문의해본 결과 기본으로 적용된 kms/aws key를 사용할 경우에는 kms key의 정책을 수정할 수 없기에 permission 허용이 되지 않는다는..... 즉, 위의 문제를 해결하려면 AES-256 또는 KMS를 수동으로 생성하여 정책 조절을 해서 사용해야 한다고 한다. AES와 KMS 둘중 아무거나 사용.. 공감수 0 댓글수 0 2019. 10. 17.
  • aws_S3복사하기 개요. S3간 복사가 필요한 상황이 발생 방법. S3 bucket을 복사하는 방법은 웹콘솔에서의 복사 aws cli 명령어로 복사하는 방법이 있다. 단, 복사하고자 하는 bucket의 용량이 클 경우, 파일이 많을 경우, 폴더가 많을 경우 복사가 정상적으로 이뤄지지 않는것으로 보인다. 간단한 복사 방법. 1.내보낼 bucket에서 복사할 대상 선택 - 작업 - 복사 2.받을 bucket에서 작업 - 붙여넣기 CLI 명령어. aws s3 copy --region aws s3 sync --region ap-northeast-2 s3://test/ s3://test1/ 대용량 복사 방법 aws s3 sync --region aws s3 sync --region ap-northeast-2 s3://test/ s.. 공감수 1 댓글수 0 2019. 8. 12.
  • cloudwatch의 로그를 s3로 보내기 cloduwatch에서 스트림 형태로 수집되는 로그를 다운받고 싶었으나, 방법이 없었음 연구해보면 lambda 또는 s3를 통해 가공 및 다운로드가 가능함을 알았고, s3에 일단 필요한 자료를 다운로드 가능하게 끔 셋팅하는 방법을 공유하고자 함 1. cloudwatch에서 필요한 로그 그룹을 선택 - 작업 선택 - Amazon S3로 데이터 내보내기 2. 내보낼 데이터 정의(날짜별로 filter) 후 내보낼 s3 버킷 선택 3. 권한이 올바르지 않다고 오류가 발생함 이부분을 찾는데 시간을 소요함. cloudwatch에서 s3로 데이터를 내보내기 위해서는 cloudwatch의 리전과 s3 생성 리전이 일단 동일해야함.(필자의 경우 이경우는 아님) 그리고 cloudwatch로그를 받기 위해선 s3의 버킷에 .. 공감수 0 댓글수 0 2019. 7. 16.
    문의안내
    • 티스토리
    • 로그인
    • 고객센터

    티스토리는 카카오에서 사랑을 담아 만듭니다.

    © Kakao Corp.