Daramu

다람어의 블로그

클라우드/NCP

이번에 aws의 Terraform을 공부하여,비교적 값이 저렴한 ncp에서의 테스트 구성을 해보았다. 기존의 방식에서는 변수등의 설정이 어려워 몇가지 수정사항이 있었으며, 마찬가지로 vpc,subnet을 만들었고, 추가로 nat_gateway까지 생성해 보았다. 컨셉은 "추가로 작성하기 간편한 구성"이기에 모듈식에서 locals등의 파일 변화를 사용해 중앙에서 관리하는 요소를 강하게 만들었다.(이름과 IP를 모두 바꿨기에 동작이 안할 수 있다. 100% 이름(변수명)으로 인한 것이니 수정해서 사용하면 동작할 것이다.)  우선 각각의 리소스에 대하여 modules 폴더를 만들어 실제 resuorce는 modules안의 vpc, subnet등의 폴더에서 동작하게 만들었다. 그리고 각각의 리소스를 별도의 tf..

2025. 2. 28.

클라우드/Terraform

윈도우에서 Terraform 및 aws cli에 대한 명령어 설정을 하고 싶다면 아래의 포스팅 참고https://daramu.tistory.com/68 윈도우11 명령어 설치 - 테라폼[Terraform], AWS CLI, AWS IAM Authenticator본격적으로 Argo CD를 사용하기 전에, 몇가지 필요한 준비물이 있다. 0. AWS 계정1. Terraform2. AWS CLI3. AWS IAM Authenticator4. 코드 편집을 위한 편집기( VSCode, WEBStorm etc....) 윈도우 도커 데스크탑의 쿠버네daramu.tistory.com Terraform?간단하게 말하자면 코드를 통한 인프라 관리를 위한 서비스이다.기존의 콘솔에서 클릭을 통해 이루어지던 것을 IaC(Infr..

2025. 2. 22.

클라우드/NCP

NCP에는 API통신을 통한 기능을 제공한다.단순 UI나 콘솔상에서 가능한 것보다 많은 것을 지원하는데, 해당하는 항목에 대해서는 아래를 참고https://api-gov.ncloud-docs.com/docs/api-overview API 개요 api-gov.ncloud-docs.com 아무튼 API를 잘 활용한다면 콘솔 그 이상의 것도 가능하다.가령 CDB의 경우 백업을 주기적으로 실행 가능하고, OBJ또한 다른 리전으로 주기적 복제가 가능하지만 CDB -> OBJ는 주기적으로 불가능하다. 이럴떄 Bastion 서버등에 CDB->OBJ API를 주기적(cron)으로 등록해 놓는다면 자동으로 OBJ 백업이 되는 효과등을 누릴 수 있다. 하지만 쉽게는 불가능하고, API 가이드에 나와있지만 이해가 안가는 부..

2024. 8. 6.

클라우드/fluent bit

일전에 Fluent bit의 글을 쓴적이 있는데, 관련해서 말이 너무 부실하기도 하고, 설정법이나 ACG에 대한 이야기도 빠져있어서 한번 제대로 해보려한다. 1. Search Engine Service(이하 SES)많이들 착각하는 것이 SES는 단순한 대시보드(Dashboard)라는 것이다.SES가 자체적으로 Log를 수집한다거나, 무엇인가 다이나믹한 동작을 하지는 않는 것이다. 그렇기에 사용자는 직접 Log를 쏴줘야 하고, 이 때 선택하는 옵션이 "로그 수집기"이다.로그 수집기는 몇가지가 있다. 대표적으로 익숙한 것이 ELK스택의 LogStash이다. 다만 ELK는 라이센스에 관한 시비가 존재한다.내부망이나 개인 로컬PC(이게 내부망과 같은 의미이기는 하지만) 에서는 문제가 없지만 이것을 기업이 판매할..

2024. 7. 12.

클라우드/fluent bit

Fluent bit를 Log를 수집해서 Opensearch나, ElasticSearch 로 보낸다. 그리고 Prometheus또한 syslog를 보여주는 모니터링 툴이다. 여기서 드는 생각이, 그럼 Fluent bit를 통해서 syslog를 prometheus로 보내줄 수 있나? 였다. 먼저 대답하자면 "그렇다"였다. 자세한걸 보기전에 prometheus 먼저 알아야한다. Fluent bit의 구성도를 보았었을때, 각각의 Node에 Fluent bit가 존재하고, 해당 fluent bit가 log를 opensearch로 보낸다 하였다. prometheus또한 비슷하게 동작하는데, 각각의 VM(혹은 Worker Node)에 "Node Exporter"라는 놈이 존재한다. 이 놈이 주기적으로 VM에 proc..

2024. 4. 15.

클라우드/fluent bit

Fluent Bit와 NCP의 SES를 잇는 연결을 하였는데 문제가 발생했다. pod가 running이기에 문제가 없을 줄 알았지만, kubectl logs pod -n logging 을 입력하니 chunk 데이터가 어마어마하게 쌓이고 있었다. 검색을 해보니 데이터의 단위라는데, retry라는 항목이 존재하는 것으로 보아, fluent bit가 못보냈거나, opensearch가 못받았거나 하는 데이터를 fluent bit 가 가지고 있다가 주기적으로 재전송을 하는 것으로 보였다. 당연히 log를 못보내는 것도 문제이고, retry를 하겠다고 잡아먹는 자원과 네트워크 리소스도 문제였기에 해결을 위한 작업에 들어갔다. fluent bit에서 chunk가 발생하는 경우가 많아서 하나씩 시도하기에는 무리가 있었..

2024. 4. 15.

클라우드/fluent bit

환경: NCP 구성: NKS 2Node NCP의 SES(Search engine Service)를 사용해서 Fluent bit를 구축할 것이다. 우선 알아야할 것은, Fluent bit는 Log를 수집하고 보낸주는 역할을 하고, SES로 구축하는 Opensearch 는 Log를 받아 시각화 해주는 역할을 한다는 것이다. 자주 이야기하는 Eliastic의 ELK스택과 유사하다 생각하면 편하다. 애초에 Opensearch가 Elastic의 라이센스 변경에 대한 반발로 Fork질 해서 나온것이니..... 이름을 붙이자면 OFO정도지 않을까?(Opensearch, Fluent bit, Opensearch-dashboard)...... 아무튼 구성도는 이러하다. 각 Worker Node마다 Daemonset(No..

2024. 4. 15.

클라우드/Terraform

코드는 시작부터 삐그덕거렸다. 기존의 바닐라(옵션이 없는 tf 파일)에서는 잘 작동하던게, 마지막에 옵션을 이것저것 넣었더니 바로 에러가 터졌다. 첫번쨰 에러는 NKS에서 발생했다. resource "ncloud_nas_volume" "test" { volume_name_postfix = "vol" volume_size = "600" volume_allotment_protocol_type = "NFS" return_protection = "false" #or "true" } 를 입력하여 생성하였으나, false든 true든 return_protection = "false" An argument named "return_protection" is not expected here. 그런 아규먼트가 없다며 팅..

2024. 3. 18.