프로그래밍
-
s3 이벤트 로그 기록 시작프로그래밍/aws 2024. 5. 5. 16:20
저번에 이상하게 s3 트래픽이 일시적으로 증가했던 이후에 일년만에 비용이 튀는 현상 재발생하였다. 2023.04.23 - [일상/개발일기] - s3 비용 이상증가 이슈 확인 s3 비용 이상증가 이슈 확인aws 콘솔에서 비용이 갑자기 증가하면 알림이 오게 설정해뒀는데 4월부터 갑자기 s3비용 증가 알림이 매일같이 오기 시작했다 확인해보니 트래픽 관련 비용들이 갑자기 증가를 하였다. 우선 사용kugancity.tistory.com 2023.05.07 - [프로그래밍/aws] - s3 비용 이상증가 이슈 확인 ( 두번째 ) s3 비용 이상증가 이슈 확인 ( 두번째 )예전에 s3 비용이 이상 증가를 해서 일단 cloudwatch를 설정해두고 바빠서 그 후 확인을 못하고 있다가다시 aws console에 들어..
-
Azure AI Studio 사용후기 - openai + embedding search프로그래밍 2024. 3. 14. 11:58
Azure AI studio를 사용해서 openai(chatgpt)와 embedding 검색을 동시에 구현해보았다. AI studio를 사용한 것은 처음이였는데 그냥 간단하게 문서들을 업로드하면 바로 유사어 검색까지 가능한 벡터 서치까지 바로 구현을 할 수 있다는 것이 너무 놀라웠다. 심지어 몇 분 이내로 가능함... 내가 왜 MS주식을 일찍 팔았을까 ; - ; 우선 하나씩 해보자면 AI 프로젝트를 생성하면 아래와 같이 프로젝트 플레이그라운드에 들어갈 수 있다. openai 플레이그라운드와 비슷하다ㅎㅎ 여기서 데이터추가를 하면 gpt에서 백그라운드 지식으로 사용할 수 있는 데이터를 파일 형태로 바로 업로드 할 수있다. 심지어.. 이 파일들을 임베딩화 해서 벡터 서치로 바로 사용이 가능하다...! 참고로 ..
-
aws opensearch - python으로 접속하기프로그래밍 2024. 3. 7. 17:47
AWS OpenSearch Service에 접속하기 위해 Python에서 사용할 수 있는 주요 SDK는 opensearch-py입니다. 이는 Elasticsearch의 공식 Python 클라이언트를 OpenSearch와 함께 사용할 수 있도록 확장한 것입니다. AWS의 인증 메커니즘과 통합하기 위해서는 추가적인 단계가 필요합니다. 여기서는 opensearch-py 패키지를 사용하여 AWS OpenSearch Service에 안전하게 접속하는 방법을 안내합니다. boto3는 AWS 서비스와 상호작용하기 위한 AWS의 공식 Python SDK입니다. boto3를 사용하면 AWS의 다양한 서비스(예: S3, DynamoDB, EC2, OpenSearch Service 등)를 쉽게 프로그래밍 방식으로 관리하고 ..