본문 바로가기
반응형

전체 글576

cron 표현식 설명 + 예제 설명 크론 작업 표현식은 크론 작업의 일정을 정의하는 문자열입니다. 공백으로 구분된 6개의 필드로 구성되며 다음을 나타냅니다. Minute (0-59) Hour (0-23) Day of the month (1-31) Month (1-12) Day of the week (0-7, where both 0 and 7 represent Sunday) Year (optional) 예제 0 0 * * * - 매일 자정에 작업을 실행 0 0 1 * * - 매월 1일 자정에 작업을 실행 0 8 * * 1-5 - 매주(월요일~금요일) 오전 8시에 작업을 실행 0 0 1-7 * * - 매일 1일부터 7일 자정에 작업을 실행 30 16 * * * - 매일 오후 4:30에 작업을 실행 0 0 * 4 * - 매년 4월 자정에 .. 2023. 1. 24.
[AWS] Lambda 따라하기 (python) #6 Scheduler AWS Lambda Scheduler EventBridge를 사용하여 주기적으로 실행하기 여섯번째 포스트입니다. 지금까지 Lambda 함수를 생성하고, api로 호출하는 방법을 알아봤는데요. 이번에는 정해진 시간에 실행되도록 하는 기능을 이용해보겠습니다. aws 에는 EventBridge 가 있습니다. Lambda 함수에서 "트리거 추가" 후에 EventBridge 를 검색하여 선택합니다. 구성은 아래와 같이 작성했습니다. 제게 더 익숙한 크론잡으로 표현식을 작성했습니다. cron(여기에 cron expression 입력) 참고로, aws 에서 사용하는 표현식에 살짝 다른 것이 있네요. 여기 에서 확인하시면 됩니다. 예를들어, 5분마다 실행하는 표현식이 cron 에서 */5 * * * * 이렇게 쓰이는데.. 2023. 1. 24.
[AWS] Lambda 따라하기 (python) #5 Trigger (REST API) API NAME 은 hello-bryan-rest-API 로, 이전 포스트의 http api 의 name 과 다르게 합니다. API endpoint 가 생성되었습니다. 저 링크를 클릭하면 웹브라우저에서 호출된 결과를 확인할 수 있습니다. POSTMAN 으로 호출하기. 이번에는 queryString 이나 path parameter 로 호출하지 않고, json body 로 호출하도록 하겠습니다. POST 방식으로 넘겨서 받기 위해서 아래와 같은 코드를 추가합니다. if event['httpMethod'] == 'POST': req_data = json.loads(event['body']) # JSON 문자열 처리 album = next(filter(lambda x: x['id'] == req_data['al.. 2023. 1. 24.
[Python] 날짜 텍스트를 datetime 으로 변환하기 Date String to datetime from datetime import datetime date_string = "2022-01-01" date_object = datetime.strptime(date_string, "%Y-%m-%d") print(type(date_object)) print(date_object) dateUtil 사용하기 pip3 install python-dateutil from dateutil.parser import parse date_string = "2022-01-01" date_object = parse(date_string) print(type(date_object)) print(date_object) pandas 사용하기 pip3 install pandas imp.. 2023. 1. 24.
[Python] download with asyncio Python은 비동기 작업을 처리하기 위한 훌륭한 언어이며 이 목적을 위한 가장 인기 있는 라이브러리 중 하나는 asyncio입니다. 이번 포스트에서는 asyncio를 사용하여 Python의 URL에서 이미지를 다운로드하는 방법을 살펴보겠습니다. 먼저 필요한 라이브러리를 가져오는 것으로 시작하겠습니다 import asyncio import aiohttp aiohttp 라이브러리는 Python용 비동기 HTTP 클라이언트입니다. 이 라이브러리를 사용하여 URL에서 이미지를 다운로드합니다. 다음으로 이미지 다운로드를 처리할 함수를 정의해 보겠습니다. 이 예에서는 이 함수를 download_image()라고 합니다. 이 함수는 이미지의 URL을 매개변수로 사용하고 이미지 데이터를 바이트 객체로 반환합니다. a.. 2023. 1. 24.
[AWS] Lambda 따라하기 (python) #4 Trigger (HTTP API) AWS Lambda HTTP API Trigger 네번째 포스트입니다. 이어서, 이전까지 Lambda 함수를 만들었으니, 이제 이걸 호출해서 실행해 보도록 하겠습니다. API 중에 HTTP 와 REST 가 있는데, 이번에는 HTTP 먼저 해보겠습니다. 이전에 만들었던 Lambda 함수로 들어간 후 "+ 트리거 추가" 버튼을 누릅니다. API Gateway 를 선택합니다. 구성은 아래와 같이 합니다. 테스트니까 Security 와 CORS 는 위의 설정대로 합니다. 실제 서비스가 모두에게 오픈할것이 아니라면 변경하시는게 좋습니다. 생성된 API endpoint 링크를 클릭하면 기존에 만들었던 Lambda 함수가 실행됩니다. 파라메터가 없으니 위와 같은 결과가 나오겠네요. 파라메터 추가 파라메터를 받아오기 .. 2023. 1. 24.
[AWS] Lambda 따라하기 (python) #3 container 사용 AWS Lambda Docker Container 사용하여 Python 실행하기 이제 세번째 포스트 입니다. Docker Container 를 사용하여 Lambda 함수를 생성할 차례네요. 기본적인 내용은 #1, #2 에서 했으니, 필요한 부분만 작성하도록 하겠습니다. AWS 에 로그인하시고, Lambda 서비스 홈으로 갑니다. "함수 생성"을 누릅니다. 세번째 옵션인 "컨테이너 이미지"를 선택합니다. 아직 컨테이너 이미지가 없죠..ㅎㅎ dockerfile 을 이용하여 이미지를 생성하고 ECR에 이미지를 push하고나서 다시 해야겠습니다. Base Image AWS에서 lambda 를 사용할 수 있게 base 이미지를 제공합니다. 런타임 인터페이스 클라이언트가 포함되어있습니다. python 이미지는 여기.. 2023. 1. 13.
[AWS] Lambda 따라하기 (python) #2 지난 포스트에 이어서, Lambda 함수 생성 > 새로 작성 > zip 업로드(library 포함) 을 진행 해보도록 하겠습니다. "함수 생성" 을 눌러서 Lambda 함수를 생성합니다. (여기까지 오는 방법을 모르시면 지난 포스트를 보세요~) 저는 지난 포스트에서 작성했던 hello-bryan 함수에 설명을 이어서 하겠습니다. 우측에 "에서 업로드" 버튼이 있습니다. 옵션으로는 ".zip파일", "Amazon S3 위치"가 있네요. ".zip 파일" 을 사용할 것이지만, 먼저 zip 파일을 만들어야 겠습니다. 1. Python 코드 작성 외부 라이브러리를 써봐야 겠는데요. 흔히 사용하는 requests 를 사용하겠습니다. 우선 소스코드는 아래와 같이 동작을 합니다. url 은 album 정보가 있는 1.. 2023. 1. 12.
[AWS] Lambda 따라하기 (python) #1 AWS Lambda AWS Lambda(람다) 란 무엇인가? 서버 없이 코드를 실행 할 수 있는 이벤트 중심의 컴퓨팅 서비스 예를 들어, 매일 자정에 크롤링을 해야할 작업이 필요한데, Lambda 를 사용하지 않을 때 서버를 구해야함. 운영체제 설치, 파이썬 설치 집에서 24시간 컴터 가동하고 스케줄러 설정 또는 클라우드 서버 서비스 이용 이렇게 하면, 비용이 많이 들겠죠. 매일 자정에 한번 돌리는데 서버를 계속 켜둬야 하니.. 전기세 폭탄, 등짝 스매씽! (꼭 이런 상황때문에만 나온것이 아니지만) 저는 Lambda 를 쓰면 확실히 비용이 절감되고 편했습니다. 주요 상세 기능 공식 홈페이지만한 설명은 없죠. 여기 참고하세요. 따라해보기 1. AWS 계정 생성 https://portal.aws.amazon.. 2023. 1. 11.
Docker Container 각티슈 (feat. 개발자 각티슈) 핫한 아이템 소개해 드리려고 합니다. Docker 아시죠? Container 아시죠? 제 책상 위에 도커 컨테이너를 띄웠습니다. docker run -it 각티슈 /bin/bash ㅋㅋ 이쁘네요. 쿠버네티스 책은 원래 저 자리에 있었습니다 ㅎㅎ 정말~ 이쁘네요. 도커 컨테이너 몇개 더 사서 쌓아두고 싶을정도입니다. 그러기엔 가격이..ㅎㅎ 잘 어울리네요~ 누가봐도 개발자 책상.. 위치를 옮겨봤는데, 어디에 둬도 잘 어울립니다~ 사이즈도 딱! docker 를 많이 쓰는지라, 애착이 금방 가네요~ 내 책상에 최애템이 되었습니다. 팀원들도 개발자라, 탐내고 있습니다. 아직 팀에 이 아이템이 없다면, 먼저 GET 하시길 ㅎㅎ 구매는 아래 링크에서 가능합니다~ https://incatos.shop/surl/P/11.. 2023. 1. 11.
728x90
반응형

티스토리툴바