본문 바로가기

전체 글847

Python async/await로 비동기 프로그래밍하기 토이 프로젝트를 진행하면서 어떤 웹 프레임워크를 사용할까 고민을 많이 했었다. 기존에는 Django 또는 Flask로 대부분의 작업을 진행했는데, 요즘 파이썬 비동기 프로그래밍에 관심이 생겨서 관련 프레임워크를 찾아봤다. 많은 프레임워크가 있었고 그 중 aiohttp, sanic, vibora 총 3가지를 후보군으로 뒀다. 먼저 aiohttp는 주변에서 추천해주길래 한번 써봤는데 나쁘진 않았다. 하지만 sanic과 vibora보다 퍼포먼스가 좋지 않았다. 두번째로 vibora는 가장 속도가 빨랐다. 하지만 깃헙 스타가 5000개밖에 되지 않았다. 결과적으로 sanic을 사용하기로 결정했는데 그 이유는 다음과 같다. 첫번째로 형태가 Flask와 비슷했다. 나는 보통 프로젝트를 시작할 때 boilerplat.. 2019. 5. 23.
Django Custom Command 만드는 방법 보통 장고를 실행시키거나 테스트를 진행할 때 아래와 같은 명령어를 사용한다. python3 manage.py runserverpython3 manage.py test 이와 같이 manage.py를 통해 장고에 대한 작업을 진행하는 형태이다. 위처럼 하나의 파일을 통해 원하는 명령어를 실행시킬 수 있다면 관리하기도 용이할 것이다. 편리하게도 장고측에서 위처럼 이미 정의되어있는 명령어 이외에도 Custom하게 명령어를 만들 수 있도록 기능을 제공해준다. 먼저 아래의 명령어로 앱을 하나 생성한다. django-admin startapp testapp 그다음 앱 내부에 management라는 폴더를 생성한다. 그리고 해당 폴더 내부에 commands라는 폴더를 추가로 생성한다. commands폴더 내부에 실행시.. 2019. 5. 22.
Docker Crontab 관련 이슈사항 정리 데이터를 동기화시키기 위해 기존 컨테이너가 아닌 추가적인 컨테이너를 띄워야하는 상황이 발생했다. 따라서 크론 관련 이미지를 알아보던 중 그냥 익숙한 우분투에 크론잡을 설치하여 사용하기로 결정했다. 진행하던 중 생각치도 못한 이슈들이 몇가지 발생하여 이렇게 기록한다. 아마 많은 사람들이 동일하게 겪는 증상이라고 생각하며 본 포스팅이 조금이나마 도움이 됐으면 한다. 1. 크론잡이 실행되는 쉘의 환경변수와 도커로 접속했을 때 쉘의 환경변수가 다르다. 따라서 만약 특정 프로그램을 실행시킬 때 환경변수가 필요한 상황이라면, crontab -e로 잡을 스케쥴링할 때 최상단에 환경변수도 같이 명시해줘야한다. ex) PATH=1 2. Dockerfile에 RUN service cron start와 같이 크론 서비스를 .. 2019. 5. 22.
ECS Fargate Cronjob형태로 작업 실행하는 방법 0. ECR 푸시Fargate로 실행시킬 도커 이미지를 빌드하고 ECR에 푸시해놓은 상태로 진행한다고 가정한다. ECR 푸시 과정은 이전 포스팅에 담겨있다. 1. 클러스터 생성먼저 ECS콘솔로 들어간 후 클러스터 생성을 누른다. 첫번째가 Fargate용 클러스터이므로 선택하고 다음 단계를 누른다. 나는 기존에 존재하는 VPC를 그대로 사용할 것이므로 VPC 생성은 체크하지 않았다. 원하는 클러스터 이름을 적고 생성을 누른다. 위와 같이 나온다면 성공적으로 클러스터를 생성한 것이다. 2. 작업 정의(Task Definition) 생성다음으로 작업 정의를 생성해줘야 한다. ECS콘솔 - 작업정의로 들어가서 새 작업 정의 버튼을 클릭한다. 왼쪽에 있는 FARGATE 전용 작업 정의를 선택하고 다음 단계로 넘어.. 2019. 5. 2.
Django QuerySet에 대하여 QuerySet is LazyDjango의 QuerySet은 Lazy하다. 한마디로 코드 상에서 쿼리를 구성해도 실제 데이터베이스에 접근하는 것은 평가(Evaluate)될 때 한번 뿐이다. 따라서 이러한 특성을 잘 이용한다면 데이터베이스에 접근하는 횟수를 줄일 수 있고 쿼리를 최적화하여 퍼포먼스를 증가시킬 수 있다. When QuerySets are evaluated내부적으로 QuerySet은 실제로 데이터베이스에 접근하지않고 필터링, 슬라이싱등의 작업을 할 수 있다. 한마디로 평가(Evaluate)되기 전까지 데이터베이스에 접근하지 않는다는 말이다. 아래와 같은 동작을 했을 때 QuerySet이 평가되고 실제 데이터베이스에 접근한다. - Iteration : QuerySet은 Iterable(순회 가능.. 2019. 4. 29.
MongoEngine ReferenceField without ObjectId 기존에 MongoEngine을 사용할 때 Embedded와 Reference방식에 대한 비교를 진행하는 글을 포스팅 했었다. (https://hides.tistory.com/1015) 현재 Reference 방식을 사용하여 도큐먼트를 모델링하던 중 ObjectId를 사용하지않고 원하는 필드를 사용하는 방법에 대해 궁금해졌고 그 방법에 대해 포스팅한다. 먼저 아래와 같이 User, Item 두개의 모델을 정의한다. from mongoengine import * connect('test') class User(Document): user_id = StringField() user_pw = StringField() class Item(Document): user_id = ReferenceField(User, .. 2019. 3. 26.