티스토리

ppuing's diary

검색하기

블로그 홈

ppuing's diary

blog.ppuing.me/m

dev & cars

구독자: 0

방명록 방문하기

반응형

주요 글 목록

Ubuntu 에 용량 큰 파일 top 10 가져오기 sudo du -a /var/ | sort -n -r | head -n 10 공감수 0 댓글수 0 2024. 10. 29.
Kafka 클러스터에서 broker 가 죽었을 때 topic 생성 타임아웃 해결하기 python-kafka 를 활용하고 있고, 총 3개의 broker 를 설정해서 사용하고 있는데 broker 2,3 이 죽었을 때 Topic을 Producer가 만들려고 시도할 때 타임아웃이 발생했다. 블로그 글을 단순히 보고 아래와 같이 세팅 했었는데, # kafka server 1 ############################# Server Basics ############################# process.roles=broker,controller node.id=1 controller.quorum.voters=1@host1:9093,2@host2:9093,3@host3:9093 ############################# Socket Server Settings ######.. 공감수 4 댓글수 3 2024. 10. 25.
Nginx 다른 사이트로 리다이렉트할 때 request_uri 변조하여 rewrite 하기 회사에서 앱 버튼을 눌렀을 때 웹사이트 A의 웹뷰를 보여주는 기능이 있다. 웹사이트를 리뉴얼하게 되어 B라는 사이트를 신설했는데, 앱에 웹뷰를 띄울 때 타겟 URL이 A로 제한되어 있었기 때문에 앱 업데이트가 불가피했다. 앱 업데이트를 피하기 위해선 A의 nginx단에서 들어온 요청을 B로 던져주는 것이 필요했다. 단순히 rewrite만 쓰면 해결되지만, 여기서 문제가 A -> B로 이동할 때 path가 약간 다르다는 점이었다. 즉, https://A.com/app/path/에서 https://B.com/path/ 처럼 세부 path 가 달라져야 했다. 이럴 때에는 location 안에서 request_uri에 대한 조건문을 활용해볼 수 있다.location / { # 어떤 특정 location .. 공감수 2 댓글수 0 2024. 8. 6.
Elasticsearch Too many dynamic script compilations within, ~ 에러 해결하기 elasticsearch 디폴트 설정 값이 150/5m 으로 되어 있어서 100000/1m 으로 바꾼다 PUT method를 이용해서 호출하면 정상적으로 바뀌고 더 이상 에러가 나지 않는다 이외에 스크립트 자체를 static으로 바꾸는 것도 해결법 중 하나이다 참고 자료 : https://alexmarquardt.com/2020/10/21/elasticsearch-too-many-script-compilations/ 공감수 0 댓글수 0 2024. 3. 28.
Nginx - index 페이지 기본 탐색기 적용하기 server { ... content ... location / { autoindex on; } } fancy index를 활용하면 날짜 포맷도 바꿀 수 있음 sudo apt-get -y install libnginx-mod-http-fancyindex server { ... content ... location / { autoindex on; fancyindex on; fancyindex_time_format "%Y-%m-%d %H:%M:%S"; } } reference : https://installati.one/install-libnginx-mod-http-fancyindex-ubuntu-18-04/?expand_article=1 공감수 1 댓글수 0 2024. 2. 29.
Django 에서 GROUP_CONCAT 커스텀 사용 시 order_by, separator 추가하기 class CustomConcat(Aggregate): function = 'GROUP_CONCAT' allow_distinct = True def __init__(self, expression, distinct=False, **extra): # order by = group_concat 의 정렬 기준 # separator = group_concat 의 구분자(default = ",") expr_separator = '' expr_order_by = '' order_by = extra.get('order_by') separator = extra.get('separator') if order_by: expr_order_by = f' ORDER BY {order_by} ' if separator: expr_.. 공감수 1 댓글수 0 2024. 2. 27.
Python 이중 for loop 를 itertools 를 활용하여 개선하기 a = [1,2,3,4] b = ['A', 'B'] 의 두 리스트에 대해 (1,A), (1,B), (2,A), (2,B), ... 반복을 하려면 무지성으로 구현했을 때 for x in a: for y in b: function(x, y) 처럼 구현할 수 있다. 하지만 itertools 의 product 를 활용하면 좀 더 깔끔하게 구현이 가능하다 [function(x, y) for x, y in product(a, b)] 공감수 1 댓글수 0 2024. 2. 26.
Nginx 프록시 대상에게 Client IP 정보 넘겨주기 location { ... proxy_set_headerX-Real-IP$remote_addr; proxy_set_headerX-Forwarded-For$proxy_add_x_forwarded_for; ... } 위와 같이 세팅하면 proxy 대상 서버에서는 x-forwarded-for header를 읽으면 IP가 찍혀 있다. 공감수 1 댓글수 0 2024. 2. 20.
Gunicorn 에서 print() output 이 로깅 되지 않을 때 해결법 # myapp.service StandardOutput=journal StandardError=journal 을 추가하면 print() 문구가 노출된다 공감수 0 댓글수 0 2023. 11. 22.
Slack bot 세팅하기 참고 링크 : https://api.slack.com/automation/quickstart Quickstart guide for the next generation Slack platform Get up and running quickly with the quickstart guide. api.slack.com 공감수 0 댓글수 0 2023. 7. 18.
gunicorn 멀티프로세스 Crontab 을 활용한 날짜별 file log 로테이션 돌리기 gunicorn 을 활용하여 멀티프로세스를 이용하는 경우, 그리고 로깅 타입을 TimedRotatingFileHandler 을 이용하는 경우 여러 개의 프로세스가 한 파일에 접근하기 때문에 날짜가 바뀔 때마다 새 파일을 만들어야 하는데 이게 제대로 작동하지 않았다 그래서 메인 log 파일에 계속 누적하여 로그가 쌓이고 있었고, 얼마 지나지 않아 로그 사이즈가 너무 커져서 나중에는 읽기 조차 힘든 지경에 이르렀다. 여러 자료들을 살펴 보았을 때 멀티 프로세스를 쓴다면 곧바로 파일 로테이션 로깅을 사용하지 말고, 작업 큐에게 로그를 전달하여 작업 큐로부터 파일 로테이션을 돌리도록 해주면 된다고 하는데 그냥 가장 간단한 방법으로 처리하면 되지 않을까 하여 크론탭을 이용하게 됐다 크론탭은 정해진 시간, 날짜에 .. 공감수 0 댓글수 0 2023. 4. 25.
[Django] Replica DB 사용 시 읽기전용/쓰기전용 Database 분리하기 DB replica 를 사용할 때 읽기전용으로 replica를 사용하고, 쓰기전용으로 main(master) DB를 사용하도록 하는설정 replica_1, replica_2 를 settings.py의 DATABSES 에 선언했다고 가정 import random class DBRouter(object): def db_for_read(self, model, **hints): return random.choice(["replica_1", "replica_2"]) def db_for_write(self, model, **hints): return "default" def allow_relation(self, obj1, obj2, **hints): return True def allow_migrate(self, .. 공감수 1 댓글수 0 2022. 9. 6.
[Android] WebView에서 URI가 Intent Schema 인 경우 웹사이트 로딩하기 웹뷰에서 보여 줄 사이트 URI가 Intent Scheme 인 경우가 있다. 이 경우 URL은 intent://blah.blah 처럼 내려오게 되는데, 브라우저에서 식별 가능한 URL이 아니기 때문에 해당 URI를 브라우저가 이해할 수 있는 URL로 아래 코드 처럼 변환해줘야 한다. // WebViewClient // webViewClient = object : WebViewClient() { } 안에 아래 오버라이딩 함수 정의 override fun shouldOverrideUrlLoading(view: WebView?, request: WebResourceRequest?): Boolean { request?.url?.let { uri -> if (uri.toString().startsWith("int.. 공감수 0 댓글수 0 2022. 5. 19.
Jenkins 설치 및 원격 배포 설정 Ubuntu 18.04 JDK 설치 > sudo apt-get update > sudo apt-get install openjdk-11-jre openjdk-11-jdk > java -version 환경변수 설정 > vim ~/.bashrc # ~/.bashrc export JAVA_HOME=$(dirname $(dirname $(readlink -f $(which java)))) export PATH=$PATH:$JAVA_HOME/bin > source ~/.bashrc > $echo $JAVA_HOME > sudo wget -q -O - https://pkg.jenkins.io/debian/jenkins.io.key | sudo apt-key add - > echo deb http://pkg.jenk.. 공감수 0 댓글수 0 2022. 2. 18.
Nginx Response header 커스터마이징하기 response header에 Server 항목을 보면, Server: nginx x.x; 처럼 nginx version이 명시되는 경우, 보안상 좋지 않기 때문에 해당 Server 헤더 값을 커스터마이징 할 필요성이 있다. 이런 경우 추가적인 패키지를 받아서 해결할 수 있다. > sudo apt-get update > sudo apt-get install nginx-extras nginx 서버 세팅 파일에서는, location ... { server_tokens off;# removed pound sign more_set_headers 'Server: MySite'; } 처럼 처리할 수 있다. 공감수 1 댓글수 0 2022. 2. 4.
Multi Thread 결과 값 리턴하여 저장하기 Thread는 보통 현재 메인 Thread 에서 시간을 더 이상 잡아먹지 않기 위해 비동기적으로 작업을 넘겨버리고 주 작업을 하고 싶을 때 사용한다. 따라서 이런 경우는 그렇게 생성한 Thread의 결과가 어떤지 살펴볼 필요가 없을 때이다. 예를 들어, 고객 주문 처리 함수를 구현한다고 가정하면, 고객 주문을 완료 하고 마지막에 고객에게 알림 메시지를 발송하는 기능을 구현한다고 하자. 고객에게 알림 메시지를 발송하기 위해 타 업체의 API를 이용해야 하는데, 만약 타 업체 서버가 점검 중이어서 타임아웃 30초 동안 리스폰스를 받지 못한다면 해당 주문 처리 함수는 30초 동안 진행이 되지 않는다. 따라서 이런 경우에 알림의 성공 유무와 관계 없이 일단 주문처리를 완료하고 싶을 때 Thread를 이용할 수 .. 공감수 3 댓글수 0 2021. 7. 22.
베트남어 성조 제거하여 알파벳으로 변환하기 회사에서 다국어를 지원하다보니 베트남어 인풋을 받아 처리를 해야 하는 문제가 생겼다. 고객이 베트남인일 때 알파벳을 입력하는 것은 어려워하지만 베트남어 키보드로 이름을 치는 건 쉽게 할 수 있는데, 문제는 우리가 베트남어를 받아서 영문 알파벳으로 변환을 하여 협력사에 알파벳 이름을 전달해야 한다. 예를 들어, 한 고객의 이름이 Nguyễn Vũ Quốc Anh 이라고 했을 때, 이 이름을 Nguyen Vu Quoc Anh 으로 변환해야 한다. 문제 해결을 위해 베트남어에 사용되는 전체 문자열을 나열하고, 그에 대응하는 알파벳으로 치환해주는 간단한 함수를 구현한다. def remove_accents(input): if not input: return "" s1 = u'ÀÁÂÃÈÉÊÌÍÒÓÔÕÙÚÝàáâãè.. 공감수 4 댓글수 0 2021. 6. 30.
[Swift] 메인 스레드 밖에서 UI 관련 호출 에러 발생시 DispatchQueue.main.async { 코드 블럭 } 공감수 0 댓글수 0 2021. 4. 14.
[iOS] AltStore & unc0ver를 활용하여 탈옥폰 만들기 루팅탐지 기능을 구현 & 테스트 하기 위해 탈옥 폰이 필요했다. 때문에 공기계 하나를 탈옥폰으로 만들기로 결정하고, 탈옥폰 만들기 작업을 시작했다. unc0ver 가 실제 jailbreak를 하는 앱인데, ios의 버전이 너무 높으면 지원되지 않을 수 있으니, 적당히 버전이 최신이 아닌 기기로 하는 것이 정신 건강에 이롭다. 1. 먼저 탈옥폰을 만들기 위해 자신의 OS에 맞는 AltStore를 설치한다. 링크 2. AltServer 실행을 하면 아래와 같은 아이콘이 상단에 뜬다. - 이 버튼을 누르면 Install AltStore 버튼이 보일 거다. AltStore를 루팅할 폰에 설치하는 건데, 그러려면 컴퓨터에 아이폰을 연결해야 인스톨 대상이 보인다. - Install AltStore - iPhone .. 공감수 1 댓글수 2 2021. 3. 19.
[Android] Profiler & BinEd Plugin을 활용하여 메모리 덤프하기 안드로이드 프로젝트에서 현재 메모리에 있는 String 정보들을 봐야 할 경우가 생겨서 메모리 덤프 후, 메모리 내에 어떠한 String 정보들이 보여지고 있는지 BinEd 플러그인을 활용했다. 목표는 어떠한 값이 암호화 되어야 하며, 메모리 내에 평문으로 보이지 않도록 하는 것이므로, 메모리 덤프 후 평문으로 검색했을 때 아무런 값도 매치되지 않아야 정상이다. 우선 Android Studio -> Preference -> Plugins 에 가서 BinEd를 검색한다. 해당 플러그인 설치를 하고, 안드로이드 프로젝트를 시뮬레이터에서 Run 한다. 시뮬레이터에서 앱이 돌고 있을 때, 하단의 Profiler 탭을 클릭하여 SESSIONS 옆에 있는 + 버튼을 눌러서, 확인하고자 하는 앱을 선택한다. 초록색 .. 공감수 0 댓글수 0 2021. 3. 19.
MySQL 똑같이 생긴 테이블 A, B에 대해 테이블 A 에서 테이블 B 로 ROW 옮기기 INSERT INTO NEWTABLE SELECT * FROM OLDTABLE WHERE {}; DELETE FROM OLDTABLE WHERE {}; 공감수 0 댓글수 0 2021. 3. 10.
CSS/Sass 긴 문자열 끝을 ...로 만들기 p width: 100% overflow: hidden text-overflow: ellipsis white-space: nowrap 공감수 0 댓글수 0 2021. 2. 18.
AngularJS ng-src 가 이미지 없는 경우 이미지가 동적으로 바뀌지 않는 문제 해결 처럼 '//:0' 을 추가하면 된다. 공감수 0 댓글수 0 2021. 2. 17.
CSS/Sass 썸네일 이미지를 상위 DIV에 딱 맞는 정사각형으로 만들기 .thumbnail-wrapper position: relative &::after content: "" display: block padding-bottom: 100% img position: absolute width: 100% height: 100% object-fit: cover 공감수 0 댓글수 0 2021. 2. 17.
티스토리 기본 도메인사용시 애드센스 안나오는 문제, 개인 도메인 연결시 구글 검색 문제 해결 방법 티스토리에서는 두 가지의 광고 플랫폼을 이용할 수 있는 장점이 있다. 티스토리 자체적으로 사용하는 애드핏과 구글의 애드센스가 바로 그것. 애드핏의 경우 노출, 클릭 모두 수익이 들어오고 유저들의 클릭이 적은 점에서 기본적으로 수익을 보장할 수 있다는 장점이 있으나, 그 금액이 너무 작아서 사실상 수익을 내기란 일등 블로그가 아닌 이상 어렵다. 애드센스의 경우 노출만 했다고 수익이 보장되는 것은 아니나, 한 번의 클릭으로도 0.1달러 정도는 벌 수 있는 것으로 예상수익이 잡히는 것으로 보아, 애드센스 연동을 하기로 결심했다. 우선 애드센스 페이지에 들어가서 모두 활성화를 시켜줬다. 그 다음 애드센스 정산하기를 누르면 ads.txt 파일을 우리 블로그에 놓으라고 한다. 이 파일을 간혹 다른 블로그에서 "스킨.. 공감수 2 댓글수 0 2021. 1. 21.
uwsgi processes, threads 값을 조정하여 서버 성능 향상하기 uwsgi 실행을 위해 .ini 파일을 작성할 때, processes, threads 값을 조절하여 현재 서버가 요청을 동시에 얼마나 처리할지 결정할 수 있다. 기본적인 파일 예시는 아래와 같다. 이 값을 따로 만지지 않으면, 최저 사양으로 서버가 돌기 때문에, 코어 개수가 4대임에도 프로세스가 단 하나만 생성되어 동시 요청이 많이 들어오는 경우, 몇몇 요청은 TIMEOUT 에러를 받을 수 있다. 때문에, 서버의 사양에 맞춰서 적절한 프로세스, 스레드 개수를 설정하면 많은 동시 요청을 적절하게 대응하여 처리할 수 있다. [uwsgi] module = wsgi:app master = true processes = 8 threads = 16 enable-threads = true socket = :5050 .. 공감수 1 댓글수 0 2021. 1. 13.
[HTML, CSS(SASS), Javascript] Animated Underlined Tabs HTML Home Profile Something else Raw denim you probably haven't heard of them jean shorts Austin. Nesciunt tofu stumptown aliqua, retro synth master cleanse. Mustache cliche tempor, williamsburg carles vegan helvetica. Reprehenderit butcher retro keffiyeh dreamcatcher synth. Cosby sweater eu banh mi, qui irure terry richardson ex squid. Aliquip placeat salvia cillum iphone. Seitan aliquip quis c.. 공감수 1 댓글수 0 2021. 1. 6.
[HTML] 드래그 방지, 우클릭 방지, 블록 선택 방지 기능 넣기 태그 안의 attribute에 아래 내용을 추가한다. oncontextmenu='return false' => 우클릭 방지 onselectstart='return false' => 블록 선택 방지 ondragstart='return false' => 드래그 방지 만약 글로벌하게 이 속성을 적용하고 싶다면, body 태그에 추가하면 된다. 공감수 4 댓글수 0 2021. 1. 5.
슬랙 장애 (Connection Failed) 발생 자정에 회사 업무 내용을 보기 위해 슬랙에 들어갔더니.. 오늘도 장애가 발생했다. 현재 슬랙 장애 관련 안내 페이지: status.slack.com/2021-01/9ecc1bc75347b6d1 Slack System Status Resources for real-time and historical information about the Slack service. status.slack.com 휴.. 일단 우리 내부 서버는 중요 태스크를 처리한 뒤 슬랙 hooking URL로 알림 발송을 하는 기능이 여럿 구현돼 있다. 근데 이런 연결 문제가 생기는 날에는.. 잠을 제대로 청할 수 없다. 모든 태스크 처리 후 슬랙 알림을 보내는 부분은 예외처리가 되어 있으니, 타임아웃(30초) 에러가 나더라도 큰 문제는 .. 공감수 1 댓글수 0 2021. 1. 5.
Request with Signature, Nonce by Using API Key & Secret pair & Validate Request API key와 Secret 을 활용하여 안전한 API 를 구현할 때 Signature와 Nonce의 원리를 이용하면 쉽게 구현할 수 있다. Nonce는 쉽게 생각하면 요청 ID로 생각할 수 있으며, 이전 요청의 Nonce값 보다 다음 요청의 Nonce 값이 커져야 한다. (가장 쉬운 방법은 아래 코드처럼 타임스탬프를 이용하면 된다.) Nonce가 필요한 이유는 공격자가 클라이언트의 요청을 훔쳐서 그대로 서버에 요청을 보내는 경우, Nonce 값이 커지지 않고 똑같기 때문에 서버가 두 번째 요청을 거절할 수 있다. 그럼 클라이언트의 요청을 훔쳐서 Nonce만 높여서 보내는 경우에는 탈취가 가능하지 않나? 맞다. 그렇기 때문에 Signature가 필요하다. 서버에서 API key와 Secret을 발급할 때.. 공감수 0 댓글수 0 2020. 12. 30.

반응형

문의안내

티스토리
로그인
고객센터

티스토리는 카카오에서 사랑을 담아 만듭니다.