티스토리

미니옵빠의 code stubs

검색하기

블로그 홈

미니옵빠의 code stubs

tod2.tistory.com/m

미니옵빠 님의 블로그입니다.

구독자: 0

방명록 방문하기

주요 글 목록

Text File 내 특정 column 기반으로 aggeration (group by) count 출력 운영 중 자주 사용하는 명령어 기록. cat access.log | awk '{ print $1 }' | sort -nr | uniq -c | sort -nr -k 1 File 기반 access log 에서, 특정 column 기반으로 aggeration (group by) count 출력. count 높은 순으로 desc. 특정 사이트 접속이 많을 때, 접속량이 많은 도메인 추출 등에 활용 e.g. 아래와 같은 형태의 access log raw 가 있을 때 abc.domain.com 111.222.111.222 - - [28/Dec/2021:23:59:59 +0900] "GET " bcd.domain.com 111.222.111.222 - - [28/Dec/2021:23:59:59 +0900] "GET.. 공감수 0 댓글수 0 2021. 12. 29.
특정 시간 이상 살아있는 process kill apache 의 child process 중 일부가 안 죽고 오래 살아있는 경우가 있어, 거기다 cpu 사용량까지 높아 서버 자원이 부족한 사태가 발생.서버 모니터링 문자 등을 받아 수작업으로 kill 시켜주다가, 귀찮아서 스크립트로 작성. 사실 원인 파악을 하고 해결해야 하지만, 여러 복잡한 관계가 얽혀있다보니 임시조치로 -_- 방법은 많겠지만 간단하게. 요런 스크립트를 하나 만들어 crontab 돌려두면 됨.참고로 5분 이상 돌고 있으면 죽여버리게 했는데, 이 코드도 문제가 있기 함. top -b -n 1 | grep -v root | grep httpd | awk '{ if ($11 > "5:00.00") { print $1 } }' | xargs kill -9 공감수 0 댓글수 0 2019. 1. 3.
Linux 에서 인증서 만료일 확인 방법 openssl 로 확인 가능 openssl x509 -in ./인증서파일.crt -noout -text 공감수 0 댓글수 0 2018. 8. 6.
rsyncd.conf 설정 시 보안 참고 아래를 기본 설정으로. log file = /homeDir/logs/rsync [irteam] path=/homeDir exclude=/.ssh use chroot = no read only= no uid=user gid=user hosts allow = 127.0.0.1 xxx.xxx.xxx.xxx hosts deny=* logging 은 필수/.ssh 처럼 보안 침해 시 (공개키 추가 등) 타격이 큰 곳은 exclude 처리. exclude 시작 점은 path 부터임. /homeDir/.ssh 이렇게 하면 안됨홈 디렉토리를 벗어나지 못하도록 use chroot = no 처리. 아니면 symbolic link 로 뚫릴 수 있음read only 는 root 나 homeDir 의 경우 yes 로 하여 쓰기.. 공감수 0 댓글수 0 2018. 7. 29.
일반 user의 1024 이하 포트 사용을 위한 Capabilities 설정 예전에 사용하던 setuid 방식 외 Capabilities 사용 방법 sudo yum install libcap // 없으면 설치sudo setcap 'cap_net_bind_service=+ep' /apps/nginx/sbin/nginx // 이후 일반 user로 가서 그냥 실행 Ref:CentOS 7 man https://www.unix.com/man-page/centos/7/capabilities/http://sangchul.kr/470 공감수 0 댓글수 0 2018. 7. 24.
xz 파일 압축 해제 시 메모리 부족 오류 xz 파일 압축 해제 시 아래와 같은 메시지 등을 보이며 압축 해제가 불가할 때가 있음 - xz: (stdin): 메모리를 할당할 수 없습니다- xz: (stdin): Cannot allocate memory- unxz: node-v8.11.1-linux-x64.tar.xz: 메모리를 할당할 수 없습니다- unxz: node-v8.11.1-linux-x64.tar.xz: Cannot allocate memory swap free 메모리 부족 이슈로, 아래와 같이 cache 영역을 clear 해주면 됨. sync; echo 3 > /proc/sys/vm/drop_caches root 권한이 없어 어려울 경우도 있으므로, xz 가 아닌 gz / tar 등 다른 압축 파일을 받아 사용하는 것이 마음 편함 re.. 공감수 0 댓글수 0 2018. 4. 1.
Install g++/gcc 4.8.2 in CentOS 6.6 CentOS 6 은 주로 gcc 4.4 사용, CentOS 7 은 4.8 사용CentOS 6에서 g++/gcc 업그레이드 필요 시 아래 참고 $ wget http://people.centos.org/tru/devtools-2/devtools-2.repo -O /etc/yum.repos.d/devtools-2.repo$ yum install devtoolset-2-gcc devtoolset-2-binutils$ yum install devtoolset-2-gcc-c++ devtoolset-2-gcc-gfortran scl enable devtoolset-2 bash .bashrc 등에 아래 설정 추가 source /opt/rh/devtoolset-2/enable node-gyp@3.6.2 / node@6... 공감수 0 댓글수 0 2017. 8. 16.
읽기전용 파일 설정 chattr lsattr 파일을 읽기 전용으로 설정/해제할 때 사용.(사실 다른 속성 설정도 많지만, 주로 이 목적으로 사용) chmod / chown 관련 권한만으로 파일을 왜 수정할 수 없는지 당췌 모를때 보통 이 설정이 되어 있는 경우가 많다. 속성값 확인: lsattr 아래와 같이 i 속성이 있는 경우 읽기 전용임lsattr /etc/security/limits.conf ----i----------- /etc/security/limits.conf 속성값 변경: chattr 아래와 같이 -i 로는 읽기 속성 제거, +i 로는 읽기 속성 추가sudo chattr -i /etc/security/limits.conf ---------------- /etc/security/limits.conf 공감수 1 댓글수 0 2017. 4. 21.
프로세스 별 IO 사용량 확인 - iotop iotop 설치하면 편함.거의 이걸로 통일되는 듯. http://guichaz.free.fr/iotop/https://www.cyberciti.biz/hardware/linux-iotop-simple-top-like-io-monitor/ su 권한으로 실행해야 함. yum 으로 설치하면 /usr/sbin/iotop 에 있음 sudo /usr/sbin/iotop 공감수 0 댓글수 0 2017. 2. 22.
프로세스의 메모리 사용량 보기 리눅스에서 프로세스들의 메모리 사용량을 내림차순으로 보기, 상위 10개만. ps -eo user,pid,ppid,rss,size,vsize,pmem,pcpu,time,cmd --sort -rss | head -n 11 * 헤더 컬럼 때문에 head -n 11 로 해야 10개의 row 가 노출* RSS 가 메모리 사용량. KB 단위 USER PID PPID RSS SZ VSZ %MEM %CPU TIME CMDuser 16373 2046 3320404 4565032 4935356 84.6 0.1 00:00:21 /home1/user/apps/apache-2.2.27/bin/httpd -k startuser 3429 2046 6360 10276 380600 0.1 0.0 00:00:33 /home1/user/.. 공감수 0 댓글수 0 2017. 1. 4.
yum install 시 Thread died in Berkeley DB library 오류 yum install 시 아래와 같은 오류가 날 경우 rpmdb: Thread/process 95158/140712769378208 failed: Thread died in Berkeley DB libraryerror: db3 error(-30974) from dbenv->failchk: DB_RUNRECOVERY: Fatal error, run database recoveryerror: cannot open Packages index using db3 - (-30974)error: cannot open Packages database in /var/lib/rpmCRITICAL:yum.main: 아래 명령어로 DB 파일을 삭제하면 됨 rm /var/lib/rpm/__db* 공감수 0 댓글수 0 2016. 5. 31.
/var/spool/postfix/maildrop 에 로그 full 로 hang 발생할 경우 일단 hang 걸리면 서버는 reboot 해야 함 - /var/spool/postfix/maildrop 위치에 파일이 너무 많이 쌓여 inode full 상태가 주요 원인임- crontab 의 실행결과 내용 (성공이던 실패던)이 메일로 전송되고, 이 메일을 보낼 수 있는 환경이 안되어 있어 (sendmail 이 동작하지 않는다거나) 발생 실패, 해당 위치에 파일은 계속 쌓이는게 주 상황 해결방법- /etc/crontab 또는 개별 계정의 crontab 에 MAILTO = "" 설정-- centOS에서 이걸로 해결 안됨. 메일을 계속 보냄 - /var/spool/postfix 폴더를 통째로 삭제하거나- crontab 내 구문 설정시 stdout 등을 설정예)* * * * * /script/run.sh 2>.. 공감수 1 댓글수 0 2016. 4. 25.
crontab 내 bash 실행 시 sed 먹통 현상 bash 파일 내에 sed 명령어를 넣었는데, crontab 으로 실행했을 때 먹통이 되는 경우 예) a.shsed -i 's/find/repl/g' a.txt이 경우는 a.txt 파일의 인코딩이 UTF-8 이고, crontab 실행 환경은 인코딩이 ko_KR.eucKR 인 등 서로의 인코딩이 맞지 않아 발생하는 문제임. bash 내 인코딩 설정을 추가하면 됨. 예) a.sh (UTF-8 파일인 경우)export LANG=ko_KR.UTF-8sed -i 's/find/repl/g' a.txt 이렇게 하면 실행환경의 인코딩이 변경되어 정상 동작 공감수 0 댓글수 0 2016. 1. 23.
Grep 및 Sed 로 두 줄 이상 획득 후 Merge 하기 1. Grep 로 OR 조건으로 2가지 조건 이상 획득 탐색 문자간 | 를 이용하면 되며, \| 로 Escape 하여 사용grep '#AAA:\|#BBB:' 2. Sed 로 2줄 이상 Merge 아래 예시는 줄바꿈을 Tab 으로 일괄 변경. N 은 그냥 Multi line 이라고 생각하면 빠를 듯.sed 'N;s/\n/\t/' ko.01.txt "N" 등의 Label 참고: http://askubuntu.com/questions/461191/what-is-the-meaning-of-an-in-a-sed-command 공감수 1 댓글수 0 2014. 12. 29.
Crontab 내 % 기호 사용하기 Crontab 내 % 기호를 직접 사용할 경우 \% 로 escape 처리해야 정상 동작한다.(이게 싫으면 별도 script 파일 만들어서 Crontab 에 등록하면 됨) 0 10 * * * /usr/bin/rsync -avz aaa::bbb.xml /home/ccc_$(date -d yesterday '+\%Y\%m\%d').xml 공감수 0 댓글수 0 2014. 12. 29.
Proftpd 설치 1. http://www.proftpd.org/ 에서 FTP 파일 다운로드 및 설치 2. Config 파일 수정 (etc/proftpd.conf)대부분은 기본으로 두어도 되고, 아래 항목을 추가 # 'proftpd.conf' for actual use. It establishes a single server# and a single anonymous login. It assumes that you have a user/group# "nobody" and "ftp" for normal operation and anon. ServerName "FTP - tod2"ServerType standaloneDefaultServer onServerLog /xxx/yyy/logs/ftp/proftp.log UseRev.. 공감수 0 댓글수 0 2014. 12. 25.
free 명령어를 통해 본 메모리 사용량 분석 리눅스에서 free 명령으로 메모리 사용량은 다음과 같이 분석한다. 예) total used free shared buffers cachedMem: 3924568 3805036 119532 0 226064 2734964-/+ buffers/cache: 844008 3080560Swap: 2097144 0 2097144 * 사용자 입장에서 사용 가능한 메모리: Free + Buffers + Cached 즉, 위에서는 119532 + 226064 + 2734964 로 총 3080560 byte 이다. * 귀찮게 계산하지 말고, -/+ buffers/cache 항목의 used 항목을 보면 된다. * buffers 영역: disk 에 기록하기 전 저장해두는 메모리 영역. 실체는 아직 없음* cached 영역: .. 공감수 0 댓글수 0 2014. 1. 8.
NFS 설정 방법 [Server]1. NFS 로 연결할 폴더 준비2. /etc/exports 파일 생성 및 접근 권한 추가/home1/irteam/nas 10.101.43.2(rw,sync) (폴더 path 클라이언트 IP (rw|ro,sync) 3. NFS 서비스 start/sbin/service nfs start 4. NFS 설정이 잘 되었는지 확인/usr/sbin/exportfs -v [Client] 1. portmap 서비스 실행/sbin/service portmap status 로 실행 여부 확인 후/sbin/service portmap start 2. 서버의 NFS 공유 내역 확인/usr/sbin/showmount -e 10.101.27.162 (서버 IP) 3. 클라이언트의 마운트 될 폴더 생성 (mkdir).. 공감수 0 댓글수 0 2013. 11. 1.
zmodem 관련 1. zmodem 설치yum install lrzsz 2. binary 모드 설정rz -b sz -b[출처] rz / sz|작성자 다니 공감수 0 댓글수 0 2013. 6. 6.
xargs 명령어 활용 ps 명령 등을 활용하여, 검색된 전체 프로세스를 kill 하고 싶을 경우 ps -ef | grep httpd | grep -v grep | awk '{print $2}' | xargs kill -9 공감수 0 댓글수 0 2013. 1. 8.
시스템 부팅 메시지 확인 시스템 부팅시의 로그 메시지를 확인하는 방법 1. dmesg2. vi /var/log/dmesg 참고: http://blog.naver.com/hyyi1829?Redirect=Log&logNo=100114007545 공감수 0 댓글수 0 2012. 8. 31.
LD_LIBRARY_PATH 와 /etc/ld.so.conf 일반적으로 동적 라이브러리 Path 를 지정하기 위해서는 LD_LIBRARY_PATH 변수를 사용함. 가끔가다 이게 안 먹을때가 있는데 그럴 때는 /etc/ld.so.conf 파일 내에 정의해 주면 됨 예)include ld.so.conf.d/*.conf /pkgs/libname/lib... 상세정보는 http://blog.daum.net/mzinboy/3 여기 참고. 공감수 0 댓글수 0 2012. 8. 21.
proxy server - squid ncsa_auth 인증 방법 아래 article 참고 http://www.cyberciti.biz/tips/linux-unix-squid-proxy-server-authentication.html 설정 파일내 핵심은 아래와 같다.auth_param basic program /homedir/apps/squid/libexec/ncsa_auth /homedir/apps/squid/etc/passwdauth_param basic children 20auth_param basic realm Mobile Testing proxy Serverauth_param basic credentialsttl 24 hoursauth_param basic casesensitive off acl ncsa_users proxy_auth REQUIREDhttp_a.. 공감수 0 댓글수 0 2012. 5. 15.
/var/spool/clientmqueue 파일 지우기 디스크 용량이 부족한 상황 중, /var/spool/clientmqueue 에 파일이 가득찰 때가 있다. 이 때는 /var/spool/clientmqueue 로 이동 후 ls | xargs rm -f 또는 /usr/bin/find /var/spool/clientmqueue | xargs rm -f 와 같이 삭제한다. 그냥 rm -f 로 지울 경우, 인수 명단이 길어 삭제하지 못한다. crontab 에는 아래 처럼 인수 추가해서 주기적으로 지워주는게 좋다. 0 0 * * * /usr/bin/find /var/spool/clientmqueue -mtime +30 | xargs rm -f 공감수 1 댓글수 0 2012. 4. 19.
crontab 파일 위치 crontab 로 설정한 내용은 /var/spool/cron 여기 아래에 해당 계정명으로 생성되어 있다. 공감수 0 댓글수 0 2012. 4. 19.
SSH 설정 (공개키 설정) A 서버에서 B 서버에 접속하고자 하는 경우- A 서버의 공개키를 B 서버에 복사해 넣어야 함. 1. A 서버에서 접근하고자 하는 계정으로 로그인하여ssh-keygen -t rsa 또는 ssh-keygen -t dsa 으로 키 생성 2. A 서버의 ~/.ssh 폴더 내에 생성된 공개키를 B 서버에 복사해 넣음. * B 서버의 개별 계정 접근권한이 있는 경우 "ssh-copy-id -i /id_rsa.pub파일 B서버계정@서버IP" 로 쉽게 복사 가능 * B 서버의 개별 계정 접근 권한이 없는 경우 (kerberos 로그인 등)2-1. B 서버에 A 서버에 접근할 계정으로 로그인하여 ~/.ssh 폴더를 만듬2-2. ~/.ssh 폴더의 권한을 700 (chmod 700 ~/.ssh) 으로 바꾸어 줌. 중요!.. 공감수 0 댓글수 0 2012. 3. 30.
process 개수 모니터링을 위한 명령어 활용 ps -ef | grep tomcat | grep -v grep | awk '/java/ {print $2}' 이렇게 하면 동작 중인 java process 의 pid 가 나옴 (환경에 따라 적절히 변경) ps uH p $pid | wc -l 요렇게 하면 해당 pid 로 사용 중인 thread 개수가 나옴 이 개수로 tomcat thread 개수 체크 가능하고 apache 등도 저기 위의 awk 명령에 /java/ 패턴만 바꾸면 추적 가능 이 때, 총 개수가 1개 이하이면 해당 process 가 없다는 말이니까, 임계치 뿐만 아니라 서버가 죽었는지도 체크 가능함. (살아있으면 최소 2가 나옴. header row 랑 해당 process 정보 row) 공감수 0 댓글수 0 2012. 2. 9.
bash shell 내에서 사용자 uid 얻기 기존 if [ "$(id -u)" != "0" ]; then 새로운 방식 if [[ $EUID -ne 0 ]]; then 참고 http://www.cyberciti.biz/tips/shell-root-user-check-script.html 공감수 0 댓글수 0 2012. 2. 9.
bash shell 에서 sendmail로 메일 보내기 mail -s "mail title" "수신 mail 주소" * sendmail 이 동작 중이어야 함 * root 권한으로 밖에 보내지지 않아 sudo 를 이용해서 발송 * 명령어 입력 후 본문 내용 입력 참고 정보 메일 메시지 까지 표준입력 없이 전송: http://theos.in/shell-scripting/send-mail-bash-script/ sendmail 을 이용한 전송(잘 안됨 -_-) http://www.zedwood.com/article/92/bash-linux-sendmail-script http://stackoverflow.com/questions/1333097/how-to-send-a-html-email-with-the-bash-command-sendmail 그냥 읽어볼 내용: h.. 공감수 0 댓글수 0 2012. 2. 9.
sudo 특정 사용자에게 특정 명령어에 대해 권한을 위임할 수 있는 기능. 주로 root 권한을 위임할 때 사용된다. sudo 설정을 위해서는 sudoers (주로 /etc/sudoers 에 위치) 를 수정하며 visudo 라는 전용 edit 명령어도 존재한다. http://blog.naver.com/kwonj1?Redirect=Log&logNo=110001076784 http://combible.tistory.com/171 http://blog.naver.com/hkh119?Redirect=Log&logNo=120026583358 http://omen666.tistory.com/455 공감수 0 댓글수 0 2012. 2. 6.

문의안내

티스토리
로그인
고객센터

티스토리는 카카오에서 사랑을 담아 만듭니다.