mocadev 개발 이야기

[AWS] permissions for pem are too open windows 10 에러 해결

모카데브 — Sat, 22 Feb 2020 21:26:58 +0900

윈도우 10에서 AWS로 파일을 전송 시킬려고 하는데 'permissions for pem are too open' 에러가 발생 했다.

@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
@ WARNING: UNPROTECTED PRIVATE KEY FILE! @
@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@@
Permissions for '***.pem' are too open.
It is required that your private key files are NOT accessible by others.
This private key will be ignored.
Load key "***.pem": bad permissions
ec2-user@***.***.***.***: Permission denied (publickey).
lost connection

다음과 같이 하면 에러 없이 파일 전송을 할 수 있다.

1. ***.pem을 오른쪽 클릭하고 '보안' -> '고급' 탭을 연다.

2. '상속사용 안 함'을 클릭해서 사용 권한 항목에 파일의 OWNER만 남긴다.

4. 파일 전송을 하면 정상적으로 업로드 된다.

scp -i ***.pem test.zip ec2-user@***.***.***.***:/home/ec2-user/

travis에서 slack 연동 암호화 하기

모카데브 — Mon, 27 Jan 2020 20:16:05 +0900

travis에서 빌드가 완료가 되면 슬랙으로 문자를 보내주는 기능이 있는데 .travis.yml에 마지막 부분에 다음과 같이 추가 하고 사용 한다.

notifications:   
  slack: <슬랙도메인명>:<travis APP의 token>

문제는 .travis.yml이 github등의 공개된 정보로 올라가면 악용될 소지가 있어서 암호화를 해서 사용 하도록 해보자.

1. 윈도우 기준으로 rubyinstaller를 설치하고 버전을 확인한다.

ruby -v
ruby 2.7.0p0 (2019-12-25 revision 647ee6f091) [x64-mingw32]

2. travis cli를 설치하고 버전을 확인한다.

gem install travis -v 1.8.10
travis version
1.8.10

3. travis에 로그인을 한다.

travis login
We need your GitHub login to identify you.
This information will not be sent to Travis CI, only to api.github.com.
The password will not be displayed.
Try running with --github-token or --auto if you don't want to enter your password anyway.
Username: <gitHub 로그인 이메일>
Password for <gitHub 로그인 이메일>: ************
Successfully logged in as <계정명>!

4. 로그인이 완료되면 <슬랙도메인명>:<travis APP의 token> 이 부분을 암호화 한다.

touch .travis.yml
travis encrypt "<슬랙도메인명>:<travis APP의 token>#<채널명>" 
	--add notifications.slack 
    -r <gitHub 계정명>/<gitHub Repository>

5. .travis.yml 파일을 열어보면 다음과 같이 secure가 추가 되어 있는걸 확인 할 수 있다.

notifications:   
  slack:     
    secure: X2+7XxKznGmeXIaoeye

[mac] homebrew에서 permission denied 가 발생시 해결 방법

모카데브 — Sun, 29 Sep 2019 18:38:22 +0900

homebrew로 yarn을 upgrade하는데 다음과 같은 에럭다 발생했다.

Possible conflicting files are:
/usr/local/bin/yarn -> /usr/local/lib/node_modules/yarn/bin/yarn.js
/usr/local/bin/yarnpkg -> /usr/local/lib/node_modules/yarn/bin/yarn.js
==> Summary
 /usr/local/Cellar/yarn/1.17.3: 14 files, 5MB, built in 5 seconds  
==> `brew cleanup` has not been run in 30 days, running now...
Error: Permission denied @ unlink_internal - /usr/local/lib/node_modules/npm/node_modules/.bin/JSONStream

이럴때 다음을 실행해주면 된다.

sudo chown -R $(whoami) $(brew --prefix)/*

test 명령어 연산자

모카데브 — Wed, 18 Sep 2019 18:32:05 +0900

쉘스크립트에서 사용하는 test명령어 연산자 목록

-d	파일이 존재하고 디렉터리라면 참
-e	파일이 존재하면 참
-c	파일이 존재하고 캐릭터 스페셜 파일이면 참
-f	파일이 존재하고 일반 파일이면 참
-L	파일이 존재하고 심볼릭 링크면 참
-r	파일이 존재하고 읽기 가능하면 참
-w	파일이 존재하고 쓰기 가능하면 참
-x	파일이 존재하고 실행 가능하면 참

virtualbox에 설치한 ubuntu ssh로 접속하기

모카데브 — Sat, 17 Aug 2019 12:07:57 +0900

virtualbox에 ubuntu18.04 LTS를 설치하고 ssh로 접속을 해보자

1. ssh접속을 위해 openssh-server 설치

tony@tony-VirtualBox:~$ sudo apt-get install openssh-server 

tony@tony-VirtualBox:~$ sudo service ssh restart

2. virtualbox IP 확인

3. virtualbox 네트웍설정

포트 포워딩을 클릭한다.

호스트 IP는 윈도우에서 확인한 IP를 게스트 IP는 ubuntu에서 확인한 IP를 입력한다.

4. 호스트의 IP와 포트로 접속을 한다.

ssh접속툴을 이용해서 접속 해보면 처음에 다음과 같이 나오고 키를 저장하고 나면 접속이 잘 된다.

docker로 설치한 jenkins 업데이트 하기

모카데브 — Thu, 15 Aug 2019 22:59:35 +0900

jenkins를 docker로 설치하면 jenkins 업데이트 하기가 좀 까다로운데 그 방법을 알아보자.

1. jenkins container에 root로 접속

➜  ~ docker exec -u 0 -it mocadev_jenkins /bin/bash 
root@50718e25af33:/#

2. 업데이트 할 jenkins를 wget을 이용하여 다운 받기

root@50718e25af33:/# wget http://updates.jenkins-ci.org/download/war/2.176.2/jenkins.war

3. 다운 받은 jenkins.war 파일 이동

root@50718e25af33:/# mv ./jenkins.war /usr/share/jenkins

4. jenkins.war 파일 소유권 변경

root@50718e25af33:/# chown jenkins:jenkins /usr/share/jenkins/jenkins.war

5. container나가고 jenkins container 재시작

root@50718e25af33:/# exit 

➜  ~ docker restart mocadev_jenkins                 
mocadev_jenkins 
➜  ~

Visual Studio 오프라인으로 설치하기

모카데브 — Mon, 12 Aug 2019 23:05:02 +0900

visual studio community를 설치하는데 기본이 네트웍 설치로 되어 있다.

인터넷이 되지 않는 상황에서 visual studio를 설치 하고 싶을 때는 다음과 같이 이미지를 만들어서 설치 하면된다.

.NET 웹 및 .NET 데스크톱 개발 레이아웃 만들기

vs_community.exe --layout c:\vslayout 
	--add Microsoft.VisualStudio.Workload.ManagedDesktop 
	--add Microsoft.VisualStudio.Workload.NetWeb 
    	--add Component.GitHub.VisualStudio 
    	--includeOptional 
    	--lang ko-KR

모든 기능이 포함된 레이아웃 만들기

vs_community.exe --layout c:\vslayout --lang ko-KR

vs_community.exe는 네트웍 설치를 위해 다운받은 설치 파일이다.

visual studio는 여기서 다운로드 받으면 된다.

[쉘 스크립트] 스크립트 실행시 옵션 사용하기

모카데브 — Sun, 11 Aug 2019 22:35:58 +0900

쉘 스크립트 실행시 매개변수가 아닌 옵션을 이용해서 받고 싶을때가 있다.

다음과 같이 a, b, c, d 4개의 옵션을 받을 수 있는 스크립트를 작성 한다.

vim opt_test.sh



#!/bin/bash                                                                                                                                         

while getopts a:b:c:d: opt                                                                                                                        
do                                                                                                                                                     
    case ${opt} in                                                                                                                                   
        a) a_option="$OPTARG" ;;                                                                                                               
        b) b_option="$OPTARG" ;;                                                                                                              
        c) c_option="$OPTARG" ;;                                                                                                               
        d) d_option="$OPTARG" ;;                                                                                                              
    esac                                                                                                                                               
done                                                                                                                                                                                                                                                                     
echo "a_option: ${a_option}"                                                                                                                    
echo "b_option: ${b_option}"                                                                                                                   
echo "c_option: ${c_option}"                                                                                                                    
echo "d_option: ${d_option}"

실행은 다음과 같이 한다.

➜  test ./opt_test.sh -a test1 -b test2 -c test3 -d test4 
a_option: test1 
b_option: test2 
c_option: test3 
d_option: test4

추가 할 것은 조건문으로 해당 옵션에 대해 명령문을 실행 하면 된다.

[쉘 스크립트] 변수에 공백문자 사용하기

모카데브 — Fri, 9 Aug 2019 13:00:34 +0900

#!/bin/bash 

space="space string" 

if [ ${space} = "space string" ]; then 
    echo "공백문자 인식: $space" 1>&2 
    exit 1 
fi

상기와 같이 스크립트를 작성하고 실행하면 다음과 같은 에러가 발생한다.

➜  test ./space_test.sh  
./space_test.sh: line 5: [: too many arguments

쉘 스크립트 작성시 변수에 공백 문자가 있으면 제대로 인식을 하지 못한다.

기본적으로 공백을 기준으로 해석을 하기 때문이다.

if [ ${space} = "space string" ]; then

를 다음과 같이 수정하고 실행한다.

if [ "${space}" = "space string" ]; then

➜  test ./space_test.sh   
공백문자 인식: space string

즉, 공백문자를 사용 하고 싶은 변수를 ""로 감싸주면 된다.

윈도우 bash에서 ll사용하기

모카데브 — Fri, 26 Jul 2019 23:32:00 +0900

커맨드라인에서 작업 할 경우가 많아서 cd를 하고 나서 예전에는 ls를 사용 했는데 요즘에는 무의적으로 대부분 ll을 치게 됐다.

리눅스에서야 기본적으로 ll이 잘 되는데 윈도우 bash에서는 ll을 치면 다음과 같이 나온다.

admin@tony  ~ 
$ ll 
bash: ll: command not found

이런 경우 다음과 같이 해주면 윈도우에서도 ll을 기분 좋게 사용 할 수 있다.

admin@tony  ~
$ echo alias ll=\'ls -l\' >> .bashrc

admin@tony  ~
$ source .bashrc

적용후 ll 사용하기

admin@tony  ~
$ ll
total 8110
drwxr-xr-x 1 admin 197121       0 Jul 12 22:22 '3D Objects'
drwxr-xr-x 1 admin 197121       0 Apr  2 11:55  AppData
drwxr-xr-x 1 admin 197121       0 Jul 12 22:22  Contacts
drwxr-xr-x 1 admin 197121       0 Jul 22 21:47  Desktop
drwxr-xr-x 1 admin 197121       0 Jul 12 22:22  Documents
drwxr-xr-x 1 admin 197121       0 Jul 12 22:22  Downloads
drwxr-xr-x 1 admin 197121       0 Apr  7 15:50  Evernote
drwxr-xr-x 1 admin 197121       0 Jul 12 23:26  Favorites

[Notion] 구글 캘린더 연동

모카데브 — Sun, 30 Jun 2019 21:21:10 +0900

개인적인 일이나 회사일을 구글 캘린더를 이용해서 관리하고 있는데,

노션을 본격적으로 사용하게 되면서 회사일정을 노션에서 볼 수 있도록 연동을 시켰다.

1. 구글 캘린더의 설정을 클릭한다.

2. 공개 URL을 복사한다.

3. 새로운 페이지를 만든다.

4. 페이지 제목을 입력하고 복사한 공유 캘린더 URL을 입력한다.

그 다음 'Create Embed'를 선택한다.

5. 구글 캘린더 공유 완성

[notion] 에버노트의 모든 노트를 노션으로 가져오기

모카데브 — Sun, 30 Jun 2019 16:57:59 +0900

3년 동안 에버노트 프리미엄을 사용하다가 프리미엄 기능의 10%도 안 쓰는것 같고해서 더이상 연장하지 말고 이전부터사용하던 노션으로 에버노트의 모든 노트들을 가져와서 사용 하기로 했다.

노션에서 에버노트 사용자들을 흡수하기 위해서 아주 간단하게 Import 기능을 제공해주고 있다.

1. 노션앱에서 셋팅을 클릭한다

2. Earn Credit를 클릭한다.

3. 오른쪽 화면에 Import from Evernote를 클릭한다.

이미 Import를 해버려서 5달러를 벌었다고 나오는데, 처음 클릭하면 에버노트 로그인 화면이 나오고

로그인에 성공하면 Import할 노트북 목록이 나온다.

Import하고 싶은 노트북을 체크하고 완료(?) 버튼을 클릭하면 Import 끝

4. Import가 완료되면 왼쪽 메뉴에 노트북들이 하나의 페이지들로 구성되서 나온다.

5. 해당 페이지를 클릭하면 에버노트의 노트북에 등록된 노트들이 역시 페이지로 등록되어 있고 에버노트에서 등록된 태그들도 노션의 태그로 등록된다.

IntelliJ 사용중 변수명에 밑줄이 생길때 해결법

모카데브 — Sun, 16 Jun 2019 00:38:09 +0900

오랜만에 java 개발을 하다 보니 IntelliJ를 적극 사용 하고 있다.

IntelliJ를 다시 설치하고 너무나도 당연하게 theme는 Material Dark를 설치 했더니

어느 순간 부터 갑자기 로컬 변수에 밑줄이 생기는 거다.

밑줄 생기는게 보기 싫으면 다음과 같이 해주면 된다.

Settings -> Editor -> Color Scheme -> Language Defaults -> Identifiers -> Reassigned local variable

Effects 해제

설정을 적용하면 재할당되는 로컬 변수도 밑줄이 생기지 않게 된다.

linux에 maven 설치 하기

모카데브 — Sun, 26 May 2019 15:59:23 +0900

1. maven 다운로드

wget http://apache.mirror.cdnetworks.com/maven/maven-3/3.6.1/binaries/apache-maven-3.6.1-bin.tar.gz
tar -zxvf apache-maven-3.6.1-bin.tar.gz

2. .zshrc 설정

vim ~/.zshrc

MAVEN_HOME=/home/ec2-user/util/apache-maven-3.6.1 
PATH=$PATH:$MAVEN_HOME/bin 
export MAVEN_HOME

3. 설치 확인

mvn -version 
Apache Maven 3.6.1 (d66c9c0b3152b2e69ee9bac180bb8fcc8e6af555; 2019-04-05T04:00:29+09:00) 
Maven home: /home/ec2-user/util/apache-maven-3.6.1 
Java version: 1.8.0_131, vendor: Oracle Corporation, runtime: /opt/jdk1.8.0_131/jre 
Default locale: en_US, platform encoding: UTF-8 
OS name: "linux", version: "4.14.114-83.126.amzn1.x86_64", arch: "amd64", family: "unix"

heroku에 도메인 연결하기

모카데브 — Sun, 5 May 2019 01:22:23 +0900

최근에 node.js로 토이 프로젝트 사이트 하나를 만들고 heroku에 배포를 했습니다.

heroku에 배포를 하면 https://appname.herokuapp.com의 기본 url로 설정되는데,

기존에 사용 하고 있는 도메인과 연결을 할 수 있습니다.

여기서는 namecheap에서 연결하는 방법에 대해 알아보도록 하겠습니다.

1. heroku 사이트의 도메인을 연결 하고자 하는 앱의 Settings에서 Add Domain을 클릭하고 사용할 도메인명을 입력합니다.

2. 연결된 도메인의 DNS Target값을 복사 합니다.

3. 도메인 관리 사이트 https://www.namecheap.com/ 의 Advanced DNS에서 ADD NEW RECORD를 클릭하고

TYPE은 CNAME Record를 선택하고 Value에 2번에서 복사한 값을 붙여 넣기 합니다.

위와 같이 설정하면 원하는 도메인으로 heroku에 배포된 앱을 연결할 수 있습니다.

기존 heroku에 배포된 앱은 https를 기본으로 사용하는데 도메인에 연결된 앱은 https를 사용할 수가 없습니다.

다음에는 namecheap에서 https를 사용하는 법에 대해 알아보도록 하겠습니다.

heroku에서 timezone 설정하기

모카데브 — Thu, 25 Apr 2019 21:49:04 +0900

heroku cli에서 다음과 같이 입력한다.

heroku config:add TZ="Asia/Seoul" --app=APP_NAME

slack에 notion 연동하기

모카데브 — Wed, 6 Feb 2019 22:29:20 +0900

개인 프로젝트나 회사 프로젝트에서 notion을 사용하는데 notion에 변화가 있으면 이를 slack에 공유하는 방법을 알아 보자.

1. slack의 해당 채널에서 app 추가를 클릭하고 notion app을 추가

2. notion의 메인 페이지에서 Updates를 클릭하고 Connect Slack Channel을 활성화

3. 포스팅할 slack 채널 선택

4. notion updates 페이지에서 활성화 상태와 slack 채널을 확인

5. slack에서 내용 확인

javascript로 생성한 Timestamp in milliseconds mysql에서 변환하기

모카데브 — Thu, 27 Dec 2018 12:22:05 +0900

javascript에서 unix time형식의 milliseconds를 포함한 timestamp를 생성에서 mysql에 입력해서 사용하고 있는데,

mysql 쿼리로 Datetime으로 형변환해서 사용할려 단순히 FROM_UNIXTIME만 사용하면 NULL로 나온다.

milliseconds를 제거하기 위해서 1000으로 나누고 사용하면 원하는 Datetime으로 잘 표시된다.

SELECT createAt, FROM_UNIXTIME(createAt/1000, '%Y-%c-%d %H:%i:%s') convert_date

FROM table_name

createAt	convert_date
154440794980	2018-12-10 11:12:29
1544486426242	2018-12-11 09:00:26

request와 cheerio를 이용한 웹 크롤링

모카데브 — Tue, 25 Dec 2018 21:43:06 +0900

node.js에서 request와 cheerio로 아주 간단하게 웹페이지를 크롤링해서 원하는 정보를 얻을 수 있다.

request 샘플 코드에서 내용만 살짝 바꿔서 네이버에서 실시간 검색어를 받아와서 출력해주는 프로그램을 만들어 보자.

const request = require('request');
const cheerio = require('cheerio');

const options = {
    url: 'https://www.naver.com',
    headers: {
        'User-Agent': 'request'
    }
};

const callback = ((error, response, body) => {
    if (!error && response.statusCode == 200) {
        const $ = cheerio.load(body);
        const search = $('.ah_roll_area  > .ah_l > .ah_item > a > .ah_k');
        search.each((index, item) => {
            console.log(`${index + 1} - ${$(item).text()}`);
        });
    }
});

request(options, callback);

request로 네이버 메인 페이지 내용을 받아와서 cheerio로 그 내용을 읽은 후 selector를 이용해서 실시간 검색어 부분만 파싱을 한다.

실행 결과

$ node naver.js

1 - 크릴 오일

2 - 안드레아 보첼리

3 - 가려진 시간

4 - 말레피센트

5 - 고파도

6 - 월요일이 사라졌다

7 - 서수연

8 - 베트남 북한

9 - 이필모

10 - 전홍준박사

11 - 인턴

12 - 눈이 부시게

13 - 지금 만나러 갑니다

14 - 곽동연

15 - 범블비 쿠키영상

16 - 콩 스컬 아일랜드

17 - 라이브 에이드

18 - 이일재

19 - 북한 베트남

20 - 신과함께

다음에는 네이버 주식에서 내용을 크롤링해서 맞춤형 페이지를 만들어 봐야 겠다.

vim-bootstrap 설치하기

모카데브 — Tue, 23 Oct 2018 14:31:49 +0900

다음을 실행한다.

curl 'http://vim-bootstrap.com/generate.vim' --data 'langs=javascript&langs=python&langs=htmleditor=vim' > ~/.vimrc

vim ~/.vimrc

참고 사이트 : http://www.vim-bootstrap.com

터미널에서 커맨드 라인 명령어

모카데브 — Mon, 22 Oct 2018 11:21:54 +0900

Ctrl+a Move cursor to start of line
Ctrl+e Move cursor to end of line
Ctrl+b Move back one character
Alt+b Move back one word
Ctrl+f Move forward one character
Alt+f Move forward one word
Ctrl+d Delete current character
Ctrl+w Cut the last word
Ctrl+k Cut everything after the cursor
Alt+d Cut word after the cursor
Alt+w Cut word before the cursor
Ctrl+y Paste the last deleted command
Ctrl+_ Undo
Ctrl+u Cut everything before the cursor
Ctrl+xx Toggle between first and current position
Ctrl+l Clear the terminal
Ctrl+c Cancel the command
Ctrl+r Search command in history - type the search term
Ctrl+j End the search at current history entry
Ctrl+g Cancel the search and restore original line
Ctrl+n Next command from the History
Ctrl+p previous command from the History

출처 : https://stackoverflow.com/questions/9679776/how-do-i-clear-delete-the-current-line-in-terminal

sequelize에서 array rows update하기

모카데브 — Fri, 14 Sep 2018 13:21:51 +0900

nodejs에서 ORM으로 sequelize를 사용하고 있는데, 대량으로 update를 해야 되는데 bulkCreate는 있는데 bulkUpdate는 없다.

그럼 이를 어찌 해결 할까 했는데 이것도 역시 bulkCreate를 사용하면 된다.

models.table.bulkCreate([
        array
    ], {updateOnDuplicate: true},
).then((result) => {
    return res.json(result);
}).catch(err => {
    console.error(err);
    res.status(500).json(err);
});

중요한건 updateOnDuplicate: true 이 설정이다.

덧붙임)

s0metimes님께서 댓글로 자세하게 설명을 해주셨습니다.

해당 내용 참고하시면 문제 해결에 도움이 될 거 같습니다.

updateOnDuplicate 배열 안엔 primaryKey 가 아니라, 중복됐을 경우 업데이트 할 column 들을 넣어줘야 합니다.
실제로 이 코드는 SQL 문에서 'ON DUPLICATE KEY UPDATE' 로 실행이 되고,
이는 Primary Key 또는 Unique 제약이 걸렸을 경우 중복에 걸린 row 에 대해 업데이트 할 column 들을 지정해주는 SQL 입니다.

docker로 mysql 설치하기

모카데브 — Mon, 27 Aug 2018 22:32:21 +0900

docker run -d -p 3306:3306 -e MYSQL-ROOT_PASSWORD=${MYSQL_ROOT_PASSROD} --name mocadev_mysql -v ~/data/mysql:/var/lib/mysql mysql

-d Detached모드로 컨테이너를 백그라운드로 실행해준다.

-p <호스트 포트>:<컨테이너 포트>로 사용하며 컨테이너의 포트를 호스트 포트로 노출 시키는 옵션

-e 컨테이너 환경 변수 설정 위에서는 mysql의 root 패스워드를 설정해준다.

--name 실행시킬 컨테이너 이름 설정

-v <호스트 디렉토리>:<컨테이터 디렉토리>로 사용하며 컨테이너 디렉토리를 호스트와 공유해서 파일들을 호스트 디렉토리에 저장한다.

docker-compose.yml

version: '3.1'

services:

mysql:

image: mysql:5.7

container_name: mocadev_mysql

ports:

- 3306:3306

restart: always

environment:

- MYSQL_ROOT_PASSWORD=root패스워드

- MYSQL_USER=생성할 유저

- MYSQL_PASSWORD=생성할 유저 패스워드

- MYSQL_DATABASE=생성할 데이터베이스

volumes:

- ~/data/mysql:/var/lib/mysql

command:

- --character-set-server=utf8mb4

- --collation-server=utf8mb4_unicode_ci

mysql 최신 버전을 설치 했더니 connector문제인지 툴에서 접속을 못하는 문제가 발생해서 그냥 5.7버전을 설치했다.

역시 5.7버전은 아무 문제 없이 외부에서도 접속이 잘된다.

[git] Another git process seems to be running in this repository 오류 해결

모카데브 — Wed, 22 Aug 2018 19:48:02 +0900

git으로 버전관리를 하고 있는데 어느 순간부터 브랜치 체크아웃도 안되고 push도 안되면서 시뻘건 색으로 다음과 같은 에러만 알려줬다.

Another git process seems to be running in this repository, e.g.

an editor opened by 'git commit'. Please make sure all processes

are terminated then try again. If it still fails, a git process

may have crashed in this repository earlier:

remove the file manually to continue.

해결 방법은 .git폴더 안에 있는 index.lock파일을 지워주면 된다.

터미널 실행시 zsh오류 해결

모카데브 — Fri, 27 Jul 2018 21:48:22 +0900

뭘 이상한걸 설치해서 그런지 알 수 없는 이유로 맥에서 iterm을 실행하면 다음과 같은 에러가 발생했다.

dyld: Library not loaded: /usr/local/opt/gdbm/lib/libgdbm.4.dylib

Referenced from: /usr/local/bin/zsh

Reason: image not found

해당 오류를 해결하기 위해서 zsh를 다시 설치해주면 된다.

brew reinstall zsh && brew unlink zsh && brew link zsh

멕에서 sudo 없이 npm 패키지 설치하기

모카데브 — Wed, 25 Jul 2018 22:54:50 +0900

맥에서 npm으로 패키지를 설치하다 보면 권한이 없어서 다음과 같은 에러가 발생한다.

이런 경우 다음과 같이 하면 간단히 해결 할 수 있다.

1. npm config get prefix를 실행하고 /usr/local이 나오는지 확인한다.

2. sudo chown -R $(whoami) $(npm config get prefix)/{lib/node_modules,bin,share}를 실행한다.

3. 끝~ npm을 sudo 없이 실행한다.

gitlab과 slack 연동 하기

모카데브 — Fri, 20 Jul 2018 13:25:27 +0900

1. 먼저 해당 슬랙에서 셋팅 -> Add an app or integration을 누르고 Incoming WebHooks으로 검색한다.
Incommig WhbHooks가 나오면 왼쪽의 Add Configuration을 클릭한다.

2. 포스팅될 체널을 선택하고 Add Incoming WebHooks Integration버튼을 클릭한다.

3. 화면에 보이는 Webhook URL을 복사한다. gitlab에 사용할 url이다.

Customize Name이 최초에는 incoming-webhook으로 되어 있는데 gitlab으로 바꿨다.

슬랙에서 보여지는 이름이다.

Customize Icon도 gitlab icon으로 바꿨다.

설정이 끝났으면 Save Settings버튼을 클릭한다.

4. 그 다음 연동해줄 gitlab 프로젝트의 셋팅 화면으로 넘어간다.

Integrations에서 Slack notifications를 찾아서 들어간다.

화면에 보이는 Webhook에 좀전에 복사했던 Webhook URL을 붙여넣기 한다.

Activie 체크박스에 체크를 하고 사용할 이벤트에도 체크를 하고 사용할 슬팩 채널 이름을 입력한다.

Save changes버튼을 클릭하면 gitlab과 slack연동 끝!!!

6. gitlab에 이벤트가 발생하면 다음과 같이 슬랙으로 기분 좋게 메시지를 보내준다.

[IntelliJ] insert key 동작 끄기

모카데브 — Tue, 10 Jul 2018 15:00:36 +0900

intellij를 실행키면 항상 자동으로 insert key가 켜져 있어 불편 했는데 이걸 끄는 방법이 있다.

ideaVim이 활성화 되서 그러니 plugin에서 ideaVim을 disable시키면 intellij를 실행 시켜도 insert key가 활성화 되지 않는다.

aws에서 pem파일 없이 ssh 로그인 하는 법

모카데브 — Tue, 19 Jun 2018 15:29:05 +0900

aws에 서버를 구축할 일이 있는데 한대에서만 접속하면 상관 없지만 pem파일로 여러군데서 로그인 하는게 여간 귀찮은게 아니다.

그래서, pem파일 없이 로그인 해서 사용하는 법을 찾아 봤다.

일단 로그인할 유저를 만든다.

sudo adduser mocadev
sudo passwd mocadev

sudo 사용을 위해 sudoers에 mocadev 추가

sudo vim /etc/sudoers

ssh 설정

sudo vim /etc/ssh/sshd_config
Port 22 주석을 풀고
PasswordAuthentication를 yes로 바꾼다

ssh 재시작

sudo /etc/init.d/sshd restart

이후 pem파일 없이 로그인하면 된다.

aws에서 KST로 시간설정 변경

모카데브 — Fri, 15 Jun 2018 02:19:18 +0900

aws에 서버를 설치하고 date로 확인해보면 시간대가 기본인 UTC로 설치가 된다.

➜ ~ date

Thu Jun 14 17:12:51 UTC 2018

이걸 KST로 변경해보자.

일단 백업

sudo mv /etc/localtime /etc/localtime_bak

링크 변경

sudo ln -sf /usr/share/zoneinfo/Asia/Seoul /etc/localtime

date로 확인

➜ ~ date

Fri Jun 15 02:14:13 KST 2018

변경 OK~

docker로 nodejs 실행하기

모카데브 — Mon, 11 Jun 2018 17:06:58 +0900

요즘 docker를 많이 사용하디 보니 docker를 이용해서 nodejs를 실행해 봤다.

일단 Dockerfile을 만든다

FROM node:carbon

MAINTAINER tony <chcjswo@gmail.com>

#Avoid ERROR: invoke-rc.d: policy-rc.d denied execution of start.

RUN sed -i "s/^exit 101$/exit 0/" /usr/sbin/policy-rc.d

## Install packge

RUN apt-get update && apt-get install git -y

RUN echo "git install"

RUN npm install -g pm2

ENV NODE_ENV production

RUN mkdir -p /app

WORKDIR /app

RUN git clone https://github.com/chcjswo/mocadev-nodejs.git

WORKDIR /app/mocadev-nodejs

COPY ./processes.json /app/mocadev-nodejs

## npm Install

RUN npm install

## Port

EXPOSE 3003

## Start the service

CMD ["pm2-docker", "processes.json"]

1. node image를 다운 받는다.

2. apt-get을 update하고 git을 설치한다.

3. pm2를 설치한다.

4. github에서 clone을 한다.

5. processes.json을 복사한다.

6. pm2로 실행한다.

processes.json

{

"apps": [

{

"name": "mocadev-node",

"script": "./bin/www",

"merge_logs": true,

"max_restarts": 20,

"exec_mode": "cluster",

"instances": 0,

"max_memory_restart": "200M",

"env": {

"PORT": 3003,

"NODE_ENV": "production"

"log_date_format": "YY-MM-DD HH:mm:ss",

"error_file": "./logs/err.log",

"out_file": "./logs/out.log"

}

]

}

image를 build한다.

docker build -t chcjswo/mocadev-web:0.1 ./

-t 옵션으로 태그를 달아준다.

{docker hub id}/{이미지 이름}:{버전}

중요한건 마지막에 .을 꼭 써줘야 된다.

빌드가 끝나고 나고 docker images로 확인하면 다음과 같이 image가 생긴다.

REPOSITORY TAG IMAGE ID CREATED SIZE

chcjswo/mocadev-web 0.1 eb30a51ab6d7 About an hour ago 746MB

생성된 image를 실행한다.

docker run -d --name mocadev-nodejs -p 3003:3003 chcjswo/mocadev-web:0.1

➜ mocadev docker ps

CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES

9d4dd6e32fa7 chcjswo/mocadev-web:0.1 "pm2-docker processe…" About an hour ago Up About an hour 0.0.0.0:3003->3003/tcp mocadev-nodejs

➜ mocadev curl -i http://localhost:3003

HTTP/1.1 200 OK

X-DNS-Prefetch-Control: off

X-Frame-Options: SAMEORIGIN

Strict-Transport-Security: max-age=15552000; includeSubDomains

X-Download-Options: noopen

X-Content-Type-Options: nosniff

X-XSS-Protection: 1; mode=block

Content-Type: text/html; charset=utf-8

Content-Length: 8518

ETag: W/"2146-3AF13RvIALis2ipr0QbuzT7xdhY"

set-cookie: connect.sid=s%3AXVjVvxoupVrkvGAEPQlSJ98MYjLimxHG.ZZqe%2F6xSLFd76JG%2BgmTUrw7IqIJoDCCS8UwPZkMVERo; Path=/; HttpOnly

Date: Mon, 11 Jun 2018 08:00:33 GMT

Connection: keep-alive

정상적으로 동작한다.

근데, 여기서 계속 실수를 했던게 습관처럼 -itd 옵션을 붙이고 마지막에 /bin/bash를 추가 했었다.

docker run -itd --name mocadev-nodejs -p 3003:3003 chcjswo/mocadev-web:0.1 /bin/bash

그럼 Dockerfile의 CMD에 정의한 커맨드를 실행하지 않고 /bin/bash를 실행해서 노드서버가 실행되지 않는다.

이걸 몰라서 꼬박 이틀을 허비했다.

역시 아무것도 모르고 따라하기만 할려면 삽질은 너무나 당연하가 보다.

다음에는 ssh를 Dockerfile에 적용해보고 jenkins로 배포하나는 것까지 해봐야 겠다.

aws에서 mongodb 외부에서 접속하기

모카데브 — Sat, 9 Jun 2018 23:47:07 +0900

mongodb를 설치하면 기본적으로 로컬 접속만 허용되서 외부에서 접속하기 위해서는 설정 파일을 수정해줘야 된다.

먼저 설정 파일을 열어준다.

sudo vim /etc/mongod.conf

이부분을 주석처리 하던지 0.0.0.0 으로 수정

bindIp: 127.0.0.1

이후 aws는 security group에서 centos는 iptables에서 27017 port를 오픈해준다.

물론 mongodb에서 다른 포트를 사용한다면 해당 포트로 오픈한다

scp 사용법

모카데브 — Fri, 8 Jun 2018 16:44:25 +0900

scp를 이용해서 다운로드 하기

scp -r user@server:/path/to/foo /home/user/

-r 옵션은 폴더 복사

/path/to/foo 서버경로

/home/user/ 로컬경로

scp를 이용해서 업로드 하기

scp test.txt user@server:/path/to/foo

/path/to/foo 서버경로

ssh-copy-id 사용법

모카데브 — Fri, 8 Jun 2018 15:07:05 +0900

ssh키를 다른 서버에 등록을 해야 되는데 문자열이 길다보니 복사해서 붙여넣기가 좀 귀찮다.

이럴때 ssh-copy-id를 사용하면 손쉽게 등록을 할 수가 있다.

ssh-copy-id -i ~/.ssh/id_rsa.pub user@111.222.333.444

-i 다음에는 등록할 공개키경로

그 다음에는 접속할 아이디@서버 아이피

이후 ssh user@111.222.333.444로 접속하면 된다.

접속할 서버가 많아지면 아이피를 다 외울수도 없고 그때마다 아이피를 찾아봐야 되는데 config파일을 이용하면 손쉽게 접속을 할 수가 있다.

vim ~/.ssh./config

Host cloudAtCost
HostName 111.222.333.444
User user
IdentityFile ~/.ssh/id_rsa

Host oceans
HostName 222.333.444.555
User user
IdentityFile ~/.ssh/id_rsa

Host aws1
HostName 333.444.555.666
User user
IdentityFile ~/.ssh/id_rsa

Host - 식별이름

HostName - 접속할 서버 아이피

User - 접속할 유저명

IdentityFile - 공개키 경로

접속 할때는 간단하게 다음과 같다.

ssh cloudAtCost
ssh 식별이름(Host)

귀찮아서 id_rsa파일 하나로 거의 대부분 접속을 하지만,

서버별로 파일을 만들어서 접속하는게 보안상 더 좋다.

ssh 키 만드는 법은

ssh-keygen -t rsa -C "test@test.com"

github에 ssh key 등록하기

모카데브 — Thu, 7 Jun 2018 16:28:36 +0900

github에 ssh key를 등록하기 위해서 ssh key를 만든다.

대부분 엔터를 치면 된다.

cd ~/.ssh

ssh-keygen -t RSA

키를 복사한다.

cat id_rsa.pub

Settings -> SSH and GPG keys 페이지로 들어간다.

New SSH key 클릭

타이틀을 적고 복사한 키를 붙여넣기 한다.

이후에는 git clone을 할 때 https://github.com가 아닌 git@github.com으로 시작하는 ssh도 사용할 수 있다.

ssh를 사용하는게 여러모로 편해서 좋다.

docker-compose 설치

모카데브 — Wed, 6 Jun 2018 01:56:31 +0900

docker-compose를 사용하기 위해서 다음과 같이 한다.

1. 설치

sudo curl -L "https://github.com/docker/compose/releases/download/1.21.2/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose

2. 권한 부여

sudo chmod +x /usr/local/bin/docker-compose

3. 버전 확인

docker-compose version

docker-compose version 1.21.2, build a133471

docker-py version: 3.3.0

CPython version: 3.6.5

OpenSSL version: OpenSSL 1.0.1t 3 May 2016

docker로 jenkins 설치하기

모카데브 — Tue, 5 Jun 2018 01:14:53 +0900

그동안 서버에 직접 jenkins를 설치해서 사용 했었는데,

이번에 또 설치 할 일이 있었는데 docker도 공부할겸 해서 docker로 설치를 해봤다.

먼저, 도커를 설치한다.

sudo yum install docker

매번 sudo를 사용하지 않기 위해서 사용자를 docker그룹에 포함시켜 준다.

sudo usermod -a -G docker $USER

터미널을 나갔다 와야 적용된다.

도커 서비스를 시작하고 버전을 확인한다.

sudo service docker start

docker version

Client:

Version: 18.03.1-ce

API version: 1.37

Go version: go1.9.4

Git commit: 3dfb8343b139d6342acfd9975d7f1068b5b1c3d3

Built: Thu May 24 22:21:27 2018

OS/Arch: linux/amd64

Experimental: false

Orchestrator: swarm

Server:

Engine:

Version: 18.03.1-ce

API version: 1.37 (minimum version 1.12)

Go version: go1.9.4

Git commit: 7390fc6/18.03.1-ce

Built: Thu May 24 22:22:43 2018

OS/Arch: linux/amd64

Experimental: false

컨테이너가 삭제되도 jenkins 데이터를 보관할 jenkins home 폴더를 만들고 jenkins 컨테이너가 home폴더를 사용 가능하게 소유권을 바꿔주고 jenkins 최신 버전을 다운 받고 실행 시킨다.

mkdir jenkins_home

sudo chown -R 1000:1000 ./jenkins_home

docker run -d --name mocadev_jenkins -p 8080:8080 -p 50000:50000 -v jenkins_home:/var/jenkins_home jenkins:latest

➜ ~ docker ps

CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES

28a775b10c34 jenkins:latest "/bin/tini -- /usr/l…" 24 hours ago Up 23 hours 0.0.0.0:8080->8080/tcp, 0.0.0.0:50000->50000/tcp mocadev_jenkins

docker 명령어에서 -v는 컨테이너의 폴더를 공유해서 호스트와 연결시켜준다.

-v 호스트폴더:컨테이너 폴더

-p는 컨테이너의 포트를 노출해서 호스트 포트와 매핑시켜 준다.

-p 호스트 포트:컨테이터 포트

이제 docker로 jenkins를 설치 했으니 브라우저에서 http://서버IP:8080으로 접속을 하면 jenkins화면이 보인다.

System.Net.Http.HttpRequestException: An error occurred while sending the request.

모카데브 — Sun, 3 Jun 2018 17:19:51 +0900

외부 API콜을 자주 해야 되는 상황인데 갑자기 다음과 같은 오류로그가 쌓이기 시작했다.

System.Net.Http.HttpRequestException: An error occurred while sending the request. ---> System.Net.WebException: 기본 연결이 닫혔습니다. 받기에서 예기치 않은 오류가 발생했습니다. ---> System.IO.IOException: 전송 연결 현재 연결은 원격 호스트에 의해 강제로 끊겼습니다에서 데이터를 읽을 수 없습니다. ---> System.Net.Sockets.SocketException: 현재 연결은 원격 호스트에 의해 강제로 끊겼습니다

일단 다음과 같이 web.config에 추가를 했다.

<system.net>

</connectionManagement>

</system.net>

저번보다 오류건수는 줄었지만 그래도 종종 오류가 발생해서 더 찾아보니 다음과 같은게 있었다.

HttpClient client = new HttpClient();
client.DefaultRequestHeaders.ExpectContinue = false;

저렇게 하니 더이상 오류가 발생하지 않았다.

zsh 설치하기

모카데브 — Fri, 1 Jun 2018 02:24:39 +0900

zsh에 익숙해지다 보니 계속 이것만 사용하게 된다.

centos를 설치하면 무조건 이것부터 설치하고 본다.

일단 설치 고고고~~

sudo yum install -y zsh

설치후 기본셸을 zsh로 변경

which zsh
-> /bin/zsh
chsh -s /bin/zsh

oh my zsh 설치

curl -L https://raw.github.com/robbyrussell/oh-my-zsh/master/tools/install.sh | sh

테마 수정

vi ~/.zshrc
ZSH_THEME="robbyrussell"

보통 agnoster를 많이 사용했는데 요즘에는 기본인 robbyrussell를 사용한다

java8 설치

모카데브 — Fri, 1 Jun 2018 01:05:22 +0900

mkdir /opt

cd /opt

sudo wget --no-cookies --no-check-certificate --header "Cookie: gpw_e24=http%3A%2F%2Fwww.oracle.com%2F;oraclelicense=accept-securebackup-cookie" "http://download.oracle.com/otn-pub/java/jdk/8u131-b11/d54c1d3a095b4ff2b6607d096fa80163/jdk-8u131-linux-x64.tar.gz"

sudo tar xzf jdk-8u131-linux-x64.tar.gz

cd jdk1.8.0_131

sudo alternatives --install /usr/bin/java java /opt/jdk1.8.0_131/bin/java 2

sudo alternatives --config java

export JAVA_HOME=/opt/jdk1.8.0_131

export PATH=$PATH:/opt/jdk1.8.0_131/bin

java -version

수정 삭제 설정

댓글쓰기 공감