냉정과 열정 사이

[자작NAS] 우분투 서버에 Docker로 CrowdSec 설치

psychoria — Mon, 24 Jul 2023 05:00:07 +0900

CrowdSec은 침입 방지 시스템으로 외부의 침입 시도로부터 서버를 보호합니다.

Fail2ban과 유사한 역할을 하지만 동작 방식은 조금 다릅니다.

Fail2ban은 각 서비스의 로그들을 스캔해서 실패한 로그인 등에 대한 로그를 기반으로 IP를 차단합니다.

CrowdSec 구조

CrowdSec는 CrowdSec을 설치한 사람들의 로그를 분석해서 각 사용자로부터 수집한 악성 IP들을 차단합니다.

여러 사용자들이 공유하는 정보를 기반으로 IP를 차단하기 때문에 더 많은 정보를 활용할 수 있습니다.

또한, CrowdSec은 Traefik이나 Cloudflare 등과 같은 서비스와 연동하기 위한 바운서(Bouncers)를 제공합니다.

CrowdSec을 적용해서 서버의 보안을 강화시키는 방법을 알아보겠습니다.

1. CrowdSec 설정

CrowdSec 설치는 아래 링크를 참조해서 작성되었습니다.

Crowdsec Docker Compose Guide Part 1: Powerful IPS with Firewall Bouncer | SHB (smarthomebeginner.com)

먼저 다음 링크를 참조해서 Traefik을 설치합니다.

2023.07.20 - [IT/NAS] - [자작NAS] 우분투 서버에 Docker로 Traefik 설치

Traefik이 정상적으로 동작하면 CrowdSec과 Traefik을 위한 바운서를 실행할 수 있습니다.

Traefik이 이미 설정된 docker-compose.yml 파일에 다음 내용을 추가로 입력합니다.

whoami가 있던 부분을 삭제하고 입력하면 됩니다.

  crowdsec:
    image: crowdsecurity/crowdsec
    container_name: crowdsec
    env_file: .env
    environment:
      - COLLECTIONS=${CROWDSEC_COLLECTIONS}
      - GID=${PGID}
    depends_on:
      traefik:
        condition: service_healthy
    volumes:
      - ${CROWDSEC_PATH}/data:/var/lib/crowdsec/data
      - ${CROWDSEC_PATH}/config:/etc/crowdsec
      - ${TRAEFIK_PATH}/logs:/logs/traefik:ro
      - /var/log:/var/log:ro
    networks:
      - web
    restart: always

  traefik-bouncer:
    image: fbonalair/traefik-crowdsec-bouncer
    container_name: traefik-bouncer
    env_file: .env
    environment:
      - GIN_MODE=release
      - CROWDSEC_BOUNCER_API_KEY=${CROWDSEC_KEY_TRAEFIK} # cscli bouncers add traefik-bouncer
      - CROWDSEC_BOUNCER_LOG_LEVEL=2
      - CROWDSEC_AGENT_HOST=crowdsec:8080
    networks:
      - web
    restart: always

그리고 필요한 환경변수를 추가해 줍니다.

기존에 Traefik을 위해 추가한 내용에 아래 내용을 추가로 더해주면 됩니다.

# Common
PGID=1000

# CrowdSec
CROWDSEC_KEY_TRAEFIK=키입력
CROWDSEC_PATH=/data/crowdsec
CROWDSEC_COLLECTIONS=crowdsecurity/base-http-scenarios crowdsecurity/http-cve crowdsecurity/iptables crowdsecurity/linux crowdsecurity/nginx crowdsecurity/sshd crowdsecurity/traefik Dominic-Wagner/vaultwarden LePresidente/grafana

.env 파일의 키입력 부분은 crowdsec을 실행한 후에 생성할 수 있습니다.

이제 crowdsec을 먼저 실행합니다.

sudo docker compose up -d crowdsec

crowdsec이 실행되면 다음 명령어로 설정한 컬렉션들이 정상적으로 표시되는지 확인합니다.

sudo docker compose exec -t crowdsec cscli collections list

다음과 같은 형태로 활성화되어 있는 것을 볼 수 있습니다.

Collections

일단 CrowdSec이 실행이 완료되면 추가적인 설정들을 진행해야 합니다.

2. 로그 설정

다음으로 acquis.yaml 파일을 수정해서 Traefik 로그를 읽도록 해줍니다.

sudo nano /data/crowdsec/config/acquis.yaml

다음과 같이 내용을 입력합니다.

filenames:
  - /var/log/nginx/*.log
  - ./tests/nginx/nginx.log
#this is not a syslog log, indicate which kind of logs it is
labels:
  type: nginx
---
filenames:
  - /var/log/auth.log
  - /var/log/syslog
  - /var/log/kern.log
labels:
  type: syslog
---
filename: /var/log/apache2/*.log
labels:
  type: apache2
---
filenames:
  - /logs/traefik/*.log
labels:
  type: traefik

Nginx나 Apache 서버가 없다면 해당 부분(type: nginx, type: apache2)은 삭제해도 됩니다.

설정이 완료되면 CrowdSec을 재시작합니다.

sudo docker compose restart crowdsec

다음 명령어로 추가된 로그 파일들을 읽고 있는지 확인할 수 있습니다.

sudo docker compose exec -t crowdsec cscli metrics

시간이 지나고 로그 파일들을 파싱하고 나면 다음과 같이 결과가 나옵니다.

Metrics

파일을 읽기 전까지 일부 파일이 표시되지 않을 수도 있습니다.

3. 화이트 리스트 작성

다음 명령어를 실행해서 접속을 허용할 목록을 추가해 줍니다.

sudo nano /data/crowdsec/config/parsers/s02-enrich/mywhitelists.yaml

다음과 같이 입력해 주면 됩니다.

name: crowdsecurity/whitelists
description: "Whitelist events from my ip addresses"
whitelist:
  reason: "my ip ranges"
  ip:
    - "xxx.xxx.xxx.xxx"
    - "127.0.0.1"
  cidr:
    - "192.168.0.0/16"
    - "10.0.0.0/8"
    - "172.16.0.0/12"

xxx.xxx.xxx.xxx 부분은 본인의 실제 외부 IP로 입력하면 됩니다.

IP가 자주 변동되는 유동 IP라면 생략해도 됩니다.

이제 컨테이너를 재시작해서 적용하면 됩니다.

sudo docker compose restart crowdsec

이것으로 화이트 리스트 설정이 완료됩니다.

4. MariaDB 연동하기 (생략 가능)

CrowdSec은 기본적으로 SQLite를 기본 DB로 사용합니다.

데이터가 많아지면 SQLite가 느릴 수 있기 때문에 별도의 DBMS에 연결해서 사용하는 것이 가능합니다.

기본 SQLite를 계속 사용하려는 경우 이 단계는 건너뛰어도 됩니다.

여기서는 MariaDB(MySQL)을 연동하는 방법을 알아보겠습니다.

MariaDB를 Docker Compose로 실행하는 방법은 아래 링크에서 확인 가능합니다.

2023.07.24 - [IT/NAS] - [자작NAS] 우분투 서버에 Docker로 MariaDB 설치

다음 명령어로 MariaDB 컨테이너 접속합니다.

sudo docker compose exec -it mariadb mariadb -u root -p

root 계정의 비밀번호를 입력하고 접속한 후 다음 명령어들을 순차적으로 입력합니다.

CREATE DATABASE crowdsec;
CREATE USER 'crowdsec'@'%' IDENTIFIED BY '비밀번호';
GRANT ALL PRIVILEGES ON crowdsec.* TO 'crowdsec'@'%';
FLUSH PRIVILEGES;
quit

비밀번호 부분은 원하는 비밀번호로 변경하면 됩니다.

그리고 CrowdSec의 config.yaml 파일을 수정해 주면 됩니다.

sudo nano /data/crowdsec/config/config.yaml

db_config 부분을 찾아서 다음과 같이 MariaDB를 사용하도록 변경해 주면 됩니다.

db_config:
  log_level: info
  type: mysql
  user: crowdsec
  password: 비밀번호
  db_name: crowdsec
  host: mariadb
  port: 3306
  flush:
    max_items: 5000
    max_age: 7d

다음으로 docker-compose.yml 파일의 CrowdSec 부분도 일부 변경합니다.

그리고 하단의 networks: 부분에 crowdsec이라는 네트워크를 새롭게 추가합니다.

  crowdsec:
    image: crowdsecurity/crowdsec
    container_name: crowdsec
    env_file: .env
    environment:
      - COLLECTIONS=${CROWDSEC_COLLECTIONS}
      - GID=${PGID}
    depends_on:
      traefik:
        condition: service_healthy
      mariadb:
        condition: service_healthy
    volumes:
      - ${CROWDSEC_PATH}/data:/var/lib/crowdsec/data
      - ${CROWDSEC_PATH}/config:/etc/crowdsec
      - ${TRAEFIK_PATH}/logs:/logs/traefik:ro
      - /var/log:/var/log:ro
    networks:
      - crowdsec
      - web
    restart: always

...

networks:
  web:
    name: web
  crowdsec:
    name: crowdsec

생성한 crowdsec 네트워크는 MariaDB 컨테이너의 networks: 에도 추가해주면 됩니다.

변경 완료 후 MariaDB와 CrowdSec 서비스를 재시작해서 적용해줍니다.

sudo docker compose restart mariadb
sudo docker compose restart crowdsec

이제 SQLite 대신 MariaDB를 사용해서 데이터를 보관합니다.

SQLite를 계속 사용하려는 경우는 이 단계는 건너뛰면 됩니다.

5. CrowdSec 가입

이제 아래 링크로 접속해서 CrowdSec에 가입합니다.

https://app.crowdsec.net/

화면의 Sign up 버튼을 누르고 가입을 하면 됩니다.

사용할 이메일과 비밀번호를 입력해서 계정을 생성하면 됩니다.

입력한 이메일에 확인 메일이 오면 클릭해서 가입을 완료하면 됩니다.

로그인하면 인스턴스를 추가하는 방법을 확인할 수 있습니다.

인스턴스 등록

등록하기 위해 다음 명령어를 실행하면 됩니다.

sudo docker compose exec -t crowdsec cscli console enroll xxxxxxxxxxxxxxxxxxxxxxxxx

enroll 다음의 키는 웹에서 표시된 실제 키를 입력해야 합니다.

인스턴스 등록

인스턴스 등록이 완료되면 다시 웹 브라우저로 이동해서 새로고침 하면 요청이 표시됩니다.

인스턴스 등록

본인이 요청한 내용이 맞는지 확인하고 Accept enroll을 눌러서 등록을 마치면 됩니다.

6. Traefik Bouncer 설치

CrowdSec 설치 후 Bouncer를 설치해야 침입을 방지할 수 있습니다.

여기서는 Traefik Bouncer 설치를 통해 Traefik을 통해 오는 요청들을 필터링하는 방법을 알아보겠습니다.

먼저 다음 명령어로 API 키를 생성합니다.

sudo docker compose exec -t crowdsec cscli bouncers add traefik-bouncer

아래와 같이 생성된 API 키가 화면에 표시됩니다.

API 키 생성

생성된 API 키는 다시 확인할 수 없기 때문에 따로 기록해 둡니다.

.env 파일을 열어서 생성된 API를 CROWDSEC_KEY_TRAEFIK의 값으로 입력합니다.

sudo nano ~/.env

API 키를 입력하고 저장한 후에 컨테이너를 시작합니다.

sudo docker compose up -d traefik-bouncer

이제 Traefik에 미들웨어들을 추가합니다.

sudo nano /data/traefik/config/rules/middlewares.toml

기존에 추가되어 있는 basicAuth 하단에 다음과 같은 내용을 추가합니다.

[http.middlewares.rateLimit.rateLimit]
  average = 0
  burst = 0

[http.middlewares.traefik-bouncer.forwardAuth]
  address = "http://traefik-bouncer:8080/api/v1/forwardAuth"
  trustForwardHeader = true

[http.middlewares.simpleAuthChain.chain]
  middlewares = ["traefik-bouncer", "simpleAuth"]

[http.middlewares.rateLimitChain.chain]
  middlewares = ["traefik-bouncer", "redirect-web-to-websecure@internal", "rateLimit"]

Bouncer와 연동할 미들웨어를 추가하고 체인으로 Bouncer 미들웨어가 앞에 위치한 미들웨어들을 추가했습니다.

이제 Traefik이 사용하고 있는 simpleAuth를 변경해 보겠습니다.

sudo nano /data/traefik/config/rules/routers.toml

중간의 middlewares 부분을 다음과 같이 변경합니다.

  middlewares = ["simpleAuthChain"]

테스트를 위해 아래 명령어를 실행합니다.

sudo docker logs -f crowdsec

이제 https://traefik.도메인으로 접속해서 로그에 현재 접속 중인 IP가 표시되는지 확인하면 됩니다.

수동으로 IP를 차단하고 싶으면 다음 명령어로 차단할 IP를 추가할 수 있습니다.

sudo docker compose exec -t crowdsec cscli decision add -i IP주소

차단한 IP를 삭제하는 것은 다음 명령어로 가능합니다.

sudo docker compose exec -t crowdsec cscli decision delete -i IP주소

CrowdSec 대시보드의 Alerts에서 다음과 같이 차단된 IP들을 확인할 수 있습니다.

대시보드

공격이 얼마나 자주 어디에서 들어오는지 파악하는데 도움이 됩니다.

7. 차단 시간 설정

공격이 너무 빈번하다면 차단 시간을 늘리는 방법을 고려할 수 있습니다.

차단 시간 설정은 CrowdSec의 profile.yaml을 통해 변경 가능합니다.

sudo nano /data/crowdsec/config/profiles.yaml

다음 부분을 찾아서 duration의 시간을 변경해 주면 됩니다.

decisions:
 - type: ban
   duration: 4h

기본값은 4시간인데 원하는 시간만큼의 값을 입력하면 됩니다.

15일 정도 차단을 시키고 싶다면 360h로 입력하면 됩니다.

sudo docker compose restart crowdsec

설정을 완료하고 CrowdSec을 재시작하면 반영됩니다.

CrowdSec은 다양한 곳에서 수집된 IP 리스트를 바탕으로 안전하게 외부에 노출된 서비스들을 보호할 수 있습니다.

다만 CrowdSec은 시스템의 로그 등을 수집할 수 있습니다.

이 부분이 우려가 된다면 CrowdSec을 설치하지 않고 Traefik 만으로 사용해도 됩니다.

이것으로 CrowdSec의 기본적인 설정이 완료됩니다.

[자작NAS] 우분투 서버에 Docker로 MariaDB 설치

psychoria — Mon, 24 Jul 2023 04:00:10 +0900

MariaDB는 MySQL이 오라클에 인수된 이후 MySQL을 포크하면서 생긴 DBMS입니다.

MySQL과 호환이 되기 때문에 MySQL을 대체해서 많이 사용됩니다.

MariaDB는 DB를 사용하는 다양한 소프트웨어와 연동이 가능합니다.

Docker Compose로 MariaDB를 실행하는 방법을 알아보겠습니다.

1. docker-compose.yml 파일에 MariaDB 추가

현재 최신 버전인 11.0.2를 기준으로 설치를 진행하겠습니다.

docker-compose.yml 파일을 생성해서 MariaDB를 추가할 수 있습니다.

sudo nano ~/docker-compose.yml

다음과 같이 내용을 입력하면 됩니다.

version: "3.9"
services:

...기타 컨테이너 설정

  mariadb:
    image: mariadb
    container_name: mariadb
    env_file: .env
    environment:
      - MYSQL_MYSQL_LOCALHOST_USER=${MARIADB_LOCALHOST_USER}
      - MYSQL_ROOT_PASSWORD=${MARIADB_ROOT_PASSWORD}
    volumes:
      - ${MARIADB_PATH}/data:/var/lib/mysql
    ports:
      - 3306:3306
    healthcheck:
      test: ["CMD", "/usr/local/bin/healthcheck.sh", "--su-mysql", "--connect", "--innodb_initialized"]
      interval: 10s
      timeout: 10s
      retries: 30
    restart: unless-stopped

다음으로 MariaDB를 위한 환경변수들을 추가합니다.

sudo nano ~/.env

다음 내용을 추가하고 비밀번호 부분은 실제 사용할 비밀번호를 입력하면 됩니다.

# MariaDB
MARIADB_LOCALHOST_USER=mysql@locahost
MARIADB_ROOT_PASSWORD=비밀번호
MARIADB_PATH=/data/mariadb

이제 MariaDB 컨테이너를 생성하고 실행하면 됩니다.

sudo docker compose up -d mariadb

이것으로 MariaDB가 실행됩니다.

2. MariaDB 접속 방법

다음 명령어로 MariaDB에 접속할 수 있습니다.

sudo docker compose exec -it mariadb mariadb -u root -p

비밀번호는 .env에 입력한 비밀번호를 입력해주면 됩니다.

3. root 계정 비밀번호 변경 방법

root 계정을 변경하려는 경우 MariaDB에 접속한 후 다음과 같이 입력하면 됩니다.

use mysql;
UPDATE user SET password=PASSWORD('새비밀번호') WHERE User='root';
FLUSH PRIVILEGES;
quit;

새비밀번호 부분에 새롭게 쓸 비밀번호를 입력하면 됩니다.

4. 새 데이터베이스 생성

다른 소프트웨어가 MariaDB를 연결하는 경우 새로운 데이터베이스와 사용자를 생성해야 합니다.

아래 명령어는 Snipe-IT을 위한 DB와 사용자 생성 명령어입니다.

CREATE DATABASE snipeit;
CREATE USER 'snipeit'@'%' IDENTIFIED BY '비밀번호';
GRANT ALL PRIVILEGES ON snipeit.* TO 'snipeit'@'%';
FLUSH PRIVILEGES;
quit

비밀번호에는 원하는 비밀번호를 입력하면 됩니다.

다른 서비스와 연동하려는 경우 snipeit 부분을 다른 원하는 이름으로 변경하면 됩니다.

이것으로 MariaDB의 기본적인 설정이 완료됩니다.

[자작NAS] 우분투 서버에 Docker로 Traefik 설치

psychoria — Thu, 20 Jul 2023 16:00:54 +0900

Traefik은 리버스 프록시와 부하 분산(Load balancer) 기능을 제공합니다.

사용하는 서비스들의 포트를 외부에 노출하지 않고 URL을 통해 외부에서 접속 가능해집니다.

80, 443 포트만 외부에 노출시키고 URL을 통해서만 들어오기 때문에 보안이 강화됩니다.

또한 Traefik은 웹 대시보드와 미들웨어 지원, Let's Encrypt 지원 등 강력한 기능을 갖추고 있습니다.

Traefik 다이어그램

다양한 기능을 갖춘 Traefik을 설치하는 방법을 알아보겠습니다.

1. Traefik 기본 설정

먼저 웹 대시보드에 접속할 때 사용할 비밀번호를 생성합니다.

먼저 Basic auth에 사용할 비밀번호를 생성하기 위해 apache2-utils를 설치합니다.

sudo apt-get install -y apache2-utils

다음 명령어로 패스워드를 생성하면 됩니다.

htpasswd -nb admin 비밀번호

admin 대신 사용을 원하는 아이디를 입력해도 됩니다.

그리고 비밀번호에는 실제 원하는 비밀번호를 입력하면 됩니다.

다음과 같은 형태로 값이 출력되는데 이 값을 저장해 둡니다.

admin:$apr1$nnxKVbxh$63qwiV2RfGfLYNFKZr0n3/

이제 Traefik을 위한 디렉토리와 파일들을 생성합니다.

sudo mkdir -p /data/traefik/config/rules

Traefik은 TOML이라는 포맷으로 설정이 가능합니다.

생성한 디렉토리 밑에 traefik.toml 파일을 생성하고 내용을 작성합니다.

sudo nano /data/traefik/config/traefik.toml

내용의 이메일주소 부분은 본인의 이메일 주소를 입력한 후에 traefik.toml 파일에 기록합니다.

[entryPoints]
  [entryPoints.web]
    address = ":80"
    [entryPoints.web.http.redirections.entryPoint]
      to = "websecure"
      scheme = "https"

  [entryPoints.websecure]
    address = ":443"

[api]
  dashboard = true
  insecure = true

[ping]

[log]
  filePath = "/logs/traefik.log"
  level = "INFO"

[accessLog]
  filePath = "/logs/access.log"
  bufferingSize = 100
  [accessLog.filters]
    statusCodes = ["204-299", "400-499", "500-599"]

[serversTransport]
  insecureSkipVerify = true

[certificatesResolvers.lets-encrypt.acme]
  email = "이메일주소"
  storage = "acme.json"
  [certificatesResolvers.lets-encrypt.acme.tlsChallenge]

[providers.docker]
  watch = true
  exposedByDefault = false
  network = "web"

[providers.file]
  directory = "/rules"
  watch = true

[tls.options]
  [tls.options.default]
    minVersion = "VersionTLS12"
    curvePreferences = ["secp521r1", "secp384r1"]
    cipherSuites = [
      "TLS_ECDHE_RSA_WITH_AES_128_GCM_SHA256",
      "TLS_ECDHE_RSA_WITH_AES_256_GCM_SHA384",
      "TLS_ECDHE_RSA_WITH_CHACHA20_POLY1305",
      "TLS_AES_128_GCM_SHA256",
      "TLS_AES_256_GCM_SHA384",
      "TLS_CHACHA20_POLY1305_SHA256"
    ]
    sniStrict = true

이제 middlewares.toml 파일을 생성합니다.

sudo nano /data/traefik/config/rules/middlewares.toml

다음 내용을 입력하고 저장하면 됩니다.

[http.middlewares.simpleAuth.basicAuth]
  users = [
    "admin:$apr1$nnxKVbxh$63qwiV2RfGfLYNFKZr0n3/"
  ]

users 부분에는 처음에 htpasswd 명령어로 생성한 값을 그대로 입력하면 됩니다.

다음으로 routers.toml을 생성합니다.

sudo nano /data/traefik/config/rules/routers.toml

다음 내용을 입력하고 저장하면 됩니다.

[http.routers.api]
  rule = "Host(`traefik.도메인`)"
  entrypoints = ["websecure"]
  middlewares = ["simpleAuth"]
  service = "api@internal"
  [http.routers.api.tls]
    certResolver = "lets-encrypt"

내용의 rule 부분의 도메인은 본인이 보유하고 있는 도메인(xxx.duckdns.org)으로 변경하면 됩니다.

마지막 Let's Encrypt 정보를 담을 acme.json 파일을 생성하고 권한을 변경합니다.

sudo touch /data/traefik/config/acme.json
sudo chmod 600 /data/traefik/config/acme.json

이것으로 기본적인 설정이 준비됩니다.

2. Traefik 컨테이너 생성

Traefik 컨테이너를 생성하기 위해 docker-compose.yml 파일을 작성합니다.

현재 최신 버전인 v2.10.3을 기준으로 작성을 했습니다.

sudo nano ~/docker-compose.yml

다음과 같이 입력하고 저장합니다.

version: "3.9"
services:
  traefik:
    image: traefik
    container_name: traefik
    env_file: .env
    volumes:
      - /var/run/docker.sock:/var/run/docker.sock:ro
      - ${TRAEFIK_PATH}/config/traefik.toml:/traefik.toml
      - ${TRAEFIK_PATH}/config/rules:/rules
      - ${TRAEFIK_PATH}/config/acme.json:/acme.json
      - ${TRAEFIK_PATH}/logs:/logs
    ports:
      - 80:80
      - 443:443
      - 8080:8080
    networks:
      - web
    healthcheck:
      test: ["CMD", "traefik", "healthcheck", "--ping"]
      interval: 10s
      timeout: 10s
      retries: 30
    restart: always

  whoami:
    image: traefik/whoami
    container_name: whoami
    env_file: .env
    networks:
      - web
    labels:
      - traefik.enable=true
      - traefik.docker.network=web
      - traefik.http.routers.whoami.rule=Host(`whoami.${URL}`)
      - traefik.http.routers.whoami.tls=true
      - traefik.http.routers.whoami.tls.certresolver=lets-encrypt
      - traefik.http.services.whoami.loadbalancer.server.port=80

networks:
  web:
    name: web

그리고 환경변수를 설정할 .env 파일을 생성합니다.

sudo nano ~/.env

다음과 같이 내용을 입력해주고 도메인은 본인이 사용할 도메인을 입력해 주면 됩니다.

# Common
URL=도메인

# Traefik
TRAEFIK_PATH=/data/traefik

설정을 완료했으면 서비스들을 실행하면 됩니다.

sudo docker compose up -d

3. Traefik 대시보드 접속 및 적용 확인

서비스가 실행되고 웹 브라우저에 http://IP주소:8080로 접속하면 Traefik 대시보드가 표시됩니다.

Traefik

주소창에 traefik.도메인 형태로 입력하면 외부에서도 접속이 가능합니다.

처음에 입력했던 유저명과 패스워드를 입력하면 됩니다.

웹 브라우저에서 whoami.도메인으로 접속해 보면 해당 서비스로 접속되는 것을 확인할 수 있습니다.

테스트를 위해 추가한 whoami는 정상 동작 확인 후 삭제해도 됩니다.

추후에 서비스들을 리버스 프록시에 추가하려면 서비스 하단에 labels 부분과 networks를 추가하면 됩니다.

Plex의 경우 다음과 같은 내용을 추가하면 됩니다.

    networks:
      - web
    labels:
      - traefik.enable=true
      - traefik.docker.network=web
      - traefik.http.routers.plex.rule=Host(`plex.${URL}`)
      - traefik.http.routers.plex.tls=true
      - traefik.http.routers.plex.tls.certresolver=lets-encrypt
      - traefik.http.services.plex.loadbalancer.server.port=32400

이것으로 Traefik 설치 및 리버스 프록시 설정이 완료됩니다.

[JavaScript] Array 메소드 - map()

psychoria — Sun, 19 Mar 2023 15:01:38 +0900

자바스크립트를 하는 사람이라면 map()은 꼭 알아야 하는 메소드 중 하나입니다.
map() 메서드는 원래 배열의 각 요소에 주어진 함수를 적용하여 새 배열을 만드는 자바스크립트의 내장 배열 메서드 입니다. map() 메서드는 원래 배열을 수정하지 않습니다.

array.map(function(currentValue, index, arr), thisValue)

map()메소드 사용 시 다음의 2개의 파라미터를 적용 시켜야 합니다.
- function: 배열의 각 요소에 적용할 함수입니다.
currentValue: 처리 중인 현재 요소의 값
index: 처리 중인 현재 요소의 값
arr: map() 메서드가 호출된 원래 배열

- thisValue: 선택 사항으로 함수를 실행할 때 이 값으로 전달할 값입니다.

예제) 숫자 배열의 각 숫자에 2를 곱하는 함수를 적용하여 doubleNumbers라는 새로운 배열을 만들었습니다. map()메서드가 이 함수를 숫자 배열의 각 요소에 적용하고 새 배열을 반환한 것을 확인할 수 있습니다.

let numbers = [1, 2, 3, 4, 5];
let doubledNumbers = numbers.map(function(num) {
  return num * 2;
});
console.log(doubledNumbers); // output: [2, 4, 6, 8, 10]

모던 자바스크립트를 통해 arrow 함수를 사용하여 코드를 다음과 같이 간략화 할 수 있습니다.

let numbers = [1, 2, 3, 4, 5];
let doubledNumbers = numbers.map(num => num * 2);
console.log(doubledNumbers); // output: [2, 4, 6, 8, 10]

map() 메서드는 기존 배열의 각 요소에 함수를 적용하여 새 배열을 만듭니다. 이 방법은 데이터를 한 형식에서 다른 형식으로 변환해야 할 때 유용합니다. 따라서, map() 메서드의 익숙해지면 자바스크립트에서 보다 효율적이고 표현력 있는 코드를 작성할 수 있습니다.

[JavaScript ]Object Array 메소드 push / pop / shift / unshift

psychoria — Sat, 18 Mar 2023 05:32:15 +0900

배열은 실무에서도 정말 많이 사용하는 데이터 구조이며 익숙해 지는 것이 중요합니다. 그 중에서도 집중해서 연습해봐야 하는 것은 object를 담고 있는 array 입니다.

const emojis = [
{name: '호랑이',  emoji:' '},
{name: '토끼', emoji:' '},
{name: '용', emoji:' '},
{name: '고양이', emoji:' '}
];

1. push() - 배열 끝에 하나 이상의 요소를 추가하고 배열의 새 길이를 반환합니다.

emojis.push({name: '소', emoji:' '});
console.log(emojis);
/* 결과
{name: '호랑이',  emoji:' '},
{name: '토끼', emoji:' '},
{name: '용', emoji:' '},
{name: '고양이', emoji:' '}
{name: '소', emoji:' '}
*/

2. pop() - 배열에서 마지막 요소를 제거하고 해당요소를 반환합니다.

emojis.pop();
console.log(emojis);
/* 결과
{name: '호랑이',  emoji:' '},
{name: '토끼', emoji:' '},
{name: '용', emoji:' '},
{name: '고양이', emoji:' '}
*/

3. shift() - 배열에서 첫 번째 요소를 제거하고 해당 요소를 반환합니다.

emojis.shift();
console.log(emojis);  
/* 결과
{name: '토끼', emoji:' '},
{name: '용', emoji:' '},
{name: '고양이', emoji:' '}
*/

4.unshift() - 배열의 시작 부분에 하나 이상의 요소를 추가하고 배열의 새 길이를 반환합니다.

emojis.push({name: '소', emoji:' '});
console.log(emojis);

/*결과
{name: '소', emoji:' '},
{name: '토끼', emoji:' '},
{name: '용', emoji:' '},
{name: '고양이', emoji:' '}
*/

[JavaScript] Array 메소드 (push / pop / shift / unshift)

psychoria — Fri, 17 Mar 2023 15:13:57 +0900

배열은 자바스크립트에서 가장 기본적인 데이터 구조 중 하나이며, 데이터를 저장하고 조작하는데 사용됩니다. 이 블로그에서는 자바스크립트에서 가장 일반적으로 사용되는 배열 방법에 대해 확인할 예정입니다.

1. push() - 배열 끝에 하나 이상의 요소를 추가하고 배열의 새 길이를 반환합니다.

const arr = [' ',' ',' ', ' '];
arr.push(' ');
console.log(arr);
// 결과 [' ',' ',' ', ' ',' ']

2. pop() - 배열에서 마지막 요소를 제거하고 해당요소를 반환합니다.

const arr = [' ',' ',' ', ' '];
arr.pop();
console.log(arr);
// 결과:[ ' ',' ',' ']

3.shift() - 배열에서 첫 번째 요소를 제거하고 해당 요소를 반환합니다.

const arr = [' ',' ',' ', ' '];
arr.shift();
console.log(arr);  
// 결과: [' ',' ', ' ']

4.unshift() - 배열의 시작 부분에 하나 이상의 요소를 추가하고 배열의 새 길이를 반환합니다.

const arr = [' ',' ',' ', ' '];
arr.unshift(' ');
console.log(arr);
// 결과: [' ',' ',' ',' ', ' ']

[Python] 파이썬 셋(set) 사용 방법

psychoria — Thu, 18 Aug 2022 15:39:21 +0900

파이썬의 셋(set)은 파이썬의 기본 내장 데이터 타입 중 하나입니다.

집합을 표현하는 데이터 타입으로 합집합, 교집합, 차집합 등의 연산을 지원합니다.

셋의 가장 큰 특징은 중복된 값을 허용하지 않는다는 점입니다.

또 하나의 특징은 순서가 없기 때문에 인덱스를 통해 값을 가져올 수 없다는 점입니다.

파이썬의 셋(set) 데이터 타입에 대해 알아보겠습니다.

1. set 생성

파이썬에서 set은 명시적으로 set()을 입력해서 생성할 수 있습니다.

a = set()
b = set([1, 1, 2, 3])

a와 같이 빈 set을 생성하거나 리스트를 통해서 set을 생성할 수 있습니다.

set은 중복을 허용하지 않기 때문에 리스트에 동일한 값이 존재하는 경우 한 개만 set에 입력됩니다.

2. set 연산

파이썬의 set은 집합을 표현하기 때문에 합집합, 교집합, 차집합, 대칭 차집합 연산들을 지원합니다.

연산자나 메소드를 통해 집합 연산의 값을 구할 수 있습니다.

1) 합집합 (union)

A와 B라는 집합이 있을 때 합집합은 다음과 같이 표현됩니다.

합집합

파이썬 set의 합집합 역시 양쪽의 값을 모두 포함하며 중복된 값은 한 개만 포함됩니다.

a = set([1, 2, 3, 4])
b = set([3, 4, 5, 6])

print(a.union(b))  # {1, 2, 3, 4, 5, 6}
print(a | b)  # {1, 2, 3, 4, 5, 6}

합집합은 union() 메소드나 | 연산자로 구할 수 있습니다.

a와 b의 값이 모두 포함되어 있고 중복된 3, 4는 한 번만 입력되어 있는 것을 확인할 수 있습니다.

2) 교집합 (intersection)

교집합은 A와 B 양쪽 모두에 존재하는 값들만 구합니다.

교집합

교집합은 intersection() 메소드나 & 연산자로 구할 수 있습니다.

a = set([1, 2, 3, 4])
b = set([3, 4, 5, 6])

print(a.intersection(b))  # {3, 4}
print(a & b)  # {3, 4}

a와 b에 모두 존재하는 3, 4만이 결과로 출력되는 것을 볼 수 있습니다.

3) 차집합 (difference)

차집합은 다음과 같이 표현됩니다.

차집합

A에만 존재하는 값들만 결과로 포함시킵니다.

a = set([1, 2, 3, 4])
b = set([3, 4, 5, 6])

print(a.difference(b))  # {1, 2}
print(a - b)  # {1, 2}

차집합은 difference() 메소드나 - 연산자로 구할 수 있습니다.

a에서 b에 존재하는 3, 4를 제외시킨 {1, 2}가 결과로 출력됩니다.

4) 대칭 차집합 (symmetric_difference)

대칭 차집합은 다음과 같이 양쪽에 존재하는 값들을 제외한 집합입니다.

대칭 차집합

가운데 중복되는 값만 제외된 것을 확인할 수 있습니다.

a = set([1, 2, 3, 4])
b = set([3, 4, 5, 6])

print(a.symmetric_difference(b))  # {1, 2, 5, 6}
print(a ^ b)  # {1, 2, 5, 6}

대칭 차집합은 symmetric_difference()를 호출하거나 ^ 연산자로 구할 수 있습니다.

a와 b 양쪽에 존재하는 3, 4를 제외한 {1, 2, 5, 6}이 결과로 출력됩니다.

5) 기타 집합 관련 메소드

집합 연산과 관련해서 update로 끝나는 메소드들이 존재합니다.

예를 들어, difference()와 대응하는 difference_update()가 존재합니다.

update가 없는 경우 새로운 set을 생성해서 리턴하기 때문에 기존 set의 값이 변하지 않습니다.

update()가 있는 경우는 리턴이 없고 기존의 set 값을 직접 변경합니다.

각각의 집합 연산에 대응하는 update() 메소드들은 다음과 같습니다.

집합 연산	메소드	연산자	update 버전 메소드	update 버전 연산자
합집합	union()	\|	update()	\|=
교집합	intersection()	&	intersection_update()	&=
차집합	difference()	-	difference_update()	-=
대칭 차집합	symmetric_difference()	^	symmetric_difference_update()	^=

예제 코드는 다음과 같으며 새로운 집합을 생성하지 않고 원본 집합의 값을 변경하는 것을 볼 수 있습니다.

a = set([1, 2, 3, 4])
b = set([3, 4, 5, 6])

a.update(b)  # a |= b
print(a)  # {1, 2, 3, 4, 5, 6}

a = set([1, 2, 3, 4])
b = set([3, 4, 5, 6])

a.intersection_update(b)  # a &= b
print(a)  # {3, 4}

a = set([1, 2, 3, 4])
b = set([3, 4, 5, 6])

a.difference_update(b)  # a -= b
print(a)  # {1, 2}

a = set([1, 2, 3, 4])
b = set([3, 4, 5, 6])

a.symmetric_difference_update(b)  # a ^= b
print(a)  # {1, 2, 5, 6}

그리고 두 집합 사이의 관계를 확인할 수 있는 메소드들도 존재합니다.

먼저 isdisjoint()는 다음과 같이 두 집합에 겹치는 값이 존재하지 않는 경우 True를 리턴합니다.

disjoint

다음과 같이 겹치는 값이 없는 두 번째 상황({1, 2, 3}, {4, 5, 6})에서 True를 출력합니다.

a = set([1, 2, 3, 4])
b = set([3, 4, 5, 6])
print(a.isdisjoint(b))  # False

a = set([1, 2, 3])
b = set([4, 5, 6])
print(a.isdisjoint(b))  # True

그리고 집합끼리의 포함 관계를 나타내는 상위집합(superset)과 부분집합(subset) 관계도 구할 수 있습니다.

a = set([1, 2, 3, 4])
b = set([2, 3])
print(a.issuperset(b))  # True
print(a >= b)  # True

print(b.issubset(a))  # True
print(b <= a)  # True

여기서는 a가 b를 완전히 포함하고 있기 때문에 a는 b의 상위집합(superset)입니다.

그리고 b는 a의 부분집합(subset)이라고도 볼 수 있습니다.

issuperset()은 >= 연산자로도 표현이 가능하고 issubset()은 <= 연산자로 표현이 가능합니다.

issuperset()과 issubset()은 a와 b가 완전히 동일한 값일 때도 True를 리턴합니다.

a와 b가 같은 상황을 제외한 진부분집합(proper subset)과 진상위집합(proper superset) 역시 구할 수 있습니다.

부분집합과 상위집합을 구하는 전체 메소드와 연산자는 다음과 같습니다.

집합 관계	메소드	연산자
부분집합	issubset()	<=
상위집합	issuperset()	>=
진부분집합	없음	<
진상위집합	없음	>

연산자와 메소드를 통해 집합들의 관계와 연산 결과를 쉽게 구할 수 있습니다.

3. set 길이 확인

set은 순서가 없는 데이터 타입이지만 길이를 구하는 것은 가능합니다.

a = set([1, 2, 3, 4])
print(len(a))  # 4

다른 타입과 동일한 방법으로 len()을 통해 길이를 얻을 수 있습니다.

4. set 값 추가/삭제

set은 값을 추가하거나 삭제하기 위한 다양한 메소드가 있습니다.

값을 추가할 때는 add() 메소드를 호출하면 됩니다.

a = set([1, 2, 3, 4])
a.add(5)
print(a)  # {1, 2, 3, 4, 5}

특정 값을 한 개 삭제할 때는 discard()와 remove()를 호출하면 되는데 약간의 차이가 있습니다.

a = set([1, 2, 3, 4])
a.discard(4)
a.discard(4)
a.remove(3)
# a.remove(3)  # KeyError

remove()는 set 안에 없는 값을 삭제하려고 할 때 KeyError를 발생시킵니다.

discard()는 값이 없는 경우에도 에러가 발생하지 않습니다.

만약 값의 유무와 상관없이 삭제를 시도하고 싶은 경우 discard()를 호출하면 됩니다.

그리고 랜덤하게 값을 한 개 삭제하고 동시에 리턴받고 싶은 경우는 pop()을 호출하면 됩니다.

a = set([1, 2, 3, 4])
print(a.pop())
print(a)

pop()이 값을 한 개 리턴하고 그 값이 a에서 삭제된 것을 확인할 수 있습니다.

마지막으로 모든 값을 삭제하고 싶은 경우 clear()를 호출하면 됩니다.

a = set([1, 2, 3, 4])
a.clear()
print(a)  # set()

모든 값들이 지워진 것을 확인할 수 있습니다.

5. 기타 set 메소드

마지막으로 copy() 메소드를 통해 동일한 set을 새로 생성할 수 있습니다.

a = set([1, 2, 3, 4])
b = a.copy()

b.add(5)
print(a)  # {1, 2, 3, 4}
print(b)  # {1, 2, 3, 4, 5}

copy()로 복사한 set은 한 쪽을 변경했을 때 다른 쪽이 영향을 받지 않는 것을 확인할 수 있습니다.

파이썬의 set은 집합 연산에 특화된 데이터 타입입니다.

또한 중복된 값을 허용하지 않는 특성때문에 중복 값을 걸러내거나 하는데 활용되기도 합니다.

리눅스 전원 끄기 (시스템 종료) 명령어

psychoria — Mon, 8 Aug 2022 15:00:40 +0900

리눅스 환경에서 명령어를 입력해서 시스템을 종료해야 하는 경우가 있습니다.

시스템 종료가 아닌 재부팅의 경우 아래 링크에서 명령어들을 확인 가능합니다.

2022.03.24 - [IT/Linux] - 리눅스 재부팅(reboot) 명령어

명령어를 입력해서 리눅스 시스템의 전원을 끄는 방법을 알아보겠습니다.

1. systemctl 명령어

systemctl poweroff나 poweroff 명령어를 입력하면 바로 시스템의 전원을 끄는 것이 가능합니다.

sudo systemctl poweroff

systemctl없이 poweroff만으로도 시스템 종료가 가능합니다.

sudo poweroff

systemctl poweroff나 poweroff 명령어를 입력하면 바로 리눅스 시스템을 종료할 수 있습니다.

2. shutdown 명령어

shutdown 명령어는 기본적인 리눅스 시스템 종료 명령어입니다.

재부팅이나 시스템 종료를 위한 옵션을 제공하는데 옵션을 지정하지 않으면 시스템을 종료시킵니다.

sudo shutdown

명령어를 실행하면 1분 뒤로 시스템 종료가 예약됩니다.

명령어를 입력하자마자 즉시 시스템을 종료하고 싶은 경우 now를 뒤에 추가해주면 됩니다.

sudo shutdown now

간단하게 전원을 끄는 작업을 예약하는 것도 가능합니다.

sudo shutdown +5

+와 숫자를 조합하면 지정된 분 이후에 시스템이 종료되는데 위 명령어는 5분 이후로 시스템 종료가 예약됩니다.

+0의 경우 now와 동일하게 동작합니다.

혹은 24시간 형식으로 특정 시간에 시스템 종료를 예약하는 것도 가능합니다.

sudo shutdown 22:00

시스템 종료를 예약할 때 다른 접속한 사용자에게 사유와 시간을 공지하는 것도 가능합니다.

sudo shutdown +5 "No longer available"

다른 사용자들에게 이런 형태로 메시지가 표시됩니다.

시스템 종료 알림

예약된 시스템 종료를 취소할 때는 -c 옵션을 사용하면 됩니다.

sudo shutdown -c

shutdown 명령어를 실행하면 시스템 종료 예약과 예약 취소를 할 수 있습니다.

리눅스 재부팅(reboot) 명령어

psychoria — Thu, 24 Mar 2022 04:00:58 +0900

리눅스 환경에서 명령어를 입력해서 시스템을 재부팅해야 하는 경우가 있습니다.

SSH을 통해서 접속하는 경우 명령어를 입력해야 시스템을 재부팅할 수 있습니다.

명령어를 통해 리눅스를 재부팅하는 방법을 알아보겠습니다.

1. systemctl 명령어

systemctl reboot 명령어나 reboot 명령어를 통해 재부팅이 가능합니다.

다음 명령어를 입력하면 재부팅이 바로 진행됩니다.

sudo systemctl reboot

혹은 reboot 명령어만 입력해도 됩니다.

sudo reboot

reboot 명령어로 재부팅이 안 되는 경우 -f (--force)를 추가해서 강제로 재부팅을 시도할 수 있습니다.

sudo systemctl reboot -f

systemctl reboot(reboot) 명령어를 입력하면 간단하게 재부팅을 진행할 수 있습니다.

2. shutdown 명령어

shutdown 명령어로도 재부팅이 가능합니다.

shutdown 명령어로 재부팅을 하려면 -r (--reboot)을 추가하면 됩니다.

sudo shutdown -r

shutdown 명령어는 1분 뒤로 재부팅을 예약합니다.

reboot 명령어처럼 즉시 재부팅을 하려면 now를 추가해주면 됩니다.

sudo shutdown -r now

또한 shutdown 명령어는 지정된 시간에 재부팅이 가능하도록 해줍니다.

sudo shutdown -r +5

+뒤의 숫자만큼의 분이 지나고 재부팅이 진행된다는 의미로 여기서는 5분 뒤로 예약됩니다.

now는 +0을 입력한 것과 동일하게 동작합니다.

혹은 24시간 형식으로 예약 시간을 지정하는 것도 가능합니다.

sudo shutdown -r 22:00

이렇게 설정하는 경우 밤 10시에 재부팅이 진행됩니다.

재부팅을 예약할 때 다른 접속한 사용자들에게 재부팅 사유와 시간을 알리는 것이 가능합니다.

sudo shutdown -r +10 "System update"

서버에 접속한 다른 사용자들에게 다음과 같이 표시됩니다.

재부팅 알림

시간 부분 뒤에 메시지를 입력해주면 됩니다.

마지막으로 예약된 재부팅을 취소할 때는 -c를 사용하면 됩니다.

sudo shutdown -c

shutdown 명령어로 간단하게 재부팅 예약과 취소가 가능합니다.

리눅스의 reboot과 shutdown 명령어로 시스템 재부팅을 진행할 수 있습니다.

shutdown 명령어를 사용하면 쉽게 예약이나 취소하는 것도 가능합니다.

쉽게 곧바로 재부팅을 진행하려면 reboot 명령어를 입력해서 진행하면 됩니다.

[자작NAS] 우분투 서버에 Docker로 Joplin 설치

psychoria — Fri, 18 Feb 2022 17:00:37 +0900

Joplin은 오픈소스 메모 작성(note-taking) 애플리케이션입니다.

Joplin

Joplin을 NAS에 설치하면 PC나 안드로이드, 아이폰 앱 등을 통해 메모 동기화가 가능합니다.

언제든지 메모를 기록하고 바로 찾아볼 수 있게 됩니다.

Docker로 Joplin 서버를 실행하는 방법을 알아보겠습니다.

1. PostgreSQL 데이터베이스 설정

Joplin을 설치하려면 PostgreSQL 데이터베이스를 연동해야 합니다.

PostgreSQL의 설치는 아래 링크를 통해 확인 가능합니다.

2022.02.14 - [IT/NAS] - [자작NAS] 우분투 서버에 Docker로 PostgreSQL 설치

PostgreSQL가 처음 설치되는 경우와 이미 존재하는 경우와 따라서 진행 방법이 달라집니다.

1) 처음 PostgreSQL 컨테이너를 생성하는 경우

처음 PostgreSQL 컨테이너를 생성하는 경우 -e 로 다음 값들을 지정해주면 됩니다.

POSTGRES_USER	joplin
POSTGRES_DB	joplin

전체적인 명령어는 다음과 같습니다.

sudo docker run -d \
--name=postgres \
-e POSTGRES_PASSWORD='pg_password' \
-e POSTGRES_USER='joplin' \
-e POSTGRES_DB='joplin' \
-v /data/postgres/data:/var/lib/postgresql/data \
postgres

명령어의 pg_password 부분은 원하는 비밀번호를 입력하면 됩니다.

기본 계정이 joplin으로 생성되고 같은 이름으로 데이터베이스가 생성됩니다.

2) 기존 PostgreSQL이 존재하는 경우

기존에 사용 중인 PostgreSQL이 존재하는 경우 사용 중인 DB를 연결해서 사용할 수 있습니다.

사용자와 데이터베이스를 직접 생성해주면 됩니다.

sudo docker exec -it postgres psql -U postgres

명령어의 -U postgres는 PostgreSQL의 기본 계정입니다.

DB에 접속한 후 joplin이라는 이름으로 계정과 데이터베이스를 생성해주면 됩니다.

CREATE DATABASE joplin;
CREATE USER joplin WITH ENCRYPTED PASSWORD 'pg_password';
GRANT ALL PRIVILEGES ON DATABASE joplin TO joplin;
\q

명령어의 pg_password 부분은 원하는 비밀번호를 입력해주면 됩니다.

PostgreSQL 버전이 15 이상인 경우 Joplin에서 다음과 같은 에러가 발생할 수 있습니다.

permission denied for schema public

이 에러가 보이는 경우 \q 명령어 전에 다음 명령어를 추가로 입력하면 됩니다.

\c joplin postgres
GRANT ALL ON SCHEMA public TO joplin;

public schema에 권한을 추가로 주면 됩니다.

2. Joplin 컨테이너 생성

Joplin 컨테이너를 생성하기 전에 네트워크를 생성하고 postgres를 추가합니다.

sudo docker network create joplin
sudo docker network connect joplin postgres

이제 Joplin 컨테이너를 생성하면 됩니다.

sudo docker run -d \
--name=joplin \
--network=joplin \
--restart=unless-stopped \
-p 22300:22300 \
-e APP_PORT=22300 \
-e APP_BASE_URL='app_base_url' \
-e DB_CLIENT=pg \
-e POSTGRES_PASSWORD='pg_password' \
-e POSTGRES_DATABASE='joplin' \
-e POSTGRES_USER='joplin' \
-e POSTGRES_PORT=5432 \
-e POSTGRES_HOST='postgres' \
joplin/server

app_base_url에는 Joplin을 위한 URL을 입력해주면 됩니다.

https://나 http://로 시작하는 주소를 입력해주면 됩니다.

DuckDNS 등을 사용 중이라면 서브 도메인을 포함해서 주소(예: https://joplin.xxx.duckdns.org)를 입력해주면 됩니다.

pg_password 부분은 PostgreSQL의 비밀번호(pg_password에 입력했던 값)를 입력해주면 됩니다.

정상적으로 컨테이너가 실행되면 웹 브라우저에서 접속이 가능합니다.

3. Joplin 접속

웹 브라우저에 주소를 입력해서 Joplin에 접속하면 다음과 같이 로그인 페이지가 표시됩니다.

Joplin

기본 계정 정보는 Email이 admin@localhost이고 비밀번호가 admin입니다.

기본 계정은 보안에 취약하기 때문에 로그인을 한 후 바로 계정 정보를 변경해줘야 합니다.

비밀번호 변경

화면의 Change it now 버튼을 클릭해서 계정 정보를 변경해주면 됩니다.

프로필 설정

각 필드에 값들을 입력해주고 Update profile 버튼을 클릭합니다.

Full name	이름
Email	계정으로 사용할 이메일 주소
Password	비밀번호
Repeat password	비밀번호 재입력

이메일 주소를 변경하면 해당 이메일로 확인 메일이 보내진다고 하는데 전송이 안됩니다.

확인 이메일 전송

이 경우 DB에 접속해서 직접 링크를 가져오면 됩니다.

먼저 아래 명령어로 DB에 연결합니다.

sudo docker exec -it postgres psql -U joplin -d joplin

DB에 접속한 후에 아래 명령어로 테이블 목록을 확인합니다.

\dt

다음과 같이 테이블 목록이 표시됩니다.

테이블 목록

아래 명령어로 emails 테이블의 내용을 확인합니다.

select * from emails;

테이블의 body가 [Confirm email]로 시작하는 부분을 보면 링크가 있습니다.

링크 부분을 복사해서 웹 브라우저에 연결하면 계정 변경이 완료됩니다.

계정 확인이 완료되었으면 아래 명령어로 psql을 빠져나오면 됩니다.

\q

이제 새로운 계정과 비밀번호로 접속이 가능해집니다.

기본 계정과 비밀번호는 보안에 취약할 수 있기 때문에 새로운 계정을 입력해서 사용하는 것을 추천합니다.

4. 앱 다운로드 및 동기화 설정

아래 링크에서 PC, 안드로이드, 아이폰 앱 등을 다운로드할 수 있습니다.

Joplin - an open source note taking and to-do application with synchronisation capabilities (joplinapp.org)

Joplin - an open source note taking and to-do application with synchronisation capabilities

Running in prod mode! Joplin is a free, open source note taking and to-do application, which can handle a large number of notes organised into notebooks. The notes are searchable, can be copied, tagged and modified either from the applications directly or

joplinapp.org

원하는 앱을 설치한 후 동기화 설정을 진행합니다.

동기화 설정

각 부분을 입력하고 Check synchronisation configuration 버튼을 눌러서 확인하면 됩니다.

Synchronisation target	Joplin Server (Beta)
Joplin Server URL	Joplin 서버 주소
Joplin Server email	계정(이메일 주소)
Joplin Server password	계정 비밀번호

값들을 입력하고 버튼을 눌렀을 때 Success!가 표시되면 정상적으로 동기화 설정이 완료된 것입니다.

다른 기기에서 동일하게 동기화를 설정하면 메모들이 동기화되어 표시되는 것을 볼 수 있습니다.

이것으로 Joplin 설정이 완료됩니다.

[자작NAS] 우분투 서버에 Docker로 PostgreSQL 설치

psychoria — Mon, 14 Feb 2022 17:00:51 +0900

PostgreSQL은 오픈소스 데이터베이스 시스템입니다.

PostgreSQL

MySQL이나 MS-SQL와 같이 데이터를 저장하고 읽어오는 데 사용됩니다.

PostgreSQL은 데이터베이스 연동을 필요로 하는 다양한 프로그램에 활용할 수 있습니다.

Docker를 통해 PostgreSQL을 설치하는 방법을 알아보도록 하겠습니다.

1. Docker로 PostgreSQL 컨테이너 생성

먼저 데이터를 저장할 디렉토리를 생성합니다.

sudo mkdir -p /data/postgres/data

PostgreSQL 공식 이미지를 사용해서 컨테이너를 생성하면 됩니다.

sudo docker run -d \
--name=postgres \
-e POSTGRES_PASSWORD='mysecretpassword' \
-v /data/postgres/data:/var/lib/postgresql/data \
postgres

명령어의 mysecretpassword 부분은 실제 사용을 원하는 비밀번호를 입력하면 됩니다.

기본 사용자는 postgres로 생성됩니다.

컨테이너를 생성할 때 기본 사용자명이나 기본 데이터베이스 이름을 변경할 수 있습니다.

아래 환경 변수들을 사용해서 기본 값을 지정할 수 있습니다.

POSTGRES_USER	사용자명 설정 (기본값: postgres)
POSTGRES_DB	기본 데이터베이스 이름 설정 (기본값: POSTGRES_USER 값)

둘 다 입력하지 않으면 postgres라는 이름으로 기본 사용자와 데이터베이스가 각각 생성됩니다.

Docker Compose로 설치하려는 경우 docker-compose.yml에 PostgreSQL 관련 내용을 추가합니다.

sudo nano ~/docker-compose.yml

다음 내용을 추가하면 됩니다.

version: "3.9"
services:
  postgres:
    image: postgres
    container_name: postgres
    env_file: .env
    environment:
      - POSTGRES_PASSWORD=${POSTGRESQL_PASSWORD}
    volumes:
      - ${POSTGRESQL_PATH}/data:/var/lib/postgresql/data
    restart: unless-stopped

그리고 POSTGRESQL_PASSWORD와 POSTGRESQL_PATH를 .env에 추가합니다.

sudo nano ~/.env

다음과 같이 추가하고 비밀번호 부분은 원하는 비밀번호로 변경하면 됩니다.

# PostgreSQL
POSTGRESQL_PASSWORD=비밀번호
POSTGRESQL_PATH=/data/postgres

설정이 완료되면 컨테이너를 실행하면 됩니다.

sudo docker compose up -d postgres

도커 CLI나 Docker Compose 중 한 가지 방식을 선택해서 실행하면 됩니다.

2. PostgreSQL 접속

컨테이너의 psql 명령어를 실행해서 PostgreSQL에 접속할 수 있습니다.

sudo docker exec -it postgres psql -U postgres

명령어의 -U postgres 부분은 사용자명을 나타냅니다.

별도의 값(POSTGRES_USER)을 입력했었던 경우 해당 사용자명을 입력하면 됩니다.

데이터베이스 목록을 확인하려면 아래 명령어를 입력하면 됩니다.

\l

기본적으로 POSTGRES_USER와 POSTGRES_DB를 지정하지 않았으면 아래와 같이 데이터베이스가 표시됩니다.

데이터베이스 목록

psql을 빠져나가려면 아래 명령어를 입력하면 됩니다.

\q

이것으로 PostgreSQL이 정상적으로 설치된 것을 확인할 수 있습니다.

3. 계정 비밀번호 변경

계정의 비밀번호를 변경해야 하는 경우 \password 계정명을 입력하면 됩니다.

먼저 DB에 연결하기 위해서 아래와 같이 명령어를 입력합니다.

sudo docker exec -it postgres psql -U postgres

비밀번호를 변경하기 위해 아래와 같이 입력합니다.

\password 계정이름

원하는 비밀번호를 동일하게 2번 입력하면 비밀번호가 변경됩니다.

비밀번호 변경

비밀번호를 변경하고 \q를 입력하면 빠져나오게 됩니다.

이것으로 PostgreSQL 설치가 완료됩니다.

[자작NAS] 우분투 서버에 Docker로 rclone 설치 및 구글 드라이브 연동

psychoria — Tue, 8 Feb 2022 17:00:20 +0900

rclone은 클라우드 스토리지 서비스를 연동하기 위한 툴입니다.

RCLONE

구글 드라이브, 원드라이브, 드롭박스 등의 다양한 클라우드 스토리지 서비스를 지원합니다.

사이트에서 대부분의 스토리지 서비스 연동을 지원하는 것을 확인할 수 있습니다.

우분투 서버에서 Docker를 통해 구글 드라이브 암호화 연동은 아래 링크에서 확인 가능합니다.

2021.12.14 - [IT/NAS] - [자작NAS] 우분투 서버에 Docker로 rclone 설치 및 구글 드라이브 암호화 연동

[자작NAS] 우분투 서버에 Docker로 rclone 설치 및 구글 드라이브 암호화 연동

rclone은 다양한 클라우드 스토리지를 연동해서 사용할 수 있게 해 줍니다. 구글 드라이브(Google Drive), 원드라이브(OneDrive), 드롭박스(Dropbox) 등 유명 클라우드 스토리지를 지원합니다. rclone을 통해

psychoria.tistory.com

여기서는 암호화하지 않고 구글 드라이브를 연동하는 방법을 알아보겠습니다.

1. Docker 컨테이너 생성

암호화 없이 구글 드라이브를 연동하는 경우 기존에 업로드했던 파일들을 그대로 사용할 수 있는 장점이 있습니다.

아래 명령어로 필요한 디렉토리를 생성합니다.

sudo mkdir -p /data/rclone_gdrive/config
sudo mkdir -p /data/rclone_gdrive/log
sudo mkdir -p /data/rclone_gdrive/cache

sudo mkdir -p /data/rclone_gdrive/mergerfs
sudo chmod -R 777 /data/rclone_gdrive/mergerfs

sudo mkdir -p /mnt/rclone_gdrive

먼저 설정이나 캐시 등을 저장할 공간을 생성합니다.

mergerfs는 로컬 디렉토리와 구글 드라이브 디렉토리를 합쳐서 보여주는 역할을 합니다.

그리고 연동을 마친 후 mergerfs에 파일을 옮겨두면 자동으로 구글 드라이브에 업로드가 됩니다.

아래 명령어로 rclone 컨테이너를 실행합니다.

sudo docker run -d \
--name=rclone_gdrive \
--net=bridge \
-v /data/rclone_gdrive/config:/config \
-v /data/rclone_gdrive/log:/log \
-v /data/rclone_gdrive/cache:/cache \
-v /mnt/rclone_gdrive:/data:shared \
-v /data/rclone_gdrive/mergerfs:/local \
--privileged=true \
--device /dev/fuse \
--cap-add=MKNOD \
--cap-add=SYS_ADMIN \
-e PGID=$(id -g $USER) \
-e PUID=$UID \
-e TZ=Asia/Seoul \
-e RCLONE_REMOTE_PATH=gdrive: \
-e RCLONE_MOUNT_USER_OPTS="--allow-non-empty --fast-list --drive-skip-gdocs --poll-interval=15s \
--vfs-cache-mode full --vfs-write-back 5s --bwlimit-file 16M --buffer-size=16M --vfs-read-chunk-size=32M \
--vfs-read-chunk-size-limit 2048M --vfs-cache-max-size 24G --vfs-cache-max-age 336h --vfs-read-ahead 32M \
--dir-cache-time=1000h --timeout 1h" \
-e MFS_USER_OPTS="rw,async_read=false,use_ino,allow_other,nonempty,func.getattr=newest,\
category.action=all,category.create=ff,cache.files=partial,dropcacheonclose=true" \
-e MOVE_LOCAL_ALL=true \
-e KEEP_EMPTY_DIRS=1 \
-e MOVE_LOCAL_SCHEDULE="0 * * * *" \
-e DATE_FORMAT="--iso-8601=seconds" \
-e POOLING_FS=mergerfs \
--restart=unless-stopped \
wiserain/rclone

환경 설정에 추가된 몇 가지 옵션에 대한 설명은 다음과 같습니다.

MOVE_LOCAL_ALL	로컬 디렉토리의 파일을 구글 드라이브로 전부 이동
KEEP_EMPTY_DIRS	로컬 디렉토리의 파일을 전부 이동한 후에도 로컬에 빈 디렉토리를 유지
MOVE_LOCAL_SCHEDULE	로컬 디렉토리의 파일을 구글 드라이브로 이동하는 작업 스케줄 적용 (여기서는 매 정각마다 실행)

설정에 따라 로컬 디렉토리(mergerfs)에 파일을 복사하면 1시간마다 구글 드라이브에 업로드됩니다.

스케줄을 변경하고 싶으면 MOVE_LOCAL_SCHEDULE의 값을 변경하면 됩니다.

crontab 스케줄 작성은 아래 링크에서 가능합니다.

Crontab.guru - The cron schedule expression editor

컨테이너 동작 후 아래 명령어를 실행해서 몇 가지 설정을 진행합니다.

sudo docker exec -it rclone_gdrive rclone_setup

다음으로 구글 드라이브 연동을 위한 설정을 진행합니다.

2. 구글 드라이브 연동

구글 드라이브 연동을 진행합니다.

No remotes found - make a new one
n) New remote
s) Set configuration password
q) Quit config
n/s/q>

새로운 연결을 생성하기 위해 n을 입력합니다.

다음으로 이름을 입력하는데 RCLONE_REMOTE_PATH의 값인 gdrive(gdrive:에서 : 제거)를 입력합니다.

name>

gdrive

다음으로 클라우드 스토리지 서비스를 선택합니다.

Option Storage.
Type of storage to configure.
Enter a string value. Press Enter for the default ("").
Choose a number from below, or type in your own value.
 1 / 1Fichier
   \ "fichier"
 2 / Alias for an existing remote
   \ "alias"
 3 / Amazon Drive
   \ "amazon cloud drive"
 4 / Amazon S3 Compliant Storage Providers including AWS, Alibaba, Ceph, Digital Ocean, Dreamhost, IBM COS, Minio, SeaweedFS, and Tencent COS
   \ "s3"
 5 / Backblaze B2
   \ "b2"
 6 / Better checksums for other remotes
   \ "hasher"
 7 / Box
   \ "box"
 8 / Cache a remote
   \ "cache"
 9 / Citrix Sharefile
   \ "sharefile"
10 / Compress a remote
   \ "compress"
11 / Dropbox
   \ "dropbox"
12 / Encrypt/Decrypt a remote
   \ "crypt"
13 / Enterprise File Fabric
   \ "filefabric"
14 / FTP Connection
   \ "ftp"
15 / Google Cloud Storage (this is not Google Drive)
   \ "google cloud storage"
16 / Google Drive
   \ "drive"
17 / Google Photos
   \ "google photos"
18 / Hadoop distributed file system
   \ "hdfs"
19 / Hubic
   \ "hubic"
20 / In memory object storage system.
   \ "memory"
21 / Jottacloud
   \ "jottacloud"
22 / Koofr
   \ "koofr"
23 / Local Disk
   \ "local"
24 / Mail.ru Cloud
   \ "mailru"
25 / Mega
   \ "mega"
26 / Microsoft Azure Blob Storage
   \ "azureblob"
27 / Microsoft OneDrive
   \ "onedrive"
28 / OpenDrive
   \ "opendrive"
29 / OpenStack Swift (Rackspace Cloud Files, Memset Memstore, OVH)
   \ "swift"
30 / Pcloud
   \ "pcloud"
31 / Put.io
   \ "putio"
32 / QingCloud Object Storage
   \ "qingstor"
33 / SSH/SFTP Connection
   \ "sftp"
34 / Sia Decentralized Cloud
   \ "sia"
35 / Sugarsync
   \ "sugarsync"
36 / Tardigrade Decentralized Cloud Storage
   \ "tardigrade"
37 / Transparently chunk/split large files
   \ "chunker"
38 / Union merges the contents of several upstream fs
   \ "union"
39 / Uptobox
   \ "uptobox"
40 / Webdav
   \ "webdav"
41 / Yandex Disk
   \ "yandex"
42 / Zoho
   \ "zoho"
43 / http Connection
   \ "http"
44 / premiumize.me
   \ "premiumizeme"
45 / seafile
   \ "seafile"
Storage>

여기서는 drive를 입력해서 구글 드라이브를 선택합니다.

drive

서비스가 추가될 때마다 번호가 바뀔 수 있기 때문에 숫자 대신 drive를 입력하는 것이 확실합니다.

다음은 클라이언트 ID를 입력하는 과정입니다.

Option client_id.
Google Application Client Id
Setting your own is recommended.
See https://rclone.org/drive/#making-your-own-client-id for how to create your own.
If you leave this blank, it will use an internal key which is low performance.
Enter a string value. Press Enter for the default ("").
client_id>

클라이언트 ID와 시크릿을 생성하는 방법은 다음과 같습니다.

2019.01.11 - [IT/Tip&Tech] - 구글 드라이브 API(Google Drive API) 활성화 방법

구글 드라이브 API(Google Drive API) 활성화 방법

약간의 월 비용을 지불하고 G Suite 서비스를 사용하면 무제한 구글 드라이브 용량이 제공됩니다. 구글 드라이브 무제한을 활용해서 PLEX와 연동시켜서 사용할 수 있습니다. Plexdrive는 구글 드라이

psychoria.tistory.com

방법이 조금 달라졌지만 참조해서 클라이언트 ID와 시크릿을 생성하면 됩니다.

생성된 클라이언트 ID를 복사한 후 입력합니다.

Client ID

클라이언트 ID는 보통 apps.googleusercontent.com으로 끝나는 구조로 되어 있습니다.

Client ID 입력

다음은 시크릿(Secret)을 입력하는 단계입니다.

Option client_secret.
OAuth Client Secret.
Leave blank normally.
Enter a string value. Press Enter for the default ("").
client_secret>

이 값은 Client ID 값 옆의 연필 모양 아이콘(Edit OAuth client)을 누르면 볼 수 있습니다.

Client secret 입력

공백 등이 포함되지 않았는지 확인한 후에 값을 입력하면 됩니다.

Client secret

파일 접근 권한은 모든 파일에 접근할 수 있도록 설정합니다.

Option scope.
Scope that rclone should use when requesting access from drive.
Enter a string value. Press Enter for the default ("").
Choose a number from below, or type in your own value.
 1 / Full access all files, excluding Application Data Folder.
   \ "drive"
 2 / Read-only access to file metadata and file contents.
   \ "drive.readonly"
   / Access to files created by rclone only.
 3 | These are visible in the drive website.
   | File authorization is revoked when the user deauthorizes the app.
   \ "drive.file"
   / Allows read and write access to the Application Data folder.
 4 | This is not visible in the drive website.
   \ "drive.appfolder"
   / Allows read-only access to file metadata but
 5 | does not allow any access to read or download file content.
   \ "drive.metadata.readonly"
scope>

모든 파일에 대해서 접근 권한을 얻기 위해 drive를 입력합니다.

drive

다음은 루트 폴더를 설정하는 내용인데 그냥 엔터를 눌러서 구글 드라이브의 루트를 사용합니다.

Option root_folder_id.
ID of the root folder.
Leave blank normally.
Fill in to access "Computers" folders (see docs), or for rclone to use
a non root folder as its starting point.
Enter a string value. Press Enter for the default ("").
root_folder_id>

엔터 입력

아무것도 입력하지 않고 엔터를 입력하면 됩니다.

다음은 Service Account Credentials JSON 설정으로 동일하게 바로 엔터를 눌러서 넘어가면 됩니다.

Option service_account_file.
Service Account Credentials JSON file path.
Leave blank normally.
Needed only if you want use SA instead of interactive login.
Leading `~` will be expanded in the file name as will environment variables such as `${RCLONE_CONFIG_DIR}`.
Enter a string value. Press Enter for the default ("").
service_account_file>

엔터 입력

상세 설정은 n을 눌러서 스킵하면 됩니다.

Edit advanced config?
y) Yes
n) No (default)
y/n>

다음은 자동 설정 진행 여부입니다.

Use auto config?
 * Say Y if not sure
 * Say N if you are working on a remote or headless machine

y) Yes (default)
n) No
y/n>

일반적으로 SSH 연결 상태에서 작업을 진행하기 때문에 n을 입력합니다.

화면에 링크가 표시되는데 이 링크를 복사해서 웹 브라우저 주소창에 입력합니다.

Option config_verification_code.
Verification code
Go to this URL, authenticate then paste the code here.
https://accounts.google.com/o/oauth2/auth
Enter a string value. Press Enter for the default ("").
config_verification_code>

권한을 요청하는 창이 표시되면 Allow를 클릭합니다.

Allow

다음으로 화면에 표시되는 코드를 복사해서 config_verification_code에 입력하면 됩니다.

코드 복사 및 붙여넣기

다음으로 팀 드라이브 설정 여부입니다.

Configure this as a Shared Drive (Team Drive)?

y) Yes
n) No (default)
y/n>

개인 드라이브를 연동하기 위해 n을 입력합니다.

모든 것이 제대로 입력되었으면 설정을 완료합니다.

y) Yes this is OK (default)
e) Edit this remote
d) Delete this remote
y/e/d>

여기서 y를 누르면 설정이 완료됩니다.

추가한 gdrive가 목록에 표시된 것을 확인할 수 있습니다.

Current remotes:

Name                 Type
====                 ====
gdrive               drive

e) Edit existing remote
n) New remote
d) Delete remote
r) Rename remote
c) Copy remote
s) Set configuration password
q) Quit config
e/n/d/r/c/s/q>

설정을 완료했으면 q를 입력해서 종료합니다.

이것으로 구글 드라이브 연동이 완료됩니다.

3. 드라이브 연동 확인

설정이 완료된 이후에 구글 드라이브가 /mnt/rclone_gdrive에 연동된 것이 확인 가능합니다.

파일의 수에 따라 연동 완료까지는 시간이 걸릴 수 있습니다.

cd /mnt/rclone_gdrive/

편리하게 로컬 디렉토리처럼 구글 드라이브의 파일과 폴더들을 볼 수 있습니다.

로컬에 있는 파일을 구글 드라이브에 업로드하는 방법은 다음과 같습니다.

먼저 /data/rclone_gdrive/mergerfs에 디렉토리에 파일들을 추가합니다.

/data/rclone_gdrive/mergerfs/Document와 같이 추가하면 /mnt/rclone_gdrive에도 동일하게 보입니다.

스케줄러가 매 정각에 파일들을 구글 드라이브로 전송하고 로컬의 파일을 삭제합니다.

편리하게 로컬 파일들을 구글 드라이브로 이동할 수 있습니다.

이것으로 구글 드라이브를 rclone으로 연동하는 작업이 완료됩니다.

[자작NAS] 우분투 서버에 Docker로 rclone 설치 및 구글 드라이브 암호화 연동

psychoria — Tue, 14 Dec 2021 17:00:29 +0900

rclone은 다양한 클라우드 스토리지를 연동해서 사용할 수 있게 해 줍니다.

RCLONE

구글 드라이브(Google Drive), 원드라이브(OneDrive), 드롭박스(Dropbox) 등 유명 클라우드 스토리지를 지원합니다.

rclone을 통해 클라우드 스토리지를 연동하면 로컬 디렉토리처럼 접근이 가능합니다.

특히 무제한 구글 드라이브를 연동하면 무제한의 공간을 활용하는 것이 가능합니다.

또한 암호화를 지원하기 때문에 암호화된 파일명과 디렉토리명은 물론이고 내용도 암호화해서 보관할 수 있습니다.

암호화를 하지 않고 구글 드라이브를 연동하는 방법은 아래 링크를 참조하면 됩니다.

2022.02.08 - [IT/NAS] - [자작NAS] 우분투 서버에 Docker로 rclone 설치 및 구글 드라이브 연동

[자작NAS] 우분투 서버에 Docker로 rclone 설치 및 구글 드라이브 연동

rclone은 클라우드 스토리지 서비스를 연동하기 위한 툴입니다. 구글 드라이브, 원드라이브, 드롭박스 등의 다양한 클라우드 스토리지 서비스를 지원합니다. 사이트에서 대부분의 스토리지 서비

psychoria.tistory.com

우분투 서버에 Docker를 통해 rclone을 설치하고 구글 드라이브를 암호화 연동하는 방법을 알아보겠습니다.

1. Docker 컨테이너 생성

먼저 rclone을 통해 구글 드라이브를 암호화해서 연결하는 경우 기존 암호화되지 않은 데이터는 읽지 못합니다.

그렇기 때문에 rclone 연동 이후에 모든 데이터를 새로 rclone을 통해 올려야 합니다.

기존에 암호화되지 않은 데이터를 그대로 사용하고 싶으면 암호화없이 구글 드라이브를 연동해야 합니다.

여기서는 암호화해서 구글 드라이브를 연동하는 방법을 설명합니다.

먼저 아래 명령어로 rclone에 필요한 디렉토리들을 생성합니다.

sudo mkdir -p /data/rclone_gdrive/config
sudo mkdir -p /data/rclone_gdrive/log
sudo mkdir -p /data/rclone_gdrive/cache

sudo mkdir -p /data/rclone_gdrive/mergerfs
sudo chmod -R 777 /data/rclone_gdrive/mergerfs

sudo mkdir -p /mnt/rclone_gdrive

처음 세 줄은 설정과 로그, 캐시 등을 저장하는 공간입니다.

그리고 mergerfs를 연동하기 위해 그 다음의 두 줄을 실행하면 됩니다.

마지막으로 구글 드라이브를 디렉토리에 연동하기 위한 디렉토리를 생성합니다.

mergerfs를 연동하면 해당 디렉토리에 있는 데이터를 구글 드라이브에 자동으로 업로드할 수 있습니다.

이제 다음 명령어로 컨테이너를 실행합니다.

sudo docker run -d \
--name=rclone_gdrive \
--net=bridge \
-v /data/rclone_gdrive/config:/config \
-v /data/rclone_gdrive/log:/log \
-v /data/rclone_gdrive/cache:/cache \
-v /mnt/rclone_gdrive:/data:shared \
-v /data/rclone_gdrive/mergerfs:/local \
--privileged=true \
--device /dev/fuse \
--cap-add=MKNOD \
--cap-add=SYS_ADMIN \
-e PGID=$(id -g $USER) \
-e PUID=$UID \
-e TZ=Asia/Seoul \
-e RCLONE_REMOTE_PATH=gdrive_crypt: \
-e RCLONE_MOUNT_USER_OPTS="--allow-non-empty --fast-list --drive-skip-gdocs --poll-interval=15s \
--vfs-cache-mode full --vfs-write-back 5s --bwlimit-file 16M --buffer-size=16M --vfs-read-chunk-size=32M \
--vfs-read-chunk-size-limit 2048M --vfs-cache-max-size 24G --vfs-cache-max-age 336h --vfs-read-ahead 32M \
--dir-cache-time=1000h --timeout 1h" \
-e MFS_USER_OPTS="rw,async_read=false,use_ino,allow_other,nonempty,func.getattr=newest,\
category.action=all,category.create=ff,cache.files=partial,dropcacheonclose=true" \
-e MOVE_LOCAL_ALL=true \
-e KEEP_EMPTY_DIRS=1 \
-e MOVE_LOCAL_SCHEDULE="0 * * * *" \
-e DATE_FORMAT="--iso-8601=seconds" \
-e POOLING_FS=mergerfs \
--restart=unless-stopped \
wiserain/rclone

환경 설정들은 다음과 같습니다.

MOVE_LOCAL_ALL	로컬 디렉토리의 파일을 구글 드라이브로 전부 이동
KEEP_EMPTY_DIRS	로컬 디렉토리의 파일을 전부 이동한 후에도 로컬에 빈 디렉토리를 유지
MOVE_LOCAL_SCHEDULE	로컬 디렉토리의 파일을 구글 드라이브로 이동하는 작업 스케줄 적용 (여기서는 매 정각마다 실행)

여기서는 컨테이너의 /local에 /data/rclone_gdrive/mergerfs를 연결했습니다.

이제 mergerfs 디렉터리에 파일을 복사하면 매 정각에 모든 파일을 구글 드라이브로 이동합니다.

로컬 디렉토리에 파일을 옮겨두면 지정된 스케줄에 따라 파일이 자동으로 전송되기 때문에 편리합니다.

일정 날짜 이후의 파일만 옮기려면 MOVE_LOCAL_ALL 대신 MOVE_LOCAL_AFTER_DAYS를 추가하면 됩니다.

컨테이너가 동작하면 아래 명령어를 실행합니다.

sudo docker exec -it rclone_gdrive rclone_setup

구글 드라이브를 연동하기 위해 몇 가지 사항을 입력해야 합니다.

2. 암호화/복호화 연동

다음과 같은 메뉴가 표시됩니다.

No remotes found - make a new one
n) New remote
s) Set configuration password
q) Quit config
n/s/q>

새로운 연결을 만들기 위해서 n을 입력합니다.

다음으로 이름을 입력하면 됩니다.

name>

gdrive_crypt

컨테이너 생성 시 RCLONE_REMOTE_PATH에 입력한 값에서 콜론(:)을 빼고 입력하면 됩니다.

여기서는 gdrive_crypt를 입력했습니다.

다음으로 연동할 클라우드 스토리지 서비스를 선택합니다.

Option Storage.
Type of storage to configure.
Enter a string value. Press Enter for the default ("").
Choose a number from below, or type in your own value.
 1 / 1Fichier
   \ "fichier"
 2 / Alias for an existing remote
   \ "alias"
 3 / Amazon Drive
   \ "amazon cloud drive"
 4 / Amazon S3 Compliant Storage Providers including AWS, Alibaba, Ceph, Digital Ocean, Dreamhost, IBM COS, Minio, SeaweedFS, and Tencent COS
   \ "s3"
 5 / Backblaze B2
   \ "b2"
 6 / Better checksums for other remotes
   \ "hasher"
 7 / Box
   \ "box"
 8 / Cache a remote
   \ "cache"
 9 / Citrix Sharefile
   \ "sharefile"
10 / Compress a remote
   \ "compress"
11 / Dropbox
   \ "dropbox"
12 / Encrypt/Decrypt a remote
   \ "crypt"
13 / Enterprise File Fabric
   \ "filefabric"
14 / FTP Connection
   \ "ftp"
15 / Google Cloud Storage (this is not Google Drive)
   \ "google cloud storage"
16 / Google Drive
   \ "drive"
17 / Google Photos
   \ "google photos"
18 / Hadoop distributed file system
   \ "hdfs"
19 / Hubic
   \ "hubic"
20 / In memory object storage system.
   \ "memory"
21 / Jottacloud
   \ "jottacloud"
22 / Koofr
   \ "koofr"
23 / Local Disk
   \ "local"
24 / Mail.ru Cloud
   \ "mailru"
25 / Mega
   \ "mega"
26 / Microsoft Azure Blob Storage
   \ "azureblob"
27 / Microsoft OneDrive
   \ "onedrive"
28 / OpenDrive
   \ "opendrive"
29 / OpenStack Swift (Rackspace Cloud Files, Memset Memstore, OVH)
   \ "swift"
30 / Pcloud
   \ "pcloud"
31 / Put.io
   \ "putio"
32 / QingCloud Object Storage
   \ "qingstor"
33 / SSH/SFTP Connection
   \ "sftp"
34 / Sia Decentralized Cloud
   \ "sia"
35 / Sugarsync
   \ "sugarsync"
36 / Tardigrade Decentralized Cloud Storage
   \ "tardigrade"
37 / Transparently chunk/split large files
   \ "chunker"
38 / Union merges the contents of several upstream fs
   \ "union"
39 / Uptobox
   \ "uptobox"
40 / Webdav
   \ "webdav"
41 / Yandex Disk
   \ "yandex"
42 / Zoho
   \ "zoho"
43 / http Connection
   \ "http"
44 / premiumize.me
   \ "premiumizeme"
45 / seafile
   \ "seafile"
Storage>

여기서는 먼저 암호화/복호화 처리를 위해 crypt를 입력합니다.

crypt

다음으로 이후에 만들 구글 드라이브 연동 시 사용할 이름을 지정합니다.

Option remote.
Remote to encrypt/decrypt.
Normally should contain a ':' and a path, e.g. "myremote:path/to/dir",
"myremote:bucket" or maybe "myremote:" (not recommended).
Enter a string value. Press Enter for the default ("").
remote>

여기에 gdrive: (콜론 포함)을 입력합니다.

여기서 입력한 이름은 이후에 실제 구글 드라이브를 연동할 때 사용되기 때문에 기억해둬야 합니다.

gdrive:

다음으로 파일 이름을 암호화할 것인지 여부를 선택합니다.

Option filename_encryption.
How to encrypt the filenames.
Enter a string value. Press Enter for the default ("standard").
Choose a number from below, or type in your own value.
   / Encrypt the filenames.
 1 | See the docs for the details.
   \ "standard"
 2 / Very simple filename obfuscation.
   \ "obfuscate"
   / Don't encrypt the file names.
 3 | Adds a ".bin" extension only.
   \ "off"
filename_encryption>

파일 이름도 암호화를 하기 위해 standard를 입력합니다.

standard

다음으로 디렉토리 이름을 암호화할 것인지 선택합니다.

Option directory_name_encryption.
Option to either encrypt directory names or leave them intact.
NB If filename_encryption is "off" then this option will do nothing.
Enter a boolean value (true or false). Press Enter for the default ("true").
Choose a number from below, or type in your own value.
 1 / Encrypt directory names.
   \ "true"
 2 / Don't encrypt directory names, leave them intact.
   \ "false"
directory_name_encryption>

디렉토리 이름도 암호화를 하려면 true를 입력하면 됩니다.

true

다음으로 암호화에 사용할 패스워드를 설정합니다.

Option password.
Password or pass phrase for encryption.
Choose an alternative below.
y) Yes type in my own password
g) Generate random password
y/g>

패스워드를 직접 입력하기 위해 y를 입력합니다.

이제 원하는 비밀번호를 동일하게 두 번 입력하면 됩니다.

Enter the password:
password:
Confirm the password:
password:

암호 입력

다음으로 암호화를 위한 솔트를 사용할지 여부를 선택합니다.

솔트는 암호를 해독하기 어렵게 만들기 위해서 추가로 사용하는 값입니다.

Option password2.
Password or pass phrase for salt.
Optional but recommended.
Should be different to the previous password.
Choose an alternative below. Press Enter for the default (n).
y) Yes type in my own password
g) Generate random password
n) No leave this optional password blank (default)
y/g/n>

여기도 직접 원하는 솔트 값을 사용하기 위해 y를 입력합니다.

만약 솔트를 사용하지 않을 것이라면 입력하지 않고 그냥 엔터를 입력합니다.

y를 선택했으면 비밀번호 입력과 동일하게 같은 값을 두 번 입력해줍니다.

Enter the password:
password:
Confirm the password:
password:

솔트 입력

비밀번호와 솔트는 반드시 기억해둬야 새 서버에 rclone 설치 시 동일하게 입력해서 구글 드라이브를 연동할 수 있습니다.

다음으로 상세 설정을 수정할 것인가를 물어봅니다.

Edit advanced config?
y) Yes
n) No (default)
y/n>

여기서는 n을 눌러서 스킵하면 됩니다.

지금까지 입력했던 내용들을 확인할 수 있습니다.

이름은 gdrive_crypt으로 설정했고 crypt 타입으로 이후에 생성할 gdrive라는 이름의 연결을 암호화합니다.

remote로 설정된 gdrive라는 이름은 이후에 구글 드라이브 연동 시 동일하게 입력해야 합니다.

마지막으로 확인을 하고 y를 입력해서 설정을 적용합니다.

y) Yes this is OK (default)
e) Edit this remote
d) Delete this remote
y/e/d>

이것으로 암호화/복호화 연동이 완료됩니다.

3. 구글 드라이브 연동

암호화를 위한 연동을 마치고 구글 드라이브 연동을 계속할 수 있습니다.

e) Edit existing remote
n) New remote
d) Delete remote
r) Rename remote
c) Copy remote
s) Set configuration password
q) Quit config
e/n/d/r/c/s/q>

처음보다 메뉴가 늘어났지만 동일하게 n을 입력합니다.

다음으로 이름을 입력하는데 위에서 입력했던 gdrive를 입력(gdrive:에서 :제거)해주면 됩니다.

name>

gdrive

다음으로 연동할 클라우드 스토리지 서비스를 선택합니다.

Option Storage.
Type of storage to configure.
Enter a string value. Press Enter for the default ("").
Choose a number from below, or type in your own value.
 1 / 1Fichier
   \ "fichier"
 2 / Alias for an existing remote
   \ "alias"
 3 / Amazon Drive
   \ "amazon cloud drive"
 4 / Amazon S3 Compliant Storage Providers including AWS, Alibaba, Ceph, Digital Ocean, Dreamhost, IBM COS, Minio, SeaweedFS, and Tencent COS
   \ "s3"
 5 / Backblaze B2
   \ "b2"
 6 / Better checksums for other remotes
   \ "hasher"
 7 / Box
   \ "box"
 8 / Cache a remote
   \ "cache"
 9 / Citrix Sharefile
   \ "sharefile"
10 / Compress a remote
   \ "compress"
11 / Dropbox
   \ "dropbox"
12 / Encrypt/Decrypt a remote
   \ "crypt"
13 / Enterprise File Fabric
   \ "filefabric"
14 / FTP Connection
   \ "ftp"
15 / Google Cloud Storage (this is not Google Drive)
   \ "google cloud storage"
16 / Google Drive
   \ "drive"
17 / Google Photos
   \ "google photos"
18 / Hadoop distributed file system
   \ "hdfs"
19 / Hubic
   \ "hubic"
20 / In memory object storage system.
   \ "memory"
21 / Jottacloud
   \ "jottacloud"
22 / Koofr
   \ "koofr"
23 / Local Disk
   \ "local"
24 / Mail.ru Cloud
   \ "mailru"
25 / Mega
   \ "mega"
26 / Microsoft Azure Blob Storage
   \ "azureblob"
27 / Microsoft OneDrive
   \ "onedrive"
28 / OpenDrive
   \ "opendrive"
29 / OpenStack Swift (Rackspace Cloud Files, Memset Memstore, OVH)
   \ "swift"
30 / Pcloud
   \ "pcloud"
31 / Put.io
   \ "putio"
32 / QingCloud Object Storage
   \ "qingstor"
33 / SSH/SFTP Connection
   \ "sftp"
34 / Sia Decentralized Cloud
   \ "sia"
35 / Sugarsync
   \ "sugarsync"
36 / Tardigrade Decentralized Cloud Storage
   \ "tardigrade"
37 / Transparently chunk/split large files
   \ "chunker"
38 / Union merges the contents of several upstream fs
   \ "union"
39 / Uptobox
   \ "uptobox"
40 / Webdav
   \ "webdav"
41 / Yandex Disk
   \ "yandex"
42 / Zoho
   \ "zoho"
43 / http Connection
   \ "http"
44 / premiumize.me
   \ "premiumizeme"
45 / seafile
   \ "seafile"
Storage>

여기서는 drive를 입력해서 구글 드라이브를 연동합니다.

drive

다음으로 클라이언트 ID를 입력해야 합니다.

Option client_id.
Google Application Client Id
Setting your own is recommended.
See https://rclone.org/drive/#making-your-own-client-id for how to create your own.
If you leave this blank, it will use an internal key which is low performance.
Enter a string value. Press Enter for the default ("").
client_id>

구글 드라이브 연동을 위한 클라이언트 ID와 시크릿을 생성하기 위한 방법은 아래 링크를 참조하면 됩니다.

2019.01.11 - [IT/Tip&Tech] - 구글 드라이브 API(Google Drive API) 활성화 방법

구글 드라이브 API(Google Drive API) 활성화 방법

psychoria.tistory.com

클라이언트 ID를 복사해서 입력합니다.

Client ID

보통 .apps.googleusercontent.com 형태로 끝나는 값으로 이것을 입력하면 됩니다.

Client ID 입력

다음으로 Secret을 입력하면 됩니다.

Option client_secret.
OAuth Client Secret.
Leave blank normally.
Enter a string value. Press Enter for the default ("").
client_secret>

이 값은 Client ID 값 옆의 연필 모양 아이콘(Edit OAuth client)을 누르면 볼 수 있습니다.

Client secret 입력

공백 등이 포함되지 않도록 주의해서 값을 복사한 후 입력하면 됩니다.

Client secret

다음으로 모든 파일을 접근할 수 있는 권한을 설정합니다.

Option scope.
Scope that rclone should use when requesting access from drive.
Enter a string value. Press Enter for the default ("").
Choose a number from below, or type in your own value.
 1 / Full access all files, excluding Application Data Folder.
   \ "drive"
 2 / Read-only access to file metadata and file contents.
   \ "drive.readonly"
   / Access to files created by rclone only.
 3 | These are visible in the drive website.
   | File authorization is revoked when the user deauthorizes the app.
   \ "drive.file"
   / Allows read and write access to the Application Data folder.
 4 | This is not visible in the drive website.
   \ "drive.appfolder"
   / Allows read-only access to file metadata but
 5 | does not allow any access to read or download file content.
   \ "drive.metadata.readonly"
scope>

모든 파일에 대해서 접근 권한을 얻기 위해 drive를 입력합니다.

drive

다음은 루트 폴더를 설정하는 설정으로 그냥 엔터를 누르면 구글 드라이브의 루트를 사용합니다.

Option root_folder_id.
ID of the root folder.
Leave blank normally.
Fill in to access "Computers" folders (see docs), or for rclone to use
a non root folder as its starting point.
Enter a string value. Press Enter for the default ("").
root_folder_id>

엔터 입력

아무것도 입력하지 않고 엔터를 입력하면 됩니다.

다음은 Service Account Credentials JSON 경로 설정입니다.

Option service_account_file.
Service Account Credentials JSON file path.
Leave blank normally.
Needed only if you want use SA instead of interactive login.
Leading `~` will be expanded in the file name as will environment variables such as `${RCLONE_CONFIG_DIR}`.
Enter a string value. Press Enter for the default ("").
service_account_file>

이 부분은 아무 입력없이 바로 엔터를 입력해서 넘어가면 됩니다.

엔터 입력

마지막으로 상세 설정을 수정할 것인지 물어봅니다.

Edit advanced config?
y) Yes
n) No (default)
y/n>

여기서는 n을 눌러서 다음으로 진행하면 됩니다.

자동 설정을 사용할 것인지 설정합니다.

Use auto config?
 * Say Y if not sure
 * Say N if you are working on a remote or headless machine

y) Yes (default)
n) No
y/n>

일반적으로 서버에 SSH 연결을 한 후 설정하기 때문에 여기서는 n을 눌러서 진행합니다.

여기서 링크가 하나 표시되는데 이 링크를 웹 브라우저에서 열어줍니다.

Option config_verification_code.
Verification code
Go to this URL, authenticate then paste the code here.
https://accounts.google.com/o/oauth2/auth
Enter a string value. Press Enter for the default ("").
config_verification_code>

웹 브라우저에서 로그인을 하고 연결을 허용하기 위해 Allow를 클릭합니다.

Allow

화면에 코드가 표시되는데 이 코드를 입력해주면 됩니다.

코드 복사 및 붙여넣기

다음으로 팀 드라이브를 설정할 것인지 물어봅니다.

Configure this as a Shared Drive (Team Drive)?

y) Yes
n) No (default)
y/n>

개인 드라이브를 사용하기 위해 n을 입력합니다.

마지막으로 설정을 확인하고 제대로 입력이 되었으면 y를 눌러서 저장합니다.

y) Yes this is OK (default)
e) Edit this remote
d) Delete this remote
y/e/d>

마지막으로 추가된 리모트들을 확인할 수 있습니다.

Current remotes:

Name                 Type
====                 ====
gdrive               drive
gdrive_crypt         crypt

e) Edit existing remote
n) New remote
d) Delete remote
r) Rename remote
c) Copy remote
s) Set configuration password
q) Quit config
e/n/d/r/c/s/q>

설정을 확인하고 q를 눌러서 종료합니다.

이것으로 설정이 완료됩니다.

4. 드라이브 연동 확인

설정이 정상적으로 되면 /mnt/rclone_gdrive/ 이동하면 구글 드라이브의 파일을 볼 수 있습니다.

cd /mnt/rclone_gdrive/

처음 연동을 했을 때는 아무런 파일이 표시되지 않습니다.

mkdir 등으로 디렉토리를 만들어보면 리눅스에서는 암호화가 안된 디렉토리 명으로 볼 수 있습니다.

구글 드라이브에서는 디렉토리 및 파일 암호화 설정 여부에 따라 암호화된 이름으로 표시가 됩니다.

다음으로 /data/rclone_gdrive/mergerfs에 디렉토리와 파일들을 추가합니다.

스케줄러가 매 정각에 파일들을 구글드라이브로 전송하고 파일을 자동으로 삭제합니다.

이것으로 rclone으로 구글 드라이브 암호화 연동이 완료됩니다.

[Java] 자바 HashSet 사용 방법

psychoria — Sat, 20 Nov 2021 17:00:55 +0900

자바의 HashSet은 Set 인터페이스를 구현한 클래스입니다.

HashSet은 중복된 값을 허용하지 않으며 List 등과는 다르게 입력한 순서가 보장되지 않습니다.

HashSet의 특징을 정리하면 다음과 같습니다.

중복된 값을 허용하지 않음
입력한 순서가 보장되지 않음
null을 값으로 허용

중복된 값을 허용하지 않는 특징이 있기 때문에 값의 존재 유무를 파악할 때 사용할 수 있습니다.

HashSet의 내부 코드를 보면 HashMap을 사용해서 구현이 되어 있는 것을 볼 수 있습니다.

자바의 HashSet을 활용하는 방법을 알아보겠습니다.

1. HashSet 생성

자바에서 HashSet을 사용하려면 아래 구문을 추가해야 합니다.

import java.util.HashSet;

HashSet을 생성하는 방법은 다음과 같습니다.

HashSet<String> colors1 = new HashSet<String>(); // 타입 지정
HashSet<String> colors2 = new HashSet<>(); // 타입 생략 가능
HashSet<String> colors3 = new HashSet<>(10); // 초기 용량(Capacity) 설정
HashSet<String> colors4 = new HashSet<>(colors1); // 다른 Collection값으로 초기화
HashSet<String> colors5 = new HashSet<>(Arrays.asList("Blue", "Black", "White")); // Arrays.asList()
HashSet<String> colors6 = new HashSet<>(){{
    add("Blue");
    add("Black");
    add("White");
}};

기본적으로 빈 HashSet을 생성할 때는 두 번째 방법을 주로 사용합니다.

그리고 원하는 값들을 추가하면서 생성하는 것도 가능합니다.

상황에 맞는 방법을 사용해서 HashSet을 생성하면 됩니다.

2. HashSet 엘레멘트 추가

HashSet에 값을 추가하고 싶을 때는 add() 메소드를 호출하면 됩니다.

import java.util.HashSet;

public class Main {
    public static void main(String[] args) {
        HashSet<String> colors = new HashSet<>();
        colors.add("Black");
        colors.add("White");
        colors.add("Green");
        colors.add("Red");

        System.out.println(colors);
    }
}

HashSet은 입력된 순서가 보장되지 않기 때문에 특정 위치에 값을 추가하거나 할 수는 없습니다.

결과

출력된 값의 순서를 보면 입력한 순서와 상관없이 출력되는 것을 알 수 있습니다.

다른 컬렉션의 값들을 한 번에 입력할 때는 addAll()을 사용합니다.

import java.util.Arrays;
import java.util.HashSet;

public class Main {
    public static void main(String[] args) {
        HashSet<String> colors = new HashSet<>();
        colors.add("Black");
        colors.add("White");
        colors.add("Green");

        HashSet<String> otherColors = new HashSet<>(Arrays.asList("Black", "Yellow", "Purple"));
        colors.addAll(otherColors);

        System.out.println(colors);
    }
}

값들을 입력할 때 중복되는 값은 제거가 되기 때문에 중복이 발생하지 않습니다.

결과

Black이 중복되지만 한 번만 표시되는 것을 확인할 수 있습니다.

3. HashSet 엘레멘트 삭제

HashSet에 추가된 값을 삭제할 때는 remove(), removeAll(), removeIf()를 호출하면 됩니다.

import java.util.Arrays;
import java.util.HashSet;

public class Main {
    public static void main(String[] args) {
        HashSet<String> colors = new HashSet<>();
        colors.add("Black");
        colors.add("White");
        colors.add("Green");
        colors.add("Blue");
        colors.add("Red");
        colors.add("Purple");

        colors.remove("Red");
        System.out.println(colors); // [White, Blue, Purple, Black, Green]

        colors.removeIf(color -> color.startsWith("B"));
        System.out.println(colors); // [White, Purple, Green]

        colors.removeAll(Arrays.asList("White", "Green"));
        System.out.println(colors); // [Purple]

        colors.clear();
        System.out.println(colors); // []
    }
}

먼저, remove()는 특정 값을 삭제할 때 사용합니다.

그리고 조건을 적용해서 여러 값들을 삭제할 때는 removeIf() 메소드를 사용하면 됩니다.

예제의 코드는 B로 시작하는 색들을 지우는 코드입니다.

마지막으로 removeAll()은 다른 컬렉션에 있는 값들을 입력 값으로 받아서 해당 값들을 전부 찾아서 지웁니다.

remove()는 값이 지워지면 true를 리턴하기 때문에 삭제와 동시에 값이 존재했었는지 여부를 알 수 있습니다.

HashSet 안의 모든 값을 지우고 싶을 때는 clear() 메소드를 호출하면 됩니다.

4. HashSet 전체 값 확인

HashSet의 전체 값을 확인하는 방법은 잘 사용되는 방법은 아닙니다.

HashSet을 사용하는 이유는 컬렉션 내에 찾고자 하는 값이 존재하는지 여부를 확인하기 위해서입니다.

import java.util.HashSet;
import java.util.Iterator;

public class Main {
    public static void main(String[] args) {
        HashSet<String> colors = new HashSet<>();
        colors.add("Black");
        colors.add("White");
        colors.add("Green");
        colors.add("Red");

        // for-each loop
        for (String color : colors) {
            System.out.print(color + "  ");
        }
        System.out.println();

        // using iterator
        Iterator<String> iterator = colors.iterator();
        while (iterator.hasNext()) {
            System.out.print(iterator.next() + "  ");
        }
        System.out.println();
    }
}

for를 사용하는 방법과 iterator를 사용하는 방법을 고려해 볼 수 있습니다.

5. 값 존재 유무 확인

HashSet은 컬렉션 내에 값이 존재하는지 여부를 확인하는데 최적화된 자료 구조입니다.

contains() 메소드를 호출해서 값이 존재하는지 여부를 빠르게 확인할 수 있습니다.

import java.util.HashSet;

public class Main {
    public static void main(String[] args) {
        HashSet<String> colors = new HashSet<>();
        colors.add("Black");
        colors.add("White");
        colors.add("Green");
        colors.add("Red");

        System.out.println(colors.contains("Green")); // true
        System.out.println(colors.contains("Purple")); // false
    }
}

값이 존재하는 경우 true를 리턴하며 없는 경우 false를 리턴합니다.

값이 존재하는지 유무를 파악하는 것이 중요하다면 HashSet을 적극 활용하면 됩니다.

빠른 윈도우(Windows) 파일 검색을 위한 Everything

psychoria — Thu, 27 May 2021 00:00:32 +0900

Everything은 윈도우의 기본 검색 기본 기능보다 빠르게 파일이나 폴더를 검색할 수 있는 툴입니다.

윈도우의 기본 검색 기능은 상황에 따라 상당한 시간이 걸립니다.

윈도우 검색

Everything을 사용하면 기본 검색 기능보다 빠르게 파일이나 폴더를 찾을 수 있습니다.

Everything을 설치하고 사용하는 방법을 알아보겠습니다.

Everything은 아래 링크에서 다운로드가 가능합니다.

voidtools

voidtools

Everything 실시간 파일/폴더 검색 작은 설치파일 깔끔하고 단순한 UI 빠른 파일 색인 빠른 검색 최저 자원 사용 쉬운 파일 공유 실시간 갱신 등등... Everything 1.4.1.1005 다운로드 32비트 설치파일 64비

voidtools.com

Everything 설치 파일을 실행하고 언어를 선택한 후에 진행하면 됩니다.

사용권 계약

화면의 sudo mv /data/transmission/downloads/complete/ 버튼을 누르고 설치를 진행합니다.

설치 위치 선택

설치 경로는 기본 경로를 사용하면 됩니다.

설치 옵션 선택

설정 데이터의 위치와 NTFS 색인 사용 방식을 선택할 수 있습니다.

설정 및 데이터 위치는 기본 값인 %APPDATA%\Everything을 사용하면 됩니다.

NTFS 색인 사용은 Everything 서비스 설치나 관리자 권한으로 실행 중 하나를 선택하면 됩니다.

Everything에서 추천하는 방법은 Everything 서비스 설치입니다.

부가 설치 옵션

부가적인 설치 옵션은 기본값을 사용하면 됩니다.

빠른실행을 사용하고 있다면 빠른실행 바로가기 생성을 추가해도 됩니다.

부가적인 설치 옵션을 선택한 후 설치를 누르면 간단하게 설치가 완료됩니다.

설치 이후에 Everything을 실행하고 검색을 원하는 키워드를 입력하면 됩니다.

Everything 검색

입력하자마자 곧바로 검색 결과를 보여줄 정도로 빠른 속도를 보여줍니다.

윈도우의 기본 검색보다 훨씬 빠른 것을 확인할 수 있습니다.

Everything을 사용하면 파일 위치를 기억하지 못해도 빠르게 파일을 찾을 수 있게 됩니다.