Linux

Cek Expired Date SSL Website dengan OpenSSL CLI

Last Updated on 31 July 2021 By tommy Leave a Comment

Tanpa perlu menggunakan website pihak ketiga untuk mengecek kapan SSL situs anda expired, bisa menggunakan openssl client yang sudah tersedia di Linux.

Contoh kita akan cek kapan SSL jaranguda.com expired

echo | openssl s_client -servername jaranguda.com -connect jaranguda.com:443 2>/dev/null | openssl x509 -noout -enddate
# output
notAfter=Jun 27 23:59:59 2022 GMT

dari output diatas bisa kita ketahui kalo SSL jaranguda.com akan expired pada 27 Juni 2022.

Keterangan dari perintah diatas:
echo di depan, agar openssl langsung exit begitu command openssl selesai
s_client : konek ke domain/ip sebagai client
-noout : tidak perlu menampilkan informasi sertifikat
-enddate: tanggal expired SSL.

Untuk melihat perbedaanya coba hapus echo dibagian paling depan

openssl s_client -servername jaranguda.com -connect jaranguda.com:443 2>/dev/null | openssl x509 -noout -enddate
# output
notAfter=Jun 27 23:59:59 2022 GMT

untuk keluar anda perlu menekan kombinasi CTRL + C

Agar kelihatan tanggal di terbitkan dan tanggal berakhir SSL ganti enddate menjadi dates

echo | openssl s_client -servername jaranguda.com -connect jaranguda.com:443 2>/dev/null | openssl x509 -noout -enddate
# output
notBefore=Jun 28 00:00:00 2021 GMT
notAfter=Jun 27 23:59:59 2022 GMT

tanggal sertifikat SSL tersebut diterbitkan bisa diambil dengan

echo | openssl s_client -servername jaranguda.com -connect jaranguda.com:443 2>/dev/null | openssl x509 -noout -startdate
# output
notBefore=Jun 28 00:00:00 2021 GMT

Cara ini tidak hanya untuk HTTP atau HTTPS tetapi bisa juga untuk service lainnya, contoh SMTP

echo | openssl s_client  -connect smtp.mail.yahoo.com:587 -starttls smtp 2>/dev/null | openssl x509 -noout -dates
# output
notBefore=May 24 00:00:00 2021 GMT
notAfter=Nov 17 23:59:59 2021 GMT

Pengecekan banyak domain, bisa dibuat scriptnya. Contohnya

#!/usr/bin/env bash
# author : tommy @ jaranguda.com
# cek tanggal expired SSL
 
declare -a DOMAINLIST=(
google.com:443
yahoo.com:443
jaranguda.com:443
);
 
for domain in ${DOMAINLIST[@]}; do 
    DOMAIN=$(echo $domain | cut -d ':' -f1)
    PORT=$(echo $domain | cut -d ':' -f2)
    TANGGALEXPIREDSSL=$(echo | openssl s_client -servername $DOMAIN -connect $DOMAIN:$PORT 2>/dev/null | openssl x509 -noout -enddate)
    TANGGAL=$(echo $TANGGALEXPIREDSSL | sed 's/notAfter=//g')
    FORMATTANGGAL=$(date -d "${TANGGAL}" +"%d %B %Y")
    echo "${domain} : ${FORMATTANGGAL}"
 
done

Contoh output dari script diatas

google.com:443 : 20 September 2021
yahoo.com:443 : 20 January 2022
jaranguda.com:443 : 28 June 2022

Cara Menghitung Total Angka di Shell Script

Last Updated on 31 July 2021 By tommy Leave a Comment

Kadang menggunakan bash (shell script) untuk berhitung sangat membantu, sebagai contoh kita memiliki data seperti dibawah ini

Harga barang: 11000
Harga barang: 12000
Harga barang: 35000
Harga barang: 42000
Harga barang: 8000
Harga barang: 27000
Harga barang: 42000
Harga barang: 84000
Harga barang: 20000
Harga barang: 37000

dari text diatas kita ingin mengambil total dari angka-angka tersebut.

Ada berbagai cara yang bisa digunakan untuk menghitung total angka-angka diatas, untuk mempermudah tutorial ini contoh text diatas disimpan di /tmp/harga

1. cut paste bc

cut -d ':' -f2 /tmp/harga | paste -s -d+ - | bc
# output
318000

2. awk
Cara ini lebih cepat, karena hanya menggunakan awk

awk '{total+=$3} END {print total}' /tmp/harga
# 318000

3. grep awk

grep -oP '(?<=:).*' /tmp/harga | awk '{total+=$1} END {print total}'
# output
318000

4. grep paste bc

grep -oP '(?<=:).*' /tmp/harga | paste -s -d+ - | bc
# output
318000

ada banyak kombinasi yang bisa digabungkan untuk mendapatkan hasil yang sama, tergantung yang mana anda paling familiar. Dari ke empat perintah diatas, hasilnya sama dengan jumlah kalkukasi 318000, untuk memastikan hasilnya benar gunakan kalkulator ;)

Bila anda merasa tertantang, bisa mencoba menggunakan loop for untuk menghitung totalnya.

Otomatisasi Pembuatan Server Upcloud dengan Terraform

Last Updated on 29 July 2021 By tommy Leave a Comment

Terraform adalah tool yang digunakan untuk mengelola Infrastructure-as-a-Service (IaaS). Terraform sangat powerfull sehingga bisa menghancurkan segalanya bila salah menjalankannya, contoh anda menjalankan terraform destroy pada server production kantor ;). Dengan adanya terraform untuk provisioning banyak dan satu server code yang kita buat sama banyaknya, jadi sangat efisien waktu dan tenaga.

Ada baiknya bila ini pertama kali anda menggunakan terraform untuk berhati-hati.

Buat akun API Upcloud

Buat sub-account untuk provisioning server di terraform di upcloud dari menu people
simpan sebagai variable di ~/.bashrc

echo 'export UPCLOUD_USERNAME=username' | tee -a ~/.bashrc
echo 'export UPCLOUD_PASSWORD=password' | tee -a ~/.bashrc

hal ini penting agar credential tidak ikut tersimpan di git, atau version control yang digunakan.

buat variable.tf

terraform {
  required_providers {
    upcloud = {
      source  = "UpCloudLtd/upcloud"
      version = ">= 2.1.1"
    }
  }
}
 
provider "upcloud" {
}
 
variable "server_count" {
  default = "2"
}
 
variable "default_user" {
  default = "jaranguda"
}
 
variable "ssh_public_key" {
  default = "ssh-rsa AAAAB3NzaC1ycxxxxxxx"
}

pada variable.tf tersebut kita buat default_user, server_count dan provider agar tidak perlu berulang dan code lebih rapi dan terstruktur. Isikan SSH Public key anda, bila belum ada bisa dibuat dengan

ssh-keygen

Untuk servernya buat file nginx.tf

resource "upcloud_server" "nginx" {
 
  count    = var.server_count
  hostname = "nginx-${count.index + 1}"
  zone     = "sg-sin1"
  plan     = "1xCPU-1GB"
 
  template {
    size    = 25
    storage = "01000000-0000-4000-8000-000030200200"
  }
 
  # Network interfaces
  network_interface {
    type = "public"
  }
 
  network_interface {
    type = "utility"
  }
 
  # SSH Public key
  login {
    user = var.default_user
    keys = [var.ssh_public_key]
  }
 
  # konek ke server
  connection {
    host        = self.network_interface[0].ip_address
    type        = "ssh"
    user        = var.default_user
    private_key = file("/home/jaranguda/.ssh/id_rsa")
    agent       = true
  }
 
  # Setelah selesai install jalankan command
  provisioner "remote-exec" {
    inline = [
      "sudo apt update && sudo apt install nginx -yq"
    ]
  }
 
  # simpan public IP di file ips.txt
  provisioner "local-exec" {
    command = "echo ${self.network_interface[0].ip_address} >> ~/ips.txt"
  }
 
}

pada proses pembuatan server nginx diatas, kita akan membuat 2 buat web server nginx dan dibuat user jaranguda dan diberikan akses sudo. Contoh

uid=1000(jaranguda) gid=1000(jaranguda) groups=1000(jaranguda),27(sudo)

Setelah server selesai dibuat, akan di update dan install dengan apt, bisa dilihat di remote-exec

Private key sesuaikan dengan letak private key anda, default ada di /home/USERNAME/.ssh/id_rsa

Jalankan Terraform

Sebelum terraform dijalankan, download terlebih dahulu modul Upcloud dengan menjalankan

terraform init

Setelah selesai jalankan proses pembuatan server

terraform apply

tunggu beberapa saat anda akan diminta untuk mengetik yes

Do you want to perform these actions?
  Terraform will perform the actions described above.
  Only 'yes' will be accepted to approve.
 
  Enter a value: yes

lalu tekan enter agar proses provisioning dimulai.

Tampilan di dashboard upcloud

Karena server yang kita buat menggunakan IP Public, jadi bisa langsung di cek dengan mengakses IPv4

Setelah testing selesai dengan mudah server-server yang tadi dibuat dihapus

terraform destroy

Solusi Terraform this private key is passphrase protected

Last Updated on 27 July 2021 By tommy Leave a Comment

Terraform bisa menggunakan ssh-agent untuk authentikasi, tetapi bila anda menggunakan password pada private key, akan muncul error. Solusinya bukan dengan menghapus password pada private key, menggunakan eval, simak caranya dibawah ini

tambahkan ssh-key anda kedalam ssh-agent

ssh-agent  ~/.ssh/id_rsa_client10

tetapi cara ini tetap error, setelah menjalankan terraform apply masih muncul error

│ Error: remote-exec provisioner error
│ 
│   with upcloud_server.server1,
│   on server1.tf line 48, in resource "upcloud_server" "server1":
│   48:   provisioner "remote-exec" {
│ 
│ Failed to parse ssh private key: ssh: this private key is passphrase protected

walaupun telah menggunakan ssh-agent, masalah tersebut bisa diatasi dengan menggunakan eval.

eval "$(ssh-agent -s)"

coba kembali terraform anda.

Gitlab Fix Unicorn is no longer supported and users must switch to Puma

Last Updated on 25 July 2021 By tommy Leave a Comment

Saat upgrade Gitlab Community Edition, muncul error dari gitlab

"* unicorn['worker_processes'] has been deprecated since 13.10 and was removed in 14.0. Starting with GitLab 14.0, Unicorn is no longer supported and users must switch to Puma, following https://docs.gitlab.com/ee/administration/operations/puma.html."

Cek parameter unicorn yang diaktifkan di Gitlab

grep unicorn /etc/gitlab/gitlab.rb
# output
unicorn['enable'] = true
unicorn['worker_timeout'] = 60
unicorn['worker_processes'] = 10

bila anda tidak pernah merasa mengkonfigurasi settingan ini cukup menambahkan tanda pagar # di depan untuk menonaktifkannya, contoh

#unicorn['enable'] = true
#unicorn['worker_timeout'] = 60
#unicorn['worker_processes'] = 10

kalau anda melakukan konfigurasi tersebut, cukup ganti unicorn menjadi puma

unicorn['enable'] = true
# menjadi
puma['enable'] = true

konfigurasi ulang Gitlab agar perubahan tersebut diaplikasikan

sudo gitlab-ctl reconfigure

Setelah selesai konfigurasi ulang Gitlab, jalankan kembali script sudo apt upgrade. Cek kembali versi Gitlab anda

gitlab-rake gitlab:env:info | grep Version
# output
...
Version:	14.1.0
...

Atau dengan dpkg

dpkg -l gitlab-ce
# output
Desired=Unknown/Install/Remove/Purge/Hold
| Status=Not/Inst/Conf-files/Unpacked/halF-conf/Half-inst/trig-aWait/Trig-pend
|/ Err?=(none)/Reinst-required (Status,Err: uppercase=bad)
||/ Name           Version      Architecture Description
+++-==============-============-============-===========================================================
ii  gitlab-ce      14.1.0-ce.0  amd64        GitLab Community Edition (including NGINX, Postgres, Redis)

Cara Scaling Centrifugo Websocket Untuk Puluhan Ribu User

Last Updated on 24 July 2021 By tommy Leave a Comment

Kali ini kita akan bahas cara scaling websocket centrifugo, anggap kita akan memiliki 30000 (30 ribu) aktif user yang menggunakan service ini untuk chatting, notifikasi dan lain sebagainya. Agar bisa scaling centrifugo dibutuhkan redis terpisah, untuk percobaan ini kita akan menggunakan 5 server dengan spesifikasi yang sama
1 CPU
1 GB Memory
20 GB Disk

Pembagian server sebagai berikut
1 Redis
3 Centrifugo
1 HAProxy

Daftar IP Address yang digunakan, simpan juga baris dibawah ini ke masing-masing server di file /etc/hosts

10.10.0.193 centrifugo-1
10.10.17.251 centrifugo-2
10.10.18.150 centrifugo-3
10.10.18.205 redis
10.10.19.72 haproxy
# 95.111.xxx.xxx (Public IP) haproxy

Sengaja hanya haproxy yang menggunakan Public IP, karena semua user akan terhubung dari sini, karena HAProxy bekerja sebagai load balancer. Bila VM anda hanya memiliki Public IP tidak masalah, gunakan IP tersebut tetapi ingat untuk membatasinya hanya dari kelima IP diatas.

Disemua server jalankan update dan upgrade

sudo apt update; sudo apt upgrade -y
sudo apt install wget curl -y

bila ada update kernel, sebaiknya VPS di restart.

Instalasi Redis

Di server redis kita akan menginstall service redis

apt update && apt install redis -y

Sangat tidak direkomendasikan menggunakan redis dengan IP Publik, disini saya menggunakan UpCloud Singapore, yang kebetulan memiliki private IP yang bisa digunakan untuk koneksi private antar server, jadi saya akan menggunakannya. Bila tidak ada pilihan tersebut alternativenya menggunakan VPN.

Cek private IP VM anda

ip addr
#output
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc fq_codel state UP group default qlen 1000
    link/ether 4e:c2:56:a3:5c:b8 brd ff:ff:ff:ff:ff:ff
    altname enp0s3
    altname ens3
    inet 95.111.xx.xx/22 brd 95.111.195.255 scope global dynamic eth0
       valid_lft 81886sec preferred_lft 81886sec
    inet6 fe80::4cc2:56ff:fea3:5cb8/64 scope link 
       valid_lft forever preferred_lft forever
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc fq_codel state UP group default qlen 1000
    link/ether 4e:c2:56:a3:e7:2b brd ff:ff:ff:ff:ff:ff
    altname enp0s4
    altname ens4
    inet 10.10.18.205/22 brd 10.10.19.255 scope global dynamic eth1
       valid_lft 2391sec preferred_lft 2391sec
    inet6 fe80::4cc2:56ff:fea3:e72b/64 scope link 
       valid_lft forever preferred_lft forever

pada eth1 tersebut adalah private LAN, disini saya akan menggunakan 10.10.18.205 sebagai IP redis. Buka konfigurasi redis di /etc/redis/redis.conf

bind 10.10.18.205
requirepass 7M7gw9iVqoVwoLkpMmgn

ganti 7M7gw9iVqoVwoLkpMmgn dengan password pilihan anda, terakhir di server redis ini, restart service redis

# aktifkan waktu booting
systemctl enable redis-server
# restart
systemctl restart redis-server

Instalasi Centrifugo

Instalasi dibawah ini dijalankan di ketiga server, dengan konfigurasi dan file config.json yang sama.

Di ketiga server centrifugo jalankan perintah berikut ini

mkdir /etc/centrifugo
useradd --system -U -M centrifugo -s /bin/false -d /etc/centrifugo

folder /etc/centrifugo digunakan untuk menyimpan file konfigurasi dari centrifugo itu sendiri.
Buat file /etc/centrifugo/config.json yang berisi

{
  "v3_use_offset": true,
  "token_hmac_secret_key": "914b5fd2-0dde-4ec6-ab14-d3bbd8011cc7",
  "admin_password": "d759c200-6b83-43f6-8853-820bd1c22947",
  "admin_secret": "ef934cfb-a76d-4675-aa8a-cb94e9da2fe2",
  "api_key": "0121509f-a21f-4e5e-ad22-16ae541b63ae",
  "admin": true,
  "health": true,
  "engine": "redis",
  "redis_host": "10.10.18.205",
  "redis_port": "6379",
  "redis_password": "7M7gw9iVqoVwoLkpMmgn"
}

bagian token_hmac_secret_key, admin_password, admin_secret bisa digenerate di salah satu server centrifugo dengan perintah

centrifugo genconfig

pada konfigurasi diatas kita mengaktifkan admin UI dan healthcheck.

Download centrifugo dari github

wget https://github.com/centrifugal/centrifugo/releases/download/v2.8.5/centrifugo_2.8.5_linux_amd64.tar.gz

ekstrak folder yang baru di download, lalu copy file centrifugo ke /usr/local/bin

tar zxvf centrifugo_2.8.5_linux_amd64.tar.gz
cp centrifugo /usr/local/bin/centrifugo

Buat systemd untuk menjalankan service centrifugo

cat >/lib/systemd/system/centrifugo.service <<'EOL'
[Unit]
Description=Centrifugo services
After=network.target syslog.target
 
[Service]
User=centrifugo
Group=centrifugo
LimitNOFILE=40000
 
Environment="CONFIG=/etc/centrifugo/config.json"
ExecStartPre=/usr/local/bin/centrifugo checkconfig -c $CONFIG
ExecStart=/usr/local/bin/centrifugo -c $CONFIG
ExecReload=/bin/kill -HUP $MAINPID
ExecStop=/bin/kill -SIGTERM $MAINPID
TimeoutStopSec=10
KillMode=control-group
RestartSec=1
Restart=always
StandardOutput=syslog
StandardError=syslog
SyslogIdentifier=centrifugo
 
[Install]
WantedBy=multi-user.target
Alias=centrifugo.service
EOL

Jalankan centrifugo

# aktifkan waktu booting
systemctl enable centrifugo
# restart centrifugo
systemctl restart centrifugo

Untuk melihat proses centrifugo cek dengan

systemctl status centrifugo
# pastikan port 800 bisa diakses
curl localhost:8000
# cek port 8000
ss -tunlp | grep 8000
# output
tcp     LISTEN   0        4096                   *:8000                *:*       users:(("centrifugo",pid=2448,fd=3))

Ambil dan catat masing-masing private IP server centrifugo, bila anda tidak memiliki private IP, bisa menggunakan public IP.

ip addr
ifconfig
ip route
hostname -I

bisa dengan salah satu cara diatas ;)

Instalasi HAProxy

Install HAProxy dengan paket manager

sudo apt install haproxy -y

saat ini versi yang tersedia adalah 2.0.13.

Pada konfigurasi HAProxy tambahkan baris

listen centrifugo
    bind *:80
    balance source
    mode tcp
    server centrifugo-1 centrifugo-1:8000 check weight 1
    server centrifugo-2 centrifugo-2:8000 check weight 1
    server centrifugo-3 centrifugo-3:8000 check weight 1

jalankan service haproxy dan aktifkan saat booting

sudo systemctl enable haproxy
sudo systemctl restart haproxy

Buka public IP haproxy, seharusnya muncul halaman admin yang meminta login

gunakan admin_password dari konfigurasi centrifugo diatas

Testing Scala Centrifugo

Untuk testing centrifugo bisa menggunakan cara disini. Untuk percobaan testing secara besar-besaran bisa menggunakan k6 ataupun Artillery.