Kubernetes Meetup Osaka #1でのLT資料です

1. ActiveJob meets
Kubernetes
Kubernetes Meetup Osaka #1 LT
植森 康友(wakaba260)

2. me.inspect
=> {
“HN”: "wakaba260",
“name”: "Yasutomo Uemori",
“company”: "株式会社Aiming",
“twitter”: "https://twitter.com/wakaba260yen",
“github”: "https://github.com/yuemori",
“skills”: ["rails api", "docker", "kubernetes", "GCP"]
}

3. ActiveJob?

4. ActiveJob(Rails)
- Ruby on Railsの非同期ジョブの仕組み
- Adapterを実装することでなんでもバックエンドに出来る
- 現在の主な実装例
- Sidekiq, Resque: ruby製のjob queue worker
- Shoryuken: Amazon SQSをメッセージキューに使える

5. ActiveJobの使用例
class GuestsCleanupJob < ApplicationJob
queue_as :default
def perform(*args)
# 後で実行したい作業をここに書く
end
end
# 「キューイングシステムが空いたらジョブを実行する」とキューに登録する
guest = Guest.find(guest_id)
GuestsCleanupJob.perform_later(guest)

6. Rails on Kubernetesでのジョブの運用
- SidekiqのworkerをDeploymentで立てる
- ジョブキューのBackendにredisを立てる
- replicas指定でworker数を増やしてスケールアウト

7. 唐突な思いつき
- Sidekiqのworkerのスケールアウトを考えるとCPU使用率などでは
上手くスケールできない
- Kubernetesには既にJobという仕組みがある
- リトライ、タイムアウトなど機能も充実
- Kubernetes Jobを使うことでいい感じにスケールできそう

8. 作ってみた
https://github.com/yuemori/kube_queue/

9. # app/jobs/print_message_job.rb
class PrintMessageJob < ApplicationJob
include KubeQueue::Worker
worker_name 'print-message-job'
image "your-registry/your-image"
container_name 'your-container-name'
def perform(payload)
logger.info payload[:message]
end
end
PrintMessageJob.perform_later(message: ‘hello!’)

10. class ComputePiJob < ApplicationJob
include KubeQueue::Worker
worker_name 'pi'
image 'perl'
container_name 'pi'
command "perl","-Mbignum=bpi","-wle","print bpi(2000)"
cpu_limit '0.3'
cpu_request '0.2'
memory_limit '100m'
memory_request '50m'
end

11. kube_queueの実装
- perform_laterを呼んだら指定されたJobを起動
- やってることはJob作成のAPIを呼ぶだけ

12. やってみてわかったこと
- スケールアウトがworkerのreplica数からリソースに依存するように
なった
- KubernetesのAPI経由でコンテナを呼ぶことで、プラットフォームや
言語に依存せずにコンテナの恩恵を享受できる
- KubernetesのAPIを呼ぶことでいろいろ面白いことが出来るので、
活用する機会があれば試していきたい

13. ご静聴ありがとうございました