CyberAgentのインフラについて メディア事業編 #catechchallenge
•
2 likes•1,876 views
talked by Raspberry Pi4で始めるおうちKubernetesクラスタ自作入門
More Related Content
What's hot
What's hot (20)
Similar to CyberAgentのインフラについて メディア事業編 #catechchallenge
Similar to CyberAgentのインフラについて メディア事業編 #catechchallenge (20)
More from whywaita
More from whywaita (20)
Recently uploaded
CyberAgentのインフラについて メディア事業編 #catechchallenge
- 1. CyberAgentのインフラについて 〜メディア事業部編〜 株式会社サイバーエージェント 技術本部 プライベートクラウドグループ Nakanishi Kento @whywaita Raspberry Pi で始まるおうちKubernetesクラスタ⾃作⼊⾨ #catechchallenge @ ONLINE / /
- 2. Nakanisi Kento / whywaita • CyberAgent, Inc. Private Cloud Group since • 業務: OpenStack / Kubernetes を使った新機能開発 • 趣味: ⾃宅インフラ / アニソン • 在宅勤務で業務中にスピーカーから ⾳を流せるのは嬉しい！！ • 昔の研究: EdgeComputing uses Kubernetes
- 3. 本LTの⽬的 3
- 7. Nakanisi Kento / whywaita • CyberAgent, Inc. Private Cloud Group since • 業務: OpenStack / Kubernetes を使った新機能開発 • 趣味: ⾃宅インフラ / アニソン • 在宅勤務で業務中にスピーカーから ⾳を流せるのは嬉しい！！ • 昔の研究: EdgeComputing uses Kubernetes
- 8. Nakanisi Kento / whywaita • CyberAgent, Inc. Private Cloud Group since • 業務: OpenStack / Kubernetes を使った新機能開発 • 趣味: ⾃宅インフラ / アニソン • 在宅勤務で業務中にスピーカーから ⾳を流せるのは嬉しい！！ • 昔の研究: EdgeComputing uses Kubernetes
- 10. Cloud？ 10
- 11. Public Cloud 11
- 13. つまり 13
- 16. 具体的には 16
- 23. CycloudにおけるKubernetes 23 • PrivateCloud (OpenStack) の展開 [6] • OKD (PaaS by Kubernetes) https://www.okd.io/ • Region-wide Kubernetes [ ] (by user)
- 24. PrivateCloud (OpenStack) の展開 24 L Overlay Network (VXLAN on IP CLOS) Compute Node Compute Node Compute Node k s master k s master k s master Storage Storage KVM / Container Users VM Users VM Users Service nova neutron Container KVM / Container OpenStack Controller Container other Container User Components OpenStack Components Physical Components
- 25. PrivateCloud (OpenStack) の展開 25 L Overlay Network (VXLAN on IP CLOS) Compute Node Compute Node Compute Node k s master k s master k s master Storage Storage KVM / Container Users VM Users VM Users Service nova neutron Container KVM / Container OpenStack Controller Container other Container User Components OpenStack Components Physical Components 我々が提供するのはユーザ向けのVM
- 26. PrivateCloud (OpenStack) の展開 26 L Overlay Network (VXLAN on IP CLOS) Compute Node Compute Node Compute Node k s master k s master k s master Storage Storage KVM / Container Users VM Users VM Users Service nova neutron Container KVM / Container OpenStack Controller Container other Container User Components OpenStack Components Physical Components
- 27. 27
- 28. PrivateCloud (OpenStack) の展開 28 L Overlay Network (VXLAN on IP CLOS) Compute Node Compute Node Compute Node k s master k s master k s master Storage Storage KVM / Container Users VM Users VM Users Service nova neutron Container KVM / Container OpenStack Controller Container other Container User Components OpenStack Components Physical Components 物理的なサーバは Kubernetes Node として管理
- 29. PrivateCloud (OpenStack) の展開 29 L Overlay Network (VXLAN on IP CLOS) Compute Node Compute Node Compute Node k s master k s master k s master Storage Storage KVM / Container Users VM Users VM Users Service nova neutron Container KVM / Container OpenStack Controller Container other Container User Components OpenStack Components Physical Components KubernetesのPod (コンテナ)として OpenStack Componentsを起動
- 31. PrivateCloud (OpenStack) の展開 31 L Overlay Network (VXLAN on IP CLOS) Compute Node Compute Node Compute Node k s master k s master k s master Storage Storage KVM / Container Users VM Users VM Users Service nova neutron Container KVM / Container OpenStack Controller Container other Container User Components OpenStack Components Physical Components 独⾃ストレージ基盤を⽤いて管理 OpenStack / Kubernetesから利⽤可 [8]
- 32. PrivateCloudへのKubernetes採⽤理由 32 • OpenStackはController, ComputeNodeともに 必須プロセスが多い • N物理: Nプロセス の管理としてKubernetesを利⽤ • Liveness, Readinessによって⾃動再起動 • 物理ホストの⽣死をKubernetes nodesによって管理
- 33. OKD (PaaS by Kubernetes) 33 • The Community Distribution of Kubernetes that powers Red Hat OpenShift. • RedHat製のPaaS基盤 (OSS and Distribution) • Cycloudユーザ向けにKubernetes基盤を提供 • ユーザによるクラスタ管理が不要に
- 34. 参考 34 • [ ]: FY Presentation Material for New Investors P より引⽤ https:// d utiq et vl .cloudfront.net/files/topics/ _ext_ _ .pdf?v= • [ ]: AbemaTVのアーキテクチャの変遷 https://www.slideshare.net/abemadev/abematv-abematv- devcon- -tracka-session-a - • [ ]: Amebaブログなど、サイバーエージェントのメディアサービスを⽀えるインフラ組織とは？ https://www.wantedly.com/companies/cyberagent/post_articles/ • [ ]: Amebaアフィリエイト基盤の GKEアーキテクチャと マイクロサービス https://speakerdeck.com/ youta /cndt -amebaahuirieitoji-pan-false-gkeakitekutiyato-maikurosahisu • [5]: タップル誕⽣: オンプレからAWS Fargateまで @ JAWS DAYS https://speakerdeck.com/ prog /tatupurudan-sheng-onpurekaraaws-fargatemade-at-jaws-days-
- 35. 参考 35 • [ ]: CyberAgentのプライベートクラウド Cycloudの運⽤及びモニタリングについて https://www.slideshare.net/whywaita/cyberagent-cycloud-administration-and- monitoring-for-cycloud • [7]: 情報系学⽣がサイバーエージェントに新卒⼊社した理由と現在「AbemaTV」で取り 組んでいること https://www.wantedly.com/companies/abema/post_articles/ • [ ]: CyberAgentのプライベートクラウドにおけるストレージ戦略 https://speakerdeck.com/miyamoto_hiroki/ cyberagentfalsepuraibetokuraudoniokerusutorezizhan-lue
- 36. ここから時間が余った時⽤ 36
- 37. メンターエキシビション 37
- 39. 題材 39 • もともと去年のおうちKubernetesで動いていたアプリ • 昨年はIntel NUCで実施 • Golang製 / stateless / 簡単なWebAPI • 今年はRaspberryPiなのでCPUアーキテクチャが異なる • Raspberry Piでも動くものを作ろう ✨
- 41. multiarch image 41 • Dockerのexperimental feature `docker buildx` • Next generation `docker build` らしい • https://docs.docker.com/buildx/working-with-buildx/ • creating soped builder instances らしい • 複数アーキテクチャをビルドするのに便利 • 内部的にはUserland QEMUをDockerで動かしている模様
- 42. 42
- 43. 43
- 44. 44
- 45. 45
- 46. 46
- 47. 47
- 48. 🎉 multiarch build成功 🥳 48
- 51. 実はめっちゃ格闘してました 💥 51 • GolangだしGOARCH指定したらいけるやろ…… • えっGitHub Actionsでaarch 向けgcc⼊らない？ • GitHub Actionsでmapみたいな事どうやれば…… • Userland-qemu使えるらしいし最悪それかな…… • でも1ビルドに数⼗分かかるようになるよね…… https://github.com/shokujinjp/api/pull/
- 52. 🎉 multiarch build成功 🎉 🥳して良かった〜 🥳 52
- 53. まとめ 53 • メディア事業部では⾊んなところでKubernetesを 使ってます • Webアプリだけではなく基盤としても利⽤しています • 物理も含めて全部⾒るのは楽しいぞ！ • CPUアーキテクチャも興味あったら調べてみてね 🥳