デプロイ今昔物語 〜CGIからサーバーレスまで〜 / The deployment technics

Transcript

1. σϓϩΠࠓੲ෺ޠ ʙCGI͔ΒαʔόʔϨε·Ͱʙ @mackee_w a.k.a macopy

2. ࿩͢಺༰

3. σϓϩΠ

4. @macopy • ໘ന๏ਓΧϠοΫ eεϙʔπࣄۀ෦ TonamelαʔόαΠυςοΫϦʔυ • Perlେ޷͖ Go΋޷͖ • GGST࢖༻Ωϟϥ:

   ϥϜϨβϧ • ISUCON11 ༏উ / ISUCON12 ग़୊

5. [AD] Tonamel

6. [AD] Tonamel ࠓճͷτʔΫͰ঺հ͢Δ ʮσϓϩΠʯͰ͍͏ͱ Tonamel͸ ʮPullܕσϓϩΠʯ͔ͭ ʮDockerʯͰ͢

7. ͜ͷτʔΫʹ͓͚ΔʮσϓϩΠʯͷൣғ • WebΞϓϦέʔγϣϯΛ։ൃͨ͠ޙ͔ΒɺϢʔβʔ͕ϒϥ΢βͰݟΔ ·Ͱʹඞཁͳٕज़܈ • ʮσϦόϦʔʯͱ΋ݴ͏ • ྫ: • αʔόʔ΁ͷϓϩάϥϜͷ൓өํ๏

   • αʔόʔϓϩάϥϜͷϗεςΟϯάํ๏

8. !DISCLAIMER! ͜ͷτʔΫͰ͸ҟͳΔϨΠϠʔͷ֓೦͕ަޓ ʹग़͖ͯͨΓࠞͬͨ͟Γͯ͠࿩͞Ε·͢ ॱ൪͸֓Ͷ࣌ܥྻͰͷొ৔ॱͰ͕͢ɺ঺հ͢ ΔτϐοΫ͸ొஃऀͷڵຯͰܾΊ͍ͯ·͢

9. ͜ͷτʔΫͷਐΊํ • ҎԼͷΛҰͭͷσϓϩΠٕज़ʹରͯ͠࿩͍͖ͯ͠·͢ •ख๏ͷղઆ •࣌୅എܠ •࣮ફ

10. ͜ͷτʔΫͷਐΊํ • ҎԼͷΛҰͭͷσϓϩΠٕज़ʹରͯ͠࿩͍͖ͯ͠·͢ •ख๏ͷղઆ => Ͳ͏͍͏࢓૊Έͳͷ͔ •ొ৔എܠ => ੜ·ΕͨܦҢ •࣮ફ

    => ΍ͬͯΈΑ͏ɺମݧͯ͠ΈΑ͏

11. !DISCLAIMER! ͦͷ2 σϞʹ͸౰࣌࢖ΘΕ͍ͯͨιϑτ΢ΣΞ (όʔδϣϯ)͸࢖͍ͬͯ·ͤΜʂʂʂ ࠓݱࡏೖखͰ͖Δ΋ͷΛ࢖͍ͬͯ·͢

12. ొ৔͢Διϑτ΢ΣΞ΍؀ڥ • Perl 5.32.1(system perl), Perl 5.36.0 • Apache 2.4.54

    • mod_perl 2.0.11 • Debian 11 bullseye • ݕূ؀ڥͱ͜ͷϚγϯؒ͸tailscaleͰVPNΛு͍ͬͯ·͢

13. Are you ready?

14. CGI

15. CGIͷख๏

16. CGIͷొ৔എܠ • 1993೥ʹఏҊ͞Εͨ࢓༷ ͜ͷ࣌ͷόʔδϣϯ͸1.0 • NCSA httpdʹhtbinͱ͍͏ػೳ͕͕͋ͬͨɺଞͷαʔόʔͰ΋࢖͑ ΔΑ͏ʹ”Common”ͳ࢓༷͕ߟ͑ΒΕͨ • ౰࣌͸HTML΋ࡦఆ్্ͰɺWebΛऔΓר͘πʔϧνΣΠϯ͕ੜ·Ε

    Δᴈ໌ظͱ͍ͬͨײ͡

17. ʮϨϯλϧαʔόʔʯ ※ҰྫͰ͢

18. ࣮ફ: PerlͷCGIϓϩάϥϜΛσϓϩΠ

19. ඪ४ετϦʔϜͱ؀ڥม਺͕͋Ε͹ͳΜͰ΋͓k • ϓϩάϥϛϯάݴޠඇґଘͰ͋Δ • PerlͰCGI͸͋·Γʹ΋͋Γ͖ͨΓͰ͸ • ͔ͤͬ͘ݴޠඇґଘͳͷʹ͜ͷσϞͰ͸ͭ·Μͳ͍Ͱ͢ΑͶʁ

20. ࣮ફ: jqͰCGIϓϩάϥϜΛ ॻ͍ͯσϓϩΠ

21. CGIͷσϝϦοτ • ϓϩηεىಈͷίετ͕ॏ͍ • ϦΫΤετͷͨͼʹϓϩηεΛىಈ͠ऴྃ͢Δ͜ͱʹͳΔ • PerlͷΑ͏ͳLLͰ͸ϞδϡʔϧͷಡΈࠐΈ͕౎౓ൃੜ͢Δ͜ͱʹ • ੲ͸`use`Ͱ͸ͳ͘`require`Λ࢖ͬͨDynamic Loading͕ଟ༻͞Ε

    ͍ͯͨͷ΋ͦͷ͍ͤͩͱฉ͍͍ͯ·͢

22. ੩తΤϯυϙΠϯτͷϕϯνϚʔΫ

23. CGIͷϕϯνϚʔΫ

24. mod_perl

25. mod_perlͷख๏

26. mod_perlͷొ৔എܠ • 1996೥ʹmod_perl, 2002೥ʹmod_perl2͕ϦϦʔε • Apacheͷػೳ֦ுΛPerlͰߦ͏Ϟδϡʔϧ • Ͱ͸͋Δ͕CGIϓϩάϥϜΛͦͷ··ޮ཰Α͘ಈ͔ͨ͢Ίʹ࢖ΘΕͨ • `ModPerl::Registry`౳ͷHandlerΛ࢖͑͹CGIͱͷޓ׵ੑΛอͬͨ··࢖͑Δ

    • άϩʔόϧม਺ͷण໋͕ϦΫΤετ୯ҐͰͳ͘ͳͬͨ • ཪΛฦͤ͹ϦΫΤετ୯ҐͰ͋ΔલఏͷCGIϓϩάϥϜ͸ͦͷ··Ͱ͸ಈ͔ͳ͍

27. ࣮ફ: PerͷCGIϓϩάϥϜΛ mod_perlͰಈ͔͢

28. ྨࣅ඼ • mod_mruby, mod_lua etc… • Perlͷ෦෼Λผͷݴޠʹஔ͖׵͑ͨApacheͷϞδϡʔϧ • ngx_http_perl_module •

    nginxʹPerlΛ૊ΈࠐΜͰϦΫΤετॲཧͤ͞ΔϞδϡʔϧ

29. FastCGI

30. FastCGIͷख๏

31. FastCGIͷొ৔എܠ • 1996೥ʹఏএ͞Εͨ • mod_perlͷ༻్ͱಉ͘͡ʮCGIϓϩάϥϜͷߴ଎Խʯ • ҰํͰɺmod_perlͱ͸ҧ͍ݴޠඇґଘΛ໨ࢦͨ͠ • ׬શͳdrop-in replacement͸Ͱ͖ͳ͍͕ɺηϚϯςΟΫε͸CGI͔Β

    Ҿ͖ܧ͍Ͱ͍Δ • 1ͭͷίωΫγϣϯͰϦΫΤετͷଟॏԽ΋͞Ε͍ͯΔ

32. ࣮ફ: PerlͷFastCGI޲͚ϓϩάϥϜΛ ಈ͔͢

33. FastCGIͷྨࣅ඼ • SpeedyCGI/PersistentPerl • CGIϓϩηεΛӬଓԽͯ͠ར༻͢Δվ଄͞ΕͨperlΠϯλϓϦλΛ ༻͍Δ • #!/usr/bin/speedy ʹshebangΛஔ͖׵͑Δͱར༻Ͱ͖Δ •

    ApacheͱSpeedyCGIؒ͸CGIͱಉ༷ඪ४ετϦʔϜ+؀ڥม਺

34. PSGI

35. PSGIͷొ৔എܠ • 2009೥ʹspec͕CPANʹshipit͞Εͨ • WebϑϨʔϜϫʔΫͷ࣌୅ʹͳ͍͕ͬͯͨɺWebϑϨʔϜϫʔΫ͕ͦΕ ͧΕɺCGI΍FastCGIɺmod_perl޲͚ͷରԠΛߦͳ͍ͬͯͨ… • ͦ͜ͰWebΞϓϦͷೖग़ྗΛந৅Խͨ͠ΠϯλʔϑΣΠεΛ༻ҙͯ͠ (=PSGI)ͦͷΠϯλʔϑΣΠεΛѻ͍΍ͨ͘͢͠ϥΠϒϥϦ(=Plack)Λ༻ ҙͯ͠ɺPlack::Handlerͱͯ͠CGI΍mod_perlͷϋϯυϥ͕࣮૷͞Εͨ

36. PSGIͷొ৔എܠ ͦͷ2 • ҰํͰϓϩάϥϛϯάݴޠϥϯλΠϜࣗମͰHTTPαʔόʔΛಈ͔͢Α ͏ʹͳͬͨ • ”ϦόʔεϓϩΩγ”ͱ͍͏֓೦͕ҰൠతʹͳΓ࢝Ίͨ • lighttpd, nginx

    etc… • Plack::Handlerͱͯ͠Starman΍Starletͱ͍ͬͨPreforkܕͷHTTPαʔ όʔ͕࣮૷͞Εͯ޿͘࢖ΘΕΔΑ͏ʹͳͬͨ

37. Plack/PSGIͷख๏

38. ࣮ફ: ੜPSGIΛॻ͍ͯΈͨ

39. PSGIͷྨࣅ඼ • Java Servelet API • WSGI (Python) • Rack

    (Ruby) • ͜ͷॱ൪Ͱspecʹݴٴ͕͋Δ • PSGIʹ͸WSGIͱRackͱ”JSGI”ʹݴٴ͕͋Δ

40. Plackͷྨࣅ඼(ΠϯλʔϑΣΠεࢹ఺) • ઌ૆ͨͪ • CGI.pm • CGI::Application • Apache::Request •

    HTTP::Engine • Catalyst::Engine

41. ͜Ε·Ͱ͸ΞʔΩςΫνϟ΍ ϓϩάϥϛϯάΠϯλʔϑΣΠεΛ த৺ʹ͝঺հ

42. ͔͜͜Β͸αʔόʔ΁ͷ ൓өํ๏ʹ͍ͭͯ͝঺հ

43. FTP

44. CGI/mode_perl/FastCGIͰ͸FTPΛ ࢖ͬͯσϓϩΠ͍ͯͨ͠ͷͰলུ ※2023೥࣌఺ͷҙݟͰ͢

45. Pushܕ σϓϩΠ

46. PushܕσϓϩΠͷख๏

47. ࣮ફ: PSGIΞϓϦΛ PushܕσϓϩΠ͢Δ

48. PushܕσϓϩΠͷ೉ ఺ • αʔόʔ୆਺͕େ͖͘ͳΓ࢝Ίͨ • Push͢ΔଆͷϦιʔεͷ཯଎ͯ͠ σϓϩΠ଎౓͕஗͘ͳΔ • ύϒϦοΫΫϥ΢υͷීٴͰΦʔ τεέʔϧ͢ΔΑ͏ʹͳ͕ͬͨɺ

    ͦͷ৔߹ͷ৯͍߹Θ͕ͤѱ͍

49. Pullܕ σϓϩΠ

50. PullܕσϓϩΠͷख๏

51. ࣮ફ: stretcherΛ༻͍ͨ PushܕσϓϩΠ

52. ΞʔΩςΫνϟͷ঺հʹ໭Δ

53. Docker

54. DockerΛ࢖ͬͨσϓϩΠͷख๏

55. ࣮ફ: Docker SwarmΛ༻͍ͨ DockerͷσϓϩΠ

56. Dockerͷొ৔എܠ • Dockerͷൃද͸2013೥ • PullܕσϓϩΠ • ʮίϯςφʯͱ͍͏ܗͰWebΞϓϦέʔγϣϯΛϥϯλΠϜ͝ͱ packͯ͠σϓϩΠ͢Δख๏ • ʮσϓϩΠʯͷର৅͕ΞϓϦέʔγϣϯϓϩάϥϜʹՃ͑ͯϥϯ

    λΠϜ·Ͱ޿͕ͬͨ

57. Serverless

58. LambdaΛ༻͍ͨαʔόʔϨεͷख๏

59. ࣮ફ: lambrollΛ༻͍ͨ Perl WebΞϓϦέʔγϣϯͷσϓϩΠ

60. Serverless/FaaSͷొ৔എܠ • ΞϓϦέʔγϣϯ੍࡞ऀ͕௚઀؅ཧ͢Δର৅͕࣌୅Λ௥͏͝ͱʹϨΠ Ϡʔ্͕΁ͱ্͕͍͍ͬͯͬͯͨ • ෺ཧαʔόʔ, Ծ૝αʔόʔ, IaaS, ίϯςφ •

    ϥϯλΠϜ΍ϓϩηεͷϥΠϑαΠΫϧ·ͰΫϥ΢υࣄۀऀʹ͓ئ͍ ͯ͠͠·͏ͷ͕Serverless • Ϩϯλϧαʔόʔ/CGI΁ͷճؼ, ΑΓޮ཰Խ͞Εͨ΋ͷ

61. Serverless/FaaSͷྨࣅ඼ • PaaS • Heroku, Elastic Beanstalk, AppEngine(Flexible Environment)… •

    ϥϯλΠϜͷ੹຿͸Ϋϥ΢υࣄۀऀ • ͨͩ͠αʔόʔతଘࡏ͸࣮֬ʹײ͡Δ, εέʔϦϯάઃఆͳͲ

62. ͍͔͕Ͱͨ͠Ͱ͠ΐ͏͔

63. ొஃऀͷײ૝ • σϓϩΠٕज़͸લʹ࢖ΘΕٕͨज़ͷ՝୊Λղফ͢ΔͨΊʹੜ·Ε͖ͯͨ • ࢼߦࡨޡͷ݁Ռࠓ͕͋Δɻͭ·Γ “try/catch” Ͱ͢Ͷ • ͦΕ͸ͦΕͱͯ͠ɺੲͷٕज़Ͱ΋ݟͲ͜Ζ͸͋Δ •

    CGI͕ಈ͘Ϩϯλϧαʔόʔ͸FaaSͱݴ͑Δ • ੲΑΓ΋WebΞϓϦέʔγϣϯ͕ղ͜͏ͱ͢Δ՝୊͕ෳࡶʹͳ͍ͬͯΔ ͷͰɺ؅ཧํ๏ͷҰͭͰ͋ΔʮσϓϩΠʯ΋ෳࡶʹͳΔ܏޲

64. ͋ͳͨͷ޷͖ͳ ʮσϓϩΠʯ͸ ͋Γ·͔ͨ͠ʁ

65. ࠙਌ձͱ͔࿓ԼͰ࿩ͯ͠ཉ͍͠࿩୊ • 2000೥ΑΓલͷJavaͱ͔͸Ͳ͏΍ͬͯσϓϩΠ͍ͯͨ͠ͷ͔ʁ • warͰݻΊͯΛFTPͰυʔϯ͍ͯͨ͠, TomcatͰͱ͍͏࿩୊͕͋Γ·͢ɻ༗ࣝऀ ͷํʑͲ͏ͧ • ASPͱ͔IISͱ͔Windows Server

    • mod_perl͔FastCGIͲͪΒΛ࢖͍͔ͬͯͨ • ͓͢͢ΊͷϨϯλϧαʔόʔ • ొஃऀ͸XREAΛ࢖͍ͬͯ·ͨ͠

66. ࠙਌ձͱ͔࿓ԼͰ࿩ͯ͠ཉ͍͠࿩୊ ͦͷ2 • ϩʔϦϯάϦελʔτ, ϒϧʔάϦʔϯσϓϩΠ • graceful restart • PullܕσϓϩΠ+graceful

    restart͸σϓϩΠ͕ΊͪΌΊͪΌ଎͔ͬͨ • ΠϯϑϥͷઃఆσϓϩΠͱΞϓϦέʔγϣϯͷσϓϩΠͷڥ໨