പ്രവർത്തിക്കുന്ന വീഡിയോ സേവനത്തിന്റെ ദ്രുതഗതിയിലുള്ള വികസനത്തിനുള്ള സെർവർലെസ് സമീപനം

ഞാൻ ഔട്ട്‌സോഴ്‌സിംഗിൽ പ്രവർത്തിക്കുന്നു, അവിടെ പ്രധാന തത്ത്വം "ഒരുപാട് വിൽക്കുക, വേഗത്തിൽ ചെയ്യുക" എന്ന വാക്യത്താൽ വിവരിക്കാം. നമ്മൾ അത് എത്ര വേഗത്തിൽ ചെയ്യുന്നുവോ അത്രയും കൂടുതൽ സമ്പാദിക്കും. കൂടാതെ, എല്ലാം ക്രച്ചസിലും സ്നോട്ടിലും അല്ല, മറിച്ച് സ്വീകാര്യമായ നിലവാരത്തിൽ പ്രവർത്തിക്കുന്നത് അഭികാമ്യമാണ്. ചുരുങ്ങിയ സമയത്തിനുള്ളിൽ ഒരു പ്രമോഷണൽ സേവനം വികസിപ്പിക്കേണ്ടത് ആവശ്യമായി വന്നപ്പോൾ എന്റെ അനുഭവത്തെക്കുറിച്ച് ഞാൻ നിങ്ങളോട് പറയും.

നൽകിയത്: AWS-ൽ റൂട്ട് അക്കൗണ്ട്, ടെക്നോളജി സ്റ്റാക്ക് തിരഞ്ഞെടുക്കുന്നതിന് നിയന്ത്രണങ്ങളൊന്നുമില്ല, ഒരു ബാക്കെൻഡ്, വികസനത്തിന് ഒരു മാസം.

ചുമതല: ഉപയോക്താക്കൾ ഒന്ന് മുതൽ നാല് സെക്കൻഡ് വരെ ദൈർഘ്യമുള്ള ഒന്ന് മുതൽ നാല് വരെ വീഡിയോകൾ അപ്‌ലോഡ് ചെയ്യുന്ന ഒരു പ്രമോഷണൽ സേവനം നടപ്പിലാക്കുക, അവ യഥാർത്ഥ വീഡിയോ സീരീസിൽ ഉൾച്ചേർക്കുന്നു.

തീരുമാനം

ഇത്രയും ചുരുങ്ങിയ സമയത്തിനുള്ളിൽ നിങ്ങളുടെ സ്വന്തം സൈക്കിൾ സർവീസ് എഴുതുന്നത് നല്ല ആശയമല്ല. കൂടാതെ, സേവനത്തിന് ലോഡിനെ നേരിടാനും എല്ലാവർക്കും പ്രിയപ്പെട്ട വീഡിയോ ലഭിക്കാനും, അടിസ്ഥാന സൗകര്യങ്ങൾ ആവശ്യമാണ്. കൂടാതെ വിമാനത്തിൽ നിന്നുള്ള വില ടാഗിനൊപ്പം അല്ല നല്ലത്. അതിനാൽ, ചുരുങ്ങിയ കസ്റ്റമൈസേഷനോടുകൂടിയ റെഡിമെയ്ഡ് പരിഹാരങ്ങളിൽ ഞങ്ങൾ ഉടൻ ശ്രദ്ധ കേന്ദ്രീകരിക്കുന്നു.

വീഡിയോയ്‌ക്കൊപ്പം പ്രവർത്തിക്കുന്നതിനുള്ള സ്റ്റാൻഡേർഡ് സൊല്യൂഷൻ, ക്രോസ്-പ്ലാറ്റ്‌ഫോം കൺസോൾ യൂട്ടിലിറ്റിയായ FFmpeg ആണ്, അത് ആർഗ്യുമെന്റുകളിലൂടെ ഓഡിയോ മുറിക്കാനും ഓവർഡബ് ചെയ്യാനും നിങ്ങളെ അനുവദിക്കുന്നു. ഒരു പൊതിച്ചോറ് എഴുതി ജീവിതത്തിലേക്ക് വിടുക മാത്രമാണ് ഇനി ചെയ്യാനുള്ളത്. രണ്ട് വീഡിയോകൾ ഒരുമിച്ച് ചേർക്കുന്ന ഒരു പ്രോട്ടോടൈപ്പ് ഞങ്ങൾ എഴുതുന്നു, ഒപ്പം... രസകരം ആരംഭിക്കുന്നു. ലൈബ്രറി .NET കോർ 2 അടിസ്ഥാനമാക്കിയുള്ളതാണ്, അത് ഏതെങ്കിലും വെർച്വൽ മെഷീനിൽ പ്രവർത്തിക്കണം, അതിനാൽ ഞങ്ങൾ ഒരു AWS EC2 ഉദാഹരണം എടുക്കും, എല്ലാം പ്രവർത്തിക്കും

മറഞ്ഞിരിക്കുന്ന വാചകംഇല്ല, അത് പ്രവർത്തിക്കില്ല
.
FFmpeg ടാസ്‌ക്ക് ലളിതമാക്കുന്നുവെങ്കിലും, ശരിക്കും പ്രവർത്തിക്കുന്ന ഒരു പരിഹാരത്തിനായി നിങ്ങൾ ഒരു EC2 ഇൻസ്‌റ്റൻസ് സൃഷ്‌ടിക്കുകയും അതിനായി ഒരു ലോഡ് ബാലൻസർ ഉൾപ്പെടെ ഒരു നെറ്റ്‌വർക്ക് ഇൻഫ്രാസ്ട്രക്ചർ രൂപകൽപ്പന ചെയ്യുകയും വേണം. സ്ക്രാച്ചിൽ നിന്ന് വിന്യസിക്കുന്നതിനുള്ള ലളിതമായ ചുമതല "കുറച്ച്" കൂടുതൽ സങ്കീർണ്ണമാവുകയും ഇൻഫ്രാസ്ട്രക്ചർ ഉടൻ പണം ആവശ്യപ്പെടാൻ തുടങ്ങുകയും ചെയ്യുന്നു - ഓരോ മണിക്കൂറിലും റൺടൈമിനുള്ള തുക ക്ലയന്റ് അക്കൗണ്ടിൽ നിന്ന് പിൻവലിക്കുന്നു.

ഞങ്ങളുടെ സേവനത്തിൽ ദൈർഘ്യമേറിയ പ്രവർത്തന പ്രക്രിയകൾ ഉൾപ്പെടുന്നില്ല, വലുതും തടിച്ചതുമായ റിലേഷണൽ ഡാറ്റാബേസ് ആവശ്യമില്ല, കൂടാതെ മൈക്രോസർവീസ് കോളുകളുടെ ഒരു ശൃംഖലയുള്ള ഇവന്റ് അധിഷ്‌ഠിത ആർക്കിടെക്ചറിലേക്ക് തികച്ചും യോജിക്കുന്നു. പരിഹാരം സ്വയം നിർദ്ദേശിക്കുന്നു - നമുക്ക് EC2 ഉപേക്ഷിച്ച് AWS Lambda അടിസ്ഥാനമാക്കിയുള്ള സ്റ്റാൻഡേർഡ് ഇമേജ് റീസൈസർ പോലെ ഒരു യഥാർത്ഥ സെർവർലെസ് ആപ്ലിക്കേഷൻ നടപ്പിലാക്കാം.

വഴിയിൽ, .NET-നുള്ള AWS ഡവലപ്പർമാരുടെ വ്യക്തമായ ഇഷ്ടക്കേട് ഉണ്ടായിരുന്നിട്ടും, അവർ .NET കോർ 2.1-നെ റൺടൈം ആയി പിന്തുണയ്ക്കുന്നു, ഇത് വികസന അവസരങ്ങളുടെ മുഴുവൻ ശ്രേണിയും നൽകുന്നു.

കേക്കിലെ ചെറി - AWS വീഡിയോ ഫയലുകൾക്കൊപ്പം പ്രവർത്തിക്കാൻ ഒരു പ്രത്യേക സേവനം നൽകുന്നു - AWS എലമെന്റൽ മീഡിയകൺവെർട്ട്.

ജോലിയുടെ സാരാംശം അവിശ്വസനീയമാംവിധം ലളിതമാണ്: ഔട്ട്ഗോയിംഗ് വീഡിയോയിലേക്ക് ഞങ്ങൾ ഒരു S3 ലിങ്ക് എടുക്കുന്നു, AWS കൺസോൾ, .NET SDK അല്ലെങ്കിൽ JSON എന്നിവയിലൂടെ ഞങ്ങൾ വീഡിയോയിൽ എന്താണ് ചെയ്യേണ്ടതെന്ന് എഴുതുകയും സേവനത്തിലേക്ക് വിളിക്കുകയും ചെയ്യുന്നു. ഇൻകമിംഗ് അഭ്യർത്ഥനകൾ പ്രോസസ്സ് ചെയ്യുന്നതിനുള്ള ക്യൂകൾ ഇത് തന്നെ നടപ്പിലാക്കുന്നു, ഫലം S3-ലേക്ക് അപ്‌ലോഡ് ചെയ്യുന്നു, ഏറ്റവും പ്രധാനമായി, ഓരോ സ്റ്റാറ്റസ് മാറ്റത്തിനും ഒരു ക്ലൗഡ് വാച്ച് ഇവന്റ് സൃഷ്ടിക്കുന്നു. വീഡിയോ പ്രോസസ്സിംഗ് പൂർത്തിയാക്കാൻ ലാംഡ ട്രിഗറുകൾ നടപ്പിലാക്കാൻ ഇത് ഞങ്ങളെ അനുവദിക്കുന്നു.

അന്തിമ വാസ്തുവിദ്യ ഇങ്ങനെയാണ്:

മുഴുവൻ പിൻഭാഗവും രണ്ട് ലാംഡകളിലായാണ് സ്ഥാപിച്ചിരിക്കുന്നത്. മറ്റൊന്ന്, വെർട്ടിക്കൽ വീഡിയോകൾ റൊട്ടേറ്റ് ചെയ്യുന്നതിനുള്ളതാണ്, കാരണം അത്തരം ജോലികൾ ഒറ്റ പാസിൽ ചെയ്യാൻ കഴിയില്ല.

ഞങ്ങൾ മുൻഭാഗം JS-ൽ എഴുതിയ ഒരു SPA ആപ്ലിക്കേഷന്റെ രൂപത്തിൽ ഒരു പൊതു S3 ബക്കറ്റിൽ പഗ് വഴി കംപൈൽ ചെയ്യും. വീഡിയോകൾ സ്വയം ഡൗൺലോഡ് ചെയ്യാൻ, ഞങ്ങൾക്ക് സെർവർ കോഡൊന്നും ആവശ്യമില്ല - S3 നൽകുന്ന REST എൻഡ്‌പോയിന്റുകൾ തുറക്കേണ്ടതുണ്ട്. ഒരേയൊരു കാര്യം നയങ്ങളും CORS-ഉം കോൺഫിഗർ ചെയ്യാൻ മറക്കരുത്.

.അതിവിശാലമായ

• AWS MediaConvert, ചില അജ്ഞാത കാരണങ്ങളാൽ, ഓരോ വീഡിയോ ശകലത്തിനും വെവ്വേറെ ശബ്‌ദം മാത്രമേ ബാധകമാകൂ, എന്നാൽ മുഴുവൻ സ്‌ക്രീൻസേവറിൽ നിന്നും ഞങ്ങൾക്ക് സന്തോഷകരമായ ഒരു ഗാനം ആവശ്യമാണ്.
• വെർട്ടിക്കൽ വീഡിയോകൾ പ്രത്യേകം പ്രോസസ്സ് ചെയ്യേണ്ടതുണ്ട്. AWS കറുത്ത ബാറുകൾ ഇഷ്ടപ്പെടുന്നില്ല, കൂടാതെ റോളറുകൾ 90 ഡിഗ്രിയിൽ ഇടുന്നു.

എളുപ്പമുള്ള സ്കേറ്റിംഗ് റിങ്ക്

സ്റ്റേറ്റ്‌ലെസിന്റെ എല്ലാ സൗന്ദര്യവും ഉണ്ടായിരുന്നിട്ടും, വീഡിയോ ഉപയോഗിച്ച് എന്താണ് ചെയ്യേണ്ടതെന്ന് നിങ്ങൾ ട്രാക്ക് ചെയ്യേണ്ടതുണ്ട്: പൂർത്തിയാക്കിയ വീഡിയോ സീക്വൻസിലേക്ക് പശ അല്ലെങ്കിൽ ഓഡിയോ ചേർക്കുക. ഭാഗ്യവശാൽ, MediaConvert അതിന്റെ ജോലികളിലൂടെ മെറ്റാഡാറ്റ കൈമാറുന്നതിനെ പിന്തുണയ്‌ക്കുന്നു, കൂടാതെ ഏത് ഘട്ടത്തിലും ഈ മെറ്റാഡാറ്റ പാഴ്‌സ് ചെയ്‌ത് "isMasterSoundJob" എന്ന ഫോമിന്റെ ഒരു ലളിതമായ ഫ്ലാഗ് നമുക്ക് എപ്പോഴും ഉപയോഗിക്കാം.

NoOps-നൊപ്പം പ്രവർത്തിക്കാൻ സെർവർലെസ്സ് തികച്ചും അനുവദിക്കുന്നു - പ്രോജക്റ്റ് ഇൻഫ്രാസ്ട്രക്ചറിന് ഉത്തരവാദിത്തമുള്ള ഒരു പ്രത്യേക ടീമിന്റെ അനാവശ്യതയെ അനുമാനിക്കുന്ന ഒരു സമീപനം. അതിനാൽ, ഇത് ഒരു ചെറിയ കാര്യമായിരുന്നു - സിസ്റ്റം അഡ്മിനിസ്ട്രേറ്റർമാരുടെ പങ്കാളിത്തമില്ലാതെ ഞങ്ങൾ AWS-ൽ പരിഹാരം വിന്യസിക്കുന്നു, അവർക്ക് എപ്പോഴും എന്തെങ്കിലും ചെയ്യാനുണ്ട്.
ഇതെല്ലാം വേഗത്തിലാക്കാൻ, വിഎസിൽ നിന്ന് നേരിട്ട് ഒരു ബട്ടൺ ഉപയോഗിച്ച് വിന്യസിക്കാൻ നിങ്ങളെ അനുവദിക്കുന്ന AWS ക്ലൗഡ് ഫോർമേഷനിൽ ഞങ്ങൾ വിന്യാസ സ്‌ക്രിപ്റ്റ് പരമാവധി ഓട്ടോമേറ്റ് ചെയ്യുന്നു. തൽഫലമായി, 200 വരി കോഡുകളുള്ള ഒരു ഫയൽ നിങ്ങളെ ഒരു റെഡിമെയ്ഡ് സൊല്യൂഷൻ പുറത്തിറക്കാൻ അനുവദിക്കുന്നു, എന്നിരുന്നാലും ക്ലൗഡ് ഫോർമേഷൻ വാക്യഘടന നിങ്ങൾക്ക് പരിചിതമല്ലെങ്കിൽ ഞെട്ടിക്കും.

ആകെ

സെർവർലെസ്സ് ഒരു പനേഷ്യയല്ല. എന്നാൽ മൂന്ന് പരിധികളുള്ള സാഹചര്യങ്ങളിൽ ഇത് ജീവിതം വളരെ എളുപ്പമാക്കും: "പരിമിതമായ വിഭവങ്ങൾ-ഹ്രസ്വകാല-ചെറിയ പണം."

സെർവർലെസിന് അനുയോജ്യമായ ആപ്ലിക്കേഷനുകളുടെ സവിശേഷതകൾ

• ദൈർഘ്യമേറിയ പ്രക്രിയകളില്ലാതെ. API ഗേറ്റ്‌വേ ഹാർഡ് പരിധി 29 സെക്കൻഡാണ്, ലാംഡ ഹാർഡ് പരിധി 5 മിനിറ്റാണ്;
• ഇവന്റ്-ഡ്രൈവൻ ആർക്കിടെക്ചർ വിവരിച്ചത്;
• SOA പോലെയുള്ള അയഞ്ഞ കപ്പിൾഡ് ഘടകങ്ങളായി വിഘടിക്കുന്നു;
• നിങ്ങളുടെ അവസ്ഥയിൽ കൂടുതൽ ജോലി ആവശ്യമില്ല;
• .NET Core-ൽ എഴുതിയിരിക്കുന്നു. .NET ഫ്രെയിംവർക്കിനൊപ്പം പ്രവർത്തിക്കാൻ, നിങ്ങൾക്ക് ഉചിതമായ റൺടൈമിനൊപ്പം കുറഞ്ഞത് ഡോക്കറെങ്കിലും ആവശ്യമാണ്.

സെർവർലെസ് സമീപനത്തിന്റെ പ്രയോജനങ്ങൾ

• അടിസ്ഥാന സൗകര്യ ചെലവ് കുറയ്ക്കുന്നു;
• പരിഹാരം വിതരണം ചെയ്യുന്നതിനുള്ള ചെലവ് കുറയ്ക്കുന്നു;
• ഓട്ടോമാറ്റിക് സ്കേലബിളിറ്റി;
• സാങ്കേതിക പുരോഗതിയുടെ അറ്റത്തുള്ള വികസനം.

പോരായ്മകൾ, ഒരു പ്രത്യേക ഉദാഹരണം

• വിതരണം ചെയ്ത ട്രെയ്‌സിംഗും ലോഗിംഗും - AWS X-Ray, AWS CloudWatch എന്നിവയിലൂടെ ഭാഗികമായി പരിഹരിച്ചു;
• അസൗകര്യ ഡീബഗ്ഗിംഗ്;
• ലോഡ് ഇല്ലെങ്കിൽ കോൾഡ് സ്റ്റാർട്ട്;
• AWS യൂസർ-ഹോസ്റ്റൈൽ ഇന്റർഫേസ് ഒരു സാർവത്രിക പ്രശ്നമാണ് :)

അവലംബം: www.habr.com