ការចេញផ្សាយស្ថេរភាពដំបូងនៃឧបករណ៍ប្រើប្រាស់សម្រាប់ការទាញយកមាតិកាគេហទំព័រ GNU Wget2

បន្ទាប់ពីរយៈពេល 2 ឆ្នាំកន្លះនៃការអភិវឌ្ឍន៍ ការចេញផ្សាយស្ថេរភាពដំបូងនៃគម្រោង GNU Wget2 ត្រូវបានបង្ហាញដោយបង្កើតកំណែដែលបានរចនាឡើងវិញទាំងស្រុងនៃកម្មវិធីសម្រាប់ស្វ័យប្រវត្តិកម្មការទាញយកឡើងវិញនៃមាតិកា GNU Wget ។ GNU Wget3 ត្រូវបានរចនាឡើង និងសរសេរឡើងវិញពីដំបូង និងគួរឱ្យកត់សម្គាល់សម្រាប់ការផ្លាស់ប្តូរមុខងារមូលដ្ឋានរបស់ម៉ាស៊ីនភ្ញៀវគេហទំព័រទៅក្នុងបណ្ណាល័យ libwget ដែលអាចត្រូវបានប្រើដោយឡែកពីគ្នានៅក្នុងកម្មវិធី។ ឧបករណ៍ប្រើប្រាស់ត្រូវបានផ្តល់អាជ្ញាប័ណ្ណក្រោម GPLv3+ ហើយបណ្ណាល័យត្រូវបានផ្តល់អាជ្ញាប័ណ្ណក្រោម LGPLvXNUMX+ ។

ជំនួសឱ្យការដំណើរការឡើងវិញជាបណ្តើរៗនូវមូលដ្ឋានកូដដែលមានស្រាប់ វាត្រូវបានសម្រេចចិត្តធ្វើអ្វីៗឡើងវិញពីដំបូង និងបង្កើតសាខា Wget2 ដាច់ដោយឡែក ដើម្បីអនុវត្តគំនិតសម្រាប់ការរៀបចំរចនាសម្ព័ន្ធឡើងវិញ ការបង្កើនមុខងារ និងធ្វើការផ្លាស់ប្តូរដែលបំបែកភាពឆបគ្នា។ ជាមួយនឹងករណីលើកលែងនៃការបដិសេធនៃពិធីការ FTP និងទម្រង់ WARC wget2 អាចដើរតួជាការជំនួសប្រកបដោយតម្លាភាពសម្រាប់ឧបករណ៍ប្រើប្រាស់ wget បុរាណក្នុងស្ថានភាពភាគច្រើន។

ទោះយ៉ាងណាក៏ដោយ wget2 មានភាពខុសប្លែកគ្នាមួយចំនួននៅក្នុងអាកប្បកិរិយា ផ្តល់ជម្រើសបន្ថែមប្រហែល 30 និងឈប់គាំទ្រជម្រើសរាប់សិប។ រួមទាំងដំណើរការនៃជម្រើសដូចជា “-ask-password”, “-header”, “-exclude-directories”, “-ftp*”, “-warc*”, “-limit-rate”, “-relative” ត្រូវបាន បានបញ្ឈប់ " និង "--unlink" ។

ការច្នៃប្រឌិតសំខាន់ៗរួមមាន:

• ការផ្លាស់ទីមុខងារទៅបណ្ណាល័យ libwget ។
• ការផ្លាស់ប្តូរទៅស្ថាបត្យកម្មពហុខ្សែ។
• សមត្ថភាពក្នុងការបង្កើតការតភ្ជាប់ច្រើនក្នុងពេលដំណាលគ្នា និងទាញយកទៅកាន់ខ្សែស្រឡាយច្រើន។ វាក៏អាចធ្វើទៅបានដើម្បីប៉ារ៉ាឡែលការទាញយកឯកសារមួយចែកជាប្លុកដោយប្រើជម្រើស "-chunk-size" ។
• ការគាំទ្រពិធីការ HTTP/2 ។
• ប្រើបឋមកថា If-Modified-Since HTTP ដើម្បីទាញយកតែទិន្នន័យដែលបានកែប្រែប៉ុណ្ណោះ។
• ប្តូរទៅប្រើឧបករណ៍កំណត់កម្រិតបញ្ជូនខាងក្រៅដូចជា trickle ។
• ការគាំទ្រសម្រាប់បឋមកថាទទួលយកការអ៊ិនកូដ ការផ្ទេរទិន្នន័យដែលបានបង្ហាប់ និង brotli, zstd, lzip, gzip, deflate, lzma, និង bzip2 ក្បួនដោះស្រាយការបង្ហាប់។
• ការគាំទ្រសម្រាប់ TLS 1.3, OCSP (ពិធីសារស្ថានភាពវិញ្ញាបនបត្រលើបណ្តាញ) សម្រាប់ការត្រួតពិនិត្យវិញ្ញាបនបត្រដែលបានដកហូត យន្តការ HSTS (HTTP Strict Transport Security) យន្តការសម្រាប់ការបង្ខំឱ្យប្តូរទិសទៅ HTTPS និង HPKP (HTTP Public Key Pinning) សម្រាប់ការភ្ជាប់វិញ្ញាបនបត្រ។
• សមត្ថភាពក្នុងការប្រើ GnuTLS, WolfSSL និង OpenSSL ជាកម្មវិធីខាងក្រោយសម្រាប់ TLS ។
• ការគាំទ្រសម្រាប់ការបើកការភ្ជាប់ TCP រហ័ស (TCP FastOpen) ។
• គាំទ្រទម្រង់ Metalink ដែលភ្ជាប់មកជាមួយ។
• ការគាំទ្រសម្រាប់ឈ្មោះដែនអន្តរជាតិ (IDNA2008) ។
• សមត្ថភាពក្នុងការដំណើរការក្នុងពេលដំណាលគ្នាតាមរយៈម៉ាស៊ីនមេប្រូកស៊ីជាច្រើន (ស្ទ្រីមមួយនឹងត្រូវបានផ្ទុកតាមរយៈប្រូកស៊ីមួយ និងទីពីរតាមរយៈមួយផ្សេងទៀត) ។
• ភ្ជាប់មកជាមួយការគាំទ្រសម្រាប់ព័ត៌មានព័ត៌មានក្នុងទម្រង់ Atom និង RSS (ឧទាហរណ៍ សម្រាប់ស្កេន និងទាញយកតំណ)។ ទិន្នន័យ RSS/Atom អាចទាញយកបានពីឯកសារមូលដ្ឋាន ឬតាមបណ្តាញ។
• ការគាំទ្រសម្រាប់ការទាញយក URLs ពីផែនទីគេហទំព័រ។ ភាពអាចរកបាននៃឧបករណ៍ញែកសម្រាប់ការទាញយកតំណពីឯកសារ CSS និង XML ។
• ការគាំទ្រសម្រាប់ការណែនាំ 'រួមបញ្ចូល' នៅក្នុងឯកសារកំណត់រចនាសម្ព័ន្ធ និងការចែកចាយការកំណត់ឆ្លងកាត់ឯកសារជាច្រើន (/etc/wget/conf.d/*.conf) ។
• យន្តការឃ្លាំងសម្ងាត់សំណួរ DNS ដែលភ្ជាប់មកជាមួយ។
• លទ្ធភាពនៃការកត់ត្រាមាតិកាឡើងវិញដោយការផ្លាស់ប្តូរការអ៊ិនកូដឯកសារ។
• គណនេយ្យសម្រាប់ឯកសារ "robots.txt" កំឡុងពេលទាញយកឡើងវិញ។
• របៀបសរសេរដែលអាចទុកចិត្តបានជាមួយនឹងការហៅ fsync() បន្ទាប់ពីរក្សាទុកទិន្នន័យ។
• សមត្ថភាពក្នុងការបន្តវគ្គ TLS ដែលត្រូវបានរំខាន ក៏ដូចជាឃ្លាំងសម្ងាត់ និងរក្សាទុកប៉ារ៉ាម៉ែត្រសម័យ TLS ទៅក្នុងឯកសារមួយ។
• របៀប "--input-file-" សម្រាប់ផ្ទុក URLs ដែលចូលមកតាមរយៈស្ទ្រីមបញ្ចូលស្តង់ដារ។
• ការពិនិត្យមើលវិសាលភាពនៃខូគីប្រឆាំងនឹងបញ្ជីនៃបច្ច័យដែនសាធារណៈ (បញ្ជីបច្ច័យសាធារណៈ) ដើម្បីញែកចេញពីគេហទំព័រផ្សេងៗគ្នាដែលបង្ហោះក្នុងដែនកម្រិតទីពីរដូចគ្នា (ឧទាហរណ៍ "a.github.io" និង "b.github ។ io”) ។
• គាំទ្រការទាញយកស្ទ្រីម ICEcast/SHOUTcast ។

ប្រភព: opennet.ru