კარგი დღე.

ბაშში კიდევ ერთი სცენარის დაწერა რომ დავასრულე, მივხვდი, რომ ყველაფერი სრულიად განსხვავებული უნდა ყოფილიყო, მაგრამ ყველაფერი მუშაობდა. მინდა გაჩვენოთ რა უხამსობა და ყავარჯნები დავწერე პრობლემის გადასაჭრელად, მაგრამ ჯერ არ მქონია ცოდნის ვაგონი. სხვა სიტყვებით რომ ვთქვათ, პროგრამირების კარიკატურა.

დავალება

Стало нужно что-то, что бы:

• აჩვენა მრავალი რითმა სიტყვისთვის, გარდა კვადრატებისა
• გადაკვეთა ორი სიტყვის მრავალი რითმა

Რისთვის? კარგი, ეს არის - და ეს არის ის.
ვინ არ იცის, კვადრატული რითმა (საერთო ენაზე - კვადრატი) არის ორი სიტყვა, რომელთა ბოლო ორი ასო მართლწერაში ემთხვევა, რაც (ხშირად, ეს ერთადერთია) მათ რითმაად აქცევს. მაგალითად, ვარდები ყინვაგამძლეა; საბურავი - მანქანა. თანამედროვე ვერსიფიკაციაში კვადრატების გამოყენება განსაკუთრებით არ არის მოწონებული ადამიანების მიერ, მათი პრიმიტიულობის გამო.

გადაწყვეტილება

მეჩვენებოდა, რომ უმარტივესი გამოსავალი იყო ბაშში სკრიპტის დაწერა, რომელიც იყენებს უკვე არსებულ რითმის გენერატორს - HOST, რომელიც პირველ რიგში ირჩევს მათ თანხმოვნებით და არა მართლწერით. როგორი მასპინძელი? რადგან საიტის ნამდვილ სახელს რომ მიუთითებ, იტყვიან, რომ ეს რეკლამაა. რატომ არ გააგრძელოთ მისი გამოყენება? ჯერ ერთი, მიუხედავად მისი უპირატესობისა რითმების შერჩევისას თანხმოვნების საფუძველზე, ის მაინც ხშირად აწარმოებს კვადრატებს. მეორეც, თქვენ ჯერ კიდევ უნდა იფიქროთ ტვინით, დახარჯოთ დრო ჩანართებს შორის გადართვაზე და ენერგია სიებში განმეორებითი სიტყვების დასამახსოვრებლად, რომ იპოვოთ რითმა ორი სიტყვისთვის.

ძლიერი რითმების მიღება

Რა ვიცი? მე ვიცი კომუნალური wget, которая скачивает страницу по указанному URL. Хорошо, выполняем запрос — получаем HTML страницу в файле, который назван словом для рифмы. К примеру, поищем по слову «здесь»:

wget https://HOST/rifma/здесь

მაგრამ მე მჭირდება მხოლოდ სიტყვების სია, როგორ მოვიშორო ყველაფერი დანარჩენი? ჩვენ ვუყურებთ და ვხედავთ, რომ სიტყვების სია ფორმატირებულია, რაც არ უნდა უცნაური იყოს, სიის სახით და სიტყვები ტეგებშია. . კარგი, ჩვენ გვაქვს დიდი უტილიტა. sed -მოდი ასე ჩავწეროთ:

cat $word | grep '<li>' | sed -e "s%<li>%%" | sed -e "s%</li>%%" | sed -e "s/ //g" | sed -e "/^$/d" 1> $word

Сначала из файла word выбираем строки, в которых содержится тег <li> — получаем кучу пустых тегов и строки со словами. Убираем сам тег и его закрывающий — здесь символы процента использованы вместо слешей потому, что в самом теге </li> уже есть слеш, отчего sed ცოტა არ მესმის შენი. და ინტერესით ყველაფერი კარგადაა. ჩვენ ვხსნით ყველა სივრცეს ფაილიდან, ვშლით ცარიელ ხაზებს. Voila - სიტყვების მზა სია.

იმისათვის, რომ ამოიღოთ სიტყვები, რომლებიც რითმობენ ბოლო ასოების გამოყენებით, აირჩიეთ ბოლო ორი ასო ორიგინალური სიტყვიდან და გაასუფთავეთ სია:

squad=${word:((${#word}-2)):2}
cat $word | sed -e "/.$squad$/d" 1> $word

ვუყურებთ, ვცდილობთ - ყველაფერი მუშაობს... მაშ, სად არის სიტყვა „თამაშის“ სია? და სიტყვა "მე მივდივარ"? ფაილი ცარიელია! და ეს ყველაფერი იმიტომ ხდება, რომ ეს სიტყვები ზმნებია და ჩვენ ვიცით, რას აკეთებენ ისინი, ვინც ზმნებს რითმობს. ზმნის რითმა უარესია თუნდაც კვადრატულ რითმაზე, რადგან რუსულ ენას აქვს ყველაზე მეტი ზმნა და ყველა მათგანს აქვს ერთი და იგივე დაბოლოება, რის გამოც ისინი არ იყო ბოლო ფაილში დაბოლოებების შემოწმების შემდეგ.

თუმცა, ჩვენ არ გვეჩქარება. თითოეული სიტყვისთვის არის არა მხოლოდ რითმები, არამედ ასონანსებიც, რომლებიც ზოგჯერ რითმაზე ბევრად უკეთესად ჟღერს - ამიტომაც არიან ისინი ასონანსები (ფრანგული ასონანსი, ლათინურიდან assono - მე ჟღერს ჰარმონიაში).

ჩვენ ვიღებთ ასონანსებს

სწორედ აქ იწყება გართობა: ასონანსები ჩნდება ცალკე URL-ზე და იმავე გვერდზე, სკრიპტის შესრულებით, HTTP მოთხოვნის გაგზავნით და პასუხის მიღებით. როგორ ვთქვა wget'ღილაკს აჭერთ? მაგრამ არანაირად. სამწუხაროდ.

როდესაც შევამჩნიე, რომ სტრიქონში URL რატომღაც იცვლებოდა, მე დავაკოპირე ის, რაც იყო იქ ასონანსებზე გადასვლის შემდეგ და ჩასვით იგი ბრაუზერის ახალ ჩანართში - გაიხსნა ძლიერი რითმები. არა ეს.

არსებითად, მე ვფიქრობდი, რომ სერვერისთვის არ უნდა ჰქონდეს მნიშვნელობა, სკრიპტი, რომელიც მას უგზავნის მოთხოვნას, შესრულებულია თუ პირი აკრიფებს მას ხელით. Ისე? ვინ იცის, მოდით, შევამოწმოთ.

სად გავაგზავნო? რა გავაგზავნო? HTTP მოთხოვნა სერვერის IP-ზე, არის რაღაც GET... მერე არის რაღაც HTTP/1.1... უნდა ვნახოთ ბრაუზერი რას აგზავნის და სად. Დაინსტალირება wireshark, შეხედეთ მოძრაობას:

0040 37 5d a3 84 27 e7 fb 13 6d 93 ed cd 56 04 9d 82 7]£.'çû.m.íÍV...
0050 32 7c fb 67 46 71 dd 36 4d 42 3d f3 62 1b e0 ad 2|ûgFqÝ6MB=ób.à.
0060 ef 87 be 05 6a f9 e1 01 41 fc 25 5b c0 77 d3 94 ï.¾.jùá.Aü%[ÀwÓ.

ჰმ... რა? დიახ, ჩვენ გვაქვს HTTPS. Რა უნდა ვქნა? წამოიწყოთ MITM შეტევა საკუთარ თავზე? იდეალურ შემთხვევაში, მსხვერპლი თავად დაგვეხმარება.

В общем, догадавшись полазить по браузеру, я-таки нашёл сам запрос, и адресата. Поехали:

დიალოგი ტერმინალთან

telnet IP PORT
Trying IP...
Connected to IP.
Escape character is '^]'.
GET /rifma/%D0%BC%D0%B0%D1%82%D1%8C?mode=block&type=asn HTTP/1.1
Host: HOST
Accept-Language: en-US,en;q=0.5
X-Requested-With: XMLHttpRequest
Connection: close

HTTP/1.1 400 Bad Request
Server: nginx/1.8.0
Date: Sun, 03 Nov 2019 20:06:59 GMT
Content-Type: text/html; charset=utf-8
Content-Length: 270
Connection: close

<html>
<head><title>400 The plain HTTP request was sent to HTTPS port</title></head>
<body bgcolor="white">
<center><h1>400 Bad Request</h1></center>
<center>The plain HTTP request was sent to HTTPS port</center>
<hr><center>nginx/1.8.0</center>
</body>
</html>
Connection closed by foreign host.

ჰეი. ჰეჰეჰე. მართლაც, სწორედ ამას ველოდი HTTPS პორტში შიშველი HTTP მოთხოვნის გაგზავნისას. ახლა უნდა დავშიფროთ? მთელი ეს აურზაური RSA კლავიშებით, შემდეგ SHA256-ით. რატომ, არსებობს OpenSSL для таких дел. Чтож, уже знаем, что делать, только предварительно уберём поля Referer и Cookie — думаю, они не сильно повлияют на дело:

დიალოგი ტერმინალთან

openssl s_client -connect IP:PORT
{Всякие ключи, сертификаты}
GET /rifma/%D0%B7%D0%B4%D0%B5%D1%81%D1%8C?mode=block&type=asn HTTP/1.1
Host: HOST
User-Agent: Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:70.0) Gecko/20100101 Firefox/70.0
Accept: text/javascript,text/html,application/xml,text/xml,*/*
Accept-Language: ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3
Accept-Encoding: gzip, deflate, br
X-Requested-With: XMLHttpRequest
Connection: keep-alive

HTTP/1.1 200 OK
Content-Type: text/html;charset=utf-8
Transfer-Encoding: chunked
Connection: keep-alive
Vary: Accept-Encoding
Status: 200 OK
Date: Sun, 03 Nov 2019 20:34:33 GMT
Set-Cookie: COOKIE
X-Powered-By: Phusion Passenger 5.0.16
Server: nginx/1.8.0 + Phusion Passenger 5.0.16
Expires: Thu, 01 Jan 1970 00:00:01 GMT
Cache-Control: no-cache
Strict-Transport-Security: max-age=31536000
Content-Security-Policy: block-all-mixed-content
Content-Encoding: gzip

ეს რა არის, სერვერზე გინება? ისე მაინც 200 OK მიპასუხეს, რაც ნიშნავს რომ ქუქიები და რეფერერი არაფერზე არ მოქმედებს. შეკუმშვა არის gzip, მაგრამ კოპირებისას ASCII სიმბოლოები კოპირდება. ზუსტად, თქვენ შეგიძლიათ ამოიღოთ ხაზი მიღება-დაშიფვრა. Всё прекрасно — получаем HTML документ, теперь уже с ассонансами. Но вот два вопроса: как запускать OpenSSL и передавать ему данные скриптом? И как считывать вывод, если после получения ответа мы остаемся как бы в «оболочке» OpenSSL? Если со вторым можно что-то придумать, но вот с первым…

კარგია რომ არსებობს ჰაბრსადაც წავიკითხე უტილიტის შესახებ ველით, რომელიც ავტომატიზირებს პროგრამებთან ურთიერთქმედების პროცესს, რომელიც მოელის ადამიანის ურთიერთქმედებას. გუნდის ყოლა კიდევ უფრო მიმზიდველია ავტომატური მოლოდინი, წარმოქმნის ველით სკრიპტი ეფუძნება თქვენს ქმედებებს. კარგად, ჩვენ გავუშვით, გააკეთეთ ეს ყველაფერი და აქ არის დასრულებული სკრიპტი. მხოლოდ ის არის ძალიან დიდი და ყველაფერი იმიტომ OpenSSL აჩვენებს სერთიფიკატებს, გასაღებებს და ველით ელის ამ ყველაფრის შედეგს. გვჭირდება ეს? არა. ჩვენ ვხსნით მთელ პირველ მოთხოვნას და ვტოვებთ მხოლოდ ბოლო ხაზის შესვენებას "r". ჩვენ ასევე ვხსნით მომხმარებლის აგენტის და Accept ველებს ჩვენი მოთხოვნიდან - ისინი არაფერზე არ იმოქმედებენ. მაშ ასე, დავიწყოთ. სკრიპტი შესრულდა, მაგრამ სად არის ძვირფასი HTML დოკუმენტი? ველოდოთ შეჭამა. იმისათვის, რომ ის გამოფურთხონ, თქვენ უნდა დააყენოთ:

set results $expect_out(buffer)

სკრიპტის დასრულებამდე - ასე ჩაიწერება შესრულებადი ფაილის გამოსავალი ველით'om ბრძანება და ნაჩვენებია ეკრანზე. მოკლედ, მსგავსი რამ:

სკრიპტის მოლოდინი

#!/usr/bin/expect -f

set timeout -1
spawn openssl s_client -connect IP:PORT
match_max 100000
expect -exact "
---r
"
send -- "GET /rifma/%d0%b7%d0%b4%d0%b5%d1%81%d1%8c?mode=block&type=asn HTTP/1.1rHost: HOSTrAccept-Language: en-US,en;q=0.5rX-Requested-With: XMLHttpRequestrConnection: close"
expect -exact "GET /rifma/%d0%b7%d0%b4%d0%b5%d1%81%d1%8c?mode=block&type=asn HTTP/1.1r
Host: HOSTr
Accept-Language: en-US,en;q=0.5r
X-Requested-With: XMLHttpRequestr
Connection: close"
send -- "r"
set results $expect_out(buffer)
expect -exact "r
"
send -- "r"
expect eof

მაგრამ ეს ყველაფერი არ არის! როგორც ხედავთ, ყველა მაგალითში მოთხოვნის URL იყო სტატიკური, მაგრამ ეს არის URL, რომელიც პასუხისმგებელია იმაზე, თუ რომელი სიტყვა ასოცირდება ასონანსებთან. ასე რომ, გამოდის, რომ ჩვენ მუდმივად ვეძებთ სიტყვას "%d0%b7%d0%b4%d0%b5%d1%81%d1%8c" ASCII-ში ან "აქ" UTF-8-ში. Რა უნდა ვქნა? რა თქმა უნდა, უბრალოდ შექმენით ახალი სკრიპტი ყოველ ჯერზე, მეგობრებო! Უკვე აღარ ავტომატური მოლოდინიოჰ და დახმარებით echo, იმიტომ ჩვენს ახალში არაფერი იცვლება სიტყვის გარდა. გაუმარჯოს ახალ პრობლემას: როგორ შეგვიძლია ჭკვიანურად გადავთარგმნოთ სიტყვა კირილიციდან URL ფორმატში? ტერმინალისთვისაც არაფერია განსაკუთრებული. კარგი, არა უშავს, ჩვენ შეგვიძლია ამის გაკეთება, არა? შეუძლია:

ნახე რა შემიძლია!

function furl {
furl=$(echo "$word" | sed 's:А:%d0%90:g;s:Б:%d0%91:g;s:В:%d0%92:g;s:Г:%d0%93:g;s:Д:%d0%94:g;s:Е:%d0%95:g;s:Ж:%d0%96:g;s:З:%d0%97:g;s:И:%d0%98:g;s:Й:%d0%99:g;s:К:%d0%9a:g;s:Л:%d0%9b:g;s:М:%d0%9c:g;s:Н:%d0%9d:g;s:О:%d0%9e:g;s:П:%d0%9f:g;s:Р:%d0%a0:g;s:С:%d0%a1:g;s:Т:%d0%a2:g;s:У:%d0%a3:g;s:Ф:%d0%a4:g;s:Х:%d0%a5:g;s:Ц:%d0%a6:g;s:Ч:%d0%a7:g;s:Ш:%d0%a8:g;s:Щ:%d0%a9:g;s:Ъ:%d0%aa:g;s:Ы:%d0%ab:g;s:Ь:%d0%ac:g;s:Э:%d0%ad:g;s:Ю:%d0%ae:g;s:Я:%d0%af:g;s:а:%d0%b0:g;s:б:%d0%b1:g;s:в:%d0%b2:g;s:г:%d0%b3:g;s:д:%d0%b4:g;s:е:%d0%b5:g;s:ж:%d0%b6:g;s:з:%d0%b7:g;s:и:%d0%b8:g;s:й:%d0%b9:g;s:к:%d0%ba:g;s:л:%d0%bb:g;s:м:%d0%bc:g;s:н:%d0%bd:g;s:о:%d0%be:g;s:п:%d0%bf:g;s:р:%d1%80:g;s:с:%d1%81:g;s:т:%d1%82:g;s:у:%d1%83:g;s:ф:%d1%84:g;s:х:%d1%85:g;s:ц:%d1%86:g;s:ч:%d1%87:g;s:ш:%d1%88:g;s:щ:%d1%89:g;s:ъ:%d1%8a:g;s:ы:%d1%8b:g;s:ь:%d1%8c:g;s:э:%d1%8d:g;s:ю:%d1%8e:g;s:я:%d1%8f:g;s:ё:%d1%91:g;s:Ё:%d0%81:g')}

საერთო ჯამში, ჩვენ გვაქვს სკრიპტი, რომელიც აკონვერტებს სიტყვას ASCII ტექსტად, წარმოქმნის სხვა სკრიპტს, რომელიც ითხოვს საიტის გვერდს ასონანსებით სერვერიდან OpenSSL-ის საშუალებით. შემდეგ ჩვენ გადავიყვანთ ბოლო სკრიპტის გამომავალს ფაილზე და ძველებურად გადავცემთ მას "ფილტრები" დამატებითი კვადრატები და ჩაწერეთ ისინი ფაილში.

ბევრის კვეთა. ქვედა ხაზი

სინამდვილეში, ეს არის ზუსტად ის, რაც იწვევს ყველაზე ნაკლებ პრობლემებს. ზემოაღნიშნულ პროცედურებს ვატარებთ ორი სიტყვისთვის, შემდეგ ორი სიიდან ვადარებთ თითოეულ სიტყვას და თუ შესატყვისი აღმოვაჩინეთ, გამოვყავით. ახლა ჩვენ გვაქვს სკრიპტი, რომელიც იღებს ორ სიტყვას შეყვანად და აჩვენებს სიტყვების ჩამონათვალს, რომლებიც რითმობენ ორივეს, და თანაც ასონანსების გათვალისწინებით, და ეს ყველაფერი ოთხ ჩანართს შორის ხელით გადართვისა და სიტყვების „თვალით“ დამახსოვრების გარეშე - ყველა შეგროვებული, აღრიცხული ამისთვის და ავტომატურად გაუქმებულია. მშვენიერია.

ამ პუბლიკაციის მიზანი იყო იმის ჩვენება, რომ თუ ადამიანს რამე სჭირდება, ის მაინც გააკეთებს. ძალიან არაეფექტური, მრუდე, მცოცავი, მაგრამ იმუშავებს.

წყარო: www.habr.com