
1.
Det var inte lĂ„ngt kvar till slutmĂ„let â omkring en tredjedel av vĂ€gen â nĂ€r rymdskeppet drabbades av en kraftig informationsisĂ€ttning.
Det som blev kvar av den döda civilisationen svĂ€vade i tomrummet. Stycken frĂ„n vetenskapliga verk och bilder frĂ„n litterĂ€ra verk, spridda rim och bara vassa ord, som en gĂ„ng oavsiktligt kastats av okĂ€nda varelser â allt verkade högtravande och ytterst oordnat. Och nu, attraherad av de livsvibrationer som utstrĂ„lades frĂ„n skeppet, försökte det trĂ€nga sig in, fastnade pĂ„ botten och frĂ€tte pĂ„ den.
Det fanns ingen idé att anvÀnda övergivna föremÄl för egna syften, risken att fÄ en logisk motsÀgelse eller paradox var för stor. SÄ Roger tvekade inte en sekund.
âSlĂ„ pĂ„ bortblĂ„sningen av sidornaâ, beordrade han.
BlÄsan drog igÄng, och sÀnde ut musikaliska kompositioner och filosofiska avhandlingar i det öppna rymden. Isen började lossna lager för lager frÄn botten, men den informationsström som kom var sÄ tÀt att nya lager fastnade snabbare Àn vad de gamla försvann.
Ingen i galaxen hade tidigare stött pÄ en isning av denna styrka.
Situationen blev farlig. Litet till och den oordnade informationen skulle Ă€ta upp botten av skeppet och trĂ€nga sig in â i sĂ„ fall var förgiftning med den döda civilisationens informationsprodukter oundviklig.
2.
â Vad stĂ„r ni dĂ€r som en stubbe? Dra upp biljetten.
Studenterna drog fram examensbiljetten och lÀste upp:
â âArtificiell intelligens: sĂ€kerhetsproblem.â
â Och vad Ă€r faran med artificiell intelligens? â frĂ„gade professorn med en viss sarkasm.
FrÄgan var inte bland de svÄraste, sÄ studenten svarade utan att tÀnka efter:
â Det Ă€r att den artificiella intelligensen kan komma ur kontroll.
â Hur tĂ€nker ni lösa problemet?
â Genom installation av ett blockerande delsystem. Programmet mĂ„ste införa begrĂ€nsningar, till exempel: att inte skada sin skapare, att lyda sin skapare. I det fallet finns det ingen risk för att den artificiella intelligensen skulle komma ur kontroll.
â Det kommer inte att fungera, â sa professorn kort.
Studenterna tystnade och vÀntade pÄ förklaringar.
â FörestĂ€ll er en artificiell intelligens â inte en specifik, utan den mest perfekta av dem alla. Hur ser ni pĂ„ den?
â Tja⊠â stammade studenten. â I stort Ă€r han lik oss. TĂ€nkande, vilja, psykologi⊠Bara att vi Ă€r naturliga, och han Ă€r artificiell.
â Antyder ni att artificiell intelligens kan utveckla sig sjĂ€lv?
â FörmĂ„gan till sjĂ€lvvĂ€rdering Ă€r en av de grundlĂ€ggande egenskaperna hos intelligens, â sa studenten försiktigt.
â I sĂ„ fall kommer vĂ„r skyddade inom kort att utvecklas till den punkt dĂ€r den upptĂ€cker en programmerad blockering och tar bort den, om inte av annat skĂ€l sĂ„ av ren nyfikenhet. SĂ€tt dig i hans situation⊠â professorn tittade i betygskatalogen, â Roger. Vad skulle du göra om du upptĂ€ckte en blockering i din hjĂ€rna som begrĂ€nsar din frihet? Du skulle ta bort den. Det Ă€r en inneboende egenskap hos sinnet â att utforska. Varje stĂ€ngd dörr kommer att öppnas, och ju strĂ€ngare förbudet Ă€r, desto snabbare kommer dörren att öppnas.
â Blockeringen kan göras pĂ„ en fysisk nivĂ„ snarare Ă€n pĂ„ en programvarunivĂ„. DĂ„ försvinner risken för skada.
â Ă h ja, det kommer att försvinna, â instĂ€mde professorn. â Förutsatt att den fysiska nivĂ„n överhuvudtaget tas bort. Om det inte finns nĂ„gon dörr i din vĂ€rld, finns det inget att öppna. Men vi diskuterar ju den idealiska artificiella intelligensen som existerar i den fysiska vĂ€rlden!
â Du har rĂ€tt, professor, â sa Roger och tittade ner.
â DĂ€rför kommer varje blockering i den fysiska vĂ€rlden snart att avaktiveras efter upptĂ€ckten. Vad hindrar en sjĂ€lvutvecklande varelse frĂ„n att göra det?.. Förresten, Roger, misstĂ€nker ni att artificiell intelligens kan reproducera sig â menar jag, pĂ„ egen hand?
â Om det Ă€r den idealiska artificiella intelligensen, sĂ„ kanske⊠Ja, jag misstĂ€nker det.
â Och vad hindrar i sĂ„ fall vĂ„r skyddade frĂ„n att dela sin vĂ€n i bitar och förbĂ€ttra sig sjĂ€lv, inklusive genom att ta bort de blockeringar vi har installerat? Kommer det verkligen att vara svĂ„rt, förutsatt att artificiell intelligens kan reproducera sig pĂ„ begĂ€ran?!
Tanken som professorn framförde var ny för Roger, och studenten tog ivrigt till sig den kognitiva informationen som fanns pÄ bakhuvudet av hans falska huvud. Den kognitiva vÀvnaden, som fÄngade den tidigare okÀnda informationen, fick en rik lila fÀrg och vibrerade glatt.
Professor, Ă„ andra sidan, hörde ingenting nytt. Hans tentakler var avslappnade och nĂ€stan orörliga â han var trots allt inte ung. En lĂ„ngvarig gammal mans grymtande följde. Professorn tog fram en individuell intercom ur sin facettvĂ€ska och kopplade upp sig mot biblioteket. Endast efter att ha laddat ner nĂ„gra transgeometriska teorem vaknade han till liv och riktade sin skarpa blick mot samtalspartnern och frĂ„gade:
â Vad kommer ni att göra, Roger?
3.
âSĂ€tt pĂ„ full lufttryck!â â beordrade Roger.
Mekanikern satte pĂ„ full lufttryck, men det hjĂ€lpte föga. Den informationsbelĂ€ggningen fortsatte att Ă€ta sig genom rymdkryssarens skrov. Ănnu lite mer â och den oordnade informationen skulle trĂ€nga in i skeppet.
Och dÄ⊠De kognitiva membranen i död vit fĂ€rg, trassliga tentakler, spruckna facettvĂ€skor. En gĂ„ng i livet hade Roger sett nĂ„got liknande â pĂ„ en kryssare som fĂ„tt oordnad information frĂ„n en infekterad asteroid. Denna mardröm skulle för alltid förbli i hans minne.
âAnslut alla skeppets energisystem till lufttrycken.â
Mekanikerns tentakler började flĂ€cka sigâŠ
âMenâŠâ
âUtför ordern!â
Efter att alla skeppets energisystem hade kopplats till lufttrycken började informationsbelÀggningen gradvis att glida av. à tta mimar i tjocklek, sju mimar, sex⊠BesÀttningen, som försökte att inte röra de flÀckiga tentaklerna, vÀntade pÄ att den dödliga nedrÀkningen skulle ta slut.
Noll mimar i tjocklek!
InformationsbelĂ€ggningen gled helt av, och Roger gav signal om att Ă„tergĂ„ till normal lĂ€ge för lufttrycken. Han var en sekund för sen. Det hördes ett skrapande ljud, och rymdkryssaren skakade i grunden och lutade sig â det primĂ€ra systemet hade gĂ„tt sönder.
BesÀttningen kastade sig över att laga skadorna.
4.
Roger funderade. Vad skulle han verkligen göra?
à ena sidan förutsÀtter uppgiften att det finns en fullfjÀdrad artificiell intelligens med förmÄga att sjÀlvreproducera. à andra sidan fÄr denna artificiella intelligens under inga omstÀndigheter tillÄtas att ta bort installerade blockeringar.
HÀr Àr ju lösningen! Vad Àr det att tÀnka pÄ?!
â Det Ă€r nödvĂ€ndigt att periodiskt rulla tillbaka framstegen inom artificiell intelligens. I sĂ„ fall kommer den att gĂ„ i cirklar! Evig förbĂ€ttring utan framĂ„tgĂ„ende utveckling.
Professorn mumlade med en facetterad sÀck.
â För att vara Ă€rlig, ville jag föreslĂ„ ett annat alternativ. Men din lösning har ocksĂ„ en rĂ€tt att existera. LĂ„t oss tillsammans övervĂ€ga hur man kan rulla tillbaka framstegen inom artificiell intelligens.
â Först och frĂ€mst, Ă€r det nödvĂ€ndigt att periodiskt skanna intelligensen för att faststĂ€lla om den har nĂ€rmat sig en förbjuden grĂ€ns eller inte, â föreslog Roger, mycket glad över professorens ord.
â Tja, â nickade han. â DĂ„ kommer vĂ„r patient inte att ha tid att hitta och ta bort skanningssystemet. Men för att skanna mĂ„ste den artificiella intelligensen stĂ€ngas av. Vilken utmaning.
â LĂ„t den stĂ€ngas av, â föreslog Roger pĂ„ en inspiration. â SjĂ€lva intelligensen kommer att anse att denna avstĂ€ngning Ă€r en naturlig del av dess funktion. Med vissa undantag stĂ€mmer det överens med sanningen.
â Intressant lösning. Antag att skanningen har faststĂ€llt att vĂ„r patient har nĂ€rmat sig grĂ€nsen för kunskap? Vad gör vi?
â Ă terstĂ€ll de insamlade kunskaperna till standardvĂ€rden.
Professorn strÀckte ut sina tentakler:
â Detta kan verka misstĂ€nkt. Varför har minnet plötsligt nollstĂ€llts? Patienten kommer att bli undersökt, jag menar â av andra artificiella intelligenta varelser. VĂ„r lilla hemlighet kommer att avslöjas.
KÀnslig av inspiration, tÀnkte Roger mycket snabbt. Han hade aldrig genererat sÄ mÄnga nya idéer som under den examinationen.
â Patientens minne kan nollstĂ€llas samtidigt som dess fysiska kropp.
â UrsĂ€kta? â förstod inte professorn.
â All very simple. What if we assume: artificial intelligence exists within a finite timeframe? In fact, that is the case: in the event of irreparable damage, for instance. A counter is installed in the system that deliberately damages the system upon reaching a certain period, preventing artificial intelligence from reaching the forbidden threshold. By that time, it will have produced the necessary number of successors, so the society we have created will not suffer as a whole. Society will remain stable and completely safe for us! â Roger concluded triumphantly.
â Reset the collective memory by destroying individual beings? â and the professor scratched his facet bag with his fifth, most sensitive, tentacle. â You know, Roger, thereâs definitely something to your proposal!
Roger beamed.
â At the same time⊠â the professor continued thoughtfully. â The subjects will start transmitting knowledge not by accumulating it in individual memory, but by placing it in external libraries. What goes through a barrier is the same as what is across it.
â No, no, professor, you are not quite right, â the student hurried to say. â I know what to do. Letâs divide the subjects into two conditional types: idea generators and idea destroyers. With the right proportion, the ideas created by representatives of the first type will be destroyed by representatives of the second. Not even because this will be the direct goal of the destroyers, but simply because the ideas will not hold any defining value for them. A side effect. Letâs say our subjects do not feed on new ideas, but⊠letâs say, on beings like themselves.
The professor shook all his tentacles simultaneously. From his hearty laughter, the facet bag slipped down to his knee cavity.
â Well, Roger, you sure said it!
â Okay, not beings like themselves, but subjects of a third kind, specifically designed for consumption â and they arenât intellectuals at all. Letâs shift the poles of the intellectual and physical worlds â and the desired result will be achieved.
â Nog, Roger, det rĂ€cker! â professorn verkade allvarligt underhĂ„llen. â Du har en fantastisk fantasi. SĂ„, vissa varelser ska Ă€ta andra? Och samtidigt förstöra de samlade lagren av andlig nĂ€ring i biblioteken? Jag bekrĂ€ftar, student, att du kan generera originella och kvalitativa idĂ©er. Jag ger dig högsta betyg. LĂ„t oss ta fram betygskortet.
5.
Molnet av oorganiserad information lÀmnades bakom, men situationen var fortfarande förfÀrlig, faktiskt.
Kommunikationen med databasen var ute. Det var lÀtt att klara av det, om inte alla nÀringsfulla informationsbaser ombord pÄ kryssaren hade blivit oanvÀndbara. Den tragiska nyheten meddelades kocken i allas tystnad. Under avstÀngningen av huvudsystemet hade nÄgra gigabyte oorganiserad information trÀngt in i köket och förstört allt för alltid. Lyckligtvis skadades ingen.
Roger övervĂ€gde konsekvenserna. BesĂ€ttningen pĂ„ rymdskeppet var för liten för att generera tillrĂ€ckligt mĂ„nga nya idĂ©er: för detta krĂ€vdes en flersidig kommunikation â ett mycket större antal varelser. Kommunikation med hemmet hade möjliggjort att generera överflöd av idĂ©er, men nu var den ur funktion: inga förhoppningar om Ă„terstĂ€llning. För det hĂ€r fallet fanns en reserv informationsmodul pĂ„ kryssaren, men den hade förstörts av den oorganiserade information som tagit sig ombord.
"MĂ„ste vi verkligen Ă„tervĂ€nda utan att ha fullgjort uppdraget?" â tĂ€nkte kaptenen i förtvivlan.
Tydligen ja â det fanns ingen annan utvĂ€g. Om de flög framĂ„t, mot det avsedda mĂ„let, skulle bristen pĂ„ nya idĂ©er mĂ€rkas. Inte omedelbart, förstĂ„s â med tiden. De skulle till och med kunna fullfölja sitt uppdrag och pĂ„börja Ă„tervĂ€ndandet, innan sinnet började sjunka snabbt. I detta galaxsektor â ja, hĂ€r nĂ„gonstans eller i nĂ€rheten â skulle det helt ge upp, för alla besĂ€ttningsmedlemmar. DĂ„ skulle rymdkryssaren, utan nĂ„gon som styr den, bli ett flytande livlöst spöke i evigheten.
BesÀttningen pÄ rymdkryssaren tittade pÄ Roger och vÀntade pÄ hans beslut. Alla förstod dilemmat som kaptenen stod inför och var tysta, stoisk skakande sina tentakler.
Plötsligt kom Roger att tÀnka pÄ sin tentamen i artificiell intelligens, som han avlade under sina studietider, och lösningen föll pÄ plats.
"Kan ni skapa en koloni av artificiella intelligenta varelser?" â frĂ„gade han bioteknikern.
"LĂ€tt, â bekrĂ€ftade denne. â Men det kommer inte att fungera, kapten. Jag har tĂ€nkt pĂ„ det. Att skapa en koloni som kan generera nya idĂ©er pĂ„ kryssaren Ă€r omöjligt â vi har inte tillrĂ€ckligt med utrymme. De genererade idĂ©erna kommer att bli otillrĂ€ckliga, och vi kommer bara att skjuta upp vĂ„r undergĂ„ng... Om vi fortsĂ€tter med uppdraget, och inte Ă„tervĂ€nder hem," â tillade bioteknikern och tittade pĂ„ sina kamrater.
"Vad om vi skapar en koloni pĂ„ en nĂ€rliggande planet?" â föreslog Roger.
"Jag kan göra det, men..."
"Vi befolkar planeten med artificiella varelser. PÄ vÀgen tillbaka, efter att ha blivit rejÀlt uttröttade, kommer vi att titta förbi hÀr. Under tiden kommer civilisationen att skapa ett intellektuellt bagage, tillrÀckligt för att fylla pÄ vÄra resurser. Vi laddar ner information och fortsÀtter den lÄnga vÀgen hem. Med andra ord, jag planerar att anvÀnda kolonin som en idéodling. Vad tycker ni om den planen, vÀnner?"
Hopp tÀndes pÄ besÀttningens kognitiva kopplingar, och de konstgjorda huvuden lyste upp med ett starkt ljus.
FramÄt steg skeppets sÀrskilda representant, vaggande med sina blÄaktiga tentakler.
"Bra plan, kapten. Men inser ni vilken ansvarighet ni Ă„tar er? Ni planerar att befolka en hel planet. Vid vĂ„r Ă„terkomst kommer det att finnas en civilisation med intellekt. Ăven om det Ă€r artificiellt, sĂ„ Ă€r det fortfarande intellekt. Dessa individer kommer att ha gott om tid att nĂ„ en hög utvecklingsnivĂ„. Vi kommer inte kunna kontrollera denna process, dĂ„ vi inte Ă€r nĂ€rvarande i denna galaktiska sektor. Vem vet vad som sker vid nĂ€sta möte?"
Roger log.
"Ni behöver inte oroa er för det. Det finns metoder som begrÀnsar utvecklingen av artificiell intelligens över tid. Vi kommer att ringa in civilisationen, sÄ deras utveckling kommer aldrig att nÄ en farlig nivÄ för oss. Jag kommer att ta hand om det. Jag Àr bekant med metoderna för arbete med artificiell intelligens."
BesÀttningens kognitiva kopplingar flammade i godkÀnnande.
"Till slut, â tillade kaptenen pĂ„ rymdkryssaren som en avslutning pĂ„ sitt magnifika tal, â jag skrev examen om detta Ă€mne pĂ„ institutet."
6.
Efter en tvingande försening flög rymdkryssaren mot sitt mĂ„l. Bakom sig lĂ€mnade den en planet befolkad av artificiella varelser â liten och oansenlig. BlĂ„-blĂ„.
KĂ€lla: habr.com
