Treść książki
Przejdź do opcji czytnikaPrzejdź do nawigacjiPrzejdź do informacjiPrzejdź do stopki
Zacznijmyodanalizysłowanefektywność”
,przyglądającsiętemupojęciuzperspek-
tywydziałańsystemówautonomiczych.Zakładaonoistnieniepewnejfunkcjicelu:
systeminteligentnynajczęściejmanacelurealizacjępewnejmisji,którejsukcesjest
możliwydozdefiniowania.Miarysukcesusąnajczęściejintegralnączęściązadania
ipomagająmaszynienabieżącomonitorowaćpostępyzarównoprocesuuczeniasię,
jakistopniarealizacjimisji.
Sposóbsformułowaniadobrejfunkcjicelujestdużymwyzwaniem.Jednązpopular-
niejszychmetod(przedstawionąbliżejwkolejnympunkcie)jestmetodapróbibłę-
dów:agentpodejmujedecyzjęorealizacjipewnegodziałania,poczymotrzymuje
zotoczeniainformacjęzwrotnązawierającądaneonowejsytuacjioraznagrodzielub
karze.Nagrodata,określanaterminemzaczerpniętymzpsychologiijakonwzmoc-
nienie”
,jestjednązpodstawowychczynnikówwpływającychnaprocesuczeniasię.
Niedoskonałośćwielumetodnauczaniawszczególnościobjawiasiękoniecznością
realizacjibardzowieluinterakcjisystemuzotoczeniem-czyliwielupróbibłędów.
Atoczęstojestikosztowne,iniebezpieczne.
Ztegowzględualgorytmyczęstosątrenowanewwirtualnychsymulatorach.Twórcy
takichsymulatorówmusząnietylkodobrzeodwzorowaćrealiadanegośrodowiska,
aleteżprecyzyjnieskonstruowaćsystemwynagradzaniazaróżnezachowania,najczę-
ściejłączącstanotoczeniawynikającyzdziałańpodjętychprzezagentazokreślonymi
przezmisjęwarunkami.Wpraktycejesttodużewyzwanie:systembędziedziałałtak,
jakbyłmotywowanypodczasnauki-wefekciewszelkiebłędywdefinicjifunkcji
nagrodyniosązasobąkonsekwencje.
Osobnym,corazczęściejpodejmowanymzagadnieniemjestteżto,ktomaokreślać
funkcjęcelu.Historialudzkościpokazuje,żespełnieniemarzeńmożebyćtragiczne
wskutkach.Możewięcdlaludzibędzielepiej,jeślitosztucznainteligencjasamaokre-
ślito,codlanichbędziedobre.Czyli,napoziomieoperacyjnym,samodzielnieskon-
struujewłasnąfunkcjęcelu.Zagadnienietojestprzedmiotembadańdziedziny
określanejjakoodwrotnenauczaniezewzmocnieniem:jejcelemjestnauczeniesyste-
muidentyfikowaniacelów,wartościinagróddlawskazanegopodmiotuprzezobser-
wacjęjegozachowań(por.Heidecke2019).Mogąonenietylkowpłynąćnametody
projektowaniaSI,aleprzedefiniowaćteżpojęcieinteligencji.Zczasemmożesięoka-
zać,żeodtakichsystemówoczekujemyzarównoefektywnegorozwiązywaniaproble-
mów,jakitrafnegorozpoznawanianaszychpotrzeb.Jeślitosięuda,parafrazując
PaulaValery’ego,przyszłośćniebędziejużtaka,jakbyłakiedyś…
Wracającdodefinicjiinteligencji,określiłbymjąjakozdolnośćdoefektywnegoza-
chowaniasięwnowychsytuacjach.Omówiłemjużpokrótceefektywność-czaswięc
nazachowanie.Zachowanieoznaczanietylkoumiejętnośćpodejmowaniadecyzji,
aleteżdostępdotzw.aktuatorów:urządzeńfizycznychczyinterfejsówkomunikacyj-
nychumożliwiającychinterakcjezotoczeniem.Wkolejnympunkcie,poświęconym
podstawomnauczaniazewzmocnieniem,wprowadzamytzw.agenta,ograniczając
14
uczeniemaszynowe
