Treść książki
Przejdź do opcji czytnikaPrzejdź do nawigacjiPrzejdź do informacjiPrzejdź do stopki
Wstęp
7
[65],[66],[67]).Niektórezproponowanychmetodmożnarealizowaćwsposób
systoliczny[68],[69],[70],[71],[72],[73]lubcałkowicierównoległy.
Wostatnichlatachgwałtownierosnąmożliwościwykonywaniaobliczeńwsposób
równoległy.Dopodstawowychrozwiązańzaliczająsię:
realizacjaideikomputerawektorowegopoprzezwprowadzenierozkazów
SIMDwykonującychzadaneoperacjenawektorachdanych,
wprowadzenie
procesorów
wielordzeniowych
umożliwiających
wykonywaniewspółbieżnewieluprocesów,
rozbudowajednostekobliczeniowychwkartachgraficznychtak,bymogły
realizowaćobliczeniazleconeprzezproces,aniezwiązanez
wyświetlaniemgrafiki,
wprowadzaniemacierzyprocesorówobliczeniowychwjednymukładzie
scalonym,
zwiększeniemożliwościukładówprogramowalnych(np.FPGA)tak,by
byływstaniezmieścićwieleelementówobliczeniowych,
stosowanieklastrówigridówdoobliczeńwspółbieżnych.
Pojawieniesiepowyższychmożliwościzachęcadopołączeniasiecineuronowych
zobliczeniamirównoległymi.Rezultatemtakiegopołączeniapowinienbyćwzrost
wydajnościdziałaniasiecineuronowychorazichuczenia.Wniniejszejmonografii
przygotowanostrukturyrównoległeumożliwiającedziałanie,aprzedewszystkim
uczeniejednokierunkowychsiecineuronowychorazrekurencyjnychsieci
perceptronowych.
Rozdziałpierwszyjestkrótkimwprowadzeniemwtematykęsiecineuronowych.
Rozpoczynaodprzedstawieniadziałanianeuronubiologicznego,pokazujejego
uproszczonymodelmatematycznyorazogólnąbudowęsztucznychsieci
neuronowych.Szczegółowowyjaśniastosowanąterminologięidziałaniefunkcji
aktywacji(przejścia)neuronu.Następniewyjaśniapojęcieuczenianadzorowanego
siecineuronowychorazwłaściwośćsymetriiprzestrzeniwag.Nakońcu
wyjaśnionesąprzykładyzrównolegleniaobliczeńzpodaniembudowystrukturi
ichelementówprzetwarzających.
Rozdział
drugi
przedstawia
algorytmy
uczenia
jednokierunkowych
sieci
neuronowych.Napoczątkupokazanesąklasycznemetodyuczenia:propagacja
wstecznabłędówijejmomentowaodmianaorazzestawichheurystycznych
modyfikacji.Następnieomówionesąmetodyrekurencyjnenajmniejszych
kwadratówklasycznaiznormalizowana.Dlaobutychmetodprzedstawionowersje
zmodyfikowaneSMRLS.Dalejwprowadzononowąwersjęalgorytmu
