Mikroskopia pola świetlnego
Mikroskopia pola świetlnego ( LFM ) jest metodą obrazowania mikroskopowego trójwymiarowego (3D) bez skanowania, opartą na teorii pola świetlnego . Technika ta pozwala na obrazowanie dużych objętości w czasie poniżej sekundy (~10 Hz) ([~0,1 do 1 mm] 3 ) z rozdzielczością przestrzenną ~1 μm w warunkach słabego rozpraszania i półprzezroczystości, czego nigdy nie osiągnięto innymi metodami. Podobnie jak w przypadku tradycyjnego renderowania pola świetlnego , obrazowanie LFM składa się z dwóch etapów: przechwytywania i przetwarzania pola świetlnego. W większości konfiguracji mikrosoczewka array służy do przechwytywania pola światła. Jeśli chodzi o przetwarzanie, może ono opierać się na dwóch rodzajach reprezentacji propagacji światła: optyki promieniowej i obrazie optyki falowej . Laboratorium grafiki komputerowej Uniwersytetu Stanforda opublikowało swój pierwszy prototyp LFM w 2006 roku i od tego czasu pracuje nad najnowszymi rozwiązaniami.
Generowanie pola świetlnego
Pole świetlne to zbiór wszystkich promieni przepływających przez pewną wolną przestrzeń, gdzie każdy promień można sparametryzować za pomocą czterech zmiennych. W wielu 2D jako - dwóch równoległych płaszczyznach, Zgłoszony do parametryzacji. W związku z tym intensywność pola świetlnego 4D można opisać jako funkcję skalarną: gdzie jest między dwiema płaszczyznami.
LFM można zbudować w oparciu o tradycyjną konfigurację szerokokątnego mikroskopu fluorescencyjnego i standardowej kamery CCD lub sCMOS . Pole świetlne jest generowane przez umieszczenie matrycy mikrosoczewek na pośredniej płaszczyźnie obrazu obiektywu ( lub tylnej płaszczyźnie ogniskowej opcjonalnej soczewki przekaźnikowej), a następnie jest rejestrowane przez umieszczenie czujnika kamery na tylnej płaszczyźnie ogniskowej mikrosoczewek. W rezultacie współrzędne mikrosoczewek skoniugować z tymi na płaszczyźnie przedmiotowej (jeśli zostaną dodane dodatkowe soczewki przekaźnikowe, to na przedniej płaszczyźnie ogniskowej obiektywu) ; współrzędne pikseli za każdą mikrosoczewką na płaszczyźnie obiektywu . będziemy nazywać płaszczyznę płaszczyzną ostrości Odpowiednio, jest mikrosoczewek (tj. odległością między płaszczyzną układu mikrosoczewek a płaszczyzną czujnika)
Ponadto apertury i ogniskowa każdej soczewki oraz wymiary czujnika i układu mikrosoczewek powinny być odpowiednio dobrane, aby zapewnić, że nie ma nakładania się ani pustych obszarów między sąsiednimi podobrazami za odpowiednimi mikrosoczewkami.
Realizacja ze zdjęcia ray optics
Ta sekcja przedstawia głównie prace Levoy i in ., 2006.
Widoki perspektywiczne pod różnymi kątami
Ze względu na sprzężone relacje, jak wspomniano powyżej, każdy s odpowiada promieniowi przechodzącemu przez punkt w kierunku . Dlatego piksel uzyskuje się widok perspektywiczny pod . W tym scenariuszu rozdzielczość przestrzenna jest określana przez liczbę mikrosoczewek; rozdzielczość kątowa jest określana przez liczbę pikseli za każdą mikrosoczewką.
Widoki tomograficzne oparte na syntetycznym przeogniskowaniu
Krok 1: Cyfrowe ponowne ogniskowanie
Ogniskowanie syntetyczne wykorzystuje przechwycone pole światła do obliczenia ogniskowania zdjęcia w dowolnej sekcji. Po prostym zsumowaniu wszystkich pikseli w każdym podobrazie za mikrosoczewką (co odpowiada zebraniu całego promieniowania pochodzącego z różnych kątów padającego na tę samą pozycję), obraz jest skupiany dokładnie na płaszczyźnie, która łączy się z płaszczyzną układu mikrosoczewek:
,
gdzie jest kątem między a normalną płaszczyzny czujnika i jeśli początek układu współrzędnych każdego podobrazu znajduje się na głównej osi optycznej odpowiedniej mikrosoczewki. Teraz można zdefiniować nową funkcję pochłaniającą efektywny współczynnik projekcji pola świetlnego i uzyskać rzeczywisty zbiór jasności każdego piksela: .
Aby skupić się na innej płaszczyźnie poza przednią płaszczyzną ogniskową obiektywu, powiedzmy na płaszczyźnie, której płaszczyzna sprzężona jest oddalona od płaszczyzny czujnika, płaszczyzna sprzężona może zostać przeniesiony z i ponownie sparametryzować jego pole świetlne z powrotem do pierwotnego w: : fa {\
.
W ten sposób ponownie zogniskowane zdjęcie można obliczyć za pomocą następującego wzoru:
.
W rezultacie generowany jest stos ogniskowy, aby podsumować natychmiastowe obrazowanie 3D przestrzeni obiektu. Ponadto syntetycznie możliwe są również nachylone lub nawet zakrzywione płaszczyzny ogniskowania. Ponadto każdy zrekonstruowany obraz 2D skupiony na dowolnej głębokości odpowiada wycinkowi 2D pola świetlnego 4D w domenie Fouriera , gdzie złożoność algorytmu można zmniejszyć z do .
Krok 2: Pomiar funkcji rozproszenia punktowego
stos ognisk się od rzeczywistego rozkładu intensywności wokseli , co jest naprawdę Zamiast tego jest splotem i funkcją rozrzutu punktów (PSF):
W związku z tym należy zmierzyć trójwymiarowy kształt PSF, aby odjąć jego efekt i uzyskać intensywność netto wokseli. Pomiar ten można łatwo wykonać, umieszczając kulkę fluorescencyjną w środku pierwotnej płaszczyzny ogniskowania i rejestrując jej pole świetlne, na podstawie którego ustala się trójwymiarowy kształt PSF poprzez syntetyczne ogniskowanie na różnej głębokości. Biorąc pod uwagę, że PSF jest uzyskiwany z tą samą konfiguracją LFM i procedurą cyfrowego ponownego ogniskowania, co stos ognisk, pomiar ten poprawnie odzwierciedla kątowy zakres promieni przechwyconych przez obiektyw (w tym wszelkie spadki intensywności); dlatego ten syntetyczny PSF jest w rzeczywistości wolny od szumów i aberracji. Kształt PSF można uznać za identyczny wszędzie w naszym pożądanym pole widzenia (FOV); w związku z tym można uniknąć wielu pomiarów.
Krok 3: Dekonwolucja 3D
W domenie Fouriera rzeczywista intensywność wokseli ma bardzo prosty związek ze stosem ogniskowym i PSF:
,
gdzie operatorem Fouriera . Jednak bezpośrednie rozwiązanie powyższego równania może nie być możliwe, biorąc pod uwagę fakt, że apertura ma ograniczony rozmiar, co skutkuje ograniczeniem pasma PSF ( tj. jego transformata Fouriera ma zera). Zamiast tego algorytm iteracyjny zwany ograniczoną dekonwolucją iteracyjną w dziedzinie przestrzennej jest tutaj znacznie bardziej praktyczny:
- ;
- .
gradientu: oszacowanie ulepszane iteracyjnie przez obliczenie różnicy między rzeczywistym stosem ogniskowym szacowanym stosem ogniskowych i korygowanie z bieżącą różnicą ( ograniczona do nieujemnej)
Fotografia plasterków Fouriera
Formułę można przepisać, Ponieważ operator fotografii można postrzegać jako ścinanie, po którym następuje projekcja, wynik powinien być proporcjonalny do rozszerzonego wycinka 2D 4D transformaty Fouriera pola światła. Dokładniej, ponownie zogniskowany obraz można wygenerować z widma Fouriera 4D pola świetlnego poprzez wyodrębnienie wycinka 2D, zastosowanie odwrotnej transformacji 2D i skalowanie. Przed dowodem najpierw wprowadzimy operatory:
- Operator projekcji
- krojenia:
- Fotografia Zmiana podstawy : Niech operator zmiany podstawy funkcji 4-wymiarowej tak z .
- Operator transformaty Fouriera Niech N-wymiarowy operator transformaty Fouriera
Za pomocą tych definicji możemy przepisać .
Zgodnie z uogólnionym twierdzeniem Fouriera o wycinku mamy
,
stąd operator fotografii ma postać
.
Zgodnie ze wzorem wiemy, że fotografia jest odwrotną transformatą Fouriera 2D rozszerzonego wycinka 2D w 4D transformaty Fouriera pola światła.
Dyskretna fotografia z plasterkami Fouriera
Jeśli wszystko, co mamy do dyspozycji, to próbki pola świetlnego, zamiast wspomnianego powyżej twierdzenia o plasterkach Fouriera dla sygnału ciągłego, przyjmujemy dyskretne twierdzenie Fouriera, które jest uogólnieniem dyskretnej transformaty Radona, aby obliczyć przeogniskowany obraz.
świetlne okresowe z okresami i jest zdefiniowany na hipersześcianie . Załóżmy również, że istnieje znane próbki pola świetlnego , gdzie i odpowiednio. Następnie możemy zdefiniować za pomocą interpolacji trygonometrycznej z tymi przykładowymi punktami:
,
Gdzie
.
Należy zauważyć, że stałe czynniki są odrzucane dla uproszczenia.
ponownie skupioną fotografię, zastępujemy całkę nieskończoną we wzorze na sumowanie to i . To jest,
.
Następnie, zgodnie z twierdzeniem o dyskretnym przekroju Fouriera, możemy przedstawić fotografię za pomocą wycinka Fouriera:
Realizacja z obrazu optyki falowej
kamera plenooptyczna oparta na optyce promieniowej wykazała korzystne działanie w świecie makroskopowym, dyfrakcja ogranicza rekonstrukcję LFM, pozostając przy żargonie optyki promieniowej. Dlatego przejście na optykę falową może być znacznie wygodniejsze. (Ta sekcja przedstawia głównie prace Broxtona i in ., 2013.)
Dyskretyzacja przestrzeni
Zainteresowany FOV jest podzielony na etykietę . W ten sposób cały FOV można dyskretnie przedstawić za pomocą wektora wymiarze . Podobnie wektor reprezentuje płaszczyznę czujnika, w której każdy element za oznacza jeden piksel czujnika. W warunkach niespójnej propagacji między różnymi wokselami transmisja pola świetlnego z przestrzeni obiektu do czujnika może być liniowo powiązana za pomocą macierzy pomiarowej, w w którym zawarte są informacje PSF:
W scenariuszu z optyką promieni stos ognisk jest generowany poprzez syntetyczne ogniskowanie promieni, a następnie stosowana jest dekonwolucja z syntetyzowanym PSF, aby zmniejszyć rozmycie spowodowane falową naturą światła. Z drugiej strony, na obrazie optyki falowej macierz pomiarowa opisująca transmisję pola świetlnego - jest obliczana bezpośrednio na podstawie propagacji fal W przeciwieństwie do przejściowych mikroskopów optycznych, których kształt PSF jest niezmienny (np. Airy Pattern ) w odniesieniu do położenia emitera, emiter w każdym wokselu generuje unikalny wzór na czujniku LFM. Innymi słowy, każda kolumna w . W kolejnych sekcjach zostanie szczegółowo omówione obliczenie całej macierzy pomiarowej.
Optyczna odpowiedź impulsowa
Optyczna odpowiedź impulsowa elektrycznego w pozycji 2D na płaszczyźnie czujnika, gdy izotropowe punktowe źródło jednostkowej amplitudy jest umieszczone w pewnym położeniu 3D w FOVie. Istnieją trzy etapy propagacji pola elektrycznego: podróż od źródła punktowego do natywnej płaszczyzny obrazu (tj. płaszczyzny układu mikrosoczewkowego), przejście przez układ mikrosoczewkowy i propagacja na płaszczyznę czujnika.
Krok 1: Propagacja przekracza cel
fali na natywnej płaszczyźnie z można obliczyć za pomocą skalarnej teorii Debye'a:
,
gdzie jest ogniskową obiektywu; . to długość fali. jest półkątem apertury numerycznej ( jest współczynnikiem załamania światła próbka). _ _ skorygowane cele Abbe-sine). funkcją pierwszego . i to odpowiednio znormalizowane promieniowe i osiowe współrzędne optyczne:
,
gdzie jest liczbą falową.
Krok 2: Ustawianie ostrości przez układ mikrosoczewek
Każda mikrosoczewka może być traktowana jako maska fazowa:
,
gdzie jest ogniskową mikrosoczewek i wektorem skierowanym od środka mikrosoczewki do punktu mikrosoczewce. Warto zauważyć, że , znajduje się w efektywnym obszarze transmisji mikrosoczewki.
W ten sposób funkcję transmisji całej macierzy mikrosoczewek można przedstawić jako zawiłą z funkcją grzebienia 2D:
,
gdzie powiedzmy wymiarem) mikrosoczewek.
Krok 3: Propagacja bliskiego pola do czujnika
Propagację czoła fali z odległością natywnej płaszczyzny obrazu do płaszczyzny czujnika można obliczyć za pomocą całki dyfrakcyjnej Fresnela :
,
gdzie to czoło fali przechodzące bezpośrednio przez natywną płaszczyznę obrazowania.
Dlatego całą optyczną odpowiedź impulsową można wyrazić za pomocą splotu:
.
Obliczanie macierzy pomiarowej
Po uzyskaniu optycznej odpowiedzi impulsowej dowolny element w macierzy pomiaru obliczyć jako:
,
gdzie \ displaystyle \ alpha jest obszarem piksela jest objętością woksela Filtr wagi woksela niż na krawędziach Liniowa całka superpozycji opiera się na założeniu, że fluorofory znajdują się w każdej nieskończenie małej objętości doświadczają niespójnego, stochastycznego procesu emisji, biorąc pod uwagę ich szybkie, przypadkowe fluktuacje.
Rozwiązanie problemu odwrotnego
Głośny charakter pomiarów
Ponownie, ze względu na ograniczoną szerokość pasma, szum wystrzelenia fotonu i ogromny wymiar macierzy, niemożliwe jest bezpośrednie rozwiązanie odwrotnego problemu, ponieważ: . Zamiast tego stochastyczny związek między dyskretnym polem świetlnym a FOV bardziej przypomina:
,
gdzie mierzoną przed obrazowaniem; to szum Poissona. Dlatego fotoelektronów e - .
Oszacowanie maksymalnego prawdopodobieństwa
W oparciu o ideę maksymalizacji prawdopodobieństwa zmierzonego pola światła przy określonym FOV tle , schemat iteracji Richardsona-Lucy zapewnia tutaj skuteczny algorytm dekonwolucji 3D:
.
operator poza przekątną na zero
Aplikacje
Mikroskopia pola świetlnego do funkcjonalnego obrazowania neuronów
Począwszy od początkowych prac na Uniwersytecie Stanforda dotyczących zastosowania mikroskopii pola świetlnego do obrazowania wapnia u larw danio pręgowanego ( Danio Rerio ), w wielu artykułach zastosowano mikroskopię pola świetlnego do funkcjonalnego obrazowania neuronów, w tym do pomiaru dynamicznej aktywności neuronów w całym mózgu C. elegans , obrazowanie całego mózgu u larw danio pręgowanego, obrazowanie czujników aktywności wapnia i napięcia w mózgu muszek owocowych ( Drosophila ) z częstotliwością do 200 Hz i szybkie obrazowanie objętości 1 mm x 1 mm x 0,75 mm w hipokampie myszy poruszających się w środowisku wirtualnym. Ten obszar zastosowań jest szybko rozwijającym się obszarem na przecięciu optyki obliczeniowej i neuronauki.
Zobacz też
- ^ a b c d Levoy, Marc; Ng, Ren; Adams, Andrzej; Stopka, Mateusz; Horowitz, Mark (2006). Mikroskopia pola świetlnego . Dokumenty ACM SIGGRAPH 2006 . SIGGRAF '06. s. 924–934. doi : 10.1145/1179352.1141976 . ISBN 978-1595933645 . S2CID 867959 .
- ^ a b Broxton, Michael; Grosenick, Logan; Yang, Samuel; Cohen, Noy; Andalman, Aaron; Deisseroth, Karl; Levoy, Marc (21.10.2013). „Teoria optyki falowej i dekonwolucja 3-D dla mikroskopu pola świetlnego” . Ekspres optyczny . 21 (21): 25418–25439. Bibcode : 2013OExpr..2125418B . doi : 10.1364/OE.21.025418 . ISSN 1094-4087 . PMC 3867103 . PMID 24150383 .
- Bibliografia _ Hanrahan, Pat (1996). Renderowanie pola światła . Materiały z 23. dorocznej konferencji poświęconej grafice komputerowej i technikom interaktywnym . SYGGRAF '96. s. 31–42. doi : 10.1145/237170.237199 . ISBN 978-0897917469 . S2CID 1363510 .
- ^ ab Ng, Ren (2005). „Fotografia wycinka Fouriera” . Dokumenty ACM SIGGRAPH 2005 . SIGGRAPH '05: 735–744. CiteSeerX 10.1.1.461.4454 . doi : 10.1145/1186822.1073256 . ISBN 9781450378253 . S2CID 1806641 .
- Bibliografia _ Garg, G.; Talwala, E.; Antunez, E.; Wilburn, B.; Horowitz, M.; Levoy, M. (czerwiec 2005). Syntetyczna apertura Ogniskowanie przy użyciu rozkładu ścinania-wypaczenia transformacji oglądania . 2005 Konferencja IEEE Computer Society poświęcona wizji komputerowej i rozpoznawaniu wzorców (CVPR'05) — warsztaty . Tom. 3. str. 129. doi : 10.1109/CVPR.2005.537 . ISBN 978-0-7695-2372-9 . S2CID 12143675 .
- Bibliografia _ Sedat, John W.; Agard, David A. (1996). Jansson, Peter A. (red.). Dekonwolucja obrazów i widm (wyd. 2). Orlando, Floryda, USA: Academic Press, Inc., s. 284–309. ISBN 978-0123802224 .
- ^ ab Ng, R. (2005). Fotografia plasterków Fouriera. W artykułach ACM SIGGRAPH 2005 (s. 735-744).
- ^ Gu, Min (2000). „Zaawansowana teoria obrazowania optycznego”. Zaawansowana teoria obrazowania optycznego . Seria Springera w naukach optycznych. 75 . Bibcode : 2000aoit.conf.....G . doi : 10.1007/978-3-540-48471-4 . ISBN 978-3-662-14272-1 .
- Bibliografia _ Anderson, Todd; Smith, Stephen (2009-06-28). Elastyczny wybór źródła do obrazowania in vivo zespołów neuronalnych . 2009 Międzynarodowe sympozjum IEEE na temat obrazowania biomedycznego: od nano do makro . s. 1263–1266. doi : 10.1109/ISBI.2009.5193292 . ISBN 978-1-4244-3931-7 . S2CID 1914757 .
- ^ ab Prevedel , Robert; Yoon, Young-Gyu; Hoffmann, Maksymilian; Pak, Nikita; Wetzstein, Gordon; Kato, Saul; Schrödel, Tina; Raskar, Ramesz; Zimmer, Manuel (2014-05-18). „Jednoczesne obrazowanie 3D całego zwierzęcia aktywności neuronów przy użyciu mikroskopii pola świetlnego” . Metody natury . 11 (7): 727–730. doi : 10.1109/ISBI.2009.5193292 . PMC 4100252 . PMID 24836920 .
- Bibliografia _ Wang, Zeguan; Chai, Yuming; Powieś, Wei; Shang, Chunfeng; Yang, Wenbin; Bai, Lu; Du, Jiulin; Wang, Kai (20.09.2017). „Szybkie obrazowanie całego mózgu aktywności nerwowej swobodnie zachowującego się larwy danio pręgowanego (Danio rerio)” . eŻycie . 6 . doi : 10.7554/eLife.28158 . PMC 5644961 . PMID 28930070 .
-
Bibliografia
_ Katsuki, Takeo; Grosenick, Logan; Broxton, Michael; Deisseroth, Karl; Sejnowski Terrence; Greenspan, Ralph (2017-09-02). „Szybkie obrazowanie całego mózgu u dorosłych Drosophila podczas odpowiedzi na bodźce i zachowanie” . bioRxiv 10.1101/033803 . doi : 10.1101/033803 .
{{ cite journal }}
: Cite journal wymaga|journal=
( pomoc ) -
Bibliografia
_ Broxton, Michael; Kim, Krystyna; Liston, Conor; Poole, Ben; Yang, Samuel; Andalman, Aaron; Scharff, Edward; Cohen, Noy; Yizhar, Ofer; Ramakrishnan, Charu; Ganguli, Surya; Suppes, Patrick; Levoy, Marc; Deisseroth, Karl (2017-05-01). „Identyfikacja dynamiki aktywności komórkowej w dużych objętościach tkanek w mózgu ssaków” . bioRxiv 10.1101/132688 . doi : 10.1101/132688 .
{{ cite journal }}
: Cite journal wymaga|journal=
( pomoc ) - ^ „Mikroskopia pola świetlnego w neuroobrazowaniu” .