Site 1
Site 1
Site 1
Pascal PICART
email : [email protected]
1/98
Sommaire
2/98
Introduction
Image en 3D
Oeil D
Onde émise
Cerveau
Objet 3D
Oeil G
Relief / 3D modifie le chemin optique (OPD) Phase vs OPD
2
Comment enregistrer OPD ?
l
Photographie uniquement l’amplitude !
4/98
Introduction
Holographie numérique
1967 : fondements de l’holographie numérique (Goodman, USA)
1972 : première tentative pour l’holographie numérique (Yarovslavsky, URSS)
1992 : prémices de l’holographie numérique en ligne pour l’étude de particules (Onural, Bilken)
1994 : « naissance » de l’holographie numérique (Juptner et Schnars, BIAS, Bremen)
1997 : holographie numérique à décalage de phase (Yamaguchi, Japan)
1999 : microscopie holographique numérique (Depeursinge, EPFL)
2002 : holographie numérique couleur à décalage de phase (Yamaguchi, Japan)
2013 : caméra holographique couleur avec lumière naturelle (Kim, USA)
1994
http://holoeye.com/spatial-light-modulators/
Applications en
- Display holographique
- Décalage de phase en interférométrie
- Coronographe pour détection exo-planètes
- Optique adaptative
- Génération de vortex
- … 6/98
Tendances actuelles
Holographic video display
http://www.gizmag.com/holograph-3d-color-video-display-inexpensive-mit/28029/
7/98
Tendances actuelles
9/98
Tendances actuelles
Light field imaging
http://limu.ait.kyushu-u.ac.jp/e/project/project003.html
Three-dimensional (3D) sensing and imaging technologies have been
extensively researched for many
applications in the fields of entertainment, medicine, robotics,
manufacturing, industrial inspection, security, surveillance, and
defense due to their diverse and significant benefits. Integral imaging
is a passive multiperspective imaging technique, which records
multiple two-dimensional images of a scene from
different perspectives. Unlike holography, it can capture a scene such
as outdoor events with incoherent
or ambient light. Integral imaging can display a true 3D color image
with full parallax and continuous
viewing angles by incoherent light; thus it does not suffer from speckle
degradation. Because of its unique
properties, integral imaging has been revived over the past decade or
so as a promising approach for
massive 3D commercialization. Several data capture configurations,
reconstruction, and display methods are overviewed. In addition,
applications including 3D underwater imaging, 3D imaging in photon-
starved environments, 3D tracking of occluded objects, 3D optical
microscopy, and 3D polarimetric imaging are reviewed.
« integral imaging », light field imaging photographie intégrale, inventée par G. Lippmann
G. Lippmann, La photographie intégrale, CRAS 146 (1908)
10/98
Tendances actuelles
Microscope Light Field
Light field imaging
http://vaziri.rockefeller.edu/?page_id=1047
Photographie grand public
https://www.lytro.com/
http://www.ultimate-holography.com
12/98
Principe de l’holographie
Vision en relief
Vision en relief par codage de la phase optique de l’objet
Faisceau de
référence Œil Droit
Objet 3D
H Œil Gauche
Photopolymères
Illumination produit réaction de polymérisation photo-induite
spatialement inhomogène
Apparition de gradients de concentration, donnant naissance à
des processus de diffusion entre les zones de faible intensité
incidente et celles de forte intensité
Construction dans l’émulsion d’une architecture
tridimensionnelle rigide présentant une répartition inhomogène
de la matière
Création dans le milieu d'une modulation d’indice de réfraction
et/ou d'un relief à la surface
Holographic Polymer Dispersed Liquid Crystals: photopolymère
dopé avec nanoparticules (ZnO, TiO2…), effet électro-optique C. Jang, Appl. Opt. 55 (2016)
C. Carré et al, L’Actualité Chimique, 397-398 (2015) 18/98
Principe de l’holographique : matériaux
Cristaux photoréfractifs
Illumination par l’éclairement produit par
l’hologramme
Excitation d’électrons (ou de trous) dans la
bande de conduction (ou de valence) à partir
de niveaux donneurs situés dans la bande
interdite
Modulation spatiale simultanée des densités
de porteurs libres et d’ions dans le réseau
(Fig. a)
Par diffusion les porteurs libres migrent
jusqu’à leur recombinaison
Création d’un réseau de champ de charge
d’espace lié au réseau d’ions
Champ électrique qui en résulte engendre un
réseau d’indice de réfraction (effet électro-
optique) (Fig c)
20/98
Principe de l’holographique : enregistrement
Propriétés du matériau
Courbe reliant l’amplitude transmise
par un support photosensible en fonction de la densité d’énergie reçue
|t| |t| t t0 W W0
2nbits-1
1
t t0 W W0
(2nbits-1)/2
1/2 t0
t0
0 W0 W (mJ/cm2) 0 W0 W (mJ/cm2)
a) Support analogique de type argentique b) Support numérique de type CCD
0 W0 W 0 W0 W
t t0 DW cos
0 W
Distorsion du signal
Apparitions d’harmoniques dans la Densité d’énergie
transmission |t|
Brouillage de l’hologramme par W W0 DW cos
dilution de l’énergie dans les
harmoniques d’ordres supérieurs
23/98
Principe de l’holographique : enregistrement
Hologramme en transmission
enregistrement d’un réseau de franges
d’interférences microscopiques sur un
support photosensible Source laser
Interférences avec un
faisceau de référence et Etendeur de
faisceau
Miroir
un faisceau issu de la SL
par l’objet) H
Objet
Source cohérente M
SO
- spatiale
Hologramme
- temporelle
laser !
24/98
Principe de l’holographique : enregistrement
Hologramme en réflexion
Source laser
Etendeur de
faisceau
SL
Objet
Interférences en H entre le
SO
faisceau de référence et le
H
faisceau diffracté en réflexion
25/98
Principe de l’holographique : enregistrement
Conditions d’enregistrement
Hologramme en transmission SR
Éclairement en H
2 2 H
H R O RO R O
avec
SO
R a R expi R Objet
O aO expi O
i
soit aussi
avec
Objet
R a R expi R
H
O aO expi O i
soit aussi
zoom
28/98
Reconstruction & Visualisation
Hologramme en transmission
Source laser
Etendeur de
faisceau
SL
obturateur
Miroir SR
SO Observateur
Image Ao Ordre +1
virtuelle
AR
H A*o Ordre 0
SO*
diffraction sur H en
transmission Image
Ordre -1 réelle
29/98
Reconstruction & Visualisation
Hologramme en transmission
http://www.ultimate-holography.com
Ordre +1
Hologramme Ordre 0
30/98
Reconstruction & Visualisation
Hologramme en réflexion
Observateur
Source laser
Ordre +1
Etendeur de
faisceau
SL
Image
virtuelle
SO H
31/98
Reconstruction & Visualisation
Orientation des micro-franges
Hologramme en Hologramme en
transmission réflexion
Gélatine e e
i3
i2
i1
32/98
Reconstruction & Visualisation
Miroir holographique en réflexion
Ex : réseau enregistré VERT et éclairé en lumière blanche
Contraction de la gélatine
Réseau en accord avec le BLEU
De < 0 Diffraction l BLEU uniquement
Maintien de la gélatine
Réseau en accord avec le VERT
De = 0 Diffraction l VERT uniquement
Expansion de la gélatine
Réseau en accord avec le ROUGE
De > 0 Diffraction l ROUGE uniquement
33/98
Reconstruction & Visualisation
Formation des images
t temps d’exposition 0 W0 W
W W0 DW cos
W0 t aO2 a R2
DW 2t a R aO 2 DW 4t a R aO
avec
W W0 t RO tR O
λd0
i 2 2 2i
A x, y exp
x + y exp xx'+yy'dxdy
λd0 λd0
Onde de référence lisse et sphérique
i
R x' , y ' = aR exp x' x0 2 y' y0 2 fréquences spatiales
lz0 u0,v0
i 2 2 z0 rayon de courbure (<0)
aR exp x' y ' 2i u0 x'v0 y '
lz0 36/98
Reconstruction & Visualisation
Formation des images
37/98
Reconstruction & Visualisation
Image dans l’ordre +1
Reconstruction de l’image virtuelle
Amplitude dans l’ordre +1
Ar1 t R 2O
iexp2id r / λ i
Ar X,Y,d r =
λd r
exp
X 2 +Y 2
λd r
i 2i
2
t Lx , Ly x' , y' R x' , y' Ox' ,y' , d 0 exp x'2 +y'2
exp Xx'+Yy'dx' dy'
λd r λd r
38/98
Reconstruction & Visualisation
Image dans l’ordre +1
Champ diffracté à la distance dr= d0
côte du plan objet initial
(X,Y) = (x,y)
2
t a i 2 2
1 R
Ar ( x, y,d 0 ) 2 2 exp
l d0
x y
l d0
x' y' 2i
Lx , Ly x' , y 'F , exp x' x y' y dx' dy'
l d0 l d0 l d0
~ Lx x Ly y
WA x, y,d 0 sinc sinc
l d0 l d0
Largeur de la fonction
ld 0 ld 0
rx ry
Lx Ly
ry
si LxLy augmente alors la résolution augmente
rx
intérêt d’un support photosensible large
41/98
Reconstruction & Visualisation
Différents régimes d’enregistrement
Régime de « temps moyenné »
t >> T0
t1 t
W H t dt
t1
42/98
Reconstruction & Visualisation
Différents régimes d’enregistrement
Régime de « double exposition »
lr
O
iπ
Rr x' , y' = ar exp
x' xr 2 + y' yr 2
l λr zr
iπ
H x' , y' = a R2 + aO2 + aR aO exp x' xs 2 + y' ys 2 + iπ x' xo 2 + y' yo 2
Image diffractée
λzs λzo
iπ
+ a R aO exp + x' xs 2 + y' ys 2 iπ x' xo 2 + y' yo 2
Ar+1 = Rr t+1= βt R *ORr
λzs λzo
iπ
Ar+1 x' , y' = a +R1exp
x' xi 2 + y' yi 2
λr zi
44/98
Reconstruction & Visualisation
Imagerie sans lentille
Cas ou lr = l
Lois de l’optique géométrique
1 1 1 1
= Hologramme assimilable à une lentille mince de focale
zi zo z s zr
z 1 1 1
gy = i gz g 2 =
zo x f' z s zr
45/98
Principe de l’holographie numérique
Un large champ de recherche et d’applications
47/98
Principe de l’holographie numérique
Enregistrement basse cadence
Détecteur matriciel CCD ou CMOS
intégration spatiale
échantillonnage spatial
NM pixels de surface active DxDy de pas pxpy
Ex : 13601024 pixels de surface active 4,0mm2 et de pas 4,65mm4,65mm
Dx
Dy
M
py
px N
48/98
Principe de l’holographie numérique
Enregistrement haute cadence
Technologie CMOS
Conversion des photo charges en tension au pixel
Intégration de fonctions de traitement du signal au pixel
Ex : CMOS avec 10241024 pixels, pixels 20mm 20mm, cadence : 13500Hz
CMOS avec 384256 pixels, pixels 20mm 20mm, cadence : 100000Hz
49/98
Principe de l’holographie numérique
Echantillonnage & filtrage
l N / 2 , N / 2 1 k M / 2 , M / 2 1
H D lp x , kp y , d 0 lplp xDD x //22 kp
x x
kp y D y / 2
y D y / 2
H x ' , y ' , d 0 dx ' dy '
H D lp x , kp y , d 0 H x ' , y ' , d 0 D x , D y x ' , y ' lp x , kp y
Fonction « pixel »
Dx Dy
1 si x y
fonction pixel D x ,D y x, y 2 2
filtrage passe bas 0 ailleurs
P Picart et al, JOSA A 25 (2008)
50/98
Principe de l’holographie numérique
Conditions de Shannon
i 2 max p x , p y CCD
(H)
Angle maximum entre les faisceaux SO
Objet
l
θmax 2 arcsin i
4 max p , p
x y
zoom
J.W. Goodman, Speckle phenomena in optics, Roberts and Company Publishers (2006)
52/98
Principe de l’holographie numérique
Refocalisation numérique
53/98
Principe de l’holographie numérique
Holographie numérique à décalage de phase
I Yamaguchi et al, Opt. Lett. 22 (1997) Suppression des ordres 0 et 1
Capteur :
493768 pixels de taille 13mm11mm
Objet :
dé 7×7×7 mm3 à d0 = 600mm
Reconstruction par T de Fresnel Discrète
54/98
Principe de l’holographie numérique
Holographie numérique couleur
RQ : bonne
sélectivité
spectrale avec
lR = 671 nm
lG = 532 nm
lB = 457 nm
Filtres spectraux
57/98
Principe de l’holographie numérique
Caméra numérique couleur avec lumière naturelle
M.K. Kim, Opt. Expr. 21 (2013)
58/98
Principe de l’holographie numérique
Caméra numérique couleur avec lumière naturelle
59/98
Principe de l’holographie numérique
Caméra numérique couleur avec lumière naturelle
60/98
Principe de l’holographie numérique
Capteur 3D de déplacements
P. Tankam et al, Opt. Lett. 35 (2010)
Capteur Foveon
493768 pixels de taille 13mm11mm
Lasers 371nm, 532nm, 457nm
Objet
plaque en aluminium 25×35 mm2
à d0 = 1630mm
61/98
Principe de l’holographie numérique
Capteur 3D de déplacements
62/98
Principe de l’holographie numérique
Holographie infrarouge
M. Locatelli et al, Opt. Expr. 21 (2013)
63/98
Principe de l’holographie numérique
Holographie infrarouge
65/98
Affichage holographique par SLM
Modulateur spatial de lumière : LCD & LCoS
http://www.imec.be/ScientificReport/SR2010/2010/1159126.html
R. Stahl et al, Optik & Photonik 2 (2011) 68/98
Affichage holographique par SLM
Système IMEC « holographic display »
HoloDis : Diffractive nano Devices (DnD)
“Such a HoloDis system is the central building block for true 3D visualization with projection
angles above 30 degrees and HD quality”
http://www.imec.be/ScientificReport/SR2010/2010/1159126.html
R. Stahl et al, Optik & Photonik 2 (2011)
69/98
Affichage holographique par SLM
Système « holographic video display » (Univ. Arizona)
Holographie stéréoscopique
Polymère photo-réfractif
Dopé avec fort pourcentage de chromophores non-
linéaires (molécules en barreau avec forte hyper
polarisabilité)
Augmentation de la variation d’indice de réfraction
Efficacité > 90%
Sensibilité 100mJ/cm2
Temps montée du réseau d’indice 1s
Résolution > 1000mm-1
Persistance > 1h
Ré-écriture par illumination uniforme
Surface de l’hologramme 10,1×10,1cm2
Holographie stéréoscopique : multiplexage optique
d’un nombre limité de perspectives sur différentes P.-A. Blanche et al, Nature 468 (2010)
zones du matériau d’enregistrement
Angle de vue horizontal 45° et 15° vertical
70/98
Affichage holographique par SLM
Système « holographic video display » (Univ. Arizona)
71/98
Affichage holographique par SLM
Système « holographic video display » (Univ. Arizona)
This movie shows the rapid writing time of the 3D display This movie shows the concept of 3D telepresence. The 3D images of
system. It uses 6 nanosecond pulses at a repletion rate of two of our researchers located in location A are sent via internet to
50Hz. It demonstrates that an image can be written in another location B. Our 3D system at location B displays the two
about 2 seconds. researchers. The movie is in real time and shows the speed of the
entire process.
73/98
Affichage holographique par SLM
Télévision holographique “Real 3D”
Synchronization temporelle de la montre Insertion temps réel d’un objet dans la scène
75/98
Affichage holographique par SLM
Display couleur avec SLM et LED blanche
T. Kozacki et al, Opt. Expr. 24 (2016)
LED W55 (Doric Lenses)
SLM Holoeye 1080P, 1920 x 1080 pixels, pixel 8 µm
SLM au plan focal de L1
L1+L2 forment un système 4f
SLM conjugué avec le volume de l’hologramme reconstruit
Au plan de Fourier de L1, masque avec filtre RGB
horizontaux
Codage de l’hologramme par multiplexage de fréquences
spatiales
(1 seul hologramme code R-B-B hologrammes)
76/98
Affichage holographique par SLM
Display couleur avec SLM et LED blanche
T. Kozacki et al, Opt. Expr. 24 (2016)
77/98
Affichage holographique par SLM
Display couleur avec SLM et LED blanche
78/98
Affichage holographique par SLM
Display d’objets de phase
Enregistrement des objets de phase par microcopie holographie numérique
Multiples angles d’illumination données tomographiques
Conversion des données en nuage de points + génération d’un CGH
(diffraction de Rayleigh –Sommerfeld)
Affichage avec SLM Holoeye HEO-1080P 1080P, 1920 x 1080 pixels, pixel 8 µm
80/98
Affichage par « integral imaging »
Principe et potentialités
Méthode inspirée de la photographie intégrale de
Lippmann
82/98
Affichage par « integral imaging »
Réalité augmentée par micro-integral imaging
Utilisation d’un afficheur LCD avec 1080×1920
pixels (8,6 mm×15,4 mm) avec pixel pas 8mm
86/98
See-through, head-up display et …
See-through avec élément optique holographique
Principe
Capture de la scène avec lumière incohérente ou
lumière ambiante et matrice de microlentilles
Fabrication d’un HOE pour affichage et
remplacement matrice de microlentilles
Avantages : grande transparence et très bonne
capacité à fournir la vision stéréoscopie 3D
Fabrication du HOE
3 couleurs rouge (671 nm), vert (532 nm), bleu (473 nm)
Efficacités de diffraction : 32,3% (B), 31% (G), 22,8% (R)
Multiplexage angulaire de plusieurs HOE
Performances
A l = 632,8 nm, déviation > 19,5 ° (structures acoustiques
avec une période minimale de 7μm entraîné par signal RF
70MHz); profondeur optimale du guide 1,2-1,5mm
meilleure performance mondiale
Avantages
Bas cout, parallelisable, grande bande passante, rotation
de polarisation possible, contrôle de la couleur (domaine
fréquentiel), déflection avec des grands angles
89/98
See-through, head-up display et …
Holovidéo avec guide d’ondes à « modes de fuite »
Fabrication
91/98
See-through, head-up display et …
Lunettes à réalité augmentée avec guide d’onde
Autres technologies
Ressources en ligne
1. http://www.optique-ingenieur.org/fr/cours/OPI_fr_M02_C10/co/OPI_fr_M02_C10_web.html
2. http://www.optique-ingenieur.org/fr/cours/OPI_fr_M02_C11/co/OPI_fr_M02_C11_web.html
94/98
Références bibliographiques
Publications scientifiques
95/98
9. X. Xiao, B. Javidi, M. Martinez-Corral, and A. Stern, Advances in three-dimensional integral
imaging : sensing, display, and applications, Applied Optics, 52(4), 546-560 (2013).
10. R. Prevedel, Y.G. Yoon, M. Hoffmann, N. Pak, G. Wetzstein, S. Kato, T. Schrödel, R. Raskar, M.
Zimmer, E. Boyden, A. Vaziri,Simultaneous whole-animal 3D imaging of neuronal activity using
light-field microscopy, Nature Methods 11(7), 727-730 (2014).
11. G. Lippmann, La photographie integrale, C.R. Acad. Sci. 146, 446-451 (1908).
12. J. Geng, Three-dimensional display technologies, Advances in Optics and Photonics 5(4), 456-
535 (2013)
13. C. Jang, C.K. Lee, J. Jeong, G. Li, S. Lee, J. Yeom, K. Hong, and B. Lee, Recent progress in see-
through three-dimensional displays using holographic optical elements, Applied Optics 55(3),
A71-A85 (2016).
14. G. Roosen, G. Le Saux, G. Pauliat, M. Allain, J.-M. Jonathan, A. Brun, Effet photoréfractif dans
les cristaux d'oxyde de bismuth et de silicium (Bi12SiO20) ou de germanium (Bi12GeO20),
Revue de Physique Appliquée 22(10), 1253-1267 (1987).
15. P. Picart, and J. Leval, General theoretical formulation of image formation in digital Fresnel
holography, J. Opt. Soc. Am. A 25, 1744-1761 (2008).
16. P. Tankam, P. Picart, D. Mounier, J.M. Desse, and J.C. Li, Method of digital holographic recording
and reconstruction using a stacked color image sensor, Applied Optics 49, 320-328 (2010).
96/98
17. M.K. Kim, Full color natural light holographic camera, Optics Express 21(8), 9636-9642 (2013).
18. P. Tankam, Q. Song, M. Karray, J.C. Li, J.M. Desse, and P. Picart, Real-time three-sensitivity
measurements based on three-color digital Fresnel holographic interferometry, Optics Letters 35,
2055-2057 (2010).
19. M. Locatelli, E. Pugliese, M. Paturzo, V. Bianco, A. Finizio, A. Pelagotti, P. Poggi, L. Miccio, R.
Meucci, and P. Ferraro , Imaging live humans through smoke and flames using far-infrared digital
holography, Optics Express 21(5), 5379-5390 (2013) .
20. P.-A. Blanche, A. Bablumian, R. Voorakaranam, C. Christenson, W. Lin, T. Gu, D. Flores, P.
Wang, W.-Y. Hsieh, M. Kathaperumal, B. Rachwal, O. Siddiqui, J. Thomas, R.A. Norwood, M.
Yamamoto, and N. Peyghambarian, Holographic three-dimensional telepresence using large-area
photorefractive polymer, Nature 468, 80-83 (2010).
21. M. Kujawinska, T. Kozacki, C. Falldorf, Th. Meeser, B.M. Hennelly, P. Garbat, W. Zaperty, M.
Niemelä, G. Finke, M. Kowiel, and Th. Naughton, Multiwavefront digital holographic television,
Optics Express 22(3), 324-2336 (2014).
22. T. Kozacki, and M. Chlipala, Color holographic display with white light LED source and single
phase only SLM, Optics Express 24(31), 2189-2199 (2016).
23. E. Stoykova, F. Yaraş, A.O. Yontem, H. Kang, L. Onural, P. Hamel, Y. Delacrétaz, I. Bergoënd, C.
Arfire, and C. Depeursinge, Optical reconstruction of transparent objects with phase-only SLMs,
Optics Express 21(23), 28246-28257 (2013).
97/98
24. J. Wang, X. Xiao, H. Hua, and B. Javidi, Augmented reality 3D displays with micro integral
imaging, Journal of Display Technology 11(11), 889-893 (2015).
25. N. Peyghambarian, S. Tay, P.-A. Blanche, R. Norwood, and M. Yamamoto, Rewritable
holographic 3D displays, Optics & Photonics News 19(7), 22-27 (2008).
26. B. Kress, See through optical architectures for wearable displays, in Imaging and Applied Optics
2014, OSA Technical Digest, paper JTu1A.1 (2014).
27. K. Qaderi, and D. Smalley, Leaky-mode waveguide modulators with high deflection angle for use
inholographic video displays, Optics Express 24(18), 20831-20840 (2016)
28. H. Mukawa, K. Akutsu, I. Matsumura, S. Nakano, T. Yoshida, M. Kuwahara , K. Aiki , M. Ogawa, A
full color eyewear display using holographic planar waveguides, SID 08 International Symposium
Digest (2008).
98/98