Următorul conținut este
furnizat sub o
licență Creative Commons.
Sprijinul dumneavoastră va ajuta
MIT OpenCourseWare să
continue să ofere
gratuit resurse educaționale de înaltă calitate.
Pentru a face o donație sau pentru a
vizualiza materiale suplimentare
din sute de cursuri MIT,
vizitați MIT OpenCourseWare
la ocw.mit.edu.
RAMESH RASKAR: Și a
făcut doar o
cantitate grozavă de muncă.
El a fost și manager de program [INAUDIBLE]

unde a condus
efortul pe care l-am
studiat în clasă,
obiectivul origami
și multe proiecte interesante.
Așa că aici, astăzi vom
lucra la ceva
care sperăm să ne pună pe gânduri.
Este doar la momentul potrivit.
Este jumătatea unui
semestru și am
învățat despre o mulțime de idei.
Și tuturor ne face plăcere să
vorbim cu Ravi
despre unde
se îndreaptă domeniul și despre cum
putem clasifica și
înțelege mai bine domeniul însuși
al imaginilor computaționale și al
camerei computaționale.
Așa că aștept cu nerăbdare.
RAVI ATHALE: Mulțumesc.
Mulțumesc, Ramesh.
Este o plăcere să vin aici
și să vorbesc despre acest lucru
pe care toți îl iubim atât de mult -
camerele de luat vederi.
Și asta, am lucrat mult
la acest tip de cameră,
pentru că nu ne putem imagina.
Deci, oricum, i-am trimis diapozitivele lui
Ramesh din timp
pentru a mă asigura.
Nu știam cum să
calibrez unde să merg,
dar a spus că aceste
diapozitive sunt pur și simplu perfecte,
așa că am încredere în judecata lui.
Și am vrut nu doar
seminarul sau prelegerea,
ci mult mai interactiv.
Așa că putem trece prin
unele dintre acestea
foarte repede dacă
văd din fețele voastre
că, de ce ne spune el
aceste lucruri, dar fie oricum.
Așadar, istoria camerei...
Cred că acest lucru a fost destinat
publicului larg, așa că m-am
concentrat foarte mult pe
istorie și pe modul în care ne
aflăm la un punct de întrerupere dramatic,
cum este probabil că acel punct de întrerupere va avea un
impact asupra viitorului
și lucruri de genul acesta.  Etape istorice
atât de interesante pe

care este posibil să le
fi parcurs sau nu în clasă.
Să mergem cu asta.
Dar acesta este un
lucru, desigur,
acum, dacă trebuie să ți se
spună despre asta,
toți purtați camere.
Dacă ai locuit în
Londra, probabil că ai fost
fotografiat de aproximativ 30 până la 40 de
ori în timpul unei zile de lucru obișnuite
când ieșeai afară
și toate aceste lucruri.
Am vrut doar să subliniez...
Nu știu câți dintre voi
veți ști ce este acea imagine.
Pentru a ști
care este acea imagine,
trebuie să te concentrezi asupra
datei, 19 aprilie 1995.
Acea dată are o
semnificație specială.  A
fost atentatul din Oklahoma City
și acesta este camionul.
Acesta este camionul Ryder
care a transportat bomba.
Și aceasta este o poză
de la o cameră de securitate
din banca de vizavi.
Și această imagine a fost
folosită de mulți, mulți oameni
pentru a justifica munca la
imagistica dinamică ridicată.
Totul din interior este
complet subexpus.
Tot ce este afară este
complet supraexpus.
Drept urmare, această imagine, în
sine, este aproape inutilă.
Deci lucrurile vin în două dimensiuni -
prea mari și prea mici.
În mod similar, aceasta este banda.
Acesta este un
lucru foarte interesant
și am avut, de asemenea, o altă
imagine cu, undeva în Irak,
un IED care exploda și
exploda și o persoană care ținea
telefonul mobil.
Și așa că sunt sigur că știți
că, în ultimii câțiva ani,
orice știre semnificativă [INAUDIBILĂ]
care s-a întâmplat în majoritatea locurilor din
lume, primele
rapoarte și primele imagini care au
ieșit din acestea
au fost camerele telefoanelor mobile.
Deci toată lumea este reporter.
Deci, oricum, unul dintre
lucrurile interesante
este această afacere despre
observația naturală,
golurile din frunze
proiectând imagini
ale unei eclipse parțiale de soare.
Așa că strămoșii noștri trebuie să fi
observat aceste lucruri
și să fi spus că ceva se întâmplă.
Deci exact ce se întâmplă
și cum îl putem reproduce?
Cum putem înțelege
ce se întâmplă acolo?
Aceasta este o altă
fotografie foarte frumoasă.
Sunt sigur că ați văzut
picăturile de apă acționând ca o lentilă,
formând imaginea.
Așadar, chiar înainte de a exista
vreo tehnologie,
înainte de a exista chiar și un
proces științific modern formal,
strămoșii noștri, acum câteva
mii de ani, din moment ce
nu aveau distragerile
televiziunii prin cablu și telefoanelor mobile
și toate astea,
aveau multe  de timp
pentru a observa cu adevărat foarte atent
natura și a o observa pe
o perioadă lungă de timp
din mai multe unghiuri diferite.
Deci, ca rezultat al
acestui lucru, a fost observarea
imaginilor pinhole care se
întorc cu câteva mii de ani
și cred,
cel puțin înțeleg
că acesta a fost
primul
studiu cuprinzător despre optică, Alhazen.
Și acesta este desenul
unei camere pinhole.
Cred, Ramesh,
probabil că le-ai spus
despre originea cuvântului...
RAMESH RASKAR: Nu am spus.
Daţi-i drumul.
RAVI ATHALE: Ai?
RAMESH RASKAR: Nu am.
RAVI ATHALE: Oh, nu ai?
Cameră,
sensul literal al cuvântului,
este cameră pentru că prima cameră
a fost într-adevăr o cameră cu o gaură
acolo, iar imaginea era proiectată
acolo, așa că o poți urmări
sau ceva de genul.
Acum, ceea ce este interesant este că
înainte rapid cu 1.000 de ani,
iar cea
mai mare cameră pinhole din lume
a fost construită în iulie 2006. Stația
El Toro Marine Corps
Air Station din Irvine
a fost dezafectată.  Au
vrut să-l păstreze, așa că au
luat un hangar pentru avioane, au
închis ușa
și au făcut o gaură
de dimensiunea unei mingi de tenis [INAUDIBILE]
sau ceva de genul.
Și în spate,
avea un film fotografic
înalt de opt etaje și lungimea de 1/3 ca
un teren de fotbal.
Și iată-l.
Aceasta este imaginea
bazei cu susul în jos proiectată
pe peretele din spate.
Aceasta este
emulsia fotografică
și au existat o
mulțime de cifre cu privire
la câți galoane
de soluție de dezvoltator aveau
nevoie și, practic,
o aruncă peste un butoi
și ia o mătură și o răspândesc
și o dezvoltă.
Și nu știu unde
este acea imagine acum.
Cred că este în
California, un muzeu de artă
undeva în Los Angeles.
Ideea este
, peste 1.000 de ani,
și exact același
principiu de funcționare.
Este doar o cameră, cu excepția
unei încăperi mult, mult mai mare
și fotografierea
unei zone mult, mult mai mare.
STUDENT: În regulă,
faci un punct bun acolo.  De
asemenea, ei [INAUDIBIL]
cât timp au
avut de petrecut pentru a
face [INAUDIBIL]..
RAMESH RASKAR: Da, într-adevăr.
RAVI ATHALE: Primul
instrument optic sunt ochelarii,
și cred că
într-adevăr, punctul...
acesta este un punct interesant.
Ochelarii sunt ochelari.
Este într-adevăr o
soluție de ambalare mecanică.
Așa că oamenii își dau seama că având
aceste
lentile cu formă specifică îți îmbunătățește vederea,
dar cum faci asta?
Cum îți faci
comod să porți?
Așa că oamenii își dau seama că
ai doi ani
și sunt modelați
în acest fel.
Și există puntea
nasului, așa că suport în 3 puncte
ca acesta.
Bineînțeles, apoi au
fost toate elaborările ochelarilor
[INAUDIBILI]
stând
sau monocul pe care îl
poți înșuruba în ochi.
Dar, practic, acesta este --
1270 este -- luarea
acestor fenomene optice
și construirea unui
instrument util care poate
fi portabil și care este folosit.
Dincolo de asta, aproape 300 de
ani între un
instrument optic cu o singură lentilă și un
instrument optic compus --
microscop și apoi
telescop și tot.  S-
ar putea să fi știut că aceasta este
cea de-a 400-a aniversare
a
revoluției telescopului galileian,
iar aceasta este diagrama
[INAUDIBILĂ] cu mai multe lentile.
Deci, în continuare, următoarea
istorie este fotografia.
Aceasta este prima fotografie realizată
vreodată de Niepce, 1827,
și este practic mass-
media sensibilă [INAUDIBILĂ]
sub diferite forme
și tocmai a evoluat.
Unul dintre marile repere
a fost acest tip de sticlă.  A
fost acoperit cu hârtie
și rulat în alte lucruri.
Așa că mai este o informație...
Eastman Kodak.
Ce înseamnă Kodak?
Stie cineva?
Eastman a vrut un cuvânt care să
fie un cuvânt foarte clar,
și care să fie un fel de cuvânt foarte pozitiv, înclinat
înainte.
Și așa aparent,
Kodak este sunetul pe
care declanșatorul îl scoate
atunci când apăsați butonul.
[Studenții râd]
Deci nu a fost George Eastman
și colegul său Kodak Eastman
Kodak a fost numit după numele.
Dar sloganul era, tu apăsați
butonul și noi ne ocupăm de restul.
Și cred că camera Brownie de 1 dolar -
dacă o puneți în
context istoric, a
fost cam în
aceeași perioadă în care
Model-T, poate cu câțiva ani
mai devreme, cu 10, 15 ani mai devreme.
Dar este nevoie, în esență, de
tehnologie foarte înaltă
și de inovație
pentru a o aduce la masă,
astfel încât toată lumea să o poată folosi.
Deci, puteți spune că Model-T
și camera Brownie
au fost prima epocă a
culturii tehnologice moderne de consum.
Mai mult de
emulsie de culoare în trei culori,
kodachrome plin de
dopaj și tot,
și cameră instant Polaroid.
Desigur, în 1945,
definiția instantului
era puțin diferită.
30 de secunde până la două minute
au fost considerate a fi instantanee.
Și asta, am fost intrigat.
Asta, desigur, l-am
găsit pe Wikipedia.
Dar Maxwell, pe care în mod
normal nu-l
asociam cu
munca experimentală,
dar aceasta a fost
fotografia color.
RAMESH RASKAR:
Știți cum a fost capturat?
RAVI ATHALE: La trei
expuneri separate, apoi stivuiți-le.
Trei filme separate prin
trei filtre separate.
RAMESH RASKAR: Dar cum le-a
pus împreună?
RAVI ATHALE: Cred că
l-a conturat de mână.
RAMESH RASKAR:
După ce l-a dezvoltat?
RAVI ATHALE: Da.
Și, desigur, Abraham Lincoln
a fost primul președinte care a
fost fotografiat și o mulțime
de fotografii frumoase
ale Războiului Civil.
RAMESH RASKAR:
Fotografia pare încă clară.
RAVI ATHALE: Da.  Nu
știu.
Nu știu dacă a fost
retușat ulterior.
STUDENT: Au folosit
camera cu câmp luminos.
[Studenții râd]
RAMESH RASKAR: De fapt,
camera cu câmp luminos
a fost inventată în 1908.
RAVI ATHALE: Da.
STUDENT: Se pare că
este o expunere lungă, poate
pentru că copacii din
fundal sunt oarecum...
RAVI ATHALE: Da.
[VOCI INTERPUSE]
RAVI ATHALE: Cred...
STUDENT: Folosind o gaură.
RAVI ATHALE: Toate
expunerile au fost lungi.
Dar... O altă etapă istorică
care a surprins afișajul [INAUDIBIL]

acea scanare mecanică
și tot felul de
alte lucruri, CCD.
Doar, am susținut acest
seminar cu aproximativ o lună
și jumătate în urmă, iar două săptămâni
mai târziu, a fost anunțat Premiul Nobel CCD
.
Și nu știu... mulți
dintre voi sunteți probabil
conștienți de controversa dacă
acești oameni merită cu adevărat
premiul Nobel sau nu pentru că
lucrau la
memoria înregistrată în schimburi.
Și
altcineva a spus, hei,
este sensibil la lumină.
Oricum, dar majoritatea
acestor lucruri,
există întotdeauna o controversă
cu privire la includerea RMN
și tot felul de alte lucruri.  Dar
asta e cam interesant.
Aici.
Uită-te la asta,
prima cameră Fairchild.
Deci cred că 88 de lire sterline.
0,01 megapixeli, 23 de secunde.
Și de fapt, dacă te uiți
la data, decembrie '75.
Nu este atât de departe.
RAMESH RASKAR: Da.
RAVI ATHALE: Nu este deloc atât de
îndepărtat.
Apoi camera digitală ulterioară
[INAUDIBIL] Sony
[INAUDIBIL],, sfert de megapixeli
DCS 100, 1 megapixel 20.000 USD.
Iar '97 a fost prima
transmisie de imagini
de la telefonul mobil și
camera de pe telefonul mobil.
Iar acesta din urmă
este foarte interesant.
Foarte recent, Kodak a oprit
producția de film kodachrome,
așa că, dacă cineva are
camere cu film, ei bine, ar fi bine să începeți să vă
aprovizionați cu film vechi.
Și 2006,
telefonul mobil de 10 megapixeli.
Cred că cu această cameră,
camere cu pixeli pentru telefoane mobile și toate
astea, în loc de un
telefon mobil cu cameră,
aceasta este o cameră
cu un telefon mobil.
Deci cea mai mare parte este probabil
optica și orice altceva.
Optica, în mare parte,
care merge cu ea.
Ai auzit de legea lui Moore?
Există ceva
numit legea lui Kennedy.
Observație empirică.
Câți pixeli pe dolar?
Și aceasta este, desigur,
o scară mare,
iar aceasta este o
scară liniară în ani.
De la acest DCS 460,
100 de pixeli pe dolar,
până până aici.
Și probabil vom...
Nu știu, aceasta
este încă o fată bătrână.
O cameră megapixeli,
cred că 5 dolari, și
cred că obiectivul multora
dintre aceste companii
este camera megapixeli pentru un dolar.
Totul-- obiectivul,
matricea planului focal, placa PC
și totul gata de conectat.
RAMESH RASKAR: Cu
camere la nivel de wafer.
RAVI ATHALE: Cu
camerele la nivel de napolitană.
RAMESH RASKAR: Este
deja aproximativ 1 dolar.
RAVI ATHALE: Da.
RAMESH RASKAR: Mai puțin de 1 USD.
RAVI ATHALE: Deci megapixeli
pe dolar, așa că este deja
acolo undeva.
Și aceasta este
galeria de imagini, deci [INAUDIBLE] 100,
Samsung.
Aceasta este
matricea planului focal al Omnivision,
2,1 pe 2,3 milimetri.
Și acesta este un
lucru foarte interesant.
[VOCI INTERPUSE]
Pentru endoscopie, videoendoscopie,
diametrul de 1,8 milimetri
include lentila, planul focal,
cablul pentru transmiterea puterii,
trimiterea semnalelor inapoi.
Nu este o rezoluție grozavă, 326
x 382, ​​dar dacă ceva
trebuie să fie blocat în
corpul tău, mai mic, cu atât mai bine,
iar 1,8 milimetri este cu
siguranță, cu siguranță frumos.
Acest cip este cel care este
folosit în camera cu pastile
pe care o înghiți pentru a-
ți imagine interiorul.
M-am gândit la ceva...
acel studiu de caz imagistic,
studierea spațiului interior versus
studierea spațiului exterior.
Deci pastila pentru cameră și
telescopul spațial Hubble.
RAMESH RASKAR: Ambele au
forma unei pastile.
RAVI ATHALE: (Râde)
Ambele sunt în formă de pastilă.
RAMESH RASKAR: Doar puțin.
RAVI ATHALE: Ambele sunt în
formă de pastilă,
în sensul că asta era de fapt
în programul de montaj pe
care l-am început la DARPA.
Aceasta a fost una dintre motivațiile pentru
care, în ultimii 30, 40 de
ani, afișajele
au devenit mai subțiri,
de la CRT-uri voluminoase la
ecrane subțiri, plate.
Dar camerele,
raportul de aspect al camerelor,
nu s-au schimbat în trecut,
oricât de multe mii de ani.
Sunt întotdeauna ca un tub
și, așadar, scopul a fost, poți
zdrobi camerele.
Puteți face o cameră cu o
grosime de cinci milimetri,
dar distanța focală efectivă
este de 50 de milimetri
și puterea de adunare a luminii,
de asemenea, [INAUDIBILĂ]?
Și există diverse
trucuri pe care le poți juca.
Lentila origami pe care
probabil l-ați studiat
este unul dintre exemple.
O deschidere multiplă
este un alt exemplu.
Dar unul dintre lucrurile
despre-- și
nu sunt sigur, în această prezentare,
există detalii tehnice
sau specificații.
Dar este foarte
interesant, dacă te
uiți la specificațiile
, să zicem, Hubble, o
cameră cu pastile, sau luați unul dintre
lentilele moderne de litografie,
nu cred că am
o poză în acest sens,
dar lentilele model de litografie
sunt o minune.  a tehnologiei.
Că aceste lucruri-- obținerea--
îți amintești cât de mult--
cântăresc câteva
mii de lire sterline.
RAMESH RASKAR: [INAUDIBIL]
RAVI ATHALE: Unele obscen
grele, un număr mare
de elemente în asta și costă
mai multe milioane de dolari.
Și motivul este că performanța
este absolut
limitată de difracție pe un
câmp vizual destul de larg,
cu zero distorsiuni
și toate aberațiile,
totul corectat.
Acum, imagini la scară multiplă
largi, largi și profunde.
Acum toată lumea,
gigapixel imaging,
de la inaugurare, a
decolat cu adevărat.
Sunt atât de multe imagini de genul
, având panoramă largă
și găsind detaliile
pe aici undeva.
Vulturul.
Și așa putem ajunge aici de
unde ne aflăm acum
și într-o chestiune realistă de dimensiune,
greutate, cost?
Putem obține o cameră gigapixel?
Putem obține o cameră de 10 sau
100 gigapixeli?
Câmp vizual foarte larg.
Rezoluție foarte mare.
Acestea sunt câteva dintre provocările
care vor fi abordate,
și nu folosirea forței brute.
Deci este o
perspectivă interesantă și este
o direcție interesantă.
RAMESH RASKAR: Dar în ceea ce privește
camerele pe care le
vor purta indivizii?
Sau acesta va fi
instalat, și apoi
aveți acces
la el, astfel încât să
puteți [INAUDIBLE] de interes,
puteți captura ceea ce doriți?
RAVI ATHALE: Acesta este
un lucru interesant.  Vă
puteți imagina un individ,
precum soldații de operațiuni speciale
, purtând un binoclu
cu
factorul de formă standard al binoclului care va fi
echivalent cu un gigapixel.
Dar nu există
afișaje gigapixeli.
Viziunea umană nu are
lățimea de bandă pentru gigapixeli.
Deci, în acel gigapixel, ar
trebui să puteți [INAUDIBLE]
și să măriți și să
priviți detaliile.
Există un program DARPA în desfășurare...

Nu știu
în ce fază este...
o tehnologie cognitivă
pentru luptători, bla, bla.  A
fost
numit colocvial Binoclul lui Luke.
Deci, în Războiul Stelelor, Luke
are acest binoclu
și tu te uiți la el.
Și ar putea pune un cursor acel
extraterestru acolo, sau atât.  S-a
concentrat în primul rând
pe procesarea
bazată pe algoritmi neuromorfi
sau ceva de genul ăsta.
Deci ideea va fi, dacă puteți
proiecta camera sau un
senzor de imagine care poate capta
informații în valoare de gigapixeli
și dacă aveți acest back-end,
această procesare indusă neuromorf
, care îi poate îndemna pe
soldați să se uite aici, acolo
și  soldatul se poate
concentra în mod corespunzător acolo.
În ceea ce privește ce
fel de lucruri care
vor fi cu adevărat utile
pentru războinici în acest moment,
acesta ar putea fi unul dintre lucruri.
Și apoi, desigur, aveți
platforme la diferite niveluri,
de la micro UAV-uri cu anvergura
aripilor de aproximativ nouă inci,
până la Predators până la
toate imaginile spațiale [INAUDIBILE]
.
Și câmpul vizual, și
cerințele de rezoluție a pixelilor
și totul -- se
întinde pe tot spațiul.
Așa că schimb
puțin viteza,
iar anterioară a fost, puteți
spune, o viziune anecdotică sau
bazată pe evenimente asupra istoriei.
Acum, vom intra într-un
mic unghi tehnic
al privirii istoriei.
Așa că, în primul rând, cred că una dintre
întrebări - și asta
ajunge și la unde
ar trebui să ne îndreptăm oricum.
Deci, senzori de imagine, sau
puteți spune senzori în general,
de ce facem asta?
Ce este și
de ce facem asta?
Așadar, întrebările pe care le punem, și
acesta este ceva... acestea
sunt întrebări foarte generice.
Și ne punem în mod constant
aceste întrebări, cine, ce,
unde, când.
Aceasta este
partea frontală de detectare
și cum și de ce este
partea de analiză și explorare.
Deci, atunci când
o reduceți la sensul său,
tot ce ne pasă este să
răspundem la aceste întrebări.
Când vine vorba de utilizarea
imaginilor ca senzori spațiali,
nu a imaginilor pentru a fotografia
vacanța dvs., unde
puteți vedea acest lucru și
recăpăta experiența.
Aceasta este o
lume diferită și, într-un anumit sens,
fotografia computațională
și imagistica computațională, acolo...
când spun
imagini computaționale, te
uiți la imagini, o
consideri
ca un senzor spațial.
Un senzor spațial
înseamnă un sistem care
este conceput pentru a răspunde la
aceste întrebări.
Identificarea diferitelor
elemente constitutive din scenă,
precizarea
locului și a timpului acestora.
Acum, în acest
tărâm special,
aveți două
modalități senzoriale diferite.
Unul, puteți spune
senzor de proximitate,
iar celălalt este
senzor standard.
Deci senzor de proximitate,
vreau să știu care
este textura unei suprafețe.
Mi-am pus mâna la
senzorul de mișcare.
Eu zic, este aspru sau neted?
Este uniformă?
Care este granularitatea?
Cu alte cuvinte,
senzorii dvs. sunt
amplasați spațial cu obiectul
pe care încercați să îl măsurați.
Și celălalt lucru
este că senzorii tăi
sunt separați de o anumită distanță.
Acum, acea distanță este un
concept moale maleabil.
Să spunem, de exemplu, să luăm
capul discului magnetic al hard diskului.
Deci, pentru o stocare magnetică,
capetele vor pluti,
nu știu, la câțiva microni
sau câteva sute de nanometri
deasupra suprafeței discului.
Deci, dacă, când te duci
la discurile optice,
iar capul optic
plutește la doi milimetri
de suprafață,
aceasta este o distanță uriașă.
Așadar, acesta este un blocaj
pentru scris și citit,
în timp ce un blocaj, dacă
vorbiți despre un telescop spațial Hubble
care
privește cea mai îndepărtată
galaxie din univers, acea
distanță de distanță este totuși
de multe miliarde de ani lumină distanță.
Dar ideea este că locul în care
faceți măsurătorile nu este
situat în același loc cu ceea ce
încercați să măsurați.
Dacă faceți
detectarea standoff-ului,
aceasta trebuie să implice
propagarea reală.
Fără dacă, și sau dar.
Și asta este aproape conținut în
definiția mișcării ondulatorii.
Valul este definit ca
un fenomen care
transportă energie și
informații la distanță
fără transport de materiale.
Deci asta este diferența
dintre undă sonoră și vânt.
Vântul va purta frunze cu el.
Soundwave nu va
purta frunze cu el.
Ambele implică mișcarea
moleculelor de aer,
dar unda sonoră este capabilă să
transporte energie și informații
pe o distanță fără
un transport în vrac.
Și apoi, desigur, aveți
undele electromagnetice,
apoi aveți
unde seismice, tot felul de unde.
Dar, cu toate acestea, mișcarea ondulatorie -
este în centrul oricărui tip
de activitate de detectare a distanței.
Deci, atunci când aveți undă și
aveți distanță de distanță,
aveți propagarea undelor
care implică difracție.
Și acea difracție sugrumă în
esență

organizarea spațială a semnalelor.
Deci, cu alte cuvinte,
această scenă specială,
există lumină ambientală
care se reflectă pe
fața ta ca
pete individuale pe fața ta.
Și așa, chiar acolo, dacă
pun un fotodetector
și îl mișc în jurul
feței tale, poate măsura
reflectanța suprafeței.
Dacă mut acel
fotodetector aici
și dacă pun un
film fotografic sau un CCD
fără niciun
element optic, voi
obține practic
o expunere uniformă.
Toată acea
organizare spațială este pierdută.
Deci, efectiv, atunci când
facem detectarea standoff-ului,
avem două părți.
Unul, îl puteți numi
codificarea sursă.
Aceasta este fenomenologia prin
care obiectele din scenă
imprimă informații
despre ele însele pe

radiația electromagnetică,
fie că este prin emisie
sau reflexie sau absorbție
sau împrăștiere.
Și întregul domeniu al
lungimii de undă electromagnetică,
amplitudinea și lungimea de undă
și polarizarea și tot,
este folosit pentru a codifica
această informație.
Iar celălalt este
codificarea canalului sau distorsiunea canalului.
Acesta este rezultatul
propagării
acelei unde între
obiecte și pupila ta de intrare
sau unde intri.
Deci acestea sunt cele două lucruri.
Deci, când spunem
despre procesare,
vorbim despre eliminarea
distorsiunii canalului
sau anularea efectelor
difracției.
Deci, care sunt componentele
unui senzor de imagine?
Și sunt sigur că ai
făcut asta la această clasă.
Deci există
elementul frontal
care operează direct pe
lungimea de undă electromagnetică
a plachetei optice.
Apoi, există
transducția care
preia acea
energie electromagnetică
și o transduce
într-o altă formă.
În filmul fotografic,
era chimic.
În CCD și CMOS, este
energia electrică.
Și apoi există
procesarea
și exploatarea afișajului de stocare.
Deci acestea sunt cele trei etape,
iar eu folosesc [INAUDIBLE]..
Această culoare nu este atât de puternică,
dar albastrul înseamnă biologie și roz
înseamnă tehnologie.
Deci, în
perioada pre-preistorică,
toate aceste elemente
erau biologice.
Elementul frontal era
optica ochiului tău.
Transducția
a fost retina ta,
iar procesarea ulterioară
în [INAUDIBLE]
a mers până la
cortexul prefrontal.
Dar a avut loc o oarecare recunoaștere sau o
oarecare exploatare a procesării
.
Probabil că a fost
înainte de limbaj, așa că
nu știm dacă
primate preistorice
și ce termeni au gândit.
Așadar, trecem la
perioada preistorică și istorică
până la picturile rupestre.
Așa că acolo, a fost introdusă
„tehnologia” de stocare și afișare,
între ghilimele.
Orice altceva este
încă biologic,
dar captarea și
stocarea acelei experiențe –
și dincolo de această
perioadă preistorică și istorică,
vă puteți imagina că tehnologia
devine mai sofisticată,
dar principiul
nu s-a schimbat.
Și a rămas așa prin perioada
preistorică și istorică
.
Acum, pe măsură ce trecem la
perioada preindustrială
și, după cum am spus,
au fost introduse elementele optice.
Deci, optica ochiului,
sau elementul frontal
al întregului lanț de detectare,
a fost îmbunătățită de tehnologie.
Și care au fost consecințele?
Puteai vedea mai departe
și puteai vedea mai mic.
Perioada industrială a fost practic
invenția fotografiei.
Deci, pe lângă ochi,
elementul de transducție
și elementul de stocare și afișare
era acum tehnologic.
Care sunt consecințele?
Ne-am putea extinde în
spectrul invizibil.
Acum, trebuie să ne amintim că
fără film fotografic,
radiografiile nu ar fi fost niciodată
inventate pentru că [INAUDIBLE] și-a dat seama
că se
întâmplă ceva pentru că el
avea acest film care era
[INAUDIBIL] și încă...
ceva  s-a întâmplat.
A expus.
Deci spectru invizibil,
apoi al doilea lucru
este înregistrarea secvenței de timp care
permite
analiza
evenimentelor foarte rapide sau foarte lente.
Fotografie cu intervale de timp
și alte lucruri,
așa că studiul detaliat al
mișcării a depășit cu mult
faza timpului uman.
Totuși, totul era
încă în timp real.
Mai aveai nevoie de
procesare chimică,
iar prelucrarea și exploatarea
erau încă de către oameni.
Așadar, pe măsură ce avansăm în
epoca modernă, secolul 20,
este într-adevăr o revoluție
în senzorii de imagistică, unde
procesarea și exploatarea
sunt încă în primul rând de către oameni,
dar care trec încet într-
un sistem de exploatare a imaginilor complet automatizat
.
Și am crezut că acesta
este un exemplu interesant.
Nu cred că
liga de fotbal Pee Wee
are încă o cameră de poartă
sau ceva care să decidă
dacă cineva a fost
în ofsaid sau altceva,
dar este într-adevăr
o chestiune de timp.
Și de ce este o
pauză dramatică de trecut?
Achiziție în timp real,
fără procesare chimică,
procesare în timp real
și producție scalabilă [INAUDIBILĂ]
,
cel puțin în ceea ce
privește senzorii.
Și acum, cu
camera la nivel de plachetă și noile design-uri
pentru elementele optice frontale,
această producție scalabilă
se îndreaptă și spre optică.
Și lasă-mă să văd, asta...
nu știu.
Ai arătat acest lucru
[INAUDIBIL] în clasă?
RAMESH RASKAR: Nu, nu am făcut-o.
RAVI ATHALE: În timp ce lucram
la o parte din această prezentare,
din acest articol foarte interesant
de la Nathan Myhrvold—
oamenii știu despre Nathan
Myhrvold și despre el—
cred că era angajatul numărul
15 sau așa ceva la Microsoft.
Și din câte am
înțeles, contribuția sa principală
la acest
lucru la acel moment,
de a avea o companie de sine stătătoare
care are doar
scopul de
a dezvolta software de sisteme
și de a câștiga bani din asta.
Așadar, contribuția lui a fost
modelul de afaceri pentru Microsoft
și în prezent este fie cea
mai faimoasă, fie cea mai insultată
persoană din Silicon
Valley pentru că a
înființat o companie,
Intellectual Ventures.
Și din nou, el încearcă
să facă un model de afaceri,
că o companie poate exista doar
cu scopul de a inventa
lucruri, niciodată de
a comercializa, niciodată de a
prioritiza, ci, în esență, de a
depune brevetele
și de a se așeza pe ele, fie să le acorde
licențe, fie să dea în judecată oamenii despre care
cred ei.
a încălcat brevetul.
Este un
model de afaceri foarte interesant.
Deci, evident, el știe
ceva despre aceste lucruri.
El a făcut acest comentariu despre,
camerele se vor schimba și ele forma.
Sunt camere de filmat
fără film,
practic ca și cum
primele mașini
erau o trăsură fără cai.
Deci ideea lui este că
magazinele de camere ale viitorului
ne vor surprinde la fel de mult.
Și făceam acest
comentariu, a spus cineva,
oh, despre ce naiba
vorbește?
Mașinile sunt încă
aceleași ca în 1910.
100 de ani mai târziu,
nimic nu s-a schimbat.
Încă este
motor cu ardere internă
și transmisie și roți.  Ei
bine, da și nu.
Așa că acum, ne-am gândit să
luăm această analogie puțin mai
departe și să spunem, deci trăsura trasă de cai
, trăsura fără cai,
la mașina familiei.
Până aici, poți spune cu adevărat,
este mai sofisticat,
dar nimic nu s-a schimbat.
Dar apoi spui, ce s-a mai
întâmplat?
Și autovehicule, tractoare,
[INAUDIBIL], un rezervor,
la acel [INAUDIBIL] care are
voie să despartă capacul.
Și acesta, desigur, îl
recunoști ca Stanley,
vehicul autonom.
Deci, dacă spunem că camerele cu film --
camere fără film -- îmi place foarte mult
această imagine pentru că
ambele sunt camere.
Identic.
Acestea... toate acestea sunt
backplane de film.
Acesta este un backplane CCD.
Deci, unde se
duce în viitor?
Care sunt direcțiile viitoare?
Și cel puțin
proiecția noastră este unde se va
îndrepta în viitor este
specializarea și [INAUDIBIL],
că același
concept, desigur,
există o
sursă de energie și
există un mecanism care să
transforme acea energie
în mișcare mecanică.
Deci, în acest sens,
nimic nu s-a schimbat.
Dar dacă te uiți la asta și asta și asta
și asta,
fiecare este conceput
pentru un scop diferit.
Fiecare este specializat pentru
acel scop anume.
Așadar, în mod similar,
camerele... chiar acum,
o cameră este o cameră
care face poze,
fie că este vorba de Hubble, fie că este vorba despre camera
telefonului mobil
sau orice altceva,
sau camera de tip pilulă.
Structura și funcția,
până acum, nu s-au schimbat deloc.
Și aici simțim că va
veni o pauză dramatică
în viitor din cauza
flexibilității tehnologiei, din cauza

aplicațiilor foarte specializate, a constrângerilor
foarte specializate
pentru lucruri.
Deci, de ce, dacă nu ar trebui să existe...
puteți spune, la fel cum
există ASIC-uri,
circuite integrate specifice aplicației,
de ce nu ar trebui să existe

sisteme de imagistică specifice aplicațiilor, ASIS?
Deci autonomie [INAUDIBILĂ] decât
un senzor de imagine care decide,
singur, fără nicio
intervenție manuală,
unde să se concentreze, cum să
interogheze scena?
Și asta înseamnă un fel de reelaborare
a inspirației biologice.
Camerele de luat vederi înlocuiesc într-adevăr
ochiul uman
cu încercarea de a forma un
tip similar de reprezentare,
fie că ar trebui să meargă în
lumea biologică,
este o gamă largă de diferite
tipuri de senzori de imagine.
Probabil că nici măcar nu este potrivit
să le numim senzori de imagine.
Sunt mai mult ca
senzori spațiali.  Cea
mai primitivă
formă, un râme
cu o piele sensibilă la lumină,
care pur și simplu
este capabil să distingă,
există mai multă
lumină pe această parte
față de acea parte
și se poate direcționa
în consecință.
Și apoi o varietate de
tehnici pentru insecte
și alte creaturi, iar
acestea, răspunsul lor spectral,
procesarea, funcționalitatea au

evoluat extraordinar pentru
nevoile evolutive specifice
ale animalului pentru
supraviețuirea lor.
Și nu știu dacă într-adevăr...
cred că mi-ar
plăcea să fac un fel de...
optica ajunge acum acolo.
[INAUDIBIL] lentile din plastic,
diamant [INAUDIBIL],
microfabricare,
ansamblu de scară de napolitană.
Deci tehnica de șlefuire și
lustruire
pentru realizarea
elementelor optice este într-adevăr
, acum, retrogradată la o
calitate foarte înaltă specializată.
Și procesarea încorporată în
camere, acesta este primul pas în acest
moment: eliminarea ochilor roșii
, detectarea feței,
detectarea zâmbetului.
Și aceasta este,
desigur, iluminare.
Momentan, încă folosim
acest bliț idiot pe care îl folosește.
Deci codificare spațială temporală
a iluminării
pentru a vă îmbunătăți
capacitatea de a extrage informații
din scenă.
Diferite regimuri spectrale pentru
exploatarea acelei informații.
Și aceasta este o
galerie de imagini cu optice noi.
Aceasta este matricea de microlensuri Kodak
, optica pliată,
optica cu rotire în formă de diamant și optica conformă cu
mai multe scale în formă liberă
.
RAMESH RASKAR:
La ce îl folosești, ultimul?
RAVI ATHALE: Îmi pare rău?
RAMESH RASKAR: Ce
folos are ultimul?
RAVI ATHALE: Nu știu
dacă este de folos.
[Studenții râd]
STUDENT: E tare.
STUDENT: Este cool.
RAVI ATHALE: Da, aceasta este
doar o tehnologie care există.
Ai văzut, în Charlotte,
aveau acest aparat acolo.
Ei pot face asta.
RAMESH RASKAR: Ei pot
grava optica folosind-o.
RAVI ATHALE: Cred că este
o mașină de șase grade de libertate
pentru strunjire
și apoi
poți face asta pe o
suprafață conformă.
Și acestea, cred...
RAMESH RASKAR: Revenind doar
la comentariul tău anterior,
așa că totul se
mișcă într-o direcție în
care lucrurile sunt mai
programabile, mai specializate,
dar în
legile de bază ale fizicii,
nu se vor schimba.
Încă vei converti
fotoni și electroni și așa mai
departe.
Și la fel există unele...
dacă vrei să
construiești o aeronavă,
vei folosi
principiul Bernoulli.
Dacă ai de gând să
construiești un vehicul,
aceasta este a treia lege a lui Newton.  Va
folosi doar
acele legi ale fizicii.
RAVI ATHALE: Da.
RAMESH RASKAR: Există
ceva fundamental
în imagistica pe care ar
trebui să-l provocăm?
Oh, ar trebui să continuăm
ca aceleași legi ale fizicii?
RAVI ATHALE: Și
ce legi ale fizicii?
Cred că s-ar putea să nu fie ca o
provocare a legilor fizicii,
dar care sunt legile
fizicii pe care le putem îndoi
sau care sunt diferiți calificativi?
Deci, unul dintre lucrurile
aici, rezoluția
este limitată de
lungimea de undă a luminii.
Da, atâta timp cât ești
în regimul de câmp îndepărtat,
atâta timp cât ești
în regim liniar, scoți
în evidență una dintre acestea și
poți face ce vrei.
Dacă sunteți
microscop optic cu scanare în câmp apropiat de proximitate,
puteți obține cât de
mic doriți.
Dar dacă aveți microscoape neliniare, cu
fluorescență,
puteți obține o rezoluție de 50 de nanometri
cu lumină vizibilă.
Așadar, acestea sunt câteva moduri în care
puteți
privi cu atenție ceea ce considerăm a
fi limita fundamentală impusă
de fizică și să spuneți,
care este amprenta
și putem încălca asta?
Deci ar fi foarte
interesant de privit.
RAMESH RASKAR: Da,
dar vreau să spun, putem
începe să ne folosim propriul
corp ca optică?
Sau putem începe să folosim
principii biologice
pentru a rezolva cele cinci w
și one h?
Adică, în
lumea filmului, folosim de fapt
chimia pentru a rezolva
multe probleme.
Acum, cumva, am
uitat de chimie
și ne-am întors mai mult
la fizică acum.
RAVI ATHALE: Da, cred...
Nu știu.
Unul dintre lucrurile pe care
m-am întrebat, putem
avea un
detector tridimensional, un detector de volum?
Și dacă îl putem stoca,
ce va înregistra?
Cum o vom citi?
Cum o vom procesa?
Unii oameni au vorbit
despre înregistrarea directă
a funcției de coerență
în loc să măsoare doar
intensitatea.
Și vă puteți imagina că acum...
desigur, puteți să fluturați
bagheta și să spuneți nano,
și totul dispare
sau totul este diferit.
Dar, într-o oarecare măsură,
asta poate fi adevărat,
că dacă ești capabil să
controlezi materialul
la nivel de adâncime, adâncime,
sublungimea de undă,
poți face niște
lucruri destul de ridicole.
Deci, aceasta este direcția pe care
nu am explorat-o cu adevărat.
Și un alt lucru interesant
este că, dacă aveți capacitatea
de a manipula materia și de a
o controla la nivel profund sublungimii de undă,
atunci este cu adevărat
datoria
de a vă abandona celelalte
noțiuni îndrăgite despre, o,
o lentilă sferică care formează o
imagine bine focalizată pe o focală.  punct.
De ce te ții
de acea parte a ei?
Așadar, dacă
doriți să exploatați pe deplin capacitatea
de a manipula
frontul de undă electromagnetică
în moduri foarte noi, folosind
materiale foarte noi, ar
trebui să începeți să vă
gândiți și la ce vom
măsura și cum
îl vom măsura?
Deci nu știu dacă ți-am
răspuns la întrebare.
RAMESH RASKAR: Da, vreau să
spun, este o întrebare deschisă.
[VOCI INTERPUSE]
RAMESH RASKAR:
Da, nu cred că
există o direcție clară.
Dar vreau să spun,
diagrama pe care ai arătat-o
mai devreme cu diferite
etape în care biologic...
Adică, nu biologic,
ci uman implicat,
și apoi am devenit din ce în ce mai
tehnologic.
Acum, tot ce era
albastru a devenit roz.
RAVI ATHALE: Da.
RAMESH RASKAR: Deci, ce urmează?
RAVI ATHALE: Cred că poate
ce fel de tehnologii?
Adică, vă puteți gândi la
unele dintre lucruri precum, ne
putem gândi la
senzori de imagine auto-asamblați
care nu sunt
acționați litografic
sau care nu sunt
asamblați mecanic?
Da.
nu stiu ce altceva.
RAMESH RASKAR: Este ca și
discuția despre asemănarea.
Este aproape mai ușor să
spui că vine mâine,
dar când te întorci,
se pare că trebuie să se întâmple o mulțime de lucruri
înainte de a
ajunge la acel punct de...
[VOCI INTERPUSE]
RAVI ATHALE: Și multe dintre
punctele de cotitură ale tehnologiei
se schimbă.  puncte
doar retrospectiv.
RAMESH RASKAR: Da.
RAVI ATHALE: Deci spui, ha,
asta a fost ziua în care lumea sa schimbat.
Nu ți-ai dat seama de
acea dată, dar...
Adică, aniversarea a 40 de ani
de la internet
și a existat o poveste despre
care a fost primul mesaj trimis?
Primul mesaj a fost „conectați-vă”.
Și după L-O-G,
computerele s-au prăbușit
și au trebuit să repornească.
Și așa au întrebat
persoana de la UCLA,
deci ce ai făcut după ce ai
trimis un mesaj?
Oh, m-am dus, am luat un
burger și m-am
culcat pentru că ei nu
știau că a revoluționat
sau așa ceva.
Este doar retrospectiv.
Și acestea sunt câteva
exemple interesante doar
pentru a spune
imagistica specifică aplicației,
iar acesta este un exemplu de la
un chirurg din Naval Medical
Center.
Ei folosesc cele trei
camere CCD pe un turn laparoscopic
și, practic,
ideea lui este că, atunci când
faci o intervenție chirurgicală,
este foarte important
să știi care este artera
și care este vena.  O
tratezi foarte diferit.
Și începi, să zicem...
Adică, hei, fire de codare a culorilor.
Din păcate, în organism,
nu este atât de simplu.
Deci, luând aceste trei culori
și apoi procesând
și folosind multe dintre
lucrurile pe care le-ați văzut aici,
puteți într-adevăr --
un spectru foarte distinct pentru
hemoglobină și
hemoglobina oxigenată.
Și astfel, făcând procesarea,
creați acea hartă
și o proiectați înapoi.
Arată-l tu.
Venele sunt colorate în albastru, iar
arterele sunt colorate în roșu.
Acum, aici, în acest
caz particular,
chirurgul se uită la
monitor și spune, ah,
acesta este cel la care ar trebui să
fiu atent, sau orice altceva.
Dar apoi unele lucruri...
nu știu.
Câți dintre voi ați văzut
chestia asta numită Vein Viewer?
Ați văzut produsul?
Nu știu dacă există o
conexiune wireless este suficient de bună.
Vom vedea.
S-ar putea să funcționeze.
Da.
[VOCI INTERPUSE]
RAVI ATHALE: Ai văzut asta?
Și dacă te uiți
la tehnologie,
este pur și simplu
stupid din punct de vedere tehnic.
Este o iluminare luminoasă de 780 de nanometri pe
care o faci
și care pătrunde în piele
și este absorbită de sângele tău.
Și astfel puteți vedea
venele adânc în interior,
iar frumusețea asta
este că o cameră este acolo sus, la
fel și un proiector DLP.
Iar procesorul practic
scalează și aliniază imaginile
astfel încât să fie proiectate înapoi
exact aliniate așa.
Dar utilizarea este fenomenală.
RAMESH RASKAR: Da,
este una dintre cele mai bune
forme de realitate augmentată.
RAVI ATHALE: Exact.
RAMESH RASKAR: Așa că
o arăt întotdeauna în prezentările mele cu realitate augmentată
.
RAVI ATHALE: Da, și cred că
restul poate fi...
Vorbeam cu Ramesh.
Aceasta este compania lui Doug Hart,
Brontes Technology for the 3D.
Cred că ai văzut--
RAMESH RASKAR: Am văzut--
RAVI ATHALE: Ai văzut
asta și scanere orale [INAUDIBILE] pe
scaun.
Cred că a fost un videoclip.  Ai
văzut videoclipul acela cu
doctorul manipulând în...
RAMESH RASKAR: A
arătat videoclipul?
Nu-mi amintesc.
[INAUDIBIL]?
Am uitat.
RAVI ATHALE: Nu știu.
Nu este atât de important.
Știi ce este...
RAMESH RASKAR: Da, este
uimitor cât de simplu este.
RAVI ATHALE: Da,
și cred că acesta
este unul dintre
lucrurile care poate...
și reorientarea
imaginii, desigur.
Nu trebuie, chiar acum, să
știi nimic mai mult despre asta.
Dar, în anumite privințe, atunci când
vorbiți despre
camere specifice aplicației,
cheia este înțelegerea
naturii problemei și
găsirea celei mai simple soluții
la acea problemă specifică.
Și unul dintre exemple, ați
văzut că Vein Viewer, toți
cunoașteți pulsoximetrul care
este prins de deget.
Este relativ nou.
Cred că poate o tehnologie veche de 20, 25 de
ani.
Din nou, dacă te uiți la
tehnologie,
este o
tehnologie absolut simplă.
Două doamne diferite care se uită la
absorbția diferențială
prin degetul tău pentru a
măsura
nivelul de oxigenare al sângelui.
Și înainte, au trebuit să extragă
sângele și să-l trimită pentru analiză,
iar până a revenit,
poate s-au întâmplat lucruri rele.
Dar acesta este acum, pe care l-ai văzut
în toate emisiunile TV de oriunde,
primul lucru pe care îl fac este să-ți
taie asta pe deget.
Și nu știu
cât costă...
RAMESH RASKAR:
Încă costă 1.000 de dolari.
Nu știu de ce.
RAVI ATHALE: Pentru că cineva
câștigă mulți bani.  De
aceea.
Cred...
STUDENT: Au un brevet.
RAVI ATHALE: Da.
Dar acestea sunt unele dintre
proiectele de cercetare
în care am fost implicat
în monitorizare.
Pentru a vorbi despre,
puteți face o hartă spațială
a nivelurilor de oxigenare folosind
aceste camere multi-spectrale
și apoi procesând?
Iar doctorii au
fost foarte entuziasmați
de aplicații
precum evaluarea arsurilor,
fie că este vorba de o
arsură de gradul I, II sau III.
Tratamentul
diferă dramatic
și, în loc să te bazezi pe
evaluarea vizuală a medicului cu
privire la gradul de arsură,
dacă poți lua o cameră care
poate face acea
hartă de oxigenare a sângelui
sau dacă poți mapa
retina și o mulțime
de retinopatie diabetică
și  alte boli,
există precursori
, care este
nivelul de oxigenare al sângelui [INAUDIBIL].
Așa că astfel de lucruri, la fel
ca distincția
dintre artere și vene sau
Vein Viewer și toate astea--
nu trebuie să inventați noi
nanotehnologii sau așa ceva.
Trebuie să înțelegeți în
profunzime care este problema
și care sunt factorii umani.
Din nou, chestia asta, Vein Viewer --
lucrul tare
nu este doar acel LED IR,
ci vă puteți imagina
totul la fel,
cu excepția imaginii
afișate la televizor
și nu va
fi nicăieri la fel de dramatic
dacă medicul trebuie să
manipuleze acul.  aici în
timp ce se uită la monitor.
Este un factor uman,
așa că chiar acolo.
Deci acolo este cu adevărat locul...
deci acesta este ultimul diapozitiv.
Deci un pic de știință
fantezie, nu doar ficțiune.
Un asistent personal de imagistică
, ceva
care, la fel ca tine, îți purtați
stiloul în fiecare zi,
portofelul sau
cardul de credit sau telefonul mobil.
Asistentul personal de imagistică...
ce ar face?
Sănătate.
Verificați arsurile solare
sau dacă sunteți
răzuit, hei, se
infectează această rană?
Ai un atașament?
Verificați infecția urechii
copiilor dvs. sau orice altceva.
Uită-te la limba ta.
Te supara stomacul?
Garderoba care se potrivește, desigur, cu
culorile și stilurile, în special.
Ce fel de machiaj va merge
cu asta și cu alte lucruri.
Igiena, curățenia
împrejurimilor,
prezența bacteriilor, siguranța apei/alimentului
, calitatea a ceea ce...
Ultimul, devine într-adevăr
un pic științifico-
fantastic, dar poate nu
având în vedere al șaselea simț.
Deci purtați acești ochelari,
sau acest asistent personal [INAUDIBIL]
cu căști,
și cineva merge...
Hei, Ramesh, ce mai faci?
Cineva, această
persoană, [INAUDIBIL]
Este ca și
politicienii care au
acești asistenți la cot și
care le șoptesc la urechi cine
este persoana care intră
și mișcă cu discernământ, asta este din
nou foarte științifico-fantastic.
Iti poate spune imaginea asta?
Tipul ăsta este foarte sceptic.  Desigur,
nu cumpără nimic
[INAUDIBIL],
face fotografii și
cum exploatează practic

domeniul electromagnetic la mâner.
Combinați procesarea chiar
acolo și aveți o
analogie adaptivă pe care o fac oamenii.
În acest moment, este un senzor cu
un flux total unic
de informații de la
senzor la procesor la acesta.
Ce zici să te întorci?  Am
auzit undeva despre
căile vizuale umane de la retină
la
nucleul geniculat lateral până la V1
și tot
cortexul temporal inferior și toate astea.
Toată lumea analizează
acel feedforward
și ce fel de
caracteristici sunt extrase.
Și am auzit că de la
V1 la [INAUDIBLE],
există o cantitate imensă
de conexiuni de feedback.
Care este rolul asta?
Nu cred că
neurologii știu încă.
Dar genul ăsta de lucruri --
un senzor de imagine care
analizează scena,
spune acum, în continuare, ar trebui să mă
uit în această direcție,
în acest domeniu spectral, în
acest loc al ceva.
Și în câțiva dintre
acești pași adaptativi,
puteți învăța o mulțime de lucruri
despre ceea ce este acolo.
Deci, ultimul lucru, un
factor de formă discret sau cel mai ascuns,
și face parte literalmente
din a te îmbrăca.  La fel cum
purtați
portofelul,
telefonul mobil, transportați
asistentul de imagine
care poate face toate
aceste lucruri pentru dvs.
RAMESH RASKAR: Dar
ce factor de formă?
Este în haine sau este...
RAVI ATHALE: Este
interesant în ochelarii tăi,
un fel de produs pentru ochelari.
Sau am fost, azi dimineață,
la [INAUDIBLE],
mă uitam la unele dintre aceste
reviste lucioase pentru Army
și am observat că
toți soldații
din Irak și Afganistan,
casca lor aveau ceva acolo.
Și am întrebat ce este asta?
Au spus, desigur, că
este o cameră video,
deci face parte dintr-un
echipament militar standard.
Deci nu știu cât de
discret poți face asta.
Este în haine?
Este ceva pe care îl agăți
pe cămașă sau este aici?
Hei, ești în laboratoarele media.
Iti dai seama.
Ei bine, asta e.
Mulțumesc.
RAMESH RASKAR: Aveți
întrebări pentru Ravi?
Și vă putem pune
la dispoziție diapozitivele?
RAVI ATHALE: Da.
RAMESH RASKAR: OK.
STUDENT: Pot să pun o întrebare?
RAMESH RASKAR: Da.
STUDENT: Așa că
există această problemă
în biometrie pe care
doriți să o capturați --
în care doriți să recunoașteți o
persoană la distanță și poate că
ea împinge programe de
iris la distanță sau
recunoașterea feței la distanță în
lucruri [INAUDIBILE] precum  acea.
Și sunt două
probleme în asta.
Una este atmosfera dintre
subiect și tine,
iar cealaltă este subiectul este...
el nu vrea
să-l recunoașteți.
Este necooperant.
Care ar fi
ideile tale în ceea ce privește
modul în care ar trebui să meargă senzorii noștri de imagine pentru a
surprinde această problemă?
Pentru că dacă avem
o imagine foarte bună,
atunci ne putem rula
algoritmii de recunoaștere
și apoi ne putem concentra
mai mult pe aspectul recunoașterii
decât să ne ocupăm de
probleme precum problemele atmosferice
și chestii de genul ăsta.
RAVI ATHALE: Și aceasta este
o întrebare foarte largă.  De
asemenea, atinge unele
subiecte foarte sensibile,
după cum vă puteți imagina.
Tot ce pot spune este că acel
anunț de program este public.
Dreapta?
RAVI ATHALE: Asta este...
STUDENT: [INAUDIBIL] nu
singurul care este interesat.
[INAUDIBIL]
RAVI ATHALE: Există tot
felul de agenții interesate--
[VOCI INTERPUSE]
RAVI ATHALE: Da, există o
îmbunătățire a programului numit Best
Biometric Exploitation
sponsorizat de...
STUDENT: Exploatarea biometrică?
RAVI ATHALE: Știință
și tehnologie.
Din această agenție numită IARPA,
Intelligence Advanced Research
Projects Agency.
Este o
problemă multidimensională și sunt tot felul
de idei care sunt propuse.
Sperăm că în câteva luni
contractele vor fi atribuite.
Vom afla ce.
Dar cred că
mergând oarecum dincolo de asta,
cred că într-adevăr în
sens imagistic -
și aceasta este o dezbatere pe care o
avem în mod constant.
Este necesar
să se formeze o imagine?
Și dacă nu formați
o imagine, dacă doar
mapați direct în caracteristici,
numărul unu, puteți face asta?
Numărul doi, ar trebui să faci asta?
Este avantajos într-o
anumită formă sau mod?
Se aplică
și biometriei.
Chiar acum, pentru recunoașterea irisului,
există algoritmul dogman.
Deci, acesta este orientat spre
eșantionarea irisului
la o anumită rezoluție
într-un anumit mod.
Dar dacă legați
achiziția front end
de exploatare, ați putea
intra într-un sistem mai robust, mai simplu
?
Este o
întrebare interesantă, dar este
puțin dificil pentru sponsori
să se lanseze în acea direcție
pentru că riscă prea mult, iar dacă
ceva se schimbă pe o parte,
totul se poate prăbuși.
Dar acesta este un punct interesant.
STUDENT: Da, cred că
ideea pe care aș face acest lucru
este că, atâta timp cât
continuați să vă bazați pe colectarea
unei imagini de înaltă calitate pentru a face acest lucru,
cred că a face asta la distanță
va reprezenta o provocare.
Iar algoritmul dogman
este un exemplu perfect.
Începeți cu
o imagine de
câteva sute de
kiloocteți și ajungeți
cu un șablon de
100 de octeți.
Deci, evident, nu aveți
nevoie de toate acele date pe
care le-ați colectat în
acea imagine de înaltă rezoluție
pentru a face
recunoașterea irisului, așa că de ce
trebuie să începeți cu acea
imagine în primul rând?
Și dacă ai putea dezvolta o
reprezentare comprimată,
dacă ai putea simți acea
reprezentare comprimată în mod
direct, ar duce
la un sistem mai simplu?
Ar duce la un sistem mai simplu
și mai robust?  La
această ultimă întrebare este
foarte dificil de răspuns,
iar
noi trei am spus [INAUDIBIL]
când a fost cu noi patru [
INAUDIBIL] am trecut peste asta iar și iar
și încă
nu am ajuns la o concluzie.
STUDENT: Mulțumesc.
RAVI ATHALE: Sigur.
RAMESH RASKAR: Bine.
Așa că sperăm, așa cum ați
văzut deja, multe dintre planurile de proiect
sunt, de asemenea, despre nu--
nu despre camere standard și
apoi exploatarea specializării
și autonomiei și încercarea de a
schimba multe reguli aici.
RAVI ATHALE: Și,
de fapt,
multe dintre proiectele ne-am uitat unul la
altul și am spus, hm,
ar trebui să vorbim
cu acești oameni?
STUDENT: Mă voi
întoarce să vizitez.
RAVI ATHALE: Da, exact.
RAMESH RASKAR: Da, bine ai venit...
ești binevenit să te înscrii
ca mentor la clasă.
Deci avem mai mulți
mentori pentru clasă
și sunteți binevenit
să vă înscrieți pentru asta.
Atât de excelent, așa că săptămâna viitoare
avem examenul intermediar.
Este carte deschisă, laptop deschis,
internet deschis, deschide totul,
așa că nu studia pentru asta.
Și va fi mai ales despre
desenarea diagramelor și explicarea
lucrurilor și problemelor care
te vor pune pe gânduri.
Și în cele din urmă,
după aceea, vom
studia
ochii animalelor, care este
[INAUDIBIL] 13 noiembrie.