BiDi Screen Nápověda

21 Jun 11:40 am


Original: http://web.media.mit.edu/~mhirsch/bidi/index.html

 

supplement

Oddíl 1: obousměrné obrazovky Concept

Otázka: Co je obousměrné obrazovky?
A: Screen obousměrných je příkladem nového typu I / O zařízení, které má schopnost jak zachytit snímky a zobrazí je. Tento tenký, obousměrný obrazovka rozšiřuje nejnovější trendy v zařízení, LCD, který viděl začlenění foto-diody do každé zobrazení pixelu. Použití nové optické maskovací techniky vyvinuté v Media Lab, může obrazovka obousměrné zachytit Lightfield podobné množství, odblokování širokou škálu aplikací, od 3-D interakci gesto s CE zařízení, k hladkému video komunikaci.

Otázka: Jak to funguje? Jak to cítí 3D informace z tenké displeje?
A: Screen obousměrné používá snímače vrstvu, oddělené malé vzdálenosti od normálního LCD displeji. Maska obrázek se zobrazí na displeji. Když holé senzor vrstva vidí svět přes masku, informace o vzdálenosti objektů v přední části obrazovky mohou být zachyceny a dekódovat pomocí počítače.

Otázka: Jak je to se liší od povrchu, SecondLight, Gesturetek, Vnímavý pixely a xyz?
A: Obousměrný Screen sdílí mnoho atributů s projekty, které se snaží zachytit gesto informace. Rozdíl je v tom, že na obrazovce obousměrné možné realizovat bez kamer a projektorů nebo čoček, díky čemuž může být hubená jako stávající LCD obrazovek.

Otázka: Bude to nahradit kamery?
Odpověď: Je možné použít Screen obousměrného technologie k zachycování metafor podobné tomu, co by mohlo být zachyceno z webové kamery. Náš současný prototyp nezachycuje dostatečně snímky s vysokým rozlišením prozkoumat tuto možnost zatím, ale budoucí implementace by mohla zlepšit na základě zkušeností video chat s webovou kamerou. Vzhledem k tomu, že je fotoaparát na displeji bude obrazovka obousměrné umožní oběma stranám do očí.

Otázka: Bude to nahradit plochý skenery?
A: Optické multi-touch displeje, které používají senzory zabudované v LCD matrici, již mohou nahradit funkci plochý skenery. Screen obousměrné je podobné, ale mírně odlišné konfiguraci, a některé další technické problémy budou muset být splněny, aby se to stalo.

Otázka: Jaké jsou některé další aplikace této technologie?
A: Screen obousměrné technologie může být použita pro gest interakci, ale může být také použit k tomu, aby scénu, která reaguje na reálné osvětlení, tracker uživatelova hlavy v přední části displeje pro zobrazení paralaxy a dalších aplikací, které využívají Mapa hloubky.

Otázka: Jaká jsou omezení?
A: Protože obrazovky používá obousměrné optické techniky umožňují zachytit informace o světě, to se spoléhá na osvětlení scény. Bez dostatečného osvětlení technologie nemůže zachytit hloubku. Vzdálenost, na kterou dokáže zachytit obrazovku obousměrné informace o hloubce pohybuje zhruba v poměru k oddělení senzorů a LCD složek na obrazovku obousměrného. To znamená, že velmi tenká obousměrné Screen by být citlivé na objekty daleko od displeje.

Otázka: Jaké jsou budoucí směr?
A: Screen obousměrné používá komponenty LCD vytvořit optickou masku obrazu světa. V současné době, používá maska ​​je vždy stejný. My se začínají objevovat úpravy masku lépe vyhovovaly scéně obraz.

Otázka: Není to stejné, jako něco, co Apple udělal?
A: Ne Apple Computer má patentovou přihlášku popisující několik technik pro vytvoření zobrazení, které mohou obraz objektů. Na rozdíl od obrazovky obousměrného, ​​který používá jeden velký snímač za LCD a bez čoček, na displeji se navrhuje Použít by se dlaždice kamery, každá s použitím malé objektivu nebo sekce, v rámci LCD. Jedním z důvodů nevidíte takový výrobek na trh, dnes je to, že obklady fotoaparátů a objektivů za sebou nebo v rámci LCD bude téměř jistě vytvářet vizuální artefakty na displeji kvůli rušení podsvícení displeje nebo se zvyšuje odstup mezi displejem pixelů.

Dalším klíčovým rozdílem mezi práce popsané v patentové přihlášce Apple a na obrazovce obousměrného je to, že obrazovka obousměrné slouží jako rozhraní gest, přičemž displej Apple se používá pouze k zachycení snímků konvenční. I když je možné konfigurovat kamery pole zachytit stejný typ lehkých terénních dat jako obrazovka obousměrného, ​​se nenavrhuje v patentové přihlášce od Apple, a zdá se, že nejsou nakonfigurovány jejich zobrazení, aby to bylo možné.

Oddíl 2: Informace o aktuálním prototypu

Otázka: Jak jste implementovat světlo snímací vrstvu obrazovky obousměrného?
A: Screen obousměrných je inspirovaný z části optické multi-touch displeje. Tento nový typ multi-touch zařízení vloží senzor v každém pixelu LCD. Vzhledem k tomu, velkoplošné snímače, jako jsou tyto nebyly k dispozici v době této práci jsme použili difuzor a kamerový systém pro simulaci senzoru. Stejně jako filmové plátno nám ukazuje obraz na určitém místě v prostoru, difuzor ukazuje fotoaparát opticky to, co jsme chtěli zachytit eklekticky s čidlem.

Otázka: Není to stejné jako u jiných projektů, které využívají kamery do zad?
A: Ne Další projekty pomocí kamery přímo obrazových objektů zájmu. Tyto projekty by nikdy fungovat bez těchto kamer. Používáme kamery pouze jako prostředek k simulaci velkoplošnou holé senzoru.

Q: Jaké jsou parametry současného prototypu?
A: Aktuální prototyp zachycuje data rychlostí přibližně 10fps. Na displeji se aktualizuje na cca 30 snímků za sekundu. Objekty mohou být měřeny až do 50 cm od obrazovky. Na obrazovce se zachycuje světelné pole, které má 19×19 úhlové rozlišení a přibližně 80×100 prostorové rozlišení.

Q: Jaké komponenty jsi použil pro prototyp?
A: Na obrazovce se používá obousměrné off-the-shelf 20,1 “LCD 1680×1050 Náš první prototyp používá Sceptre displej a náš druhý používá rychlejší LG displej Čidlo se skládá ze dvou kamer Point Grey Flea2 a difuzor z.. podsvícení LCD displeje. zpracování na obrazovce se provádí na 8-jádrové procesory Intel Xeon.

Otázka: Proč není obrazovka obousměrné prototyp tenké jako LCD panelu se používá?
A: Obrazovka obousměrných je motivován částečně nadcházející optickou multi-touch technologii, která s sebou nese vkládáte optické snímací prvky v každém pixelu LCD displejem. Tato technologie nebudou k dispozici pro nás pracovat v blízké budoucnosti, a tak jsme našli jiný způsob, jak otestovat naše nápady. Používáme kameru a difuzor (podobně jako promítací plátno), simulovat velké plochy senzor, který bude k dispozici v optickém multi-touch LCD. Používáme fotoaparát a difuzorem pro měření opticky, co bychom chtěli měřit elektronicky. Bohužel, to vyžaduje velkou vzdálenost mezi kamerou a LCD obrazovky obousměrného.

Otázka: Jak kachlová-MURA maska ​​použitá na obrazovce obousměrného předložit rovnocenné metafor k dírkové pole?
A: Používáme techniku ​​již prokázala skupina Camera kultury na MIT Media Lab nazývá prostorová heterodyning. Prostorová heterodyning je obecný, maska ​​technika založená na měření světelného pole, který vychází z amplitudové modulace, stejně jako rádio AM. Posunuté kopie světelného spektra pole frekvence jsou vyráběny na různých částech obrazovky obousměrného snímače, což nám umožňuje rekonstruovat původní, kapela omezené světelné pole, které vstoupí na obrazovku obousměrné.

Otázka: Jak se obrazovky obousměrného odhad hloubky?
A: Obrazovka obousměrné měření polohy a úhlu dopadu každého z paprsků dopadají na povrch obrazovky. Toto množství je známé jako světelné pole. U každého snímku zachycených dat používáme techniku ​​známou jako syntetickou aperturou refocusing vytvořit stoh obrázků zaměřených na různé vzdálenosti v přední části obrazovky. Pro výstupní pixel v naší mapu hloubky, musíme přejít sloupec v tomto zásobníku obrázků, hledá pixelu s nejvyšším kontrastem. Přiřazujeme hodnotu hloubky do hloubky mapy do místa, kde se znovu zaměřuje obsahující obraz pixel s nejvyšším kontrastem. Tato technika je obecně známá jako hloubkou od zaměření.

Otázka: Je patrné blikání v prototypu obrazovky obousměrného?
A: Ano, displej obousměrné nemá v současné době přepínat rychleji než míra syntézy blikání pro lidské vidění. To je vzhledem k rychlosti aktualizace pro stávající off-the-police LCD panelů. Současné LCD panely omezit naši obnovovací frekvenci 30Hz, protože současný obousměrný obrazovka prototyp vyžaduje celý LCD panel pro zobrazení kachlová-mura kód pro několik milisekund, takže obrazovka obousměrné čidlo zachytit údaje jednotně modulován kachlová-mura kódu . Aktuální high-end 60Hz LCD trvat asi 1/60th druhé překreslení obrazovky (vidět 1000fps video z high-end LCD zde). Tato funkce na LCD lze ovládat ve výrobním procesu, a je non-technické omezení na základě aktuální poptávky na trhu.

Otázka: Je patrné zpoždění mezi pohybem a obnovování displeje?
A: Někteří uživatelé si všimnete zpoždění při použití obrazovky obousměrného prototyp. To je proto, že naše zpracování potrubí v současné době provozuje kolem 10fps. Naše potrubí běží na všeobecné použití procesoru a jeho výkon může být významně zvyšuje s dalším softwarem optimalizaci, GPU zpracování nebo účelových hardware. Algoritmy, které používáme, jsou vysoce paralelní.

Otázka: Jaký typ TIE Fighter je uváděn v videa?
A: Existují dva typy stíhaček TIE v videa. Ten se ptáte je Darth Vader osobní modelu.

Otázka: obousměrný Screen Herald dystopic orwellovské budoucnosti, ve které zlověstné vládní byrokrati sledovat každý náš pohyb a osobní soukromí je vzdálenou vzpomínkou? A: Ne fotoaparáty již existují. Screens již existují. Kamery na obrazovkách již existují a jsou všudypřítomné. Každý nástroj může být zneužit. Hodnota je v tom, jak je používat.

Comments are closed