Facebook在幾個月前的開發者大會F8上推出了增強現實平臺Camera Effects platform ，其中AR studio主要面向開發者，在硬件設備普及前，小扎選擇了將攝像頭作為第一個增強現實平臺。另一邊，蘋果終于在幾天前的WWDC大會上讓ARKit亮了相，它能讓開發者們利用來自于相機和傳感器的詳細數據，將數字對象投射到3D空間，跟需要植入硬件的Google Tango平臺不同，它可以在現存的海量蘋果設備中直接使用。
而在今天，天貓618理想生活狂歡節的線下體驗館里，天貓通過多個技術創新，帶來許多未來新零售場景。
與商品零距離
天貓理想生活體驗館內的陳設足夠復雜，如果不仔細羅列，人們可能會錯過很多信息。其中幾款智能化的產品一出，用戶不得不感嘆未來世界的諸多便利性。
智能口紅墻，基于阿里背后的大數據技術，當用戶拿起某一只口紅時，口紅墻會根據這個行為，判斷她對口紅的喜好傾向，從而從墻面上近萬只口紅中閃爍顯示出所有用戶潛在喜愛的口紅色號。
虛擬試衣間，走到鏡子前的用戶人臉被自動識別，掃描后鏡子內會直接變幻出另一個虛擬用戶，這個虛擬用戶會無限貼近用戶本人，同時可快速試穿各種陳列在虛擬貨架上的服裝。一如用戶本人穿上各類款式衣服，體驗上，要比拎著衣服、排著長隊等待實體試衣間的體驗要酷炫多了。
虛擬試妝鏡，當下基本已經成為天貓的標配，這次體驗館內也同樣有設置，坐在試裝鏡前，可通過攝像頭識別用戶的人臉，進行虛擬試口紅，虛擬試眼妝等，更重要的是，它的體驗會非常貼近用戶本人親自在嘴上試色的效果。 這一效果甚至可以讓線下試妝體驗完全騰挪到線上進行。
跨屏互動，通過手機攝像頭的掃描魚蝦的圖片，可以將活靈活現的三維魚蝦抓到手機里，對著奶牛的圖片，可以把牛奶擠到手機里并下單購買。從平面圖片到三維實物，像魔術一般的變幻。
另外，將手機攝像頭對著吸塵器掃描即可以看到其內部馬達的轉動情況，對著空氣凈化器即可看到其工作原理，用戶仿佛擁有了透視眼一般，新的交互能更直觀的了解并體驗每件商品的功能細節。這一次在智能館內又見到了微軟的繪畫神器Studio surface，搭配surface Dial只需要用手機對著模型轉上一圈，一秒鐘生成3D模型。
先讓虛擬與現實交融
以上新奇的體驗，均是來自于天貓聯合多個團隊主導研發的天眼（Tmall-EYE）技術，以及天貓互動聯盟合作伙伴的通力協作。為此，天貓互動聯盟技術負責人鄧紅春（花名：續彬）和他的伙伴已經奮戰了相當長時間。
（天貓互動聯盟技術負責人鄧紅春）
簡單來說，在未來，理想的購物生活是沒有邊界的，線上線下則會融為一體，消費者在線下看到任何感興趣的東西，無論何種形式，都可以打開手機天貓或手機淘寶，使用AR掃一掃功能對著感興趣的對象，天貓技術背后的算法會識別用戶掃描的對象，判斷消費者所處的場景，提供給消費者具體需要的信息和互動。所有線下物體都會成為幫助消費者鏈接到線上的入口，從而快速觸達天貓背后的消費內容，隨時隨地體驗商品功能，直觀了解商品相關的資訊、達人推薦等。跟許多增強現實的業務探索一樣，天貓的技術創新也在逐步的普及過程中，不過這一次坐落于杭州的天貓理想生活體驗館將各類技術集聚一堂，讓未來生活提前上演。
天眼技術的突破，主要來源于天貓對于理想購物國度的設想，在現代生活中，互聯網指引著有關“商品、欲望、溝通、消費、體驗”的無限需求，逍遙子甚至認為，新零售時代的實體門店交易和網上交易沒有任何區別，每一個用戶都可以被識別、被運營，為了讓大膽想象成為現實，天眼技術應運而生。
為了讓用戶使用起來更便捷，只需要一臺手機，一個攝像頭，天貓技術團隊把圖像識別、3D物體識別與定位跟蹤技術融合在單一入口，并結合LBS技術，更加精準地識別消費者所處場景。
線上線下的邊界即將模糊
不過，看上去簡單，技術上確也有不小的難點，攝像頭識別完物體需要跟蹤圖像，用戶的手機會晃動，就需要更高性能的算法，同時對模型加載也有考驗，關于此類問題的解決，參與了天眼項目的技術專家續彬則認為，通過模型壓縮與底層容器的優化可以合理的解決流暢度問題，天貓的算法團隊也會借助深度學習算法，首次嘗試將多種可識別對象融入同一個識別庫中，將客戶端的AR算法和云端的識別服務打通，縮短用戶觸達AR服務的鏈路,提升用戶體驗。
同時，跟Pokémon Go、各種濾鏡相機這類一度風靡的產品不一樣，虛擬試妝、虛擬試衣追求的是更精致、更真實。Pokémon Go的移動環境非常基礎，只需要基本的計算機視覺和定位技術，即可在手機屏幕上針對不同的地理位置顯示可愛的小精靈圖像。技術專家續彬稱，游戲類的增強現實只需要有趣、好玩即可，即便畫面很假，卡通痕跡很重也關系不大，但品牌方對于用戶的體驗卻尤為看重，無論是化妝品，還是服飾服裝，都要盡可能的貼近現實，真正成為用戶日常的工具，不需要磨皮、美顏，而是越真實越好。
過去，傳統實體店最大的優勢就在于用戶體驗，而當線上商城與線下店面的邊界越來越模糊，你可以輕易的通過AR技術和商品進行對話時，整個消費格局會產生翻天覆地的變化。為了加快這個理想國度構建的過程，天貓正在不遺余力的通過技術升級提高產品的各方面性能，從而提升用戶的體驗。
總的來說，目前呈現效果基本的流暢度與真實感都能得到保證了，不過，在續彬看來，即便技術再厲害，識別與渲染能力再強，沒有優質的內容支撐仍舊是空泛的。這一次，線下天貓體驗館的品牌參與多達幾十家，涉及到大量商品的個性化交互設計，AR跨平面互動能力、天眼能力、云識別能力全部開放給了天貓互動聯盟成員，并全面覆蓋手機天貓、手機淘寶各端。目前，天貓已通過TidaSDK進行相關接口的開放，并已經搭建海螺碼頭平臺為品牌商與服務商提供線上的內容生產鏈路，為天貓客戶降低落地成本，預計未來更多精彩的內容還會不斷涌現。
（新聞稿 2017-06-20）