國內第一家數字展示行業門戶網站 
 數字展示在線首頁 > 資訊中心 > 如視300萬套VR房源背后的技術硬實力揭秘

如視300萬套VR房源背后的技術硬實力揭秘

編輯:Emily 文章來源:數字展示在線 發布日期:2019-12-31 7:09:54

  買房 / 租房人累、經紀人苦、業主難,傳統看房模式中的沉疴積蓄已久。為從根本上解決消費者在看房上的痛點,降低消費者的時間成本與交通成本,提高經紀人帶看效率,貝殼找房如視團隊提出了以三維重建技術為核心的技術解決方案,并推出了一系列 VR 看房產品。成立近 2 年來,如視團隊完成了從 0 到 1 的蛻變,截至目前,如視 VR 已覆蓋全國 120 多個城市,累計掃描重建 VR 房源超過 300 萬套,用戶使用 VR 看房累計超過 5 億次,成為目前國內最大的空間實景三維重建服務商。靚麗的成績單背后,如視團隊強大的技術實力功不可沒。

  大步快跑,如視 VR 從 0-1

  在如視成立之前,貝殼技術副總裁、如視事業部總經理惠新宸就做了詳盡的調研。當時 3D 建模技術已發展相對成熟,流行的技術方式主要有全景照片、序列幀、結構光三維重建等。經過調研對比后的結論認為:全景照片方式無法滿足精確測量的要求;序列幀方式本質上還是 2D,難以給 C 端用戶帶來沉浸式體驗,且后續的數據價值不大。

  團隊最終決定采用結構光 VR 方式打造 3D 房源!拔蚁M恢菇o用戶展示 360 度全景照片,更希望為其呈現具有空間感、方位感的 VR 看房,并且更重要的是數據價值,VR 看房只是三維重建產品化的第一層價值,埋在三維重建后的數據價值才是我認為更重要的”,惠新宸表示。

  成立近 2 年來,如視團隊一直保持著“大步快跑”的研發節奏,陸續推出了大量面向 B 端的產品,比如黎曼相機、如視 Lite 等 VR 采集設備;以及面向 C 端的產品,比如 VR 看房、VR 講房、VR 帶看、貝殼未來家等。
官方提供的數據顯示,通過 VR 看房,用戶人均停留時長增加了 210%,房源約看量增加了 138%,經紀人帶看效率增加了 13%。

  領先源于每一步都走得扎實

  在研發力量保障上,如視團隊匯集了一大批頂級技術專家,占比近如視總人數七成;菪洛废 InfoQ 表示,如視的三維重建技術在業內的優勢經過了大規模工程落地的驗證。如視的 VR 掃描設備穩定性強,在過去一年多時間里采集了 300 多萬套 VR 數據,并以每天近 1 萬套的速度持續增長,在海量的數據基礎上疊加了眾多技術創新,自動化程度較高。

  自深度學習出現之后,基于數據驅動方式對圖像做三維重建在學界和工業界流行開來。如視算法架構師潘慈輝介紹,在海量房源空間數據集的基礎上,如視利用深度學習代替人工,通過設計合適的神經網絡,充分利用全景圖區別于普通圖片的特點,用神經網絡結合傳統方法求解深度值的近似解,從而實現了良好的三維重建效果。在房屋的三維模型上,主要運用到了傳統計算機視覺及深度學習中的多視幾何和識別分割檢測等技術。

  如視三維重建

  此外如視在戶型圖自動生成方面也大量運用到了 AI 技術,包括深度學習網絡、GAN、數據標注、圖像分割、圖像識別等。圖像識別技術的應用具體包括對房屋內標志性物品的識別,房間結構俯視圖的識別等。據潘慈輝介紹,如視自動戶型圖的研發過程前后歷經四個版本,每個版本并非單純在前一個版本基礎上迭代,而是會嘗試新的創意和想法,包括通過深度學習實現房間與房間之間的區分,利用對抗神經網絡實現端到端的戶型圖生成,用單張全景圖端到端生成單一房間的戶型結構等等,最終,他的團隊采用了多種方法融合的方式呈現自動戶型圖。

  300 萬套 VR 房源數據是保持優勢的“護城河”

  目前如視團隊的技術和產品實力很大程度上集成于如視 Lite 這款新品上。如視 Lite 自今年 11 月正式發布,是加速房源 3D 化的又一利器。

  據悉,如視 Lite 基于對 300 多萬套 VR 房源數據的深度學習,利用單目圖像深度估算技術,將二維的房屋圖片賦予三維的“深度”,實現對距離遠近和方位的感知。

  潘慈輝表示,目前在市面上還沒有出現一款跟如視 Lite 類似的產品,它舍棄了深度測量,卻又能提供一個真正三維的模型。上述功能的實現正是基于如視的算法和數據壁壘。

  數據是如視領先于競品和保持行業頭部優勢的重要“護城河”。

  如視算法架構師顧曉東認為,這 300 多萬 VR 數據為如視 Lite 的三維建模打下了堅實基礎。結合最新的 AI 技術,利用這些海量數據來增強對二維、三維目標的檢測識別和分割,增強在房屋結構理解、戶型圖自動生成、房屋三維模型優化等方面的能力。反過來,這些能力的增強也會令數據采集的過程更方便、快捷。

  數據是重要的財富,深度學習尤其依賴大數據!叭绻麤]有數據,拿不出有效的模型,那嚴格來說,算不上對一項技術做到真正掌握。深入到應用之后,你便會發現這個環節是非常依賴數據的”,顧曉東表示。

  在落地應用的“戰場”上能否站穩腳跟取決于前期的數據積累,必備的“功課”不能落下。在 VR 看房賽道上,尚有許多玩家缺乏同如視一樣多維且全面的 VR 數據積累。

  單目圖像深度估計帶來的技術領先

  由于缺乏數據根基,現在市面上的一些 VR 看房產品存在“濫竽充數”現象,一些商家利用人視覺的上的“腦補”功能,通過提供 2.5D 模型,也即室內只有墻體是立體的,其他物品是用全景圖片模擬,創造出了一種“偽 3D”的錯覺。消費者從某一角度乍看上去這些物體是正常形態,但從其他角度看就會變形,并不立體。

  惠新宸認為,這些取巧的做法并不是真正的 3D,更不能稱之為“三維重建”。更明顯的短板是,數據價值不足以支撐后續的技術延展。

  在如視 VR 看房界面,每切換到一個場景,所有的室內物品均以三維模型形式呈現,且具備長寬高等深度數據。單目圖像深度估計技術是如視 Lite 產品達到“深度”的關鍵。據了解,這是如視在 VR 看房領域的優勢技術。

  所謂單目圖像深度估計,就是從單張圖片出發,估計深度值的算法。潘慈輝介紹,這是一個病態問題,沒有確切解。例如,當靠近了拍汽車模型和離遠了拍真實的汽車能得到完全相同的圖片。但某些特定的場景下,是可以求得不同程度的近似解的。潘慈輝進一步介紹,針對室內場景的全景圖片,人類可以一定程度上求近似解。利用估計消失點,并結合全景圖片的拍攝高度可以人工估計房間中線段的長度,從而獲取房屋結構即墻、天花板和地面的尺寸和深度;結合人類對家具、小物品的先驗知識,可以估計圖片中各類物體的尺寸和深度。然而這整個人工流程全部發生在人的大腦和手工演算中;如視基于海量的數據積累,可以自然地越過這個流程,讓深度神經網絡仿照上述人腦的方式,自動地得到和人類經驗相近甚至更優的解。

  如果說數據積累是實現“真 VR”的第一步,那么數據單目深度估算技術便是第二步,前面兩步走扎實了,才有了如視 Lite 輕量化的自若。這有點兒像蓋房子,要先打好地基。

  在最初技術路徑選擇的時候,數據價值就被如視團隊列入了首要衡量指標,F在再回過頭來看,這個選擇無疑是正確的。盡管后來追隨者和模仿者蜂擁出現,但幾無超越者。

  海量落地場景形成閉環

  在技術硬實力之外,場景化落地是如視的另一大優勢。

  剛推出不到半月的如視 Lite,率先落地到天津后,截止 11 月 26 日,累計拍攝量為 4373,外網展示量 1927,外網覆蓋率 9%。如視 Lite 的租賃業務現已全國開放拍攝,試點區域的商機高于房源滲透 13%,由商機到成交,高于普通房源 30%。

  貝殼 VR 看房

  值得一提的是,在應用落地上,如視采用了“軟硬件一體化”的差異化打法。

  如視的一系列 VR 掃描設備均系自主研發,而非采用外部的 VR 設備。如視硬件渠道部負責人施文博表示,之所以選擇自研硬件,一方面希望能采集到更多維的數據,更好的滿足用戶體驗,另一方面是出于規;慨a的需要。從黎曼相機到如視 Lite,如視團隊還在探索擴寬數據采集的方式和種類,找到多種異質化和定制化的數據采集方式,以滿足不同的需求和應用場景。施文博透露,新一代激光掃描設備將于 2020 年量產,該設備除了精度更高、采集距離更遠,同時將采集空間中各物體在 905nm 波段紅外光的反射率信息,對于物品識別、物體分割等有較大幫助。

  如視 Lite 能力升級的同時,在“降成本“上表現出色。相對黎曼相機,如視 Lite 主打輕量化 VR 采集,用普通的相機即可拍出 VR 房源。如視 Lite 成本更低、操作更簡單、基本不需人工的干預,還支持接入各種硬件平臺。在應用場景上也更加多元,成本更低的如視 Lite 將運用在酒店、租賃等細分場景。

  貝殼找房在房地產領域十幾年沉淀積累下的場景優勢,是如視 VR 產品快速落地的關鍵。也正是這種基因,這支年輕的技術團隊格外關注如何把技術真正落地到場景中去。

  核心算法怎么能與工程落地更好結合?這是如視研發人員每天都在思考的問題。潘慈輝認為,一段核心算法,可能在某些特定約束條件下已經達到了非常出色的效果,但要實現落地轉化、達到穩定可用,還需要在工程上做很多嘗試與調優,甚至需要結合新的算法以達到整體效果的提升。

  最近兩年,AI 熱潮漸趨冷靜后迎來了價值驗證期,而價值驗證的核心標準在于落地;菪洛穼Υ松钣懈杏|,他談到,自己接觸到的一些 AI 創業者直呼‘創業太難了’,因為找不到場景!坝袌鼍笆呛苤匾狞c,當技術和產品實際運用到場景里,才標志著它是能帶來價值的,而不僅僅是噱頭”。

  硬件、技術、場景是相輔相成的。接下來,如視在深耕上下游產業鏈的同時,還將加速布局生態鏈,將其積淀的技術能力向全行業開放賦能。

嘉賓介紹
惠新宸(鳥哥),國內最有影響力的 PHP 技術專家,PHP 開發組核心成員,現任貝殼找房技術副總裁、如視事業部總經理,負責貝殼·如視 VR 看房、AI 講房、貝殼未來家等產品的研發和落地,以技術探索推動居住服務行業進步的更多可能性。
潘慈輝,如視算法架構師,法國國立信息與自動化研究所博士后。曾在大疆、優必選從事算法研發工作,熱衷技術研究,對三維視覺、機器人定位建圖、工程實際落地有豐富經驗。
施文博,如視硬件渠道部負責人,原 Auto3D 創始人。后加入如視,致力于使用軟硬件一體的解決方案解決行業痛點、提升行業效率。
顧曉東,如視算法架構師,中國科技大學本碩博連讀,曾先后任職于微軟亞洲研究院和 Technicolor 北京研究院。致力于深度學習和計算機視覺方向的學習和研發工作。

 聲明:本文部分圖片、音頻、視頻來源于網絡搜索,版權歸原作者所有,如有侵權請聯系我們予以刪除。
新手怎么玩广东麻将 官方69棋牌游戏大厅 排列五开奖 大众麻将单机游戏下载 麻将游戏外挂软件 九鼎娱乐电玩城 万达彩票高手论坛 青海西宁快3开奖 二十一点要牌策略图 提现斗地主棋牌娱乐 6 1浙江体育彩票开奖结果 天津11选五平台 AG捕鱼王二代iOS下载 掌心南京麻将官方版下载 手机有么有什么棋牌游戏 pk10开奖结果 浙江20选5开奖查询