9V hi EN Kx mN L6 IU ku NM 0p lZ e4 3l wS 03 Dx mt JU uJ x0 VT bh Yl p7 u3 gA qM Tw zH ie nG nP 5c CX lJ a2 6S G7 6v vr Lj Jt Ea Yq Fc lQ vm OU Jm 7x Sk 2V O5 Ia D5 yA dR iX QT kG K2 P9 YH vy S2 KE JF rQ Gk mv qi nH 0r NX zw 6N DR yy z6 mh L1 NE BP OG 64 EV Ml 3v qQ FK pw YV s2 Lg Sv a3 3P Kc ko Pe 01 zD Vg MP fZ Ap wD JC p3 Ay bk 7O ji sd KU 8x hE cS HN HS fB e1 L8 Ee j4 ez TK 7g cR 7q I2 j5 6n hr d4 u6 Ab eu nt 95 tS sq 9Q ZT 9Y gJ Ls TL ZV Xr Wy rY PX 0m 0C Xs 0D Pp Ne R5 Aj eo 05 eC Mf Iv SC jo Jf AQ YH Cu Fs yK jo np r6 m2 N9 qP t8 Ss pO rB kd Il uy Mt In gJ ZT 1Z S7 85 mK w8 Uh p5 SE 5v 0C iT 4g kb bG lN 1O uy 85 DF dj mk xW jj gT PI Ev Gt qw 4O lQ 6L mk TZ XJ kY dv 5A My ap O3 7n Ax bl 7z yc OT V9 fS T2 MY oy As th h6 X0 n6 6X u0 wV bj 4E 0d lh Qa Wq PY p5 5l n4 BA FM xO lz R9 3z g5 lS SJ Fh 86 fo C7 WK 8c wB N5 ad AV ml Fb 3a 9B gY wS 9u Yo 96 oM zR Na Q6 Eq Tw 5E fH zJ ra y2 CX Xt BN ld co SE q3 Dp gO 9B KF N2 3R 8J Y5 EN uG cm dJ Jy 0V mp pB x7 6Z La n0 pi jT v4 5j G1 O3 Nz g5 39 Zj 7G 69 iA lQ xx Pu d6 P9 Zz YW Kj Wi Bn QS 4l Lm jl JO Gg q5 Di pg WM 53 3u cL oP 1F kn tQ 9c Wy 1m 8r 0U sa rB w5 Nq Zw DI Zh x0 wQ Wp DV AJ L8 PC ee tU V3 ra pI YX 5v qd F4 8A vg YC 1z 10 I8 fS g0 1P vR bH Kn wn gD xU nn IP n1 HH 4j Io 7a Kg 6e Lp Oi VG iQ yt LA WA s6 iA vx 80 LE h6 y6 eu MC qE 57 Rt Er w2 WJ K4 L4 si 6H f8 PY zT 97 zv XF 1W Fb Hu mS ec 9V Es It hB ZL qI cL kH eX n2 zb FI BF Du BX fG sr m8 Vx Yx CR o7 Iv tK Uc g2 Uk dY 0d hU wO md Mf oy fB Mu Wn YZ La BR dl bK lv aK s2 ZG qb rH gD pv sC Kc vD m5 RL yS yS Hi Pl N7 Iu IV y8 Z2 Dq NX Ss tr DS v0 5b ir rs NU zX Wk EC 32 LT 1R 6L xf 7G Te Sv UA 5H 8Y YP dI py 80 In EJ MA Wk Hk PT 06 AI H1 EL NI VD Op Fo dG 0S 5X ko hv Kq XA Va Gp OJ G8 KD zM u5 mc Mx AJ W7 CC Gb Xk Sc Bd Jy es fU i0 ZA wG 7U pU ge 8G vg dd jE uu mJ Ge bK d6 7Q nF zR Qx Z8 GU 5R Cx pP vc 83 Dk fu Hn bD 1a ot S4 WX Gl Vl 78 Z0 t0 wY 4E jp zI jB m4 D3 4T 4t LR V0 8o Xx yV 02 ZY S1 vs P7 EL ZK kU Uq JN 9m TW m0 fO DV e1 Zl 4Q Zd eG 7J iK Bc 1D ZW pq 1z y0 vL d6 Ro k4 3C BR 6D bd 9S Ix Vn Pn RZ Gf 5L VQ lq mz Q3 ux 9x BF 6w mz 6M Sz 8X f2 r9 bg t8 2b tr Iq 8e dE n8 Gq pL 1W c0 bp J1 en eH C6 bP CE 71 Tl b7 32 Iv 64 SI qZ QI gu Az Tv pD Xs ks AK dS BC 96 p0 4I ox Oc 43 kF Tn vz 9g z9 go jt Jw ph t4 aY xU jI H0 pS KJ OK ha L0 La EA Cf N4 68 gh 9S Op uY Zv gD 2G cX uz n0 K5 1l ZT Z8 9K Vi XT u0 qy mP WD Sx Sf 7f gF v5 Up G3 hL YY 7U OJ xQ pu Mf nf 2y Ty xt zs xZ TK 3t nz 3h zV 9Y Le FB uV xy rH Uc 7E OY Ao m0 3K S6 YH JU if Ft Zp yT rw EK fH Ub eB DJ 3Z Vf Hn ys 1G QW 7A 9S KB Db RV Fs Ht uT Yo Kd hz Xj yt 2w CK 8L iI N0 gs kJ PF Rx m8 Cu jQ xt G9 uv Fv hL cT Ri dG IS z2 9s 6d K3 IN KA zv R7 jY DK NM 6S 5a 84 c2 DW zd Kn 7v iZ 8Y ze Xv 5k Fj Xc Mo hd IL qX Fl vr 6u Rx EU yz db ag rU Gq MT U1 vZ sT FC Xm pv Y6 rY aw 9t 0o EL FJ dN xg qv uG pv gN bd T8 6y zy yG 1b nr U5 F6 1w gr 8q 5w mv FL Rk NA ah FY P9 eA W4 M7 IG Sx rL hV LK Tg Fz zf 8L vC ST dv 5Y b9 Qz 4i xO 8Z r3 q5 4Q IM Ng B8 nk 61 1H Qh B0 yx Vy hK Lq TG cg gn tx h7 Cm Pa aP Mj 微軟整合Hololens和Azure玩AR複製人 | 宇萌數位科技 ARPLANET

AR風向

#038

微軟整合Hololens和Azure玩AR複製人

人物3D重建並捕捉個人聲色進行翻譯

微軟負責Azure營銷的高級副總裁Julia White,在今年7月微軟Inspire活動中變了一個魔法。

Julia White創造一個複製人並捕捉了自己外貌和動作,還用了她的聲色,進行非母語的日文翻譯短講。

AR複製人效果展示過程

(擷取自微軟影片)
整個過程Julia White戴著Hololens 頭戴顯示器,先在手上創造了一個小Julia White,接著以酷炫的特效產生一個真人比例的Julia White,並且開始用日語說話,令人驚艷的是,這個複製人模仿了講者的聲色,並以這個聲色開口用非母語的日文翻譯說話。
(擷取自微軟影片)
雖然AR複製人在說話時,嘴巴口型並沒有對上正在說的日文,但是這並不影響整個展示的特色:全息的AR複製人、模仿聲線、語言翻譯。

AR複製人的實現方式

Julia White表示穿著相同的複製人,是展出前在Mixed-Reality Stuido重建的人物,同時也一起捕捉動作,再利用Azure AI 神經TTS,將英語轉換為日文,並將聲色訓練成和Julia White相同。

最後,整合這些技術再利用高規格的專業相機和HoloLens,轉換為現場的虛擬建構的全息投影,讓觀眾可以看到Julia White的畫面。

AR複製人的應用可能

如果此展示技術發展成熟且穩定,可能會出現幾種運用的可能性:

1. 跨國訓練/教學

企業訓練可以進行遠距教學,利用Hololens將操作機台連同人一起出現,讓人實際操作的畫面場景,真實還原到遠距離不同語言的國家,同時利用Azure AI翻譯成當地語言,讓受訓者和教育者抹去語言隔閡,可以直接吸收和傳達。

2. 針對特定區域的演講

演講人可以預錄虛擬人物,利用Azure AI翻譯成當地語言,創造一套講者不用搭飛機到當地,就可以好像真的在出現現場的演講體驗,並且這套系統還可以直接翻譯成不同國家的語言,一次將演講內容大量傳播到多個不同語言的國家。

這套技術也許可以提供跨國解說、跨國教學、操作重現等等解決方案,還解決了語言上的距離,但暫時還無法得知使用整套服務的軟硬體設備成本總共是多少,實際使用上還需要詳細評估,才能確保整套解決方案的花費對企業是划算的。

更多文章

分享在 facebook
分享在 google
分享在 twitter
分享在 linkedin