Derin Okuma — AR Kaplama

O hayali vananın ağırlığı

Bir rafineri sahasında yeni işe başlayan bakım teknisyeni, elinde tabletle pompa dairesine yürüyor. Tabletin kamerası boru hattına dönüyor ve ekranda, çelik borunun üzerine binmiş, yarı saydam bir vana beliriyor. Vana gerçek değil. Ama teknisyen onu sağa çeviriyor, ekrandaki basınç göstergesi düşüyor, altındaki etiket "hat 4B, kapatma vanası, son bakım 14 ay önce" diye okunuyor. Teknisyen gerçek vanayı elle arıyor, buluyor, aynı yöne çeviriyor. İki dünya üst üste biniyor.

Üst üste binme kusursuz görünüyor. Oysa kusursuz değil. Teknisyen başını 30 santim sola çevirdiğinde hayali vana gerçek borudan kaymaya başlıyor, bir an için iki parmak sağda duruyor, sonra yazılım düzeltiyor. O kayma, AR kaplamanın bütün mühendislik hikayesidir. Peki neden kayıyor?

İki dünyayı aynı kareye oturtmak

AR kaplama, kameranın gördüğü gerçek dünyanın üzerine bilgisayar üretimi bir katman bindirmek demek. Bunu bir pencere camı gibi düşün. Camın arkasında fabrika var, camın üzerine ise şeffaf bir folyo yapıştırılmış, folyoda çizimler basılı. Sen camdan bakarken ikisini birlikte görüyorsun. İşin zor kısmı folyoyu yapıştırmak değil, folyoyu camın hareketine göre saniyede onlarca kez yeniden hizalamak.

Hizalama için cihazın kendi konumunu ve bakış yönünü bilmesi gerekiyor. Buna "poz" deniyor, altı serbestlik dereceli bir vektör. Üç eksende nerede olduğun, üç eksende nereye baktığın. Telefonundaki ivmeölçer ve jiroskop bu vektörün kaba halini verir, ama kaba hal endüstride işe yaramaz. Bir vanayı 2 santim kaydırmak, sahada yanlış vanayı çevirmek demektir.

Endüstriyel AR'da poz genelde iki kaynaktan beslenir. Birincisi görsel işaretleyiciler, yani sahaya önceden yerleştirilmiş kare kodlar veya özel desenler. İkincisi işaretleyicisiz yöntemler, yani ortamın kendi geometrisini tanıyan algoritmalar. İlki daha kararlı, ikincisi daha esnek. Çoğu saha kurulumu ikisini karıştırır.

Karışımın mantığı şu. İşaretleyici, kameranın gördüğü anda pozu mutlak olarak sabitler, çünkü kodun gerçek dünyadaki koordinatı önceden ölçülüp sisteme yazılmıştır. İşaretleyici görüş alanından çıktığı anda sistem işaretleyicisiz moda düşer ve pozu bir önceki kareden tahmin etmeye başlar. Tahmin, saniyede 30 karede kabul edilebilir, ama saniyede 5 karede dağılır. O yüzden saha yazılımları genelde "işaretleyici gördüğü kareyi referans al, görmediği karede jiroskopla köprüle" mantığıyla çalışır. Köprüleme süresi 2 saniyeyi geçerse sistem pozu sıfırlar ve kullanıcıya "yeniden hizala" der.

İşaretleyicinin ölçüsü ve ışığın oyunu

Sahaya koyduğun kare kodun kenar uzunluğu, kaplamanın ne kadar uzağa kadar tutacağını belirler. 10 santimlik bir işaretleyici, iyi ışıkta 4-5 metreye kadar güvenilir poz verir. 30 santimlik bir işaretleyici 15 metreye çıkar. Ama işaretleyici büyüdükçe sahada yer kaplar, kirlenir, boyanır, üstüne bir şey konur. Rafineride bir kodun üç ay boyunca temiz kalması başlı başına bir bakım işidir.

Ölçünün arkasında basit bir geometri var. Kamera çözünürlüğü sabitken, işaretleyicinin görüntüde kapladığı piksel sayısı mesafeyle ters orantılı düşer. 10 santimlik kod, 5 metrede görüntüde kabaca 40 piksel genişliğinde kalır. Poz hesabı için gereken minimum piksel sayısı 25-30 civarındadır. Yani 10 santimlik kodun pratik menzili, sensör çözünürlüğüne bağlı olarak 5-7 metre arasında kapanır. 30 santimlik kod aynı piksel sayısını 15-20 metrede tutar.

Işık daha acımasız. Doğrudan güneş altında çalışan bir kamera, parlak çelik yüzeyde patlar, kodun kontrastını yer. Tersine, gece vardiyasında sarı sodyum lambaları kameranın beyaz dengesini bozar, kodun siyah beyaz sınırı bulanıklaşır. O yüzden saha tabletleri genelde global deklanşörlü, geniş dinamik aralıklı sensörlerle gelir. Yuvarlanan deklanşör, teknisyen yürürken kareyi yamuk yakalar, poz hesaplaması şaşar.

Global deklanşörün bedeli var. Aynı çözünürlükte yuvarlanan deklanşörlü sensör, global deklanşörlüden kabaca yüzde 30 daha ucuzdur ve daha az ısınır. Ama yürüyen bir teknisyenin elinde yuvarlanan deklanşör, kare içinde 5-10 milisaniyelik bir kayma yaratır. Kayma, 2 metre mesafede kaplamayı 3-4 santim yana iter. Sahada bu, "vana borunun üstünde değil, yanında duruyor" demektir.

Sıcaklık da işin içine girer. Çelik boru gündüz 60 dereceye çıkar, gece 15'e düşer. Termal genleşme, işaretleyicinin montaj noktasını milimetre mertebesinde kaydırır. Kayma tek başına küçük görünür, ama 12 metrelik bir hatta uç uca eklendiğinde kaplamanın sonundaki hata 3-4 santimi bulur.

Gecikmenin kare başına bedeli

AR kaplamanın inandırıcı olması için gecikmenin düşük olması gerekir. Başını çevirdiğinde kaplaman seninle aynı anda dönmezse, beyin bunu "yapay" diye etiketler. Endüstriyel kullanımda kabul edilen eşik kabaca 20 milisaniye. Bunun altı akıcı, üstü rahatsız edici.

20 milisaniye, saniyede 50 kare demek. Kameranın görüntüyü yakalaması, işlemcinin pozu hesaplaması, grafik biriminin katmanı çizmesi, ekranın bunu göstermesi. Zincirin tamamı 20 milisaniyeye sığmalı. Poz hesaplaması tek başına tipik olarak 5-8 milisaniye yer. Katman çizimi 3-5. Geri kalanı kamera ve ekran gecikmesi.

Zinciri kısaltmanın yolu hesaplamayı cihaza yaklaştırmaktan geçer. Buluta gidip gelen bir tur, tek başına 40-80 milisaniye ekler ve iş biter. O yüzden saha tabletleri işlemi yerelde yapar, bulutu yalnızca model güncellemesi ve kayıt tutma için kullanır. Model dosyaları da bu yüzden şişirilemez. 200 megabaytlık bir tesis modeli, tablete indirilene kadar teknisyen işe başlayamaz.

Gecikmenin bir de sinsi tarafı var. Toplam gecikme, tek tek bileşenlerin toplamı değildir. Kamera 8 milisaniyede kareyi yakalar, işlemci 6 milisaniyede pozu hesaplar, ekran 10 milisaniyede gösterir. Toplam 24 milisaniye görünür, ama gerçek algılanan gecikme 30-35 milisaniyeye çıkar. Aradaki fark, kare tamponlama ve senkronizasyon beklemesidir. O yüzden saha yazılımları "çift tampon" yerine "üçlü tampon" kullanır ve bir kareyi feda ederek gecikmeyi 5-8 milisaniye kısar.

Kabul edilen eşik de sabit değil. Baş hareketiyle tetiklenen kaplamada 20 milisaniye sınırı geçerlidir. El hareketiyle etkileşimde 40 milisaniyeye kadar tolere edilir, çünkü el göz kadar hassas değildir. Ama teknisyen bir vanayı çevirirken ekrandaki göstergenin tepki vermesi 100 milisaniyeyi geçerse, kullanıcı "sistem çalışmıyor" diye tekrar tekrar dener ve iş yavaşlar. O yüzden etkileşim katmanı, görsel katmandan ayrı bir gecikme bütçesine sahiptir.

Modelin gerçekle imtihanı

Kaplamanın içeriği genelde bir CAD modelinden gelir. Tesisin dijital ikizi, boru çapları, vana tipleri, kablo tavaları, hepsi modelde vardır. Sorun şu ki model ile saha arasında her zaman fark olur. Sahada bir boru 15 santim kaydırılmıştır, modelde değildir. Bir vana sökülmüştür, modelde durur.

Farkı kapatmak için sahada "anket" denilen bir doğrulama turu yapılır. Teknisyen modeli gerçek üzerine bindirir, kaymaları işaretler, düzeltmeleri sisteme yazar. İyi bir tesiste bu tur, ilk kurulumda hat başına 2-4 saat sürer. Sonrasında her büyük bakım duruşundan sonra tekrarlanır, çünkü duruşta hat değişir.

Anketin ölçüsü de standartlaşmıştır. Endüstriyel uygulamada kabul edilen hizalama toleransı, boru merkezleri için 10 milimetre, vana gövdeleri için 5 milimetredir. Toleransın altında kalan kaymalar görmezden gelinir, üstündekiler modelde düzeltilir. 120 metrelik bir hatta tipik olarak 40-60 nokta ölçülür ve bunların yüzde 15-20'si düzeltme gerektirir. Yani her anket turunda 6-12 nokta yeniden yazılır.

Modelin bir de ağırlık sorunu var. Boru, vana, tava, kablo, hepsi ayrı ayrı çizilirse sahne grafiği boğulur. O yüzden uzak nesneler basitleştirilir, yakındakiler detaylandırılır. Teknisyen bir vanaya 2 metre yaklaştığında model o vanayı tam detayla çizer, 20 metre uzaktaki hattı kaba bir silindirle geçer. Geçiş görünmez olmalıdır, yoksa göz onu yakalar.

Detay seviyesi geçişi, sahne grafiğinin en nazik yeridir. 000 üçgen içerir. Kaba silindir hali 200-400 üçgen. Bir sahnede aynı anda 300 nesne görünüyorsa ve hepsi tam detaydaysa, tablet grafik birimi 60 kareyi tutamaz, 25-30 kareye düşer.

O yüzden yazılım, kameranın bakış yönüne göre bir "detay bütçesi" dağıtır. Bakış merkezindeki 5-10 nesne tam detay, çevresi orta, geri kalanı kaba. Bütçe aşılırsa en uzaktaki nesne önce kaba, sonra siluet haline indirilir.

Piyasa Hafızası. HoloLens 2 ve sahadaki ilk ciddi deneme

2019 Şubat ayında Barselona'daki Mobil Dünya Kongresi'nde Microsoft, HoloLens 2'yi tanıttı. Cihaz, birinci neslin dar görüş alanını genişletiyor, göz izleme ve el takibi ekliyordu. Endüstri tarafı bunu bir oyuncak değil, saha aracı olarak okudu. Trimble ve benzeri şirketler kısa süre içinde inşaat ve enerji sahaları için bu cihaz üzerine yazılım katmanları çıkardı.

Ama saha gerçeği hızlı vurdu. Cihazın görüş alanı hala sınırlıydı, teknisyen başını çevirdiğinde kaplama kayboluyordu. Eldivenli elle menü çevirmek zordu. Toz, buhar ve parlak çelik, sensörleri yoruyordu. 2020-2021 arasında birçok pilot proje sessizce rafa kalktı.

Ders şuydu. AR kaplamanın teknoloji gösterisi ile saha aracı arasındaki fark, donanımın parlaklığı değil, poz kararlılığının ve gecikmenin sahaya yetip yetmemesiydi. Gösteri 5 dakika sürer, vardiya 8 saat.

Küçük Bir Hesap

Bir rafineri hattında AR kaplamalı bakım turunun temsili ekonomisi. Sayılar temsili, mantık gerçek.

İlk yıl toplam kurulum ve lisans maliyeti kabaca 18.000 doları bulur. Yıllık tasarruf 5.940 dolar. Geri ödeme süresi üç yılı aşar. Tabloda AR kaplama, tek başına süre tasarrufuyla kendini zor kurtarır.

Duyarlılık burada başlar. Tur sayısı 260 yerine 520 olsa, tasarruf ikiye katlanır, geri ödeme 18 aya iner. İşçilik saati 55 yerine 90 dolar olsa, aynı etki. Ama en büyük kaldıraç hata önlemede. Yanlış vanayı çevirmek, bir üretim duruşuna yol açarsa, tek bir olayın maliyeti 50.000 doları geçer. AR kaplamanın asıl gerekçesi süre değil, o tek olayı önlemektir.

Üç katmanlı okuma

Birincisi, AR kaplamanın değeri donanımın çözünürlüğünde değil, poz kararlılığında ve gecikmede saklı. 20 milisaniye eşiğini tutamayan bir sistem, sahada ne kadar güzel görünürse görünsün kullanılmaz.

İkincisi, kurulumun gizli maliyeti işaretleyici ve modeldedir. İşaretleyicinin temiz kalması, modelin sahayla hizalanması, bunlar tek seferlik işler değil, sürekli bakım isteyen işlerdir. Bütçeye bunları koymayan proje ikinci yılda çöker.

Üçüncüsü, ekonomik gerekçe süre tasarrufunda değil, hata önlemede aranmalı. Tek bir yanlış müdahalenin bedeli, yıllık işçilik tasarrufunu katlar. AR kaplamayı bir hızlandırıcı değil, bir sigorta poliçesi gibi okumak gerekir.

Hayali vana, gerçek vananın yerini ancak o vanayı yanlış çevirme ihtimalini ortadan kaldırdığında alır.