English: The current state of Augmented Reality (AR) in the construction industry worldwide is witnessing rapid growth and adoption. Countries like Saudi Arabia are actively embracing AR technologies to enhance construction processes, with firms like ‘mixpace’ making significant strides. Similarly, Japan and South Korea are also at the forefront of AR integration in construction, leveraging advanced AR tools and applications to improve project efficiency and accuracy. This global trend highlights the industry’s recognition of AR’s potential to revolutionize construction practices.
Japanese: 建設業界における拡張現実（AR）の現状は、急速な成長と採用を見ています。サウジアラビアなどの国々は、’mixpace’のような企業を含め、AR技術を積極的に取り入れ、建設プロセスを向上させています。同様に、日本と韓国も建設業界でAR統合の最前線に立ち、プロジェクトの効率と精度向上のために高度なARツールとアプリケーションを活用しています。この世界的なトレンドは、ARが建設プラクティスを革命化する潜在力を業界が認識していることを示しています。
Korean: 세계 건설 산업의 증강 현실(AR) 현황은 급속한 성장과 수용을 목격하고 있습니다. 사우디 아라비아와 같은 국가들은 ‘mixpace’와 같은 기업을 포함하여 AR 기술을 적극적으로 채택하여 건설 과정을 향상시키고 있습니다. 비슷하게 일본과 대한민국도 건설에서 고급 AR 도구와 응용 프로그램을 활용하여 프로젝트 효율성과 정확성을 향상시키기 위해 선도적인 역할을 하고 있습니다. 이러한 글로벌 트렌드는 건설 분야에서 AR의 잠재력을 현업이 인식하고 있다는 것을 강조합니다.
xyz goggles https://www.xyzreality.com/
What is happening in Asia with AR in construction ?
Other companies: Argyle, Gamma AR , Autodesk
Datasets
Recogntion of Doors
Recognition of Fire Doors n images and videos
modifications of 3d objects
https://ashmrz.github.io/WatchYourSteps/
Generative AI in AR
Comparison of XYZ Reality ATOM (2020) headset with Apple Vision Pro (2023) and Meta Quest 3.
Other papers: https://github.com/zhulf0804/3D-PointCloud
Matterport/Meta dataset of over 1000 interior pointclouds
AR seems to find traction in East Asia (China, Taiwan, Korea, Japan)
Chinese are particularly active in Computer science working for companies, univeristies abroad or based in the mainlad:
https://zhuanlan.zhihu.com/p/549890744
https://hyper.ai/area/%E4%B8%89%E7%BB%B4%E9%87%8D%E5%BB%BA1
https://hyper.ai/datasets/5225 2
- ETH 全称 Eidgenössische Technische Hochschule Zürich，是一个包含各种室内室外场景的 3D 立体图像数据集。这些图像由单反相机和同步多摄像机设备在不同视角下进行采集。地面实况信息由高精度激光扫描仪进行采集。 与之前的数据集相比，该数据… ↩︎
- Pix3D 是单图像三维形状建模数据集和方法，这是一套大规模基准且具有像素级 2D-3D 对齐的图像形状对，其在形状相关任务中被广泛应用，包括重建、检索、视点估计等。
该数据集由普林斯顿大学计算机系和麻省理工学院联合发布，主要发布人有 Xingyuan Sun、Jiajun Wu、Xiuming Zhang、Zhoutong Zhang、Chengkai Zhang、Tianfan Xue、Joshua B. Tenenbaum 和 William T. Freeman。 ↩︎
More context
This 2023 research note collects where AR and generative ML were heading in construction and fire-safety inspection: AR tools such as mixpace in Japan, Argyle and Gamma AR, headsets from XYZ Reality ATOM to Apple Vision Pro and Meta Quest 3, recognition of fire doors in images and video, and public point-cloud datasets such as ScanNet, S3DIS and Matterport.
The common thread is linking what is on site to a reliable 3D record. Once a building has a point cloud or a model built from its floor plans, AR can overlay design data on site and ML can flag assets like fire doors for inspection. I now build that kind of base model as digital twins for UK buildings and use drones to capture exteriors.
Related
- Fire Door detection, Building scans , Digital Twins and fire safety.
- Importance of Digital Twins and Regular 3D Scans of Buildings
- Digital twins in the UK: building hotels in 3D from floor plans
- Tracking progress of Cebu construciton projects. 2023
- DJI drone 3D production: from flight to Gaussian splat
- Augumented Reality in Retail
Translations
Polski
Notatka badawcza z 2023 roku o kierunkach rozwoju AR i generatywnego uczenia maszynowego w budownictwie i inspekcjach przeciwpożarowych: narzędzia AR, takie jak mixpace w Japonii, Argyle i Gamma AR, gogle od XYZ Reality ATOM po Apple Vision Pro i Meta Quest 3, rozpoznawanie drzwi przeciwpożarowych na zdjęciach i wideo oraz publiczne zbiory chmur punktów (ScanNet, S3DIS, Matterport). Wspólny mianownik to powiązanie stanu na budowie z wiarygodnym zapisem 3D. Dziś tworzę takie modele bazowe jako cyfrowe bliźniaki budynków w Wielkiej Brytanii.
日本語
2023年の調査メモで、建設と防火設備点検におけるARと生成AI（機械学習）の動向をまとめています。日本のmixpace、Argyle、Gamma ARなどのARツール、XYZ Reality ATOMからApple Vision Pro、Meta Quest 3までのヘッドセット、画像や動画での防火扉の認識、ScanNet、S3DIS、Matterportなどの公開点群データセットを取り上げています。共通するのは、現場の状況を信頼できる3D記録と結びつけることです。現在、私は英国の建物のデジタルツインとしてこうした基盤モデルを制作しています。
Filipino
Isang tala ng pananaliksik noong 2023 tungkol sa direksyon ng AR at generative ML sa konstruksyon at inspeksyon ng fire safety: mga AR tool tulad ng mixpace sa Japan, Argyle at Gamma AR, mga headset mula XYZ Reality ATOM hanggang Apple Vision Pro at Meta Quest 3, pagkilala sa mga fire door sa larawan at video, at mga pampublikong point-cloud dataset gaya ng ScanNet, S3DIS at Matterport. Ang ugnayan ng lahat ay ang pagkonekta ng aktwal na nasa site sa maaasahang 3D na tala. Ngayon, gumagawa ako ng ganitong base model bilang digital twin ng mga gusali sa UK.
العربية
ملاحظة بحثية من عام 2023 حول اتجاهات الواقع المعزز والتعلم الآلي التوليدي في قطاع البناء وفحص أنظمة السلامة من الحرائق: أدوات واقع معزز مثل mixpace في اليابان وArgyle وGamma AR، ونظارات من XYZ Reality ATOM إلى Apple Vision Pro وMeta Quest 3، والتعرف على أبواب الحريق في الصور والفيديو، ومجموعات بيانات السحب النقطية العامة مثل ScanNet وS3DIS وMatterport. القاسم المشترك هو ربط الواقع في الموقع بسجل ثلاثي الأبعاد موثوق. أعمل اليوم على بناء مثل هذه النماذج الأساسية بوصفها توائم رقمية لمبانٍ في المملكة المتحدة.
2 thoughts on “AR, Generative ML in construction and fire asset inspections 2023”