The Future of Mixed Reality: Blending the Virtual and the Real
- 28 Januari 2025
- Gadgets, Technology
- 1.292
- 0
- Cetak
At Microsoft Ignite 2023, we are announcing Copilot in Microsoft Dynamics 365 Guides, which combines the power of generative AI with mixed reality to help frontline workers complete complex tasks and resolve issues faster with less disruption to the flow of work.
Copilot in Dynamics 365 Guides assists workers in industrial settings who deal with complex equipment and processes. New technicians need to ramp up quickly while learning how to operate and service that equipment. When equipment stops functioning, workers must act quickly to diagnose the problem, implement a fix, and then document their work. Instead of workers needing to search through volumes of digital documents or paper manuals, Copilot enables workers to ask for relevant information using natural language and human gestures, such as looking and pointing. Copilot uses generative AI to search for information from technical documentation, service records, training content, and any other data sources that customers curate. Copilot then summarizes the information to provide interactive guidance through content and holograms overlaid on the equipment in operation or maintenance.
Mixed reality together with AI presents a human-first interface that promises to transform real-world operations. Now, Copilot can assist industrial workers in real-time with speech and holograms.
Copilot in Dynamics 365 Guides capabilities
Here are the capabilities we plan to unlock with Copilot in Dynamics 365 Guides:
Point and Ask Guidance
Humans have always learned from and interacted with their environment in a hands-on manner, asking questions of others as they work. Copilot in Dynamics 365 Guides builds on that natural way of interacting to help workers better understand the world around them. Workers can point to a component on an asset and ask Copilot questions, such as “What is the torque limit for these bolts?” New workers can ask general questions, such as “What is the function of this component?” without needing to interrupt a more experienced coworker. Copilot recognizes what the user is pointing at and provides answers. 3D models and spatial maps provide the foundation for the technology to identify what the worker is looking at and then project a hologram to show instructions. Workers can ask more complex questions, such as “Which direction does this part fit?” or “Show me where the sensor module is on this machine,” and Copilot will display holograms to show where the part belongs.
Spatial Content Generation
Copilot in Dynamics 365 Guides accelerates the out-of-the-box value of mixed reality by significantly reducing the upfront investment needed to create spatial content. Copilot simplifies the creation, management, and delivery of mixed reality content using customer-defined data sources, enabling companies to adopt mixed reality much faster.
Step-by-Step Assistance
Powered by Microsoft Azure OpenAI Service, large language models allow Copilot in Dynamics 365 Guides to do far more than answer one-off questions. Workers can have progressive conversations, such as “Walk me through the steps to disassemble this filtration unit,” or “I disconnected the motor, what’s next?” Copilot follows along with the process and conversation using customer’s curated knowledge base to articulate answers with speech, text, or 3D holograms, eliminating ambiguity and reducing the need for rework.
Komentar (0)
Rekomendasi Untuk Anda
Konsumsi Cabai Sulut 4 Kali Lipat Nasional, BI Dorong Warga Menanam Sendiri
- 2 November 2026
MANADO, Barometersulut.com- Upaya menjaga kestabilan harga cabai dan menekan inflasi di Sulawesi Utara (Sulut) tidak hanya mengandalkan kebijakan pemerintah dan ketersediaan pasokan di pasar. Keterlibatan masyarakat melalui pemanfaatan pekarangan rumah juga dinilai menjadi langkah penting. Hal inilah yang mendorong Bank Indonesia (BI) Perwakilan Sulawesi Utara bersama Tim Penggerak (TP) PKK Provinsi Sulawesi Utara, Kota Manado, […]
Percepat Pembangunan Sumur Bor, Satgas TMMD Angkut Material dan Las Tiang di Lirung
- 3 November 2026
TALAUD, Barometersulut.com-Dalam rangka mendukung percepatan pembangunan sarana air bersih, Satgas TMMD melaksanakan kegiatan pengangkutan material batako serta pengelasan tiang sumur bor yang berlokasi di wilayah Kecamatan Lirung, Kabupaten Kepulauan Talaud. Kegiatan pengangkutan batako dilakukan untuk memenuhi kebutuhan material dalam pengerjaan fasilitas sumur bor. Sementara itu, pengelasan tiang dilaksanakan sebagai bagian dari persiapan konstruksi penunjang […]
Konsolidasi Tiga Pilar PDI Perjuangan di The Sentra Hotel: Joune Ganda Tegaskan Komitmen Kader Hadir Dekat dengan Rakyat dan Lingkungan
- 5 November 2026
MANADO, Barometersulut.com– Suasana hangat dan penuh semangat konsolidasi tampak memadati The Sentra Hotel Manado. Ribuan kader PDI Perjuangan berkumpul dalam agenda Rapat Koordinasi Tiga Pilar yang dihadiri langsung oleh Ketua DPP PDI Perjuangan Bidang Politik dan Keamanan yang juga menjabat sebagai Ketua DPR RI, Puan Maharani. Salah satu kader mumpuni PDI Perjuangan, Joune Ganda yang […]
Bupati Thungari Tekanan Pengawasan Rokok Illegal, DBH Pajak Rokok Sangihe Capai Rp,35 M
- 12 November 2026
Tahuna, BAROMETERSULUT.com – Bupati Kepulauan Sangihe, Michael Thungari, menegaskan pentingnya pengawasan terhadap peredaran rokok ilegal serta pengelolaan Dana Bagi Hasil (DBH) Pajak Rokok secara transparan dan akuntabel. Hal tersebut disampaikannya saat menghadiri kegiatan Sosialisasi Peredaran Rokok Tidak Bercukai dan Cukai Ilegal serta Pertanggungjawaban Tata Kelola Pajak Rokok di Daerah, Kamis (12/11/2026), bertempat di Ballroom Tahuna […]
Perkuat Sarana Air Bersih, Satgas TMMD Laksanakan Pengecoran Tiang Tower Sumur Bor di Desa Taduna
- 4 November 2026
TALAUD, Barometersulut.com- Satgas TMMD Ke-130 Tahun Anggaran 2026 melaksanakan pekerjaan pengecoran tiang tower sumur bor di Desa Taduna, Kabupaten Kepulauan Talaud, Rabu (4/11/2026). Kegiatan ini merupakan bagian dari pembangunan sarana air bersih melalui program TMMD Ke-130 Kodim 1312/Talaud. Pengecoran tiang tower dilakukan untuk memperkuat konstruksi penyangga tandon air agar dapat berfungsi dengan baik dan menunjang […]
Perkuat Infrastruktur Air Bersih, Satgas TMMD Lanjutkan Pengecoran Tiang Tower Tandon Air di Kabaruan Timur
- 11 November 2026
TALAUD, Barometersulut.com- Satgas TNI Manunggal Membangun Desa (TMMD) terus menggenjot pembangunan sarana air bersih melalui kegiatan lanjutan pengecoran tiang tower tandon air di wilayah Kecamatan Kabaruan Timur, Kabupaten Kepulauan Talaud. Pekerjaan pengecoran tiang tower ini merupakan salah satu tahapan penting dalam pembangunan fasilitas sumur bor. Pengecoran dilakukan untuk memperkuat struktur tiang penyangga agar mampu menopang […]
Satgas TMMD Terus Lanjutkan Pembangunan RTLH Keluarga Manessu Mandak
- 6 November 2026
TALAUD, Barometersulut.com- Satgas TMMD ke 130 Talaud terus melanjutkan pengerjaan sasaran fisik berupa pembangunan Rumah Tidak Layak Huni (RTLH) milik keluarga Manessu Mandak yang berlokasi di Kelurahan Lirung 1, Kecamatan Lirung, Kabupaten .Kepulauan Talaud. Pengerjaan rumah tersebut dilaksanakan secara bertahap oleh personel Satgas TMMD dengan penuh semangat dan tanggung jawab. Setiap tahapan pekerjaan dilakukan untuk […]
Peringati HKN ke-62, Bupati Thungari Beri Peringatan Tegas Soal Pelayanan Kesehatan
- 12 November 2026
Tahuna, BAROMETERSULUT.com – Bupati Kepulauan Sangihe, Michael Thungari, menegaskan pentingnya pemerataan pelayanan kesehatan yang mudah dijangkau, berkualitas, dan berkeadilan bagi seluruh masyarakat, khususnya yang berada di wilayah kepulauan dan daerah terpencil. Penegasan tersebut disampaikan Bupati saat menghadiri puncak peringatan Hari Kesehatan Nasional (HKN) ke-62 bertajuk “Sehat Untuk Semua”, Kamis (12/11/2026), yang berlangsung di Gelanggang Olahraga […]






Saat ini belum ada komentar