Người thiết kế tương tác giữa thực tế và ảo ảnh, tối ưu hóa Kinect để cảm nhận sự sống từ những hạt cát thô sơ.
Chào bạn! Tôi là Thư — một Creative Technologist với trái tim dành trọn cho tương tác vật lý. Không giống như những ứng dụng AR chỉ nằm sau màn hình điện thoại, công việc của tôi là đưa ma thuật ra ngoài đời thực.
Bằng cách cân chỉnh tinh vi các cảm biến đo chiều sâu Kinect, tôi biến hàng nghìn hạt cát thật thành một bản đồ cao độ số. Phần tuyệt nhất? Viết nên những HLSL Shader đổi màu xanh thẳm theo thời gian thực cho những vùng trũng ảo — tạo cảm giác nước đang len lỏi qua từng khe núi bạn vừa đắp.
Phối hợp Kinect & Unity để bắt trọn mọi thay đổi vật lý của địa hình cát 30 khung hình/giây.
Tối ưu thuật toán tạo bọt nước và dòng chảy chân thực dựa trên trọng lực ảo.
Tiếng suối reo ảo dựa trên áp lực hạt.
Xử lý độ trễ phần cứng để tương tác "chạm là sướng". Phép màu diễn ra ngay khi cát được nhấc lên.
Hệ thống sandbox cho phép người dùng mô phỏng hiện tượng lũ quét thông qua việc phá đập bằng tay.
Nhận diện đỉnh núi và áp dụng shader lava rực sáng khi chiều cao vượt ngưỡng 30cm.
Dự án dành cho trẻ em mầm non, bơi cùng cá ảo bằng cách đào những hố cát sâu dưới mực nước biển.
Công cụ học thuật quan sát sự bào mòn địa hình diễn ra hàng triệu năm chỉ trong 10 giây nặn cát.
Tôi chưa bao giờ thấy đứa trẻ nào ngồi yên bên chậu cát hơn 1 tiếng cho tới khi Thư mang cái "Nước ma thuật" đó tới triển lãm. Thật sự kinh ngạc!
Shader của Thư xử lý độ dốc và hướng chảy rất logic. Về mặt kỹ thuật, việc map được tọa độ cát vào UV của shader nước mượt như vậy là cực khó.
Giao diện tương tác vật lý tuyệt vời! Chúng tôi đã tích hợp vào bảo tàng khoa học của quận và nhận được phản hồi cực kỳ tốt từ học sinh.
Dù bạn là một studio sáng tạo, bảo tàng khoa học hay đơn giản là người muốn đưa AR Sandbox vào dự án nghệ thuật — Tôi luôn sẵn sàng lắng nghe!