Cảm nhận nhiều hơn. Không chia sẻ gì cả.

SenseBridge là một ứng dụng iPhone miễn phí, mã nguồn mở, chuyển đổi môi trường xung quanh của người khiếm thị hoặc thị lực kém thành thông tin nói rõ ràng — được xử lý hoàn toàn trên thiết bị, để camera và môi trường xung quanh của bạn không bao giờ rời khỏi điện thoại.

SenseBridge đang trong quá trình phát triển mở và chưa có sẵn để tải xuống. Bạn có thể theo dõi quá trình xây dựng trên GitHub ngay hôm nay.

Nếu bạn đang nghe trang này thay vì nhìn thấy nó: hình minh họa ở đây cho thấy một tín hiệu di chuyển từ camera của điện thoại, qua một cây cầu cách điệu, và đến như một câu nói — cùng hành trình mà trang này mô tả.

Theo dõi tiến độ trên GitHub

Được xây dựng đúng như tên gọi

SenseBridge tồn tại để kết nối hai thứ: tín hiệu thô từ camera, và câu nói đơn giản mà một người đang cố nghe. Mọi thứ ở giữa — nhận thức, suy luận, hiển thị — là nhịp cầu đó, được lắp ráp hoàn toàn trên điện thoại của bạn.

Không băng qua đám mây. Không có rào cản tài khoản. Chỉ là con đường ngắn nhất từ cảm nhận đến thấu hiểu.

Toàn bộ hệ thống chính là chiếc điện thoại trong túi bạn

Không cần phần cứng bổ sung, không cần đám mây. SenseBridge đang được xây dựng để chạy hoàn toàn trên cảm biến và chip riêng của iPhone — đây là cách mỗi phần truyền tải tín hiệu.

Sơ đồ: một chiếc iPhone được vẽ dưới dạng khung dây tách thành ba lớp. Camera và máy quét LiDAR ở mặt sau ghi lại cảnh vật. Neural Engine ở giữa chạy các mô hình nhận thức và suy luận trên thiết bị. Loa và Taptic Engine ở mặt trước biến sự thấu hiểu thành giọng nói và rung nhẹ.

01 · CẢM BIẾN

Camera + LiDAR

Ánh sáng và độ sâu đi vào đây. Camera và máy quét LiDAR lấy mẫu hình dạng của cảnh vật để ứng dụng có điều gì đó chân thực để mô tả. Trong kiến trúc, đây là ranh giới SensingSource — cánh cửa duy nhất mà thế giới đi vào.

02 · SUY LUẬN

Neural Engine

Các mô hình trên thiết bị chuyển đổi pixel và độ sâu thành mô tả có rào chắn, bằng ngôn ngữ đơn giản. Nhận thức luôn chạy trên chip của chính điện thoại; suy luận cũng vậy theo mặc định, cùng với tùy chọn bật để dùng AI trên đám mây hoặc tự lưu trữ của riêng bạn — tắt cho đến khi bạn bật.

03 · HIỂN THỊ

Loa + Taptic Engine

Những gì điện thoại hiểu được sẽ trở lại dưới dạng giọng nói và rung nhẹ — ranh giới RenderTarget. Luôn được diễn đạt như nhận thức, không bao giờ là lời hứa về an toàn.

Những gì nó làm được hôm nay

Năm khả năng, tất cả đều chạy hoàn toàn trên điện thoại.

  • Đọc to văn bản in và tài liệu.
  • Nhận diện các vật thể và bề mặt thông thường.
  • Mô tả một cảnh bằng một câu tự nhiên.
  • Cung cấp nhận thức thận trọng về chướng ngại vật bằng LiDAR — không bao giờ là điều hướng.
  • Thông báo các sự kiện âm thanh quan trọng gần đó.

Riêng tư nhờ kiến trúc, không phải nhờ chính sách

Không có backend, không có hệ thống tài khoản, và không có telemetry theo mặc định. Nhận thức và suy luận chạy trên thiết bị; không có gì về môi trường xung quanh của bạn rời khỏi điện thoại nếu không có sự đồng ý rõ ràng và có thể thu hồi của bạn.

Một chính sách quyền riêng tư có thể thay đổi. Một kiến trúc không có máy chủ thì không thể.

Được xây dựng theo cách mà nó mong muốn được đánh giá

Trang web này được xây dựng ưu tiên trình đọc màn hình, theo cùng tiêu chuẩn mà ứng dụng cam kết: cấu trúc ngữ nghĩa, mọi điều khiển đều có nhãn, hỗ trợ đầy đủ bàn phím, WCAG 2.2 AA. Nếu bạn dùng VoiceOver hoặc NVDA, trang này hẳn đã cảm thấy quen thuộc.

Bạn thích nghe hơn? Trang này có thể tự đọc to.

Một hướng đi tương lai — không phải một sản phẩm

Cây cầu có thể đi đến đâu tiếp theo

SenseBridge đang được xây dựng cho điện thoại trước tiên. Nhưng cùng một quy trình trên thiết bị — cảm nhận, suy luận, hiển thị — một ngày nào đó có thể chạy trên phần cứng nhẹ hơn, gần hơn với các giác quan mà nó phục vụ.

Các thiết bị đeo như kính có camera có thể giúp những mô tả có rào chắn, riêng tư tương tự đến mà không cần dùng tay. Không có gì về tương lai đó được hứa hẹn; các ranh giới giao thức chỉ đơn giản là đang được thiết kế để điều đó vẫn khả thi.

Minh họa: một cặp kính được vẽ dưới dạng khung dây trong mờ xoay chậm. Cứ vài giây, một chấm sáng xanh nhỏ di chuyển dọc khung — xuống một càng kính, quanh tròng kính đó, qua cầu kính, quanh tròng kính còn lại, rồi xuống càng kính xa — ấm dần sang màu hổ phách khi đến nơi.

Được phát triển công khai

Mọi điều quan trọng bạn vừa đọc đều có thể kiểm chứng: mã nguồn, các quyết định kiến trúc, và chặng đường còn lại đều công khai. Nếu SenseBridge khiến bạn quan tâm, cách để hành động ngay hôm nay là theo dõi quá trình xây dựng diễn ra.

Theo dõi quá trình xây dựng trên GitHub