Tiền Giang: Hiệu quả ứng dụng của giải pháp “Phần mềm hỗ trợ người khiếm thị”

Thầy Lê Trung Kính cho biết, hiện tại, trên điện thoại thông minh (smart phone) được cài đặt nhiều phần mềm chuyên dụng cho người khiếm thị như: Be my Eyes (giúp người khiếm thị nhận biết môi trường xung quanh, cảnh báo nguy hiểm), Vision (giúp người khiếm thị xác định màu sắc, tiền, khoảng cách xa gần, vị trí), NuEyes, Aira, Bglass… Tuy nhiên, các phần mềm này đều có giá thành cao và không có phiên bản tiếng Việt. Từ đó, thầy Kính bắt tay vào nghiên cứu tạo ra phần mềm sử dụng kho dữ liệu tiếng Việt với giá thành hạ, giúp người khiếm thị dễ tiếp cận và sử dụng.

Thạc sĩ Lê Trung Kính tại được trao giải Ba Hội thi Sáng tạo kỹ thuật tỉnh Tiền Giang lần thứ XV (2022-2023)

Phần mềm được thiết kế bao gồm 2 phần chính: Máy chủ và ứng dụng. Theo đó, dữ liệu của người dùng sau khi được ghi lại sẽ gửi về máy chủ để xử lý. Máy chủ sử dụng các mô hình và API từ Google Cloud Vision (chuyển hình ảnh thành dữ liệu ý nghĩa, mở rộng khả năng phân tích) để trả về kết quả ngay lập tức và gửi kết quả về cho người dùng. Ứng dụng được thiết kế để người dùng có thể chụp ảnh, gửi dữ liệu trực tiếp lên máy chủ, cũng như hiển thị thông tin, kết quả được trả về từ máy chủ trong thời gian nhanh chóng. Do đó, sẽ không mất nhiều thời gian để nhận biết sự có mặt của vật thể trong không gian phía trước người khiếm thị. Tác giả đã sử dụng React Native làm framework chính để tạo ứng dụng này. React Native là một framework do công ty công nghệ nổi tiếng Facebook phát triển nhằm mục đích giải quyết bài toán hiệu năng của Hybrid và bài toán chi phí khi phải viết nhiều loại ngôn ngữ native trên nền tảng di động. Thông qua giải pháp nghiên cứu, tác giả có thể xây dựng được ứng dụng Native và ứng dụng đa nền tảng (multi-platform) nên phần mềm có thể vận hành trên hệ điều hành iOS và Android, giúp ứng dụng có thể dễ dàng phát triển và mở rộng thêm nhiều tính năng.

Về vận hành, khi người khiếm thị sử dụng Smart eye chụp lại khung cảnh trước mắt họ qua điện thoại thông minh, hình ảnh đó sẽ được gửi lên AI server và xử lý, kết quả nhận được là một đoạn giọng nói mô tả trong khung cảnh có những vật gì (mô tả chi tiết về hình dáng, loại vật, chất liệu, cách sử dụng…), giúp người khiếm thị di chuyển và sinh hoạt dễ dàng hơn. Smart eye còn được tích hợp trợ lý ảo có khả năng tìm kiếm thông tin, trò chuyện với người khiếm thị.

Theo thầy Kính, tính mới, tính sáng tạo của phần mềm (Smart eye) là tạo ra một ứng dụng thông minh, sử dụng trí tuệ nhân tạo hỗ trợ người khiếm thị nhận diện nhiều vật thể. Việc sử dụng công nghệ trí tuệ nhân tạo (AI) kết hợp dữ liệu lớn (Big data) ứng dụng vào trợ lý ảo để tạo ra Smart eye, ngoài việc giúp người khiếm thị có thể nhận diện đồ vật ở xa tầm tay, còn giúp họ cập nhật kiến thức, thông tin thời tiết, thời sự, tìm kiếm các dịch vụ liên quan như: Nhà hàng, khách sạn, quán ăn, bệnh viện, dịch vụ công… một cách dễ dàng. Bên cạnh đó, việc sử dụng Deep Learning (học sâu) để tạo ra chương trình Smart eye sẽ hiệu quả hơn rất nhiều so với các chương trình trước đó được tạo ra bởi Machine Learning (Máy học). Đặc biệt, khi tương tác với trợ lý ảo sẽ giúp người khiếm thị cảm thấy vui vẻ hơn như có thêm một người bạn để tâm sự.

Về khả năng ứng dụng, việc đầu tư phần mềm ứng dụng Smart eye giúp tiết kiệm chi phí hơn so với các phầm mềm hiện có trên thị trường (để sử dụng, chỉ cần nạp tiền vào tài khoản trên google API). Ngoài ra, do Smart eye có thể chạy trên hệ điều hành Android nên tương thích với nhiều loại smart phone và người khiếm thị có thể sử dụng smart phone để cài đặt phần mềm ứng dụng Smarrt eye nhằm trợ hiệu quả trong sinh hoạt, học tập cũng như tìm kiếm thông tin trên không gian mạng…