Rana ALGAN Elif BONCUK Melike ÖZDEMİR ImagineCup2011

... konulu sunumlar: "Rana ALGAN Elif BONCUK Melike ÖZDEMİR ImagineCup2011"— Sunum transkripti:

1 Rana ALGAN Elif BONCUK Melike ÖZDEMİR ImagineCup2011
My Eye Reflection Rana ALGAN Elif BONCUK Melike ÖZDEMİR ImagineCup2011

2 My Eye Reflection by rem
My Eye Reflection, bir göz takip sistemidir. Bu sistemle, felç ya da felç benzeri ALS, MS gibi hastalıklar sonucunda konuşma yetisini yerine getiremeyen ya da yeni ameliyattan çıkmış ve kendini ifade edemeyen hastaların iris hareketlerinden yararlanarak iletişim kurabilmelerini sağlamayı amaçlıyoruz.

3 Neden Göz Takibi? Göz sinirleri çok zor hasar alır, insan – bilgisayar sistemlerinde komut vermek adına göz kaslarını kullanmak mantıklı Göz, sözsüz ve dolaylı iletişim kurmada en etkili yöntem Konuşma dili, beden dili veya yazı dili kullanılamıyorsa, göz ile etkileşim kurmak gerek! Gözün baktığı yer bilgisini girdi olarak alıp tasarlanan arayüzlerin ve geliştirilen uygulamaların sayısı gittikçe artmakta

4 Hedef Kullanıcı Kitlesi
Engelli hastalar Felçli hastalar Konuşma becerisini yitirmiş hastalar Gözü sağlıklı olan her insan!

5 Amaç.. Göz hareketlerinden yararlanarak kişinin ekran üzerinde nereye baktığını bulabilmek Kendini ifade edemeyen hastaların göz hareketlerini bir arayüz yardımıyla takip ederek, söylemeye çalıştıklarını yazdırabilmesini sağlamak Yani gözleriyle konuşabilmesine yardımcı olmak!

6 Hedef.. Engelli ve felçli hastaların, kendilerini daha rahat ve anlaşılır bir şekilde ifade edebilmelerini sağlamak Bireysel yaşam kalitesinin ve toplumla ilişkilerinin arttırılması Engelli hastaların eksik yönlerinin olduğunu düşünmemelerini sağlamak

7 Ne Yapılacak? Yüz tanıma Göz tanıma Göz takibi
Gözün baktığı yerin tespiti Sanal Klavye – alfabe içeren arayüz tasarımı

8 Kullanılacaklar Donanım: Yazılım: Monitör USB kamera
Microsoft Visual Studio OpenCV görüntü işleme kütüphanesi Microsoft Ürünleri

9 Gelinen Nokta.. Görüntü işleme için açık kaynak bir kütüphane olan OpenCV’nin kurulumu yapıldı Varolan kütüphanelerin implementasyonuyla yüzün ve gözün konumunu bulan bir demo hazırlandı

10 Demo..

11 Literatür Araştırması
Michael Chau ve Margrit Betke’nin Boston Üniversitesi Bilgisayar Bilimleri Bölümünde yaptıkları “Real Time Eye Tracking and Blink Detection with USB Cameras” adlı çalışma ile çeşitli sakatlıkları olan insanların kullanımı için bir insan - bilgisayar arayüzü tasarlanmıştır. Özellikle ALS ya da Multiple skleroz olan hastalar hedef kitlesi olarak alınmıştır. Sistem kullanıcının göz kırpmalarını tespit etmekte ve göz kırpmalarının örüntü ve süresi analiz etmektedir. Bu bilgiler kullanılarak ise bir fare tıklaması şeklinde veri kullanılmıştır. Sistem otomatik olarak ilklendirildikten sonra, kullanımın ilk birkaç saniyesinde kullanıcının istemsiz göz kırpmaları işlenir, online bir şablonla korelasyon kullanılarak gerçek zamanlı göz takip edilir. Eğer kullanıcının derinliği değişirse ya da hızlı yüz hareketi olursa sistem tekrar ilklendirilmektedir. Sistem pahalı olmayan bir usb kamerayla çalışır ve saniyede 30 frame alır.

12 Literatür Araştırması devam..
Dongheng Li ve Derrick J. Parkhurst’nin Iowa State Üniversitesi’ndeki “Starburst: A robust algorithm for video-based eye tracking” adlı çalışması, video temelli göz takibi algoritması üzerinedir. Bu çalışmada, insan bilgisayar etkileşimini zenginleştirmek adına, kullanıcının odaklandığı noktaların takibi yapılmıştır. Bunun için, açık kaynak kodlu ve model tabanlı yaklaşımı temel alan karma bir göz takip algoritması geliştirilmiştir.

13 Pazar Beklentileri.. Türkiye’deki özel hastanelerde ve devlet hastanelerinde, bu ya da benzeri bir sistem fiyatından ötürü kullanılamamaktadır. Aynı zamanda, maddi açıdan yetersiz olan hastalar göz önünde bulundurulduğunda, bireysel kullanıma yönelik olduğu söylenemez. Şimdiye kadar geliştirilmiş ürünler arasında, bizim geliştirecek olduğumuz ürün, maliyet açısından daha uygun olacağı için, öncelikle Türkiye pazarı olmak üzere, zamanla geliştirilmesi ve dünya pazarında yer edinmesinin sağlanması hedeflenmektedir. Bu sebeplerden dolayı, geliştireceğimiz sistemin pazarda talep edileceği düşünülmektedir.

14 Eklenebilecek Özellikler
Microsoft Office programlarına eklentiler Windows Live Messenger Bağlantısı Multimedia araçları kullanımı – Windows Media Player eklentisi Seslendirme Hastaneler İçin Ekstra Araçlar İmla Kontrolü

15 Teşekkürler Sorular??

16 İletişim REM my_eye_reflection@windowslive.com
Rana ALGAN Elif BONCUK Melike ÖZDEMİR Web Site