Brain4edu - przykład użycia III

Hybrydowy interfejs mózg komputer w konfiguracji równoległej

0. Wstęp

Czasami, w celu zwiększenie efektywności łączy się dwa różne interfejsy tworząc tzw. hybrydę. Kiedy oba interfejsy działają równocześnie mówi się o konfiguracji równoległej. W aplikacji bci_study dostępny jest równoległy interfejs wykorzystujący wzrokowe potencjały wywołane oraz wzrokowe potencjały wywołane stanu ustalonego.

2. Przygotowanie

      Uwaga!
      W ustawieniach systemowych (System settings -> Displays) monitor BCI Appliance należy
      ustawić po lewej stronie monitora wbudowanego.

Wzmacniacz TMSI
nr kanału nazwa kanału nr kanału nazwa kanału nr kanału nazwa kanału
1 M1 12 23
2 M2 13 24
3 O1 14 25
4 O2 15 26
5 Pz 16 27
6 Cz 17 28
7 18 29
8 19 30
9 20 31
10 21 32
11 22 GND AFz

Do zamocowania elektrod użyj jednego z czepków wodnych firmy TMSI (ilustracje 1 i 2)

Ilustracja 1. Od lewej: wodny czepek firmy TMSI; schemat czepka wodnego z zaznaczonymi pozycjami elektrod użytych w badaniu. Oznaczenia elektrod: czerwony - elektroda GND, zielony - elektrody referencyjne, niebieski - pozostałe elektrody
Ilustracja 2. Od lewej: wodny czepek firmy TMSI; schemat czepka wodnego z zaznaczonymi pozycjami elektrod użytych w badaniu. Oznaczenia elektrod: czerwony - elektroda GND, zielony - elektrody referencyjne, niebieski - pozostałe elektrody
3. Konfiguracja

wyświetli się panel główny aplikacji (ilustracja 3).

Ilustracja 3. Okno BCI Study
Ilustracja 4. Dodawanie nowego badanego

Po stworzeniu badanego należy przeprowadzić sesję kalibracyjną.

4. Sesja kalibracyjna

Przed uruchomieniem sesji BCI należy przeprowadzić co najmniej jedną sesję kalibracyjną.

Kalibrację można powtarzać wiele razy. Zapamiętywane są dane z każdej sesji. Identyfikator sesji złożony jest z wyniku kalibracji (wartość AUC) oraz daty przeprowadzenia kalibracji (ilustracja 5).

Po wybraniu badanego w polu Dane kalibracyjne wyświetlone zostaną wszystkie przeprowadzone przez niego sesje kalibracyjne dla wskazanego paradygmatu (ilustracja 6).

Ilustracja 5. Dostępne sesje kalibracyjne użytkownika test dla paradygmatu P300 - wzrokowe.

Wartość AUC może się wachać między 0, a 1. Im wyższa wartość AUC tym lepszy wynik kalibracji. Kalibracją domyślną jest kalibracja o najwyższej wartości AUC.

W celu przeprowadzenia kalibracji:

Ilustracja 6. Wybranie paradygmatu badania (w przykładzie P300 wzrokowe)
Ilustracja 7. Wybranie paradygmatu badania

Po naciśnięciu przycisku wyświetli się plansza z instrukcją dla osoby badanej oraz panel wstępny. Panel przenieś na sąsiedni monitor (ilustracja 8).

Ilustracja 8. Panel wstępny. Od lewej: 10 sekundowy kawałek sygnał na poszczególnych kanałach, przebieg impedancji na poszczególnych kanałach, widmo sygnału.

Środkowy wykres panelu przedstawia impedancję dla poszczególnych kanałów. Jeżeli impedancja na jednym z kanałów ma wyższe wartości, oznacza to że na tym kanale należy poprawić kontakt elektrody ze skórą głowy. Czynność powtarzaj do czasu, aż wszystkie kanały będą miały zbliżone wartości impedancji. Po upewnieniu się, że impedancja ma zbliżone wartości na wszystkich kanałach rozpocznij sesję kalibracyjną.

Osoba badana przed rozpoczęciem sesji kalibracyjnej powinna przyjąć wygodną pozycję i rozluźnić się. W trakcie pomiaru powinna skupić się na zadaniu i nie wykonywać zbędnych ruchów. Kliknij na planszę z instrukcją i naciśnij spację. Sesja kalibracyjna rozpocznie się, a panel wstępny zmieni swój wygląd (ilustracja 9). Badany powinien postępować zgodnie z instrukcjami wyświetlanymi na ekranie laptopa.

Ilustracja 9. Panel kalibracji I.

Po kilku próbach w panelu kalibracji pojawią się nowe wykresy (ilustrcja 10).

Ilustracja 10. Panel kalibracji II.

Kalibrację można zakończyć kiedy na znajdującym się w lewym, górnym rogu ekranu wykresie niebieska krzywa przetnie krzywą zieloną (nie wcześniej niż po wyświetleniu 40 "targetów"). Używając sekwecji klawiszy alt+tab wyświetl okno BCI Study i naciśnij przycisk Stop (ilustracja 11)

Ilustracja 11. Koniec sesji kalibracyjnej.

Po udanej kalibracji można przejść do sesji BCI.

5. Sesja BCI

W celu rozpoczęcia sesji BCI w polu Typ sesji wybierz BCI, w polu Dane kalibracyjne wybierz jedną z sesji i naciśnij przycisk Start (ilustracja 12).

Ilustracja 12. Panel sesji BCI.

Po chwili wyświetli się panel sesji BCI (ilustracja 13).

Ilustracja 13. Panel sesji BCI.

Zadaniem osoby badanej jest odpowiadanie na zadawane pytania. Badany wskazuje odpowiedź zliczając wystąpienia bodźca na napisie "Tak" lub "Nie". Po kilku powtórzeniach aplikacja podświetli wskazywaną w ten sposób odpowiedź (ilustracja 14).

Ilustracja 14. Komunikacja za pomocą interfejsu mózg-komputer.

Sesję BCI wyłącz w taki sam sposób jak sesję kalibracyjną.

6. Zapisywanie danych

Dane zapisywane są automatycznie w folderze ~/bci_results. Każdy badany ma w nim swój folder. Dane z każdej rozpoczętej przez badanego sesji są zapisywane wewnątrz jego folderu. Nazwa folderu sesji składa się z nazwy paradygmatu oraz daty rozpoczęcia sesji.

7. Nagrywanie pulpitu

W trakcie badania należy nagrywać obraz pulpitu. Możesz do tego użyć dowolnego programu do rejestracji ekranu. Polecamy Open Broadcaster Software. Nagranie nie powinno zawierać ścieżki dźwiękowej, ponieważ znacznie zwiększa to rozmiar pliku. Po skończeniu badania nagranie umieść w folderze odpowiadającej mu sesji.



POWODZENIA!