Serdecznie zapraszamy do wzięcia udziału w szesnastej Konferencji Użytkowników Komputerów Dużej Mocy - KUKDM 2024 organizowanej w Zakopanem w dniach 13 - 15 marca 2024.
Przyjmowanie abstraktów referatów zostało zakończone 12.02.2024.
Informacje dla autorów referatów są dostępne w załączonym dokumencie (PDF, 385 KB).
Zależy od daty przyjazdu do Zakopanego i wynosi:
Uwaga: Opłata konferencyjna dla pracowników AGH nie zawiera podatku VAT i wynosi:
Opłata obejmuje: udział w obradach i szkoleniu, materiały konferencyjne, obiady, poczęstunki w przerwach obrad, kolację regionalną oraz 1 lub 2 noclegi w pokoju dwuosobowym (ze śniadaniem).
Płatności prosimy realizować przelewem bankowym:
właściciel konta: ACK CYFRONET AGH, ul. Nawojki 11, 30-950 Kraków
bank: Pekao S.A., ul. Pijarska 1, 31-015 Kraków, Poland
nr rachunku: PL 11 1240 4722 1111 0000 4849 0168
swift: PKOPPLPW
tytułem: udział w KUKDM'24, imię i nazwisko uczestnika konferencji
Po konferencji:
Do 19 kwietnia 2024 — możesz dostarczyć pełną wersję referatu w j. ang.
Pierwszy dzień konferencji (środa, 13 marca) jest dedykowany szkoleniu pt. "Wykorzystanie infrastruktury HPC w uczeniu maszynowym Dużych Modeli Językowych". Opis szkolenia znajduje się na dedykowanej podstronie.
Termin:
środa 13 marzec 2023, 15:00-19:30,
z przerwą kawową po ok. 2 godzinach od rozpoczęcia.
Miejsce:
Bel-Ami, ul. Goszczyńskiego 24, Zakopane
Prowadzący:
* Szymon Mazurek (ACK Cyfronet AGH)
* Krzysztof Wróbel (UJ, Enelpol)
* Aleksander Smywiński-Pohl (AGH, Enelpol)
* Klemens Noga (ACK Cyfronet AGH)
Zagadnienia
Szkolenie jest przeznaczone dla osób planujących efektywne wykorzystanie zasobów Komputerów Dużej Mocy zainstalowanych w Cyfronecie do badań wykorzystujących Duże Modele Językowe (ang. Large Language Models) w uczeniu maszynowym. Jest skierowane do użytkowników, którzy chcieliby jak najszybciej zdobyć praktyczną wiedzę pozwalającą na samodzielną pracę z własnymi zbiorami, przy wykorzystaniu najpopularniejszych dzisiaj narzędzi.
W ramach szkolenia uczestnicy zostaną wprowadzeni w zagadnienia wykorzystania Dużych Modeli Językowych przy użyciu języka Python. Szkolenie składać się będzie z krótkiego teoretycznego wstępu opisującego zagadnienia związane z Dużymi Modelami Językowymi oraz ćwiczeń wykonywanych na zasobach obliczeniowych udostępnianych przez Cyfronet. W trakcie szkolenia zostaną przedstawione praktyczne wskazówki jak dostosować strategie uczenia maszynowego do zasobów HPC, w tym sposoby efektywnego ładowania danych, doboru parametrów treningu oraz rozpraszania uczenia na wiele kart GPU.
Szkolenie będzie składać się z modułów:
1. Wprowadzenie teoretyczne, w którym krótko zostaną przedstawione podstawowe zagadnienia.
2. Warsztaty z podstawowego wykorzystania LLM:
a. ekosystem HuggingFace
b. kwantyzacja i inne metody ułatwiające wykorzystanie LLM
c. rozpraszanie obliczeń na wiele kart GPU dla dużych LLM
d. benchmarking LLM
3. Dostosowanie modeli LLM do konkretnych zastosowań oraz zbiorów danych
a. Pre-trening, fine-tuning i prompting modeli językowych
b. Wymagania pamięciowe treningu LLM
c. Przegląd technik do fine-tuningu
4. Mini projekt polegający na samodzielnym treningu oraz benchmarku wybranego modelu
Olga Żurowska, Artur Michalak
Karina Synowiec, Marek Boczar, Jarosław Grolik
Mostafa Fathalian, Eligiusz Postek, Masoud Tahani, Tomasz Sadowski
Bartosz Sułkowski
Franciszek Włodek, Waldemar Kulig, Jacek Korchowiec, Anna Stachowicz-Kuśnierz
Alicja Mikłas, Mateusz Z. Brela
Yuliia Didovets, Mateusz Z. Brela
Andrzej J. Kałka, Mateusz Z. Brela, Andrzej M. Turek
Rafał Frączek, Michał Karwatowski, Jakub Grzeszczyk, Jakub Caputa, Piotr Pindel, Daria Łukasik, Maciej Wielgosz, Paweł Russek, Agnieszka Dąbrowska-Boruch, Ernest Jamro, Marcin Pietroń, Sebastian Koryciak, Kazimierz Wiatr
Piotr Kica, Sabina Lichołai, Maciej Malawski
Andrzej Bielecki, Maciej Gierdziewicz
Jan Fiszer, Dominika Ciupek, Maciej Malawski, Tomasz Pięciak
Jan Krupiński, Szymon Mazurek, Krystian Strzałka, Maciej Wielgosz, Jakub Caputa, Rafał Frączek, Michał Karwatowski, Jakub Grzeszczyk, Paweł Russek, Agnieszka Dąbrowska-Boruch, Ernest Jamro, Marcin Pietroń, Sebastian Koryciak, Kazimierz Wiatr
Jan Krupiński, Szymon Mazurek, Krystian Strzałka, Maciej Wielgosz, Jakub Caputa, Rafał Frączek, Michał Karwatowski, Jakub Grzeszczyk, Daria Łukasik, Paweł Russek, Agnieszka Dąbrowska-Boruch, Ernest Jamro, Marcin Pietroń, Sebastian Koryciak, Kazimierz Wiatr
Taras Zhyhulin, Karol Zając, Piotr Nowakowski, Maciej Malawski, Marek Kasztelnik, Piotr Połeć, Marian Bubak
Marian Bubak
Bartłomiej Dybiec
Maciej Szpindler
Gerardo Urrutia, Agnieszka Janiuk
Agnieszka Janiuk, Fatemeh Hossein Nouri
Gabriel Torralba Paz, Artem Bohdan, Jacek Niemiec
Oleh Kobzar, Jacek Niemiec, Takanobu Amano, Masahiro Hoshino, Shuichi Matsukiyo, Yosuke Matsumoto, Martin Pohl
Michał Karwatowski, Marcin Pietroń, Kamil Faber, Dominik Żurek
Dominik Żurek, Marcin Pietroń, Kamil Faber, Michal Karwatowski
Dominik Żurek, Marcin Pietroń, Kamil Faber, Michał Karwatowski, Kamil Piętak
Andrzej Eilmes, Piotr Wróbel, Piotr Kubisiak
Rafał Kurczab
Pamela Smardz, Paweł Krupa
Paweł Śliwa
Maria Rózga, Artur Michalak
Michał Gałkowski, Piotr Sekuła, Mirosław Zimnoch
Leszek Grzanka, Nicola Minafra, Ronan McNulty, Tomasz Nowak, Jan Swakoń, Piotr Rzeźnik
Szymon Mazurek, Mustafa Sakhai, Maciej Wielgosz