линуксоидам: Python 3.7 на Dell gpu+cuda

Ответить
kyk
Reactions: 545
Сообщения: 6995
Зарегистрирован: Ср июн 15, 2022 6:54 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение kyk »

elpresidente* писал(а): Сб окт 14, 2023 1:28 pm Про Win 10 и WSL2 ничего не знаю, очень давно было.
В те времена мы делали Hyper-V и ставили на него Ubunty 20.04 GUI
https://github.com/brokeDude2901/dxgkrnl_ubuntu
Надо полагать что если WSL2+Ubuntu 22.04 встанет под Win-10, то дальше, для работы под Линуксом не будет разницы какая версия Windows 10 или11
elpresidente*
Site Admin
Reactions: 1133
Сообщения: 3531
Зарегистрирован: Сб май 14, 2022 5:03 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение elpresidente* »

Скорее всего да, только проверьте сначала что cuda драйвера станут на вашу Win 10 и что их будет видно из WSL2.
kyk
Reactions: 545
Сообщения: 6995
Зарегистрирован: Ср июн 15, 2022 6:54 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение kyk »

elpresidente* писал(а): Сб окт 14, 2023 1:30 pm
kyk писал(а): Сб окт 14, 2023 1:21 pm будет ли это работать с Win-10 WSL2+Ubuntu 22.04 out-of-the box?
Нет, без cuda драйверов GPU акселерация работать не будет.
Вы хотите сказать, что такие драйверы есть в Windows 11 и их нет в Windows-10 (или они более старые)?
Последний раз редактировалось kyk Сб окт 14, 2023 1:35 pm, всего редактировалось 3 раза.
Аватара пользователя
Mad Hatter
⭐ Top 5 most interesting users
Reactions: 2019
Сообщения: 10267
Зарегистрирован: Пн июн 13, 2022 7:22 am

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение Mad Hatter »

elpresidente* писал(а): Сб окт 14, 2023 1:28 pm Про Win 10 и WSL2 ничего не знаю, очень давно было.
В те времена мы делали Hyper-V и ставили на него Ubunty 20.04 GUI
https://github.com/brokeDude2901/dxgkrnl_ubuntu
Работает на десятке
Hyper V - убится веником.
1 Изображение
Последний раз редактировалось Mad Hatter Сб окт 14, 2023 1:38 pm, всего редактировалось 1 раз.
Аватара пользователя
Mad Hatter
⭐ Top 5 most interesting users
Reactions: 2019
Сообщения: 10267
Зарегистрирован: Пн июн 13, 2022 7:22 am

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение Mad Hatter »

kyk писал(а): Сб окт 14, 2023 1:33 pm
elpresidente* писал(а): Сб окт 14, 2023 1:30 pm
Нет, без cuda драйверов GPU акселерация работать не будет.
Вы хотите сказать, что такие драйверы есть в Windows 11 и их нет в Windows-10?
Это ставится софт от Nvidia. Без разницы 10 или 11
kyk
Reactions: 545
Сообщения: 6995
Зарегистрирован: Ср июн 15, 2022 6:54 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение kyk »

elpresidente* писал(а): Сб окт 14, 2023 1:33 pm Скорее всего да, только проверьте сначала что cuda драйвера станут на вашу Win 10 и что их будет видно из WSL2.
Вы хотите сказать, что такие драйверы в Windows 11 лучше и новее чем в Windows-10?
elpresidente*
Site Admin
Reactions: 1133
Сообщения: 3531
Зарегистрирован: Сб май 14, 2022 5:03 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение elpresidente* »

kyk писал(а): Сб окт 14, 2023 1:35 pm
elpresidente* писал(а): Сб окт 14, 2023 1:33 pm Скорее всего да, только проверьте сначала что cuda драйвера станут на вашу Win 10 и что их будет видно из WSL2.
Вы хотите сказать, что такие драйверы в Windows 11 лучше и новее чем в Windows-10?
Думаю драйвера одни и те-же, но надо проверять/пробовать.
elpresidente*
Site Admin
Reactions: 1133
Сообщения: 3531
Зарегистрирован: Сб май 14, 2022 5:03 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение elpresidente* »

Как вариант поставить Ubuntu dual boot к вашей Win 10.
kyk
Reactions: 545
Сообщения: 6995
Зарегистрирован: Ср июн 15, 2022 6:54 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение kyk »

Mad Hatter писал(а): Сб окт 14, 2023 8:43 amа рабочем лептопе я не могу использовать WSL2
а если бы ты мог выбирать любую конфиграцию и любой софт, то использовал бы Win-10+{WSL2+Ubuntu 22.04} или родную Ubuntu 22.04 +Win-10 dual boot?
Последний раз редактировалось kyk Сб окт 14, 2023 1:42 pm, всего редактировалось 1 раз.
Аватара пользователя
Mad Hatter
⭐ Top 5 most interesting users
Reactions: 2019
Сообщения: 10267
Зарегистрирован: Пн июн 13, 2022 7:22 am

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение Mad Hatter »

kyk писал(а): Сб окт 14, 2023 1:42 pm
Mad Hatter писал(а): Сб окт 14, 2023 8:43 amа рабочем лептопе я не могу использовать WSL2
а если бы ты мог выбирать любую конфиграцию и любой софт, то использовал бы Win-10+WSL2+Ubuntu 22.04 или родную Ubuntu 22.04 +Win-10 dual boot?
Linux без вариантов.
kyk
Reactions: 545
Сообщения: 6995
Зарегистрирован: Ср июн 15, 2022 6:54 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение kyk »

Mad Hatter писал(а): Сб окт 14, 2023 1:42 pmLinux без вариантов.
Win-10+WSL2 или родной Linux?
kyk
Reactions: 545
Сообщения: 6995
Зарегистрирован: Ср июн 15, 2022 6:54 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение kyk »

elpresidente* писал(а): Сб окт 14, 2023 1:40 pm Как вариант поставить Ubuntu dual boot к вашей Win 10.
есть какой-нибудь Tutorial on Ubuntu installation (with dual boot) на машину, на которой уже стоит win-10? Для тех кто в танке знает Windows 10 и не знает Linux?
Аватара пользователя
Mad Hatter
⭐ Top 5 most interesting users
Reactions: 2019
Сообщения: 10267
Зарегистрирован: Пн июн 13, 2022 7:22 am

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение Mad Hatter »

kyk писал(а): Сб окт 14, 2023 1:43 pm
Mad Hatter писал(а): Сб окт 14, 2023 1:42 pmLinux без вариантов.
Win-10+WSL2 или родной Linux?
Родной конечно.
1 Изображение
kyk
Reactions: 545
Сообщения: 6995
Зарегистрирован: Ср июн 15, 2022 6:54 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение kyk »

.
Последний раз редактировалось kyk Сб окт 14, 2023 2:02 pm, всего редактировалось 3 раза.
Аватара пользователя
Mad Hatter
⭐ Top 5 most interesting users
Reactions: 2019
Сообщения: 10267
Зарегистрирован: Пн июн 13, 2022 7:22 am

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение Mad Hatter »

kyk писал(а): Сб окт 14, 2023 1:47 pm
elpresidente* писал(а): Сб окт 14, 2023 1:40 pm Как вариант поставить Ubuntu dual boot к вашей Win 10.
есть какой-нибудь Tutorial on Ubuntu installation (with dual boot) на машину, на которой уже стоит win-10? Для тех кто в танке знает Windows 10 и не знает Linux?
На YouTube полно
Аватара пользователя
Mad Hatter
⭐ Top 5 most interesting users
Reactions: 2019
Сообщения: 10267
Зарегистрирован: Пн июн 13, 2022 7:22 am

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение Mad Hatter »

kyk писал(а): Сб окт 14, 2023 1:54 pm
Mad Hatter писал(а): Сб окт 14, 2023 8:42 am всё же мне интересно, зачем 3.7? :)
На Гитхабе есть package написанный во времена Python 3.7 и он использует следущие библиотеки:

Код: Выделить всё

tensorflow
tensorflow_hub
torch
Pillow==9.1.1
amrlib==0.7.0
boto3==1.9.118
amrlib==0.7.0
transformers
spacy
scispacy
scikit_learn
bert-extractive-summarizer
keybert
tabula
tabula_py
numpy
package не инсталлируется (или не работает) под Python 3.8, 3.9, 3.10
Мои соболезнования!
kyk
Reactions: 545
Сообщения: 6995
Зарегистрирован: Ср июн 15, 2022 6:54 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение kyk »

На Гитхабе есть package написанный во времена Python 3.7 и он использует следущие библиотеки:

Код: Выделить всё

tensorflow
tensorflow_hub
torch
Pillow==9.1.1
amrlib==0.7.0
boto3==1.9.118
amrlib==0.7.0
transformers
spacy
scispacy
scikit_learn
bert-extractive-summarizer
keybert
tabula
tabula_py
numpy
package не инсталлируется (или не работает) под Python 3.8, 3.9, 3.10.

Я его запустил под Python 3.7 virtualenv на Kaggle/ Google Colab и вот такая ошибка на определённом этапе обработки данных:
torch.cuda.OutOfMemoryError: CUDA out of memory. Tried to allocate 90.00 MiB (GPU 0; 14.76 GiB total capacity; 945.68 MiB already allocated; 7.75 MiB free; 1.02 GiB reserved in total by PyTorch) If reserved memory is >> allocated memory try setting max_split_size_mb to avoid fragmentation. See documentation for Memory Management and PYTORCH_CUDA_ALLOC_CONF
Последний раз редактировалось kyk Сб окт 14, 2023 2:07 pm, всего редактировалось 1 раз.
elpresidente*
Site Admin
Reactions: 1133
Сообщения: 3531
Зарегистрирован: Сб май 14, 2022 5:03 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение elpresidente* »

kyk писал(а): Сб окт 14, 2023 1:43 pm
Mad Hatter писал(а): Сб окт 14, 2023 1:42 pmLinux без вариантов.
Win-10+WSL2 или родной Linux?
Поставить родной Ubuntu рядом с Win 10 (dual boot), tutorials есть на эту тему много.
elpresidente*
Site Admin
Reactions: 1133
Сообщения: 3531
Зарегистрирован: Сб май 14, 2022 5:03 pm

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение elpresidente* »

kyk писал(а): Сб окт 14, 2023 1:47 pm
elpresidente* писал(а): Сб окт 14, 2023 1:40 pm Как вариант поставить Ubuntu dual boot к вашей Win 10.
есть какой-нибудь Tutorial on Ubuntu installation (with dual boot) на машину, на которой уже стоит win-10? Для тех кто в танке знает Windows 10 и не знает Linux?
https://www.freecodecamp.org/news/how-t ... -tutorial/ ?
1 Изображение
Аватара пользователя
Mad Hatter
⭐ Top 5 most interesting users
Reactions: 2019
Сообщения: 10267
Зарегистрирован: Пн июн 13, 2022 7:22 am

Re: линуксоидам: Python 3.7 на Dell gpu+cuda

Сообщение Mad Hatter »

kyk писал(а): Сб окт 14, 2023 2:02 pm На Гитхабе есть package написанный во времена Python 3.7 и он использует следущие библиотеки:

Код: Выделить всё

tensorflow
tensorflow_hub
torch
Pillow==9.1.1
amrlib==0.7.0
boto3==1.9.118
amrlib==0.7.0
transformers
spacy
scispacy
scikit_learn
bert-extractive-summarizer
keybert
tabula
tabula_py
numpy
package не инсталлируется (или не работает) под Python 3.8, 3.9, 3.10.

Я его запустил под Python 3.7 virtualenv на Kaggle/ Google Colab и вот такая ошибка на определённом этапе обработки данных:
torch.cuda.OutOfMemoryError: CUDA out of memory. Tried to allocate 90.00 MiB (GPU 0; 14.76 GiB total capacity; 945.68 MiB already allocated; 7.75 MiB free; 1.02 GiB reserved in total by PyTorch) If reserved memory is >> allocated memory try setting max_split_size_mb to avoid fragmentation. See documentation for Memory Management and PYTORCH_CUDA_ALLOC_CONF
Я бы посоветовал скачать старую Анаконду с Python 3.7:
https://docs.anaconda.com/free/anaconda ... dpkglists/
Ответить