Продолжение темы здесь
Кураторы: MikeMac, RU_Taurus, archa
Страницы:Кликните, чтобы указать произвольную страницуназад184далее
Chudik: NAS своими руками (часть 14)
Обязательно читаем первую страницу. Вопросы, не отвечающие требованиям, могут быть проигнорированы.
Krey
Member
991/7639 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 13:00
NASodel123
То есть вы говорите что: "ZIL и SLOG это одно и тоже, только ZIL расположен внутри пула (если пул состоит из дисков, значит находится на дисках), а SLOG расположен на внешнем устройстве."
Я вас правильно понял?


ZIL это такая область данных, журнал. В обычном состоянии располагается на основном пуле. Но его можно перенести на отдельный vdev, который в терминах зфс зовётся slog.

Добавление от 08.07.2019 13:00:

vanes32
sync=always разве нет?

Это не ускорит, а замедлит систему. Я же написал что лог, это просто дополнительный шаг. Из него не читается ничего.


https://forum.ixbt.com/topic.cgi?id=109:348:14819#14819
bormental
Member
1110/2183 ответов
14 лет на iXBT, с октября 2010
Чаще пишет Р Р† "НАС" (62%)
Украина, Киев
Инфо
bormental Member
6 лет назад / 08 июля 2019 13:10
> все упирается в процессор?
Не совсем. При сетевых интерфейсах от 10гиг может быть много йопсов и, соответственно, ядро сильно нагружено обработкой прерываний, переключением контекстов...
Крутить стоит распределение прерываний по ядрам, а также очень стоит использовать jumbo frames 9K.
Стоит ли использовать L2ARC зависит от набора файлов и паттерна их использования, если объем чтения превосходит существенно ARC и повторяющихся чтений набора несколько, то выигрыш будет. См. хороший пример на lexa.ru.
Небольшой кусок SSD для slog не помешает.
Вообще же правильный подход для оптимизации системы-это определить паттерны IO, смоделировать их через fio, определить какие параметры стоит крутить и далее повторять тесты с fio до удовлетворения...
Krey
Member
992/7640 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 13:18
Prosto

Может потому 10гиг и не идет в массы, потому как контент так отдать толком не может сейчас никто, кроме узкоспециализированного iSCSI и всяких простых ФС


Ну родная то smb сожрёт всю доступную ПС. Сама МС свой Storage spaces тестила на пуле из ссд и там вполне 40гигабит загружалось.

Добавление от 08.07.2019 13:18:

NASodel123
В FreeNAS настроен RAID-Z2

Четность не про скорость вообще. Советую поменять на страйп из двух 4+1 или 4+2
NASodel123
Member
92/102 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 14:49
Krey

NASodel123
Включите экспериментальную фичу smb multichannel у самбы. LACP возможно стоит убрать. Потестите с ним и без него.
Убрал LACP, оставил один 10G порт. Пробовал с smb multichannel и без него, изменения с скоростях в пределах погрешности.
Так же игрался с jumbo пакетами, практически без изменений.
Krey
Member
993/7641 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 15:04
NASodel123

Krey

NASodel123
Включите экспериментальную фичу smb multichannel у самбы. LACP возможно стоит убрать. Потестите с ним и без него.
Убрал LACP, оставил один 10G порт. Пробовал с smb multichannel и без него, изменения с скоростях в пределах погрешности.
Так же игрался с jumbo пакетами, практически без изменений.
Значит массив скорости больше не даёт. Можно протестить его отдельно посредством fio, как советовали ранее, или переделать как я советовал.
NASodel123
Member
93/103 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 15:09
Krey

NASodel123
В FreeNAS настроен RAID-Z2

Четность не про скорость вообще. Советую поменять на страйп из двух 4+1 или 4+2
Что то я не совсем понял, как это делается практически?
Получается что-то вроде RAID 10 или я ошибаюсь?
Krey
Member
994/7642 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 15:27
NASodel123
Получается что-то вроде RAID 10 или я ошибаюсь?

Не совсем. Рейд10 это страйп зеркал, можете и его сделать, но половину дисков как то жалко терять. Лучше уж пары дисков страйпить, это наиболее крутой вариант по скорости, если 50% избыточности устраивает.
Я же советую страйп честности сделать, как и у вас два диска уйдёт на избыточности, но будет раза в два быстрее работать.

Добавление от 08.07.2019 15:27:

NASodel123
Что то я не совсем понял, как это делается практически?
сначала создаете пул из четности на половине дисков, потом добавляете к нему такой же vdev из второй половины.

zpool create tank raidz /dev/sd[a-e]
zpool add tank raidz /dev/sd[f-k]

ну только с правильными девайсами или метками.

Исправлено: Krey, 08.07.2019 15:27

NASodel123
Member
94/104 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 15:27
Krey
Подскажите как в GUI я делаю предложенную вами конфигурацию (страйп честности).
К сообщению приложены файлы:
vanes32
unregistered
v
vanes32 unregistered
6 лет назад / 08 июля 2019 15:30
NASodel123
Тоже думаю что страйп из двух raidz2 + nvme под slog сильно преобразят ваш нас.
NASodel123
Member
95/105 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 15:30
Кстати по поводу Jumbo frames:

Заключение

Jumbo может подойти для полностью выделенной сети хранения без каких-либо внешних требований к маршрутизации, но даже там вполне возможно столкнуться с проблемами того, как FreeBSD по-разному обрабатывает трафик jumbo.

Jumbo - это технология, которая в какой-то момент удовлетворяла целям, но аппаратная разгрузка и скорость проводной маршрутизации значительно ослабили преимущества, которые она когда-то предлагала. Он даст вам небольшое повышение производительности, если вы сможете настроить его должным образом, но это время может быть лучше потрачено на разработку топологии сети по-другому.


Источник: https://www.ixsystems.com/community/threads/jumbo-frames-notes.26064/
NASodel123
Member
96/106 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 15:34
Krey
Такую конфигурацию вы имели ввиду?
К сообщению приложены файлы:
Krey
Member
995/7643 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 15:49
NASodel123
Такую конфигурацию вы имели ввиду?

Затрудняюсь ответить, гуй мешает восприятию, опыта у меня с ним нет. Хотелось бы zpool status увидеть.
И ещё есть рекомендация использовать кол-во дисков, соответствующее степени двойки, т. е 4+1 а не 5+1. Иначе будут лишние падинги. Но в принципе это не так сильно влияет. Но раз вы тестите можно попробовать оба варианта, или три со страйп ом рейдз2.
NASodel123
Member
97/107 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 16:00
Krey
К сообщению приложены файлы:
Krey
Member
996/7644 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 16:03
NASodel123
Да, это страйп двух 5+1
NASodel123
Member
98/108 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 16:27
Krey
Скорость записи осталась 410-430 мега в секунду
Скорость чтения подросла с ~440 до 500-550 мега
Проверки делаются с файлом, который больше ARC кэша
Krey
Member
997/7645 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 16:46
NASodel123
поставьте netdata и посмотрите что происходит с сервером во время теста. Особенно стоит обратить внимание на график прерываний.
А iperf гоняли? 900 мегов в секунду выдаёт?

Добавление от 08.07.2019 16:40:

В общем тестим поотдельности сеть и массив. И ищем проблему.

Добавление от 08.07.2019 16:46:

NASodel123
Ещё можно попробовать выгрузить модули pfsence- он тормоз от рождения. Или попробовать чистую убунту (только не 18.04) или дебиан.
NASodel123
Member
99/109 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 17:15
Krey

Я так понимаю Iperf — тест пропускной способности интернет канала, а чем тестить массив? Если не затруднит, опишите методику тестирования и я уйду копать результаты.

Что можете сказать насчет графика прерываний?

Добавление от 08.07.2019 17:15:

Krey
NASodel123
Ещё можно попробовать выгрузить модули pfsence- он тормоз от рождения. Или попробовать чистую убунту (только не 18.04) или дебиан.


Как выгрузить модули pfsence?
К сообщению приложены файлы:
dimez
Member
322/2525 ответов
15 лет на iXBT, с октября 2009
Чаще пишет Р Р† "Ноутбуки" (19%)
Инфо
d
dimez Member
6 лет назад / 08 июля 2019 17:20
Krey
попробовать чистую убунту (только не 18.04)
Почему? Есть известные регрессии в скорости?
NASodel123
Member
100/110 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 17:23
Форумчане, которые получают скорости выше Гигабайта в секунду на операциях чтения/записи по протоколу smb/samba, будьте добры, поделитесь своей конфигурацией железа и софта.
NASodel123
Member
101/111 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 18:15
Krey

Результаты Iperf3.

[ ID] Interval Transfer Bandwidth
[ 4] 0.00-60.00 sec 58.7 GBytes 8.40 Gbits/sec sender
[ 4] 0.00-60.00 sec 58.7 GBytes 8.40 Gbits/sec receiver
К сообщению приложены файлы:
Krey
Member
998/7646 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 18:51
dimez
Почему? Есть известные регрессии в скорости?

Да, многие жаловались и я отловил у себя проблемы с отложенными (софтовыми) прерываниями. Их обработка слишком много занимала времени, примерно с половину от rx\tx. Уже апгрейд на 18.10 проблему решил.

Добавление от 08.07.2019 18:37:

NASodel123
Что можете сказать насчет графика прерываний?

извиняюсь, не уточнил. Надо softirqs смотреть, железные выглядят нормально, хотя их и дофига конечно.
еще странно что не видно графика iowait, на линуксах от под верхней диаграммой показывается.

Добавление от 08.07.2019 18:41:

NASodel123
Как выгрузить модули pfsence?

не знаю как в гуе, в cli kldstat покажет загруженные модули, если там есть что то похожее на pf_* kldunload [name] его выгрузит

Добавление от 08.07.2019 18:44:

NASodel123
Результаты Iperf3.

ну более менее, хотя лучше когда там цифра 9.6-9.8.

Добавление от 08.07.2019 18:51:

NASodel123
Если не затруднит, опишите методику тестирования и я уйду копать результаты.

ставим fio и запускаем его с файлом задания, например такого содержания (что нашлось у меня из старого):
Скрытый текст

файлик теста кажется нужно заранее создать, довольно большой, на порядок больше оперативки.
или добавить size=320G в джоб
blocksize выставить в ваш рекордсайз.
кстати если у вас файлы в основном большие, можно recordsize в датасете zfs увеличить до того же мега.
какой у вас ashift на пуле? Для двутеров задирать его в 4к (12) не надо. zdb | grep ashift
dimez
Member
323/2526 ответов
15 лет на iXBT, с октября 2009
Чаще пишет Р Р† "Ноутбуки" (19%)
Инфо
d
dimez Member
6 лет назад / 08 июля 2019 18:59
Krey
Да, многие жаловались и я отловил у себя проблемы с отложенными (софтовыми) прерываниями. Их обработка слишком много занимала времени, примерно с половину от rx\tx. Уже апгрейд на 18.10 проблему решил.
Можно ссылку на багзиллу или на список рассылки или ещё куда-нибудь, где подтверждается этот баг?
1) На lts можно поставить ядро из следующего релиза (пакет linux-image-generic-hwe-18.04)
2) Ставить не lts на сервер - ну такое
Krey
Member
999/7647 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 19:04
dimez
Можно ссылку на багзиллу или на список рассылки или ещё куда-нибудь, где подтверждается этот баг

Нету у меня такой. В чате телеграмма разбирались.
bormental
Member
1111/2184 ответов
14 лет на iXBT, с октября 2010
Чаще пишет Р Р† "НАС" (62%)
Украина, Киев
Инфо
bormental Member
6 лет назад / 08 июля 2019 19:13
> Jumbo - это технология, которая в какой-то момент удовлетворяла целям

Там рассуждения на тему jumbo in lan hardware.
Да, сети ныне быстры. Но в данном случае идёт речь о загруженности CPU прерываниями от пары сетевых, а также об выравнивании этой нагрузки __между ядрами CPU__.
Krey
Member
1000/7649 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 19:17
NASodel123
Есть какие нибудь алерты в топе страницы нетдаты?


О, юбелейчег Ответов: 1000/7649. А у bormental бинарный юбелейчик
bormental
Member
1112/2185 ответов
14 лет на iXBT, с октября 2010
Чаще пишет Р Р† "НАС" (62%)
Украина, Киев
Инфо
bormental Member
6 лет назад / 08 июля 2019 19:49
Krey
🍻
NASodel123
Member
102/112 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 21:00
Krey
извиняюсь, не уточнил. Надо softirqs смотреть, железные выглядят нормально, хотя их и дофига конечно.
еще странно что не видно графика iowait, на линуксах от под верхней диаграммой показывается.


В IP/netdata/netdata.conf не нашел ни softirqs, ни iowait.
NASodel123
Member
103/113 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 21:06
Krey
не знаю как в гуе, в cli kldstat покажет загруженные модули, если там есть что то похожее на pf_* kldunload [name] его выгрузит

Не такого.

Добавление от 08.07.2019 21:06:

Krey
какой у вас ashift на пуле?
ashift: 12
К сообщению приложены файлы:
Krey
Member
1001/7650 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 21:08
NASodel123
не в конфе, а на странице с графиками. Или вы про то что на бсд такого нету?

ashift: 12
а какой физ. размер сектора на дисках? можно так посмотреть: smartctl -i /dev/da2
NASodel123
Member
104/114 ответов
7 лет на iXBT, с апреля 2017
Чаще пишет Р Р† "НАС" (91%)
Инфо
N
NASodel123 Member
6 лет назад / 08 июля 2019 22:14
Krey
К сообщению приложены файлы:
pdfvin
Member
257/257 ответов
8 лет на iXBT, с января 2017
Чаще пишет Р Р† "НАС" (100%)
Инфо
p
pdfvin Member
6 лет назад / 08 июля 2019 22:49
NASodel123: На данный момент имеется:
1) 1 CPU – Xeon E3-1240 v3
2) 8GB * 4 RAM – DDR3 ECC
3) 6TB * 12 HDD – 7200 RPM
4) 1TB * 2 SATA SSD – Samsung EVO 840
5) 1TB * 1 SSD – Samsung EVO 970 Plus
6) LSI HBA controller
7) Корпус + блок питания
8) Intel Network Adapter X550-T2 – 10G
...
Имеем 2 пула:
1) 6 TB HDD 7200 RPM * 12 - без SLOG и без L2ARC, RAID-Z2
2) 1 TB SATA SSD * 2 - без SLOG и без L2ARC, Mirror
...
Копирую файл 23 гиг с пула 1 на пул 2, скорость 420 мега и секунду. При копирование того же файла из пула 2 на пул 1, скорость подскакивает до 780 мега и секунду.


Пул 2 ограничен по записи скоростью одного Samsung EVO 840, а по чтению суммой скоростей двух Samsung EVO 840.

Ваше железо более чем достаточно, чтобы утилизировать 10Gbit/s по smb при последовательном чтении/записи, используя zfs в качестве основы "файлопомойки".
bormental
Member
1113/2186 ответов
14 лет на iXBT, с октября 2010
Чаще пишет Р Р† "НАС" (62%)
Украина, Киев
Инфо
bormental Member
6 лет назад / 08 июля 2019 23:00
NASodel123
use sendfile не пробовали ещё в настройках самбы?
Krey
Member
1002/7651 ответов
18 лет на iXBT, с апреля 2006
136 фото на iXBT.photo
Чаще пишет Р Р† "Юмор" (30%)
Россия, Москва
Инфо
Krey Member
6 лет назад / 08 июля 2019 23:20
NASodel123
А, у вас 12 по 6тб. Тогда ашифт правильный.
Попробуйте таки чистый дебиан, это же быстро можно сделать. Может даже с лайв сд все заработает.
Если Вы считаете это сообщение ценным для дискуссии (не обязательно с ним соглашаться), Вы можете поблагодарить его автора, а также перечислить ему на счет некоторую сумму со своего баланса (при отзыве благодарности перечисленная сумма не будет вам возвращена).
Также вы можете оценить сообщение как неудачное.
В течение суток можно 20 раз оценить сообщения разных участников (купите Premium-аккаунт, либо оплачивайте оценки сверх лимита).
Страницы:Кликните, чтобы указать произвольную страницуназад184далее
Продолжение темы здесь
Последние обсуждения в Конференции
21:29Выбор бюджетного "цифрового" (китайского) усилителя Стерео
21:29Всё о кофе - выбор, тонкости кофеварения, покупка в интернет-магазинах и т.д. Кулинария
21:29О степени вреда сотовой связи. Влияние сотовых телефонов на здоровье. Излучение. SAR. РњРѕР±. операторы
21:29Кто-то хочет в СССР? История
21:29ESP32 Эл. устройства
21:29Отзывы о PrivalSystems (аналог skype) Интернет
21:28Поделитесь своим настроением. Какое оно у вас сейчас? Флуд
21:28AV-ресиверы фирмы Anthem ДК аудио
21:28Не загружаются файлы OРЎ Рё СЃРёСЃС‚. РџРћ
21:28Современная культура РФ спустя 30 лет после распада СССР. Интеллигенция жаловалась, что ей мешают творить. И где шедевры? Общий
21:27Строительство частного дома. Из чего , почем, где и зачем ? Ремонт
21:26Будет ли война России с Украиной? Политика
21:26Выбор фильтра для воды Бытовая техника
21:24Динамика роста цен. публикуем тут замеченные Вами факты роста цен. Где, когда и на что Юмор
21:24Козлы на дорогах. Чего делать? Авто
21:23Большой теннис... поговорим??? РЎРїРѕСЂС‚
21:20 Биллибои против сонибоев. Сонибои против мариобоев. Мариобои против всех. И наоборот. Консоли
21:19Лунная афера США - замена высадки на Луну беспилотной программой и павильонными съемками. Наука
21:15Новая нейронка Маска Grok 3 ИИ
21:14Отечественные микропроцессоры. Состояние и перспективы Процессоры
Последние темы без ответов
сегодняПроверка диска и восстановление Накопители
сегодняБлок управления опто сканнером OPTOS РЎРёСЃС‚. платы
вчераВыбор воздуходувки под аккумулятор макита Бытовая техника
вчераОбсуждение Terramaster F8 SSD Plus РќРђРЎ
3 дняBattlefield 2042 drweb Игры
3 дняНе могу прошить UUID на материнской плате ASRock H55M-LE ни с помощью amidedos ни ее версии под Windows - осталось только слить дамп биоса, редактировать в HEX-редакторе и шить обратно? Тех. поддержка
21:25«Параллельный» Toyota RAV4 оказался дешевле официальных «китайцев». Цены на новые Toyota RAV4 в России стартуют от 3 млн рублей
21:24Национальная ассоциация производителей электрооборудования США утвердила стандарт двунаправленной зарядки: электромобили теперь могут отдавать энергию в сеть
21:10«Прогрессу МС-30» провели авторский осмотр и накатку головного обтекателя
21:06Эксперты выявили критические уязвимости в новой модели Grok 3 от компании Илона Маска
20:59Apple сокращает производство не только в Китае, но и в Мексике — компания будет производить продукцию в США
20:56Экс-директор OpenAI Мира Мурати создаёт компанию по развитию понятного и полезного ИИ
20:25SanDisk представила 3D Matrix Memory: новая память в 4 раза ёмче и вдвое дешевле DRAM
20:22Сверхтонкий флагман Samsung Galaxy S25 Edge: первые фото работающего прототипа и подтвержденные характеристики
20:17У Tesla Cybertruck отрываются панели кузова на скорости 110 км/ч
20:10«ИИ должен обеспечить 10% рост мировой экономики, чтобы оправдать ожидания». Глава Microsoft призывает прекратить шумиху вокруг ИИ
20+ лет назад в этот день обсуждали
2001Что взять в качестве модема? РњРѕР±. телефоны
2001Помогите с Веб страничкой ! Интернет
2001BitBlt - не работает! Программирование
2002Как правильно записать audio-cd при помощи NERO? Цифр.Р·РІСѓРє
2002Чтобы музыку не качали какие порты заблокировать? Сети
2002Как напечатать лист с двух сторон на принтере OKIPAGE 8W LITE Периферия (архив)
2002FCPGA-2 Процессоры
2004Зачем нужно зевание. Вредно ли не зевать вообще? Общий
2005Не понимаю, как удается сжать на 1 СиДи диск 1,5 часа кино в МПЕГ4 в гут качестве! Видеозахват
2005Существует-ли драйвер к теефону Motorola MPx 200 и Apple Драйверы