S3 api cluster opensource

Всім привіт Порадьте локальний кластерний сторедж для файлів з API S3, потрібно зберігати дані у себе, але хочеться мати можливість переїхати кудись у клауд, якщо виникне така потреба. Колись користувався riak, але проект виглядає як мертвий, тому не хочеться туди лізти

Привіт, мені так й не стало треба (тому я не так й не спробував), але мені неодноразово радили minio On 2/14/25 10:08, VASYL MELNYK wrote:
Всім привіт
Порадьте локальний кластерний сторедж для файлів з API S3, потрібно зберігати дані у себе, але хочеться мати можливість переїхати кудись у клауд, якщо виникне така потреба.
Колись користувався riak, але проект виглядає як мертвий, тому не хочеться туди лізти
_______________________________________________ UANOG mailing list -- uanog@uanog.one To unsubscribe send an email to uanog-leave@uanog.one
-- Volodymyr Litovka "Vision without Execution is Hallucination." -- Thomas Edison

пт, 14 лют. 2025 р. о 11:42 Volodymyr Litovka
Привіт,
мені так й не стало треба (тому я не так й не спробував), але мені неодноразово радили minio
Дякую, ось зараз саме його і ставлю, трохи не подобається що сторедж файловий, а не рав, але для початку піде, а там далі видно буде

Вітаю. А далі розтягнете його на декілька нод, прикрутите балансер і їхатиме собі нормально. У TrueNAS під капотом саме він крутиться. 14.02.25 11:52, VASYL MELNYK:
пт, 14 лют. 2025 р. о 11:42 Volodymyr Litovka
пише: Привіт,
мені так й не стало треба (тому я не так й не спробував), але мені неодноразово радили minio
Дякую, ось зараз саме його і ставлю, трохи не подобається що сторедж файловий, а не рав, але для початку піде, а там далі видно буде
_______________________________________________ UANOG mailing list --uanog@uanog.one To unsubscribe send an email touanog-leave@uanog.one

Доброго дня seaweedfs ? Може реплікуватись в відалені локейшени причому не S3, підтримує доступ також по іншим протоколам (webdav etc) І живе в мабуть будьякій базі. Для локального використання здаєтся більш ніж ок. VASYL MELNYK wrote: %I> Всім привіт %I> %I> Порадьте локальний кластерний сторедж для файлів з API S3, потрібно %I> зберігати дані у себе, але хочеться мати можливість переїхати кудись у %I> клауд, якщо виникне така потреба. %I> %I> Колись користувався riak, але проект виглядає як мертвий, тому не хочеться %I> туди лізти %I> _______________________________________________ %I> UANOG mailing list -- uanog@uanog.one %I> To unsubscribe send an email to uanog-leave@uanog.one

Ой, seaweedfs ні. Рівно як багато інших.
Для 1-10 серверів - minio.
Для щось великого багаторебайтного на 10+ серверів - ceph + radosgw. Але
він трохи складніший ніж minio. І там вже бажано по-дорослому (nvme,
25Gbit/s+, ...)
пт, 14 лют. 2025 р. о 12:01 Vitalij Satanivskij
Доброго дня
seaweedfs ? Може реплікуватись в відалені локейшени причому не S3, підтримує доступ також по іншим протоколам (webdav etc) І живе в мабуть будьякій базі.
Для локального використання здаєтся більш ніж ок.
VASYL MELNYK wrote: %I> Всім привіт %I> %I> Порадьте локальний кластерний сторедж для файлів з API S3, потрібно %I> зберігати дані у себе, але хочеться мати можливість переїхати кудись у %I> клауд, якщо виникне така потреба. %I> %I> Колись користувався riak, але проект виглядає як мертвий, тому не хочеться %I> туди лізти
%I> _______________________________________________ %I> UANOG mailing list -- uanog@uanog.one %I> To unsubscribe send an email to uanog-leave@uanog.one
_______________________________________________ UANOG mailing list -- uanog@uanog.one To unsubscribe send an email to uanog-leave@uanog.one

До речі minio рекомендують на xfs - реально швидше ніж ext4, latency менше.
Але якщо невеликий сторадж на пару чи трохи більше терабайт і відносно
невелике навантаження - то там, звичайно, все одно.
сб, 15 лют. 2025 р. о 00:23 Serge Negodyuck
Ой, seaweedfs ні. Рівно як багато інших.
Для 1-10 серверів - minio. Для щось великого багаторебайтного на 10+ серверів - ceph + radosgw. Але він трохи складніший ніж minio. І там вже бажано по-дорослому (nvme, 25Gbit/s+, ...)
пт, 14 лют. 2025 р. о 12:01 Vitalij Satanivskij
пише: Доброго дня
seaweedfs ? Може реплікуватись в відалені локейшени причому не S3, підтримує доступ також по іншим протоколам (webdav etc) І живе в мабуть будьякій базі.
Для локального використання здаєтся більш ніж ок.
VASYL MELNYK wrote: %I> Всім привіт %I> %I> Порадьте локальний кластерний сторедж для файлів з API S3, потрібно %I> зберігати дані у себе, але хочеться мати можливість переїхати кудись у %I> клауд, якщо виникне така потреба. %I> %I> Колись користувався riak, але проект виглядає як мертвий, тому не хочеться %I> туди лізти
%I> _______________________________________________ %I> UANOG mailing list -- uanog@uanog.one %I> To unsubscribe send an email to uanog-leave@uanog.one
_______________________________________________ UANOG mailing list -- uanog@uanog.one To unsubscribe send an email to uanog-leave@uanog.one

Всім дякую
Завів мініо - все виявилось не просто, а дуже просто. Сторедж невеликий,
тому на фс байдуже, але дякую за тюнінг.
сб, 15 лют. 2025 р. о 00:33 Serge Negodyuck
До речі minio рекомендують на xfs - реально швидше ніж ext4, latency менше. Але якщо невеликий сторадж на пару чи трохи більше терабайт і відносно невелике навантаження - то там, звичайно, все одно.
сб, 15 лют. 2025 р. о 00:23 Serge Negodyuck
пише: Ой, seaweedfs ні. Рівно як багато інших.
Для 1-10 серверів - minio. Для щось великого багаторебайтного на 10+ серверів - ceph + radosgw. Але він трохи складніший ніж minio. І там вже бажано по-дорослому (nvme, 25Gbit/s+, ...)
пт, 14 лют. 2025 р. о 12:01 Vitalij Satanivskij
пише: Доброго дня
seaweedfs ? Може реплікуватись в відалені локейшени причому не S3, підтримує доступ також по іншим протоколам (webdav etc) І живе в мабуть будьякій базі.
Для локального використання здаєтся більш ніж ок.
VASYL MELNYK wrote: %I> Всім привіт %I> %I> Порадьте локальний кластерний сторедж для файлів з API S3, потрібно %I> зберігати дані у себе, але хочеться мати можливість переїхати кудись у %I> клауд, якщо виникне така потреба. %I> %I> Колись користувався riak, але проект виглядає як мертвий, тому не хочеться %I> туди лізти
%I> _______________________________________________ %I> UANOG mailing list -- uanog@uanog.one %I> To unsubscribe send an email to uanog-leave@uanog.one
_______________________________________________ UANOG mailing list -- uanog@uanog.one To unsubscribe send an email to uanog-leave@uanog.one

Привіт
MinIO +1
--
Best regards,
Mykola
On Fri, Feb 14, 2025 at 11:08 AM VASYL MELNYK
Всім привіт
Порадьте локальний кластерний сторедж для файлів з API S3, потрібно зберігати дані у себе, але хочеться мати можливість переїхати кудись у клауд, якщо виникне така потреба.
Колись користувався riak, але проект виглядає як мертвий, тому не хочеться туди лізти _______________________________________________ UANOG mailing list -- uanog@uanog.one To unsubscribe send an email to uanog-leave@uanog.one
participants (6)
-
Mykola Ulianytskyi
-
Serge Negodyuck
-
VASYL MELNYK
-
Vitalij Satanivskij
-
Volodymyr Litovka
-
Volodymyr O. Pidgornyi