Тухлый Александр (0xd34df00d)

*? *programming
Жуйк, такой вопрос, который я еще с утра хотел задать. Дело в том, что один из кусков личкрафтов зависит от архиватора xz — должен же менеджер распаковывать архивы с описаниями плагинов и самими плагинами. Так вот, что лучше делать?
• Вызывать системный xz, как это сделано сейчас, через QProcess (этакий system())? — тут вендосборщик запротестовал и сказал, что под вендой это выглядит костылем.
• Или таки линковаться с liblzma? — +1 зависимость к и так уже не самому короткому списку.
• Или вообще тащить исходники декомпрессора в своем дереве? — какой-то изврат же. И ваще, а если декомпрессор упадет? Лучше в отдельном процессе же.

#829149
from idead, 13 months ago
Recommended by (1): @O01eg

← All messages

Replies (67)

Post a reply (xmpp)

@Tishka17:
я чтото подумал про QByteArray::Compress кутэшный.
#829149/1
from kitty [@home], 13 months ago
@arrowdodger:
На никсах — смотри на наличие внешней либы и линкйся к ней, если устраивает. На венде — юзай внутреннюю, на винде все так делают, ибо говно.
#829149/2
from Gajim, 13 months ago
@0xd34df00d:
@Tishka17 Хреново жмет, да и нужно еще делать выкрутасы — отрезать первые байты от файла и все такое. Как-то совсем через жопу.
#829149/4
from idead, 13 months ago, in reply to /1
@MrFree:
мегапрограммеру мегакостыль, три дефайна, а там пусть мэйнтейнеры решают :-D
#829149/6
from Psi, 13 months ago
@0xd34df00d:
@arrowdodger Дело в том, что liblzma весьма хреново собирается под вендой, как и эмбеддед (второй и третий варианты). Кажется, студия не умеет C99 и придется патчить. Печально, что я забыл это в посте упомянуть.
#829149/7
from idead, 13 months ago, in reply to /2
@Tishka17:
@0xd34df00d зато без внешних зависимостей же. Да и нужно ли тебе сильное сжатие? А с первыми байтами плохо понял. Чтобы удалить лишне, надо же его сначала добавить туда
#829149/8
from kitty [@home], 13 months ago, in reply to /4
@0xd34df00d:
@MrFree Весьма ебко. Придется делать обертку поверх нижележащего метода — QProcess в первом случае, оборачивать в QThread или юзать какой QtConcurrent во втором и третьем.
#829149/9
from idead, 13 months ago, in reply to /6
@arrowdodger:
@0xd34df00d Прекомпилед бинариес нет под винду? Ты же не в сорцах будешь распространять свой личкрафт под венду?
#829149/10
from Gajim, 13 months ago, in reply to /7
@0xd34df00d:
@Tishka17 Ты жать тоже будешь qcompress'ом? Вот выдержка из манов по qUncompress:
Note: If you want to use this function to uncompress external data compressed using zlib, you first need to prepend four bytes to the byte array that contain the expected length (as an unsigned integer) of the uncompressed data encoded in big-endian order (most significant byte first).

Олсо. там все подряд в иксемеле, а скрипты вообще тоже текстовые, поэтому есть ощущение, что профит от xz либо будет никакой, либо будет офигенный. Чутье подсказывает, что второе )
#829149/11
from idead, 13 months ago, in reply to /8
@0xd34df00d:
@arrowdodger Прекомпилед бинарис чего, xz? Вроде только от мингва зависящий, что вообще идиотизм, ибо собираемся мы студией, и тащить два рантайма (пусть даже мингвовый и 10 килобайт) — перебор. Олсо, я забочусь о сборщике под венду же )
#829149/12
from idead, 13 months ago, in reply to /10
@arrowdodger:
@wyldrodney М, ну да, зависимость от мингв отстой. Ну поколдуй, чтобы собиралось под винду, патчи отправь авторам. Полезное же дело.
#829149/14
from Gajim, 13 months ago, in reply to /13
@Tishka17:
@0xd34df00d так сравни сначала разницу в сжатии
#829149/15
from kitty [@home], 13 months ago, in reply to /11
@0xd34df00d:
@Tishka17 Я идиот или zlib == gzip?
#829149/16
from idead, 13 months ago, in reply to /15
@0xd34df00d:
@Tishka17 Хм, чо-та gzip жмет лучше xz, wtf?
#829149/17
from idead, 13 months ago, in reply to /15
@Tishka17:
@0xd34df00d никогда не юзал xz (что-то найти в системе не могу его даже), так что не знаю.
#829149/18
from kitty [@home], 13 months ago, in reply to /17
@0xd34df00d:
@Tishka17 Даже Патрег же на них перешел!
#829149/19
from idead, 13 months ago, in reply to /18
@0xd34df00d:
@Tishka17 BTW qUncompress не сильно мне поможет разархивировать tar-архив, а такие тоже надо уметь. Лень лень лень писать свой костыль для обработки tar'ов.
#829149/20
from idead, 13 months ago, in reply to /18
@0xd34df00d:
@analizer Варианты 2 и 3 ведут к осложнениям под вендой — liblzma вообще хреново собирается студией. Но в свете перехода на gzip/bzip все становится интереснее.
#829149/22
from idead, 13 months ago, in reply to /21
@O01eg:
win-way такое говно, да.
#829149/23
from Ψ+, 13 months ago
@syncro:
линковаться
#829149/24
from Psi+, 13 months ago
@0xd34df00d:
@syncro Пичаль же. Придется ручками городить отдельные тредики на все это дело и все такое. И ВДРУГ АРХИВАТОР УПАДЕТ?
#829149/25
from idead, 13 months ago, in reply to /24
@0xd34df00d:
@O01eg Да. Полное говно.
#829149/26
from idead, 13 months ago, in reply to /23
@syncro:
@0xd34df00d выведешь сообщение красноглазому, что у него орхеватор с корявый и предложешь начать процесс заново, не ?
#829149/27
from Psi+, 13 months ago, in reply to /25
@0xd34df00d:
@syncro Если архиватор упадет в основном личкрафтовом процессе, то лучше и все остальные личкрафты прибить. Вдруг он память попортит.
#829149/28
from idead, 13 months ago, in reply to /27
@syncro:
@0xd34df00d а ты его не пускай в основном процессе то
#829149/29
from Psi+, 13 months ago, in reply to /28
@0xd34df00d:
@syncro А в каком пускать? А чем это тогда лучше, чем вызов unxz -c blabla через QProcess тот же?
#829149/30
from idead, 13 months ago, in reply to /29
@syncro:
@0xd34df00d тем что не выглядит как говно)
#829149/31
from Psi+, 13 months ago, in reply to /30
@O01eg:
@0xd34df00d Можно бинарник архиватора держать рядом с личкрафтами, в винде всё равно нету нормальной папки /bin
#829149/32
from Ψ+, 13 months ago, in reply to /30
@0xd34df00d:
@syncro А, то есть, вместо того, чтобы запускать уже готовый и написанный архиватор, я пишу свой и запускаю его? И это не выглядит, как говно?
#829149/33
from idead, 13 months ago, in reply to /31
@0xd34df00d:
@O01eg Форневер какбе говорил, что xz-utils не особо под вендой запускаются. С другой стороны, раз мы все равно решили перейти на gzip, то все уже интереснее. Да и для gzip есть qUncompress — вполне штатная кутешная функция. Останется только ручками парсить tar.
#829149/34
from idead, 13 months ago, in reply to /32
@syncro:
@0xd34df00d нет, ты же юзаешь библиотечку в которой все написано, а если тебе не нужен так сильно архиватор чтобы написать пару строк то он вообще не нужен, пусть узер зачивает коммандочки с пайпами. Такие помойму у тебя представления о юниксвее ?
#829149/35
from Psi+, 13 months ago, in reply to /33
@O01eg:
@0xd34df00d У Qt же есть свою класс для работы с файловой системой?
#829149/36
from Ψ+, 13 months ago, in reply to /34
@0xd34df00d:
@O01eg Да, и?
#829149/37
from idead, 13 months ago, in reply to /36
@0xd34df00d:
@syncro Я не распарсил вообще.
#829149/38
from idead, 13 months ago, in reply to /35
@O01eg:
@0xd34df00d унаследуйся и и добавь парсилку tar'а
#829149/39
from Ψ+, 13 months ago, in reply to /37
@syncro:
кароче через купроцесс или другой эмулятор это уебанство, как прогресс показывать например будешь ?
#829149/40
from Psi+, 13 months ago
@0xd34df00d:
@O01eg Хм, я опять подумал, что не нужно. Что легче создать папочку в /tmp, типа /tmp/staging, туда распаковать содержимое архива с пакетом (tar xvzf package.tar.gz -C /tmp/staging), а потом его перенести в ~/.leechcraft/..., или куда там.
#829149/41
from idead, 13 months ago, in reply to /39
@0xd34df00d:
@syncro А зачем прогресс показывать? Если у тебя такая машина, что распаковка 1-10-100 килобайт заметна по времени, то у меня для тебя плохие новости, бро.
#829149/42
from idead, 13 months ago, in reply to /40
@syncro:
@0xd34df00d вот ты в тмп насоздаешь говна, а програмко завалиться и не уберет
#829149/43
from Psi+, 13 months ago, in reply to /42
@O01eg:
@0xd34df00d Да, распаковывать архивчик на гиг, это удобно.
#829149/44
from Ψ+, 13 months ago, in reply to /41
@0xd34df00d:
@syncro Што. Распаковали в tmp, сделали move в ~.lc, всё. Никакого говна.
#829149/45
from idead, 13 months ago, in reply to /43
@0xd34df00d:
@O01eg Ты видел экстеншон на гиг к файрфоксу, например? Или к хрому? Максимум — метр-два.
#829149/46
from idead, 13 months ago, in reply to /44
@O01eg:
@0xd34df00d Ты делаешь распаковку архивов с расширениями?
#829149/47
from Ψ+, 13 months ago, in reply to /46
@0xd34df00d:
@O01eg Ну да. Для пакетного менеджера же.
#829149/48
from idead, 13 months ago, in reply to /47
@syncro:
а если скажим в следущей версии формат ключей поменяют, или настройка селинукса не позволит узеру всякое в тмп распаковывать) ?
#829149/49
from Psi+, 13 months ago
@O01eg:
@syncro Формат ключей вообще одинаков для архиваторов в линуксе.
#829149/50
from Ψ+, 13 months ago, in reply to /49
@0xd34df00d:
@syncro Настройки селинукса — ну, будем думать, куда распаковывать. Какие варианты? Можно и в ~/tmp какой-нибудь.
#829149/51
from idead, 13 months ago, in reply to /49
@0xd34df00d:
@wyldrodney Yeah, QTemporaryFile. Но если ты хочешь распаковать архив с сохранением структуры директорий, то оно не поможет.
#829149/53
from idead, 13 months ago, in reply to /52
@syncro:
@0xd34df00d я только о том что распаковывать или вообще чета делать через купроцесс это уродливо и в линуксе гораздо в большей степени чем в говенде
#829149/54
from Psi+, 13 months ago, in reply to /51
@0xd34df00d:
@syncro Блеать. Так как делать-то?
#829149/55
from idead, 13 months ago, in reply to /54
@syncro:
@0xd34df00d линкуйся с лзма или гзипом тем же для венды включай его сорцы в проект, в линуксах компиляй с системным
#829149/57
from Psi+, 13 months ago, in reply to /55
@0xd34df00d:
@analizer Так и надо сделать чтоле. Но блио, опять потом ныть народ будет и недовольничать.
#829149/59
from idead, 13 months ago, in reply to /58
@0xd34df00d:
@wyldrodney Ну вот я так и хочу сделать )
#829149/60
from idead, 13 months ago, in reply to /56
@0xd34df00d:
@syncro Блио. Придется изобретать свой tar. Свой tar. Свой tar.
Олсо, придется все равно куда-нибудь временно распаковывать, ога.
#829149/61
from idead, 13 months ago, in reply to /57
@O01eg:
@0xd34df00d Зачем? Ты не можешь сделать виртуальный файл, который будет обращаться к архиву?
#829149/62
from Ψ+, 13 months ago, in reply to /61
@0xd34df00d:
@O01eg Э, што?
#829149/63
from idead, 13 months ago, in reply to /62
@syncro:
@0xd34df00d а что, сто килабайт никак не распаковать в оперативу ?
#829149/64
from Psi+, 13 months ago, in reply to /61
@0xd34df00d:
@syncro Когда нужно распаковать архив с одним файлом, я так и делаю, а потом все читаю с stdout. Но у тебя есть архив с кучей файлов. Жду твои варианты по распаковке в оперативку.
#829149/65
from idead, 13 months ago, in reply to /64
@syncro:
@0xd34df00d поочереди, записывая по месту назначения.
#829149/66
from Psi+, 13 months ago, in reply to /65
@0xd34df00d:
@syncro А можно код? Пзязя. Ну или хотя бы псевдокот.
#829149/67
from idead, 13 months ago, in reply to /66
@syncro:
@syncro мне еще кажется что у либ орхиваторов есть класс — менеджер который сам все как надо делает, когда ему указываешь тока пусть назначения
#829149/68
from Psi+, 13 months ago, in reply to /66
@syncro:
@syncro путь*
#829149/69
from Psi+, 13 months ago, in reply to /68
@0xd34df00d:
@syncro Мне энивей надо учесть, какие файлы из архива достали, чтобы корректно их потом удалить, когда юзер решит снести экстеншон, например.
#829149/70
from idead, 13 months ago, in reply to /68
@syncro:
@0xd34df00d тут темболее купроцесс не канает, он ведь может не все распаковать и какнить похитрому умереть что и не узнаешь)
#829149/71
from Psi+, 13 months ago, in reply to /70
@0xd34df00d:
@syncro Да ты гонишь. Он при завершении говорит, как именно он завершился, с каким кодом возврата и все такое.
#829149/72
from idead, 13 months ago, in reply to /71
@syncro:
@0xd34df00d ну вот а если в процессе основной процесс личкрафтов помреть юзер его перезапусти и что ?
#829149/73
from Psi+, 13 months ago, in reply to /72
@0xd34df00d:
@syncro Ну так папка временной распаковки всегда одна и та же, и личкрафты ее прибивают перед следующей распаковкой.
#829149/74
from idead, 13 months ago, in reply to /73

Тухлый Александр (0xd34df00d)

Subscribe

Replies (67)

Messages

Tags all

Search

Statistics