Как распаковать скачанный архив в приложение python + pyqt5 GUI?

Question

[IgnorGTO]

Подскажите пожалуйста как после скачивания автоматический разархивировать архив и скрыть бар загрузки

import shutil
import subprocess
import sys
import zipfile
from multiprocessing import process

from PyQt5.QtWidgets import QApplication, QProgressBar, QWidget, QLineEdit, QPushButton, \
    QVBoxLayout, QHBoxLayout
from PyQt5.QtCore import QThread, pyqtSignal
import urllib.request

from PyQt5.QtCore import *
from PyQt5.QtWidgets import *


class Downloader(QThread):
    # Сигнал о количестве данных (PyQt5)
    preprogress = pyqtSignal(float)
    progress = pyqtSignal(float)

    # fileUrl - url - файла, включая сам файл
    # filename - имя файла
    def __init__(self, fileUrl, fileName):
        QThread.__init__(self)
        # Флаг инициализации
        self._init = False
        self.fileUrl = fileUrl
        self.fileName = fileName

    def run(self):
        # тест на локальных данных, но работать должно и с сетью
        urllib.request.urlretrieve(self.fileUrl, self.fileName, self._progress)

    def _progress(self, block_num, block_size, total_size):
        if not self._init:
            self.preprogress.emit(total_size)
            self._init = True

        # Расчет текущего количества данных
        downloaded = block_num * block_size
        if downloaded < total_size:
            # Отправляем промежуток
            self.progress.emit(downloaded)
        else:
            # Чтобы было 100%
            self.progress.emit(total_size)


class MainWindow(QWidget):
    def __init__(self):
        super().__init__()
        self.setGeometry(100, 100, 600, 300)
        self.setWindowTitle('GTO Games')

        self.downloader = None

        self.fileUrl = QLineEdit('http://site.com/dw/Mods.zip')
        self.buttonga = QPushButton('Играть', self)
        self.loadButton = QPushButton('Скачать', self)
        self.loadButton.clicked.connect(self._loadFile)
        hbox = QHBoxLayout()

            # hbox.addWidget(self.fileUrl)
        hbox.addWidget(self.loadButton)

        vbox = QVBoxLayout(self)
        vbox.addLayout(hbox)
        self.bar = QProgressBar()
        vbox.addWidget(self.bar)

    def initializeUI(self):
        self.setGeometry(100, 100, 600, 200)
        self.setWindowTitle('GTO Games')

        self.buttonga.clicked.connect(self.exerun)
        self.buttonga.move(10, 10)

        self.show()

    def _loadFile(self):
        ar = self.fileUrl.text().split('/')
        if len(ar) == 0:
            return
        fileName = f'_{ar[len(ar) - 1]}'

        self._download = Downloader(self.fileUrl.text(), fileName)
        # Устанавливаем максимальный размер данных
        self._download.preprogress.connect(lambda x: self.bar.setMaximum(round(x)))
        # Промежуточный/скачанный размер
        self._download.progress.connect(lambda d: self.bar.setValue(round(d)))
        self._download.start()
        print("D_Start")
        self.loadButton.hide()

    def exerun(self):
        args = [r".\Vintagestory.exe", "--connect=xx.xxx.xxx.xx", "--pw=9029"]
        subprocess.call(args)


if __name__ == '__main__':
    app = QApplication(sys.argv)
    window = MainWindow()
    window.show()
    sys.exit(app.exec_())

Answer 1

[Alexa2007]

def extract_zip(zip_file_,extract_folder):
    '''
    extract all files to directory
    extract_zip('zip_2MB.zip','C://test')
    '''
    zf = zipfile.ZipFile(zip_file_, 'r')
    for _ in zf.namelist():
        zf.extractall(extract_folder)

Comments

[IgnorGTO]

Не получается

# import dload
#
# dload.save_unzip("https://file-examples.com/wp-content/uploads/2017/02/zip_2MB.zip", "/extract/here")
import os
import shutil
import subprocess
import sys
import zipfile
from multiprocessing import process

from PyQt5.QtWidgets import QApplication, QProgressBar, QWidget, QLineEdit, QPushButton, \
    QVBoxLayout, QHBoxLayout
from PyQt5.QtCore import QThread, pyqtSignal
import urllib.request

from PyQt5.QtCore import *
from PyQt5.QtWidgets import *


class Downloader(QThread):
    # Сигнал о количестве данных (PyQt5)
    preprogress = pyqtSignal(float)
    progress = pyqtSignal(float)

    # fileUrl - url - файла, включая сам файл
    # filename - имя файла
    def __init__(self, fileUrl, fileName):
        QThread.__init__(self)
        # Флаг инициализации
        self._init = False
        self.fileUrl = fileUrl
        self.fileName = fileName

    def run(self):
        # тест на локальных данных, но работать должно и с сетью
        urllib.request.urlretrieve(self.fileUrl, self.fileName, self._progress)

    def _progress(self, block_num, block_size, total_size):
        if not self._init:
            self.preprogress.emit(total_size)
            self._init = True

        # Расчет текущего количества данных
        downloaded = block_num * block_size
        if downloaded < total_size:
            # Отправляем промежуток
            self.progress.emit(downloaded)
        else:
            # Чтобы было 100%
            self.progress.emit(total_size)


class MainWindow(QWidget):
    def __init__(self):
        super().__init__()
        self.setGeometry(100, 100, 600, 180)
        self.setWindowTitle('GTO Games')
        self.downloader = None
        self.fileUrl = QLineEdit('http://site.com/dw/Mods.zip')
        self.buttonga = QPushButton('Играть', self)
        self.loadButton = QPushButton('Скачать', self)
        self.buttonga.move(10, 10)
        self.loadButton.move(10, 50)

        self.unzipButton = QPushButton('Распаковать', self)
        self.unzipButton.move(120, 10)
        self.unzipButton.clicked.connect(self.unzipp)

        self.loadButton.clicked.connect(self._loadFile)
        hbox = QHBoxLayout()
        hbox.addWidget(self.loadButton)
        vbox = QVBoxLayout(self)
        vbox.addLayout(hbox)
        self.bar = QProgressBar()
        vbox.addWidget(self.bar)

    def initializeUI(self):
        self.buttonga.clicked.connect(self.exerun)
        # self.unzipButton = QPushButton('Распаковать', self)
        # self.unzipButton.move(120, 10)
        # self.unzipButton.clicked.connect(self.unzipp)
        self.show()

    def _loadFile(self):
        ar = self.fileUrl.text().split('/')
        if len(ar) == 0:
            return
        fileName = f'_{ar[len(ar) - 1]}'

        self._download = Downloader(self.fileUrl.text(), fileName)
        # Устанавливаем максимальный размер данных
        self._download.preprogress.connect(lambda x: self.bar.setMaximum(round(x)))
        # Промежуточный/скачанный размер
        self._download.progress.connect(lambda d: self.bar.setValue(round(d)))
        self._download.start()
        print("D_Start")
        self.loadButton.hide()

    def exerun(self):
        # z = zipfile.ZipFile('Mods.zip', 'w')  # Создание нового архива
        # for root, dirs, files in os.walk('./'):  # Список всех файлов и папок в директории folder
        #     for file in files:
        #         z.write(os.path.join(root, file))  # Создание относительных путей и запись файлов в архив
        #
        # z.close()
        args = [r".\Vintagestory.exe", "--connect=xx.xxx.xxx.xx", "--pw=9029"]
        subprocess.call(args)

    def unzipp(self):
        fantasy_zip = zipfile.ZipFile('C:\\Users\\Ignor-GTO\\PycharmProjects\\GTO-Team\\Mods.zip')
        fantasy_zip.extractall('C:\\Users\\Ignor-GTO\\PycharmProjects\\GTO-Team')

        fantasy_zip.close()


if __name__ == '__main__':
    app = QApplication(sys.argv)
    window = MainWindow()
    window.show()
    sys.exit(app.exec_())

[Alexa2007]

У меня сработало

def extract_zip(zip_file_,extract_folder):
    '''
    extract all files to directory
    extract_zip('zip_2MB.zip','C://test')
    '''
    zf = zipfile.ZipFile(zip_file_, 'r')
    for _ in zf.namelist():
        zf.extractall(extract_folder)

[IgnorGTO]

Alexa2007,
Проблема в том что я не могу понять в каком месте запускать скачивание пытался
сделать от сюда

else:
            # Чтобы было 100%
            self.progress.emit(total_size)
            extract_zip('Mods.zip', 'C://Users//Ignor-GTO//PycharmProjects//GTO-Team')
            return

но тогда программа крашится после скачивания файла

[Alexa2007]

проблема на самом деле в другом.. и их несколько:
1) site.com/dw/Mods.zip ---- 404
2) https://file-examples.com/wp-content/uploads/2017/... --- редирект
вот содержимое файла

<!DOCTYPE html><html><head> <meta charset="UTF-8"> <title>File Examples | Download redirect...</title> ..............</html>

Отсюда вывод: даже когда код работает он крашится... из-за неправильного зип файла
3) У вас неплохо структурирован код, но он очень длинный и вы сами походу начинаете в нем блуждать.. Раскидайте на несколько файлов... Добавьте try Except и будите получать ошибки в консоль, а не просто вылетевшую прогу... Ведь скачать и распаковать это функционал который можно отработать отдельно, а потом прикрутить к кнопкам

Вот тут запринтовал и увидел, что название файла не совпадает с тем, что вы ожидаете

def _loadFile(self):
        ar = self.fileUrl.text().split('/')
        if len(ar) == 0:
            return
        fileName = f'_{ar[len(ar) - 1]}'
        print(fileName)
#     _zip_2MB.zip  ЛИШНИЙ ЗНАК

Короче у меня заработало вот так:

import os
import shutil
import subprocess
import sys
import zipfile
from multiprocessing import process

from PyQt5.QtWidgets import QApplication, QProgressBar, QWidget, QLineEdit, QPushButton, \
    QVBoxLayout, QHBoxLayout
from PyQt5.QtCore import QThread, pyqtSignal
import urllib.request

from PyQt5.QtCore import *
from PyQt5.QtWidgets import *


class Downloader(QThread):
    # Сигнал о количестве данных (PyQt5)
    preprogress = pyqtSignal(float)
    progress = pyqtSignal(float)

    # fileUrl - url - файла, включая сам файл
    # filename - имя файла
    def __init__(self, fileUrl, fileName):
        QThread.__init__(self)
        # Флаг инициализации
        self._init = False
        self.fileUrl = fileUrl
        self.fileName = fileName

    def run(self):
        # тест на локальных данных, но работать должно и с сетью
        urllib.request.urlretrieve(self.fileUrl, self.fileName, self._progress)


    def _progress(self, block_num, block_size, total_size):
        if not self._init:
            self.preprogress.emit(total_size)
            self._init = True

        # Расчет текущего количества данных
        downloaded = block_num * block_size
        if downloaded < total_size:
            # Отправляем промежуток
            self.progress.emit(downloaded)
        else:
            # Чтобы было 100%
            self.progress.emit(total_size)
        


class MainWindow(QWidget):
    def __init__(self):
        super().__init__()
        self.setGeometry(100, 100, 600, 180)
        self.setWindowTitle('GTO Games')
        self.downloader = None
        self.fileUrl = QLineEdit('https://www.7-zip.org/a/7za920.zip')
        self.buttonga = QPushButton('Играть', self)
        self.loadButton = QPushButton('Скачать', self)
        self.buttonga.move(10, 10)
        self.loadButton.move(10, 50)

        self.unzipButton = QPushButton('Распаковать', self)
        self.unzipButton.move(120, 10)
        self.unzipButton.clicked.connect(self.unzipp)

        self.loadButton.clicked.connect(self._loadFile)
        hbox = QHBoxLayout()
        hbox.addWidget(self.loadButton)
        vbox = QVBoxLayout(self)
        vbox.addLayout(hbox)
        self.bar = QProgressBar()
        vbox.addWidget(self.bar)

    def initializeUI(self):
        self.buttonga.clicked.connect(self.exerun)
        # self.unzipButton = QPushButton('Распаковать', self)
        # self.unzipButton.move(120, 10)
        # self.unzipButton.clicked.connect(self.unzipp)
        self.show()

    def _loadFile(self):
        ar = self.fileUrl.text().split('/')
        if len(ar) == 0:
            return
        fileName = f'_{ar[len(ar) - 1]}'
        print(fileName)

        self._download = Downloader(self.fileUrl.text(), fileName)
        # Устанавливаем максимальный размер данных
        self._download.preprogress.connect(lambda x: self.bar.setMaximum(round(x)))
        # Промежуточный/скачанный размер
        self._download.progress.connect(lambda d: self.bar.setValue(round(d)))
        self._download.start()
        print("D_Start")
        self.loadButton.hide()
    def extract_zip(self,zip_file,extract_folder):
        zf = zipfile.ZipFile(zip_file, 'r')
        for _ in zf.namelist():
            zf.extractall(extract_folder)
    

    def exerun(self):
        # z = zipfile.ZipFile('Mods.zip', 'w')  # Создание нового архива
        # for root, dirs, files in os.walk('./'):  # Список всех файлов и папок в директории folder
        #     for file in files:
        #         z.write(os.path.join(root, file))  # Создание относительных путей и запись файлов в архив
        #
        # z.close()
        args = [r".\Vintagestory.exe", "--connect=xx.xxx.xxx.xx", "--pw=9029"]
        subprocess.call(args)

    def extract_zip(self,zip_file,extract_folder):
        zf = zipfile.ZipFile(zip_file, 'r')
        for _ in zf.namelist():
            zf.extractall(extract_folder)
    def unzipp(self):
        self.extract_zip('_7za920.zip','C://test')




if __name__ == '__main__':
    app = QApplication(sys.argv)
    window = MainWindow()
    window.show()
    sys.exit(app.exec_())

[IgnorGTO]

Alexa2007,
Спасибо понял свои ошибки и ещё один вопрос пожалуйста
Как после окончания скачивания начать распаковку без участия пользователя
Автоматический ?

[Alexa2007]

Перенес в метод run. Строка 31

import os
import shutil
import subprocess
import sys
import zipfile
from multiprocessing import process

from PyQt5.QtWidgets import QApplication, QProgressBar, QWidget, QLineEdit, QPushButton, \
    QVBoxLayout, QHBoxLayout
from PyQt5.QtCore import QThread, pyqtSignal
import urllib.request

from PyQt5.QtCore import *
from PyQt5.QtWidgets import *


class Downloader(QThread):
    # Сигнал о количестве данных (PyQt5)
    preprogress = pyqtSignal(float)
    progress = pyqtSignal(float)

    # fileUrl - url - файла, включая сам файл
    # filename - имя файла
    def __init__(self, fileUrl, fileName):
        QThread.__init__(self)
        # Флаг инициализации
        self._init = False
        self.fileUrl = fileUrl
        self.fileName = fileName

    def run(self):
        # тест на локальных данных, но работать должно и с сетью
        r = urllib.request.urlretrieve(self.fileUrl, self.fileName, self._progress)
        if r:
            zf = zipfile.ZipFile(self.fileName, 'r')
            for _ in zf.namelist():
                zf.extractall('c://test//'+self.fileName.split('.')[0])


    def _progress(self, block_num, block_size, total_size):
        if not self._init:
            self.preprogress.emit(total_size)
            self._init = True

        # Расчет текущего количества данных
        downloaded = block_num * block_size
        if downloaded < total_size:
            # Отправляем промежуток
            self.progress.emit(downloaded)
        else:
            # Чтобы было 100%
            self.progress.emit(total_size)
        


class MainWindow(QWidget):
    def __init__(self):
        super().__init__()
        self.setGeometry(100, 100, 600, 180)
        self.setWindowTitle('GTO Games')
        self.downloader = None
        self.fileUrl = QLineEdit('https://www.7-zip.org/a/7za920.zip')
        self.buttonga = QPushButton('Играть', self)
        self.loadButton = QPushButton('Скачать', self)
        self.buttonga.move(10, 10)
        self.loadButton.move(10, 50)

        self.unzipButton = QPushButton('Распаковать', self)
        self.unzipButton.move(120, 10)
        #self.unzipButton.clicked.connect(self.unzipp)

        self.loadButton.clicked.connect(self._loadFile)
        hbox = QHBoxLayout()
        hbox.addWidget(self.loadButton)
        vbox = QVBoxLayout(self)
        vbox.addLayout(hbox)
        self.bar = QProgressBar()
        vbox.addWidget(self.bar)

    def initializeUI(self):
        self.buttonga.clicked.connect(self.exerun)
        # self.unzipButton = QPushButton('Распаковать', self)
        # self.unzipButton.move(120, 10)
        # self.unzipButton.clicked.connect(self.unzipp)
        self.show()

    def _loadFile(self):
        ar = self.fileUrl.text().split('/')
        if len(ar) == 0:
            return
        fileName = f'_{ar[len(ar) - 1]}'
        print(fileName)

        self._download = Downloader(self.fileUrl.text(), fileName)
        # Устанавливаем максимальный размер данных
        self._download.preprogress.connect(lambda x: self.bar.setMaximum(round(x)))
        # Промежуточный/скачанный размер
        self._download.progress.connect(lambda d: self.bar.setValue(round(d)))
        self._download.start()
        print("D_Start")
        self.loadButton.hide()

    

    def exerun(self):
        # z = zipfile.ZipFile('Mods.zip', 'w')  # Создание нового архива
        # for root, dirs, files in os.walk('./'):  # Список всех файлов и папок в директории folder
        #     for file in files:
        #         z.write(os.path.join(root, file))  # Создание относительных путей и запись файлов в архив
        #
        # z.close()
        args = [r".\Vintagestory.exe", "--connect=xx.xxx.xxx.xx", "--pw=9029"]
        subprocess.call(args)


if __name__ == '__main__':
    app = QApplication(sys.argv)
    window = MainWindow()
    window.show()
    sys.exit(app.exec_())

[IgnorGTO]

Alexa2007,
Большое спасибо

[IgnorGTO]

Alexa2007,
Проблему вы решили но
вопрос все равно остался почему я не как не могу вызвать функцию из другого класса допустим теперь после распаковки архива мне нужно скрыть кнопку скачать к примеру
должно быть же какое-то решение

[Alexa2007]

Ну во первых: Архив распаковывается сам и автоматически, то есть вызывать функцию уже нет необходимости.
Но если она есть: вам придется переосмыслить структуру кода. Всё зависит от того на сколько глобальный проект. Кто и как им будет пользоваться. Если это утилитка для себя... не морочтесь с классами.. пару функций и пойдет.. Если это большой проект для себя.. то классы это норм, но тогда создайте ещё один и вытягивайте от туда метод unzip в любом из своих классов. Возможно передавать этот класс в конструкторе.. Рабочий код у вас есть, а вот как правильно провести рефакторинг это сугубо личное мнение. Конкретного ответа нет ни у кого. И в данной ситуации я могу помочь только ссылками на туториалы. Но гладя на ваш код... думаю ничего нового вы не узнаете.

К примеру парсер веб страниц привязывается к конкретным классам или другим тегам. Но стоит дизайнерам обновить страницу и весь код парсера равен нулю. Поэтому заморачиваться с таким видом утилит особо смысла нет. Вот и вы подумайте на сколько много кода вы готовы писать, улучшать, оптимизировать и стоит ли оно того

И дефис перед именем файла пришлось убрать.. дабы не усугублять код, но можете поковыряться сами

import os
import shutil
import subprocess
import sys
import zipfile
from multiprocessing import process

from PyQt5.QtWidgets import QApplication, QProgressBar, QWidget, QLineEdit, QPushButton, \
    QVBoxLayout, QHBoxLayout
from PyQt5.QtCore import QThread, pyqtSignal
import urllib.request

from PyQt5.QtCore import *
from PyQt5.QtWidgets import *



class Helper():
    """Help to you"""
    def __init__(self, zip_arhiv):
        super(Helper, self).__init__()
        self.zip_arhiv = zip_arhiv
    
    def unzip_all_files(self, extract_folder):
        zf = zipfile.ZipFile(self.zip_arhiv, 'r')
        try:
            for _ in zf.namelist():
                zf.extractall(extract_folder+'//'+self.zip_arhiv.split('.')[0])
            return True
        except Exception as e:
            print(e)
            return False

    @property
    def files(self):
        _zf = zipfile.ZipFile(self.zip_arhiv, 'r')
        return _zf.namelist()


class Downloader(QThread):
    # Сигнал о количестве данных (PyQt5)
    preprogress = pyqtSignal(float)
    progress = pyqtSignal(float)

    # fileUrl - url - файла, включая сам файл
    # filename - имя файла
    def __init__(self, fileUrl, fileName):
        QThread.__init__(self)
        # Флаг инициализации
        self._init = False
        self.fileUrl = fileUrl
        self.fileName = fileName

    def run(self):
        # тест на локальных данных, но работать должно и с сетью
        r = urllib.request.urlretrieve(self.fileUrl, self.fileName, self._progress)
        if r:
            arhiv = Helper(self.fileName)
            print(arhiv.files)
            if arhiv.unzip_all_files('c://test'):
                print('All files was unziped!')


    def _progress(self, block_num, block_size, total_size):
        if not self._init:
            self.preprogress.emit(total_size)
            self._init = True

        # Расчет текущего количества данных
        downloaded = block_num * block_size
        if downloaded < total_size:
            # Отправляем промежуток
            self.progress.emit(downloaded)
        else:
            # Чтобы было 100%
            self.progress.emit(total_size)
        


class MainWindow(QWidget):
    def __init__(self):
        super().__init__()
        self.setGeometry(100, 100, 600, 180)
        self.setWindowTitle('GTO Games')
        self.downloader = None
        self.fileUrl = QLineEdit('https://www.7-zip.org/a/7za920.zip')
        self.buttonga = QPushButton('Играть', self)
        self.loadButton = QPushButton('Скачать', self)
        self.buttonga.move(10, 10)
        self.loadButton.move(10, 50)
        lambda: self.unzipp(self.fileUrl,'c://test')

        self.unzipButton = QPushButton('Распаковать', self)
        self.unzipButton.move(120, 10)
        self.unzipButton.clicked.connect(lambda z: self.unzipp(self.fileUrl.text().split('/')[-1],'c://test'))

        self.loadButton.clicked.connect(self._loadFile)
        hbox = QHBoxLayout()
        hbox.addWidget(self.loadButton)
        vbox = QVBoxLayout(self)
        vbox.addLayout(hbox)
        self.bar = QProgressBar()
        vbox.addWidget(self.bar)

    def initializeUI(self):
        self.buttonga.clicked.connect(self.exerun)
        self.show()

    def _loadFile(self):
        ar = self.fileUrl.text().split('/')
        if len(ar) == 0:
            return
        fileName = f'{ar[len(ar) - 1]}'
        print(fileName)

        self._download = Downloader(self.fileUrl.text(), fileName)
        # Устанавливаем максимальный размер данных
        self._download.preprogress.connect(lambda x: self.bar.setMaximum(round(x)))
        # Промежуточный/скачанный размер
        self._download.progress.connect(lambda d: self.bar.setValue(round(d)))
        self._download.start()
        print("D_Start")
        self.loadButton.hide()

    def unzipp(self, arhiv_path,extract_path):
        print('Hera are you')
        print(arhiv_path)
        print(extract_path)
        arhiv = Helper(arhiv_path)
        #print(arhiv.files)
        if arhiv.unzip_all_files(extract_path):
            print('All files was unziped!')


    def exerun(self):
        # z = zipfile.ZipFile('Mods.zip', 'w')  # Создание нового архива
        # for root, dirs, files in os.walk('./'):  # Список всех файлов и папок в директории folder
        #     for file in files:
        #         z.write(os.path.join(root, file))  # Создание относительных путей и запись файлов в архив
        #
        # z.close()
        args = [r".\Vintagestory.exe", "--connect=xx.xxx.xxx.xx", "--pw=9029"]
        subprocess.call(args)


if __name__ == '__main__':
    app = QApplication(sys.argv)
    window = MainWindow()
    window.show()
    sys.exit(app.exec_())