Как ограничить одновременные сеансы живых URL-адресов с помощью Combine?

Question 1

У меня есть много (~200) URL-адресов для изображений, и мне нужно загрузить каждое из них, затем обработать (изменить размер) его, а затем обновить кэш. Дело в том, что я хочу иметь не более 3 запросов одновременно, и, поскольку изображения тяжелые, я также не хочу, чтобы много ответов "зависало" в ожидании обработки (и занимало память...).

TLDR Я хочу вызвать следующий (4-й) сетевой запрос только после receiveValue в sink вызывается по одному из первых 3 запросов... (т. е. после того, как сетевой ответ и обработка будут выполнены...).

Будет ли этот поток работать, и будет ли он держаться за ожидающие URL-адреса и не уронить их на пол?

Также нужно ли мне это buffer() позвонить? Я использую его после того, как увидел этот ответ: https://stackoverflow.com/a/67011837/2242359

wayTooManyURLsToHandleAtOnce // this is a `[URL]`
    .publisher
    .buffer(size: .max, prefetch: .byRequest, whenFull: .dropNewest) // NEEDED?
    .flatMap(maxPublishers: .max(3)) { url in
       URLSession.shared
           .dataTaskPublisher(for: url)
           .map { (data: Data, _) -> Picture in
               Picture(from: data)
           }
    }
    .tryCompactMap {
        resizeImage(picture: $0) // takes a while and might fail
    }
    .receive(on: DispatchQueue.main)
    .sink { completion
        // handling completion... 
    } receiveValue: { resizedImage
        self.cache.append(resizedImage)
    }
    .store(...)

Question 2

Я бы использовал тему. Это не оптимальное решение, но оно выглядит работающим и, возможно, вызовет другие идеи

var cancellable: AnyCancellable?

var urls: [String] = (0...6).map { _ in "http://httpbin.org/delay/" + String((0...2).randomElement()!) }

var subject: PassthroughSubject<[String], Never> = .init()

let maxConcurrentRequests = 3

override func viewDidAppear(_ animated: Bool) {
    super.viewDidAppear(animated)
    
    print(urls)
    
    cancellable = subject
        .flatMap({ urls -> AnyPublisher<[URLSession.DataTaskPublisher.Output], URLError> in
            let requests = urls.map { URLSession.shared.dataTaskPublisher(for: URL.init(string: $0)!) }
            return Publishers.MergeMany(requests)
                .collect().eraseToAnyPublisher()
        })
        .print()
        .sink(receiveCompletion: { completion in
            print(completion)
        }, receiveValue: { value in
            print(value)
            if self.urls.count <= self.maxConcurrentRequests {
                self.urls.removeAll()
                self.subject.send(completion: .finished)
            } else {
                self.urls.removeLast(self.maxConcurrentRequests)
                self.subject.send(self.urls.suffix(self.maxConcurrentRequests))
            }
        })
    
    subject.send(urls.suffix(maxConcurrentRequests))
}

Blazej SLEBODA · Answer 1 · 2021-11-24T11:30:11

Я бы использовал тему. Это не оптимальное решение, но оно выглядит работающим и, возможно, вызовет другие идеи

var cancellable: AnyCancellable?

var urls: [String] = (0...6).map { _ in "http://httpbin.org/delay/" + String((0...2).randomElement()!) }

var subject: PassthroughSubject<[String], Never> = .init()

let maxConcurrentRequests = 3

override func viewDidAppear(_ animated: Bool) {
    super.viewDidAppear(animated)
    
    print(urls)
    
    cancellable = subject
        .flatMap({ urls -> AnyPublisher<[URLSession.DataTaskPublisher.Output], URLError> in
            let requests = urls.map { URLSession.shared.dataTaskPublisher(for: URL.init(string: $0)!) }
            return Publishers.MergeMany(requests)
                .collect().eraseToAnyPublisher()
        })
        .print()
        .sink(receiveCompletion: { completion in
            print(completion)
        }, receiveValue: { value in
            print(value)
            if self.urls.count <= self.maxConcurrentRequests {
                self.urls.removeAll()
                self.subject.send(completion: .finished)
            } else {
                self.urls.removeLast(self.maxConcurrentRequests)
                self.subject.send(self.urls.suffix(self.maxConcurrentRequests))
            }
        })
    
    subject.send(urls.suffix(maxConcurrentRequests))
}

Не стал бы звонить self.subject.send(completion: .finished) на раковине навсегда закончится моя подписка? (т. е. игнорирование будущих значений, излучаемых)
@AvielGross Да, это так. Я понял, что ваша коллекция URL-адресов, созданных один раз для каждого контроллера представления, присутствует / отклоняется. Если это не так, то не отправляйте ".готово", но у вас есть триггер, такой как didSet в массиве URL-адресов или другой, для перезапуска с subject.send после очистки массива и его заполнения.

Как ограничить одновременные сеансы живых URL-адресов с помощью Combine?

Вопрос

Лучший ответ

На других языках

Эта страница на других языках

Популярное в этой категории

Популярные вопросы в этой категории