Como limitar simultâneos ao vivo URLSessions com Combinar?

Question 1

Eu tenho um monte (~200) as urls de imagens, e eu preciso fazer o download de cada um e, em seguida, o processo de (redimensionar) que, em seguida, atualizar o cache. A coisa é, eu só quero ter no máximo 3 pedidos de uma só vez, e uma vez que as imagens são pesadas, eu também não quero um monte de respostas "pendurado" esperando para ser processado (e tomando memória...).

TLDR eu quero telefonar para o seguinte (4ª) o pedido à rede somente após a receiveValue no sink é chamado em um dos 3 primeiros pedidos... (ou seja, após a rede de resposta e processamento de são ambas feitas...).

Será que este fluxo de trabalho, e vai segurar a espera de urls e não soltá-los no chão?

Também eu preciso que buffer() chamada? Eu uso ele depois de ver esta resposta: https://stackoverflow.com/a/67011837/2242359

wayTooManyURLsToHandleAtOnce // this is a `[URL]`
    .publisher
    .buffer(size: .max, prefetch: .byRequest, whenFull: .dropNewest) // NEEDED?
    .flatMap(maxPublishers: .max(3)) { url in
       URLSession.shared
           .dataTaskPublisher(for: url)
           .map { (data: Data, _) -> Picture in
               Picture(from: data)
           }
    }
    .tryCompactMap {
        resizeImage(picture: $0) // takes a while and might fail
    }
    .receive(on: DispatchQueue.main)
    .sink { completion
        // handling completion... 
    } receiveValue: { resizedImage
        self.cache.append(resizedImage)
    }
    .store(...)

Question 2

Eu usaria um assunto. Esta não é uma solução ideal, mas parece funcionar e talvez irá desencadear outras idéias

var cancellable: AnyCancellable?

var urls: [String] = (0...6).map { _ in "http://httpbin.org/delay/" + String((0...2).randomElement()!) }

var subject: PassthroughSubject<[String], Never> = .init()

let maxConcurrentRequests = 3

override func viewDidAppear(_ animated: Bool) {
    super.viewDidAppear(animated)
    
    print(urls)
    
    cancellable = subject
        .flatMap({ urls -> AnyPublisher<[URLSession.DataTaskPublisher.Output], URLError> in
            let requests = urls.map { URLSession.shared.dataTaskPublisher(for: URL.init(string: $0)!) }
            return Publishers.MergeMany(requests)
                .collect().eraseToAnyPublisher()
        })
        .print()
        .sink(receiveCompletion: { completion in
            print(completion)
        }, receiveValue: { value in
            print(value)
            if self.urls.count <= self.maxConcurrentRequests {
                self.urls.removeAll()
                self.subject.send(completion: .finished)
            } else {
                self.urls.removeLast(self.maxConcurrentRequests)
                self.subject.send(self.urls.suffix(self.maxConcurrentRequests))
            }
        })
    
    subject.send(urls.suffix(maxConcurrentRequests))
}

Blazej SLEBODA · Answer 1 · 2021-11-24T11:30:11

Eu usaria um assunto. Esta não é uma solução ideal, mas parece funcionar e talvez irá desencadear outras idéias

var cancellable: AnyCancellable?

var urls: [String] = (0...6).map { _ in "http://httpbin.org/delay/" + String((0...2).randomElement()!) }

var subject: PassthroughSubject<[String], Never> = .init()

let maxConcurrentRequests = 3

override func viewDidAppear(_ animated: Bool) {
    super.viewDidAppear(animated)
    
    print(urls)
    
    cancellable = subject
        .flatMap({ urls -> AnyPublisher<[URLSession.DataTaskPublisher.Output], URLError> in
            let requests = urls.map { URLSession.shared.dataTaskPublisher(for: URL.init(string: $0)!) }
            return Publishers.MergeMany(requests)
                .collect().eraseToAnyPublisher()
        })
        .print()
        .sink(receiveCompletion: { completion in
            print(completion)
        }, receiveValue: { value in
            print(value)
            if self.urls.count <= self.maxConcurrentRequests {
                self.urls.removeAll()
                self.subject.send(completion: .finished)
            } else {
                self.urls.removeLast(self.maxConcurrentRequests)
                self.subject.send(self.urls.suffix(self.maxConcurrentRequests))
            }
        })
    
    subject.send(urls.suffix(maxConcurrentRequests))
}

Não iria chamar self.subject.send(completion: .finished) sobre a pia, acabar com a minha assinatura para sempre? (ou seja, ignorando valores futuros emitida)
@AvielGross Sim, ele faz. Eu entendi que a sua coleção de urls criados uma vez por ler controlador de presentes / fechar. Se não é verdadeiro, então não enviar ".terminado", mas você tem um gatilho, como didSet em urls de matriz ou de outra, para relançar com o assunto.enviar depois de esvaziar a matriz e o reabastecimento-lo.

Como limitar simultâneos ao vivo URLSessions com Combinar?

Pergunta

Melhor resposta

Em outros idiomas

Esta página está em outros idiomas

Popular nesta categoria

Perguntas populares nesta categoria