在服務器繁忙時返回響應

Question

我在一個允許用戶上傳圖片的網站上工作。這主要只是一種學習體驗，我正在用python編寫它。它應該能夠做的一件事是獲取映像所在的url，然後將其重新上傳到自己的服務器。所以這裏的問題是：

一個人給我的網站一個網址，然後我的服務器開始下載圖像。在下載該映像時，會發出另一個請求。是否有任何方法讓服務器發出響應（如說服務器正忙），即使它正在執行其他操作？有沒有更好的方法來解決這個問題？

在此先感謝！

Answer 1

我寫了一個例子，希望你能找到幫助。它由一個urls.txt文件組成，該文件列出了要處理的作業以及使用多個進程下載的xdownloader.py文件。我在一臺運行Python 2.7的Linux機器上測試了它。

xdownloader.py

from multiprocessing import Process 
import urllib2 

def main(): 

    try: 

    # Read URLs/Destinations from a file 
    jobs = [] 
    with open("urls.txt","r") as ifile: 
     for line in ifile: 
     jobs.append(line.split(" ")) 

    # Create a process list to keep track of running processes 
    process_list = [] 
    # Iterate through our jobs list 
    for url, save_to in jobs: 
     # Create a new process that runs function 'download' 
     p = Process(target=download, args=(url, save_to)) 
     # Save it to a list 
     process_list.append(p) 
     # Start the process 
     p.start() 
    except KeyboardInterrupt: 
    print("Received keyboard interrupt (ctrl+c). Exiting...") 
    finally: 
    # Wait for all processes to finish before exiting 
    for process in process_list: 
     # Wait for this process to finish 
     process.join() 
    print("All processes finished successfully!") 


def download(url, destination): 
    # Open a request 
    request = urllib2.urlopen(url) 
    # Read and save the webpage data to a file 
    with open(destination, "w+") as save_file: 
    print("Downloading {0}".format(url)) 
    save_file.write(request.read()) 

if __name__=="__main__": 
    main() 

urls.txt

http://google.com google.html 
http://yahoo.com yahoo.html 
http://news.google.com news.google.html 
http://reddit.com reddit.html 
http://news.ycombinator.com news.ycombinator.html 

運行python xdownloader.py我得到：

mike@localhost ~ $ python xdownloader.py 
Downloading http://news.ycombinator.com 
Downloading http://reddit.com 
Downloading http://news.google.com 
Downloading http://google.com 
Done downloading http://google.com 
Done downloading http://news.ycombinator.com 
Done downloading http://reddit.com 
Downloading http://yahoo.com 
Done downloading http://news.google.com 
Done downloading http://yahoo.com 

你可以看到，作業異步運行。有些工作開始時間較早，但比其他工作晚。 （我在看你news.google.com！）如果這個例子不符合你的需求，請在評論中告訴我。