tornado 异步检测网址目标是否存在

通过 tornado 异步检测目标网址文件是否存在。

tornado 异步检测网址目标是否存在

代码实现

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
#!/usr/bin/env python
# -*- coding: utf-8 -*-

import logging

import tornado.httpserver
import tornado.ioloop
import tornado.options
import tornado.web


from tornado import gen
from tornado.httpclient import AsyncHTTPClient, HTTPRequest


from tornado.options import define, options

define("port", default=10076, help="run on the given port", type=int)


class MainHandler(tornado.web.RequestHandler):
    @gen.coroutine
    def get(self):
        _url = 'http://www.test.com/logo.jpg'

        http_client = AsyncHTTPClient()
        req = HTTPRequest(url=_url, method='HEAD')
        http_client.fetch(req, callback=(yield gen.Callback("check_url_by_head")))
        _response = yield gen.Wait("check_url_by_head")
        logging.error(_response)
        if _response.code == 200:
            print 'file exist'
        else:
            print _response.code


def main():
    tornado.options.parse_command_line()
    application = tornado.web.Application([
        (r"/", MainHandler),
    ])
    http_server = tornado.httpserver.HTTPServer(application)
    http_server.listen(options.port)
    tornado.ioloop.IOLoop.instance().start()


if __name__ == "__main__":
    main()

注意

需要目标文件服务器支持 HEAD 请求。

本文网址: https://pylist.com/topic/107.html 转摘请注明来源

Suggested Topics

利用 API 自动向搜索引擎提交网址

前面已经介绍了向各大搜索引擎提交的经验,这次试着用 Go 语言去实践一下。也作个简单实践对比。拿 Google、Bing、Baidu 三大搜索引擎来比较,论简便性,`B` 字头的两个最简便,但从效果看,Google 最好。...

Tornado 搭建基于 WebSocket 的聊天服务

这年头 Python web 框架是有点泛滥了. 下面要介绍的是 facebook 的开源框架 tornado. 这东西比较简单, 而且自带 WebSocket 支持, 可以用它做个简单的聊天室. ...

在128M的VPS上配置mysql+Tornado+Nginx笔记

最近 123systems http://goo.gl/2Q0X2 又推出一年$10的便宜 VPS,128M内存,可以用来学习。在这样的vps 上放一个博客或做反向代理绰绰有余,买下后尝试配一个mysql+Tornado+Nginx 环境。...

Leave a Comment