tornado 异步检测网址目标是否存在

#!/usr/bin/env python
# -*- coding: utf-8 -*-

import logging

import tornado.httpserver
import tornado.ioloop
import tornado.options
import tornado.web


from tornado import gen
from tornado.httpclient import AsyncHTTPClient, HTTPRequest


from tornado.options import define, options

define("port", default=10076, help="run on the given port", type=int)


class MainHandler(tornado.web.RequestHandler):
    @gen.coroutine
    def get(self):
        _url = 'http://www.test.com/logo.jpg'

        http_client = AsyncHTTPClient()
        req = HTTPRequest(url=_url, method='HEAD')
        http_client.fetch(req, callback=(yield gen.Callback("check_url_by_head")))
        _response = yield gen.Wait("check_url_by_head")
        logging.error(_response)
        if _response.code == 200:
            print 'file exist'
        else:
            print _response.code


def main():
    tornado.options.parse_command_line()
    application = tornado.web.Application([
        (r"/", MainHandler),
    ])
    http_server = tornado.httpserver.HTTPServer(application)
    http_server.listen(options.port)
    tornado.ioloop.IOLoop.instance().start()


if __name__ == "__main__":
    main()

发表第一条评论！

提交

相关推荐

• tornado 异步 asynchronous 学习记录

  Tornado 的特点就是异步非阻塞。下面记录一下tornado 异步 asynchronous 的学习理解。

  asynchronous tornado 异步 记录 学习
• Tornado 将阻塞任务用异步Handler委派给工作线程池

  两个用 tornado.concurrent.run_on_executor 来实现把Handler 接到的任务分派到后台运行的例子

  Handler Tornado 线程 异步 委派
• Tornado subprocess 系统调用非阻塞示例

  使用Tornado 子线程做非阻塞系统调用

  示例 Tornado subprocess 阻塞 调用
• Tornado 静态文件禁用缓存的方法

  在开发环境里，静态文件需要经常改动，特别是css，可以用下面方式禁用缓存。

  Tornado 缓存 禁用 静态 文件
• 用github 帐号登录之tornado 实现

  用github 帐号登录之tornado 实现，主要面向开发者的可以使用这个第三方登录。在gist 上发现的，直接拿来，简单修改一下。

  github tornado 帐号 登录 实现
• 利用 API 自动向搜索引擎提交网址

  前面已经介绍了向各大搜索引擎提交的经验，这次试着用 Go 语言去实践一下。也作个简单实践对比。拿 Google、Bing、Baidu 三大搜索引擎来比较，论简便性，`B` 字头的两个最简便，但从效果看，Google 最好。

  API 搜索引擎 网址 提交 自动
• tornado 4.0 的tornado.tcpclient 简化客户端操作

  生产环境下主要用于 HTTP / WebSocket 服务器，对此而言我觉得这个版本没啥亮点。对我有用的估计是那个新增的 tornado.tcpclient 模块，可以简化客户端的编写。

  tornado tcpclient 4.0 客户端 简化
• 基于Comet的技术的Tornado 长连接实现

  基于Comet的技术主要分为流（streaming）方式和长轮询（long-polling）方式。

  Comet Tornado 连接 技术 实现
• Tornado websocket server 跨域问题

  websocket 协议是可以跨域的，但存在安全问题，Tornado 4.0+ 可通过重写check_origin 函数允许跨域。

  跨域 server Tornado websocket 问题
• Tornado WebSockets 服务的测试方法

  Tornado WebSockets 服务的测试需要借助`websocket-client ` 这个包。

  Tornado WebSockets 测试方法 服务