Scrapy выводит только открытую скобку ⇐ Python

[Anonymous]

Я пытаюсь очистить заголовок и URL-адрес всех страниц Академии Хана на страницах математики/науки/экономики. Однако в настоящее время он выводит только открытую скобку, а до этого он очищал только начальный URL-адрес.

Код: Выделить всё

from openbar_index.items import OpenBarIndexItem
from scrapy.contrib.spiders import CrawlSpider, Rule
from scrapy.contrib.linkextractors.sgml import SgmlLinkExtractor

class OpenBarSpider(CrawlSpider):
"""
scrapes website URLs from educational websites and commits urls/webpage names/text to a document
"""

name = 'openbar'
allowed_domains = 'khanacademy.org'
start_urls = [

"https://www.khanacademy.org"

]

rules = [

Rule(SgmlLinkExtractor(allow = ['/math/']), callback='parse_item', follow = True),
Rule(SgmlLinkExtractor(allow = ['/science/']), callback='parse_item', follow=True),
Rule(SgmlLinkExtractor(allow = ['/economics-finance-domain/']), callback='parse_item', follow=True)
]

def parse_item(self, response):

item = OpenBarIndexItem()
url = response.url
item['url'] = url
item['title'] = response.xpath('/html/head/title/text()').extract()
yield item

Есть ли у кого-нибудь идеи, почему это происходит, или советы, как это исправить?

Подробнее здесь: https://stackoverflow.com/questions/309 ... en-bracket