Mr.Daark: Записки сурка

С недели 2 назад для одного хитрого сайта понадобилось сделать автоматический репост статей в твиттер. Решил не писать на php, а попробовать на python’е наваять. Откровенного говоря очень понравилось! Получилось очень просто и легко.

Написал наверное за пол часа, что с учетом того, что python я вообщем то не знаю совсем не плохо.

1. #!/usr/local/bin/python
2. # -*- coding: utf8 -*-
3.  
4. import urllib
5. import libxml2
6. import pickle
7. import twitter
8. import os
9. from time import sleep
10.  
11. bit_api="bit.ly.api"
12. bit_login="bit.ly.login"
13. twit_login="name"
14. twit_pass="pass"
15. rss_url="http://feed"
16.  
17.  
18. def shorten_url(long_url, login_user, api_key):
19.     try:
20.         longUrl = urllib.urlencode(dict(longUrl=long_url))
21.         login = urllib.urlencode(dict(login=login_user))
22.         apiKey = urllib.urlencode(dict(apiKey=api_key))
23.  
24.         encodedurl="http://api.bit.ly/shorten?version=2.0.1&%s&%s&%s" % (longUrl, login, apiKey)
25.  
26.         request = urllib.urlopen(encodedurl)
27.         responde = request.read()
28.         request.close()
29.         responde_dict = eval(responde)
30.         short_url = responde_dict["results"][long_url]["shortUrl"]
31.         return short_url
32.     except IOError, e:
33.         raise "urllib error "
34.  
35.  
36. if __name__ == '__main__':
37.     doc = libxml2.parseFile(rss_url)
38.     links=[]
39.     for item in doc.xpathEval('//channel/item/link'):
40.         links.append(item.content)
41.  
42.     titles=[]
43.     for item in doc.xpathEval('//channel/item/title'):
44.         titles.append(item.content)
45.  
46.     rss_path = os.path.join(os.path.dirname(__file__), 'rss.db')
47.     file = open (rss_path)
48.     old_links=pickle.load(file)
49.     file.close()
50.  
51.     items=[]
52.     f=0
53.     for x in xrange(0,len(links)):
54.         for old in old_links:
55.             f=0
56.             if (old==links[x]):
57.                 f=1
58.                 break
59.         if (f==0):
60.             items.append(x)
61.  
62.     api = twitter.Api(username=twit_login, password=twit_pass)
63.  
64.     for x in items:
65.         title=titles[x].decode("utf8")
66.         if len(title)<=120:
67.             print "link %s: %s" % (x,links[x])
68.             if x!=0:
69.                 sleep(15)
70.             api.PostUpdate(title+" "+shorten_url(links[x], bit_login, bit_api))
71.  
72.     file=open(rss_path,"w")
73.     ser=pickle.dump(links,file)
74.     file.close()
75.  

Какие трудности вылезли в процессе:

1. Нужно как-то было не постить то что уже отправлено. Решилось сохранением списка ссылок в сериализованном виде в файл

2. Размер сообщение в твиттере не больше 140 символов, а надо бы в твитты еще и ссылки на статьи вставлять, притом что заголовки у статей я бы сказал не маленькие. Решилось регистрацией на bit.ly (сервис укорачивания ссылок) и собственно укорачивание. Не помню уже сам написал или с сайта их взял функцию, ибо там все так просто что даже неинтересно.

3. Невероятно, но встала проблема с кодировкой. Решилось за 5 минут гугления и пробования нескольких комбинаций. Что-то не понимал я откуда куда функции перекодируют. Вобщем вот так надо

title.decode(«utf8»)

4. Ну и задержку пришлось поставить, иначе bit.ly говорило зайдите позже 🙂

Дальше все это безобразие запихал в крон:

*/12 * * * * /usr/local/bin/python /usr/local/www/rss2twitter/rss2twit.py

За время пока это дело работает, уже сделан репост 1256 твиттов, так что красота.

А вообще все очень просто и легко, особенно учитывая что twitter api уже написано. хотя если бы его небыло, думаю я бы просто логинился, сохранял куки и постил обычным POST запросом.

Ну и файлик со скриптом на последок: rss2twit.tar.gz

З.Ы. с удовольствием выслушаю критику, потому как первое не Hello, world! приложение на python’е. 🙂