metaTED

Ginagawa ito sa pamamagitan ng paglikha ng higit sa 8 metalinks ng TED talk-iiba-iba sa parehong antas ng kalidad at posibleng talk pagpapangkat sa pamamagitan ng direktoryo

Mga Tampok :.

• Lumilikha Tinatalakay may mga pangalan ng mapagbigay-kaalamang mga file - IE hindi kinaugalian paliwanag / Hans Rosling sa HIV -. Bagong mga katotohanan at ng mga nakamamanghang visuals.mp4 data sa halip na orihinal HansRosling_2009_480.mp4
• sinusubukan husto upang makakuha ng lahat ng mga pag-uusap, o hindi bababa sa karamihan sa mga ito -. Na may magandang dahilan kung ilan ay nabigo
• Higit pang mga pagpipilian -. Lumilikha ng isang metalink bawat magagamit sa antas ng kalidad (sa kasalukuyan ay mababa at ang mataas)
• Higit pang mga pagpipilian - ay lumilikha ng isang metalink bawat magagamit talk pagpapangkat, kasama ang lahat ng mga pag-uusap na kabilang sa parehong pangkat na inilagay sa loob ng isang pangkaraniwang direktoryo. Ang mga posibleng talk pagpapangkat ay kinuha mula sa talk metadata (kasalukuyang film / taon sa pag-publish, makipag-usap tema at may-akda).
• Agresibo pag-cache sa buong proyekto, upang maiwasan ang mga mamahaling mga pagpapatakbo ng network / CPU hangga't maaari. Kasama Wastong pagpapawalang-bisa cache.
• Mataas na antas ng kasalanan pagpapaubaya.
• Simple, pa napakalakas na homegrown crawler ng web.
• disenyo na may kakayahang umangkop at extensible software na may pagbabago sa isipan.
• Nagbibigay ng parehong console script at isang pampublikong API.

Ano ang bagong sa paglabas:.

• Naka-blacklist ng isa pang talk URL na walang mga pag-download
• Na-update may-akda at metadata video marker bilang TED-update ang kanilang mga layout ng HTML.

Ano ang bagong sa bersyon 2.0.0:

• karagdagan Tampok:
• Mga Fixed isyu # 4 - Idinagdag talk subtitle suporta, tulad ng popular na hiling. Major salamat sa Randall Mason para sa paunang pagpapatupad.
• Idinagdag paralelismo sa crawler, na humahantong sa mga makabuluhang pagpapabuti sa pagganap.
• Idinagdag taon paggawa ng pelikula, taon ng pag-publish at pangalan ng kaganapan sa Tinatalakay ng metadata, na awtomatikong nagdagdag ng bagong mga posibleng talk pagpapangkat.
• Idinagdag paralelismo sa metalink generator, na humahantong sa mga makabuluhang pagpapabuti sa pagganap.
• Bugfixes:
• Na-update talk tema marker bilang TED-update ang kanilang mga layout ng HTML at pinahusay na pangangasiwa error.
• Na-update marker download ng video at i-download code URL sa pagtukoy ng bilang TED-update ang kanilang mga layout ng HTML.
• Na-update marker may-akda at pagtuklas ng code bilang TED-update ang kanilang mga layout ng HTML.

Cache
• talk_info metadata ay nakasulat sa disk sa lalong madaling panahon upang i-minimize ang pagkawala ng data sa mga error.
• Inalis setup.cfg bilang hindi na namin ito kailangan.
• Inalis ang reference proyekto mapangarapin-trac mula LICENSE.
• Internals:
• Pinagpalit mula sa paggamit setuptools upang ipamahagi para sa packaging.
• Inalis batay caching crawler pahina bilang hindi na ito ginagamit o kinakailangan.
• Pinagpalit mula BeautifulSoup sa lxml at inalis custom na crawler code sa pabor ng lxml.html.parse.
• Minimal bersyon Python Uusog mula 2.4+ sa 2.6 +.
• Pangunahing refactoring upang gawing makabago umiiral codebase, habang pagpapabuti ng estilo code,-optimize ng pagganap at inaalis ng naipon teknikal na utang. Umiiral na API ay nagdusa ng kaunti.

Ano ang bagong sa bersyon 1.0.5:

• Na-update talk tema marker bilang TED-update ang kanilang mga layout ng HTML .

Ano ang bagong sa bersyon 0.1:

• Naka-blacklist ng ilang talk URL bilang sila ay hindi nagkaroon anumang mga pag-download para sa medyo matagal-tagal.
• Na-update download ng video marker bilang TED-update ang kanilang mga layout ng HTML.

Mga Kinakailangan :

• Python