ssbb

ex. adwo/ad3w @ Philippines, Dumaguete

Мужчина

17 августа 1992 г.

Philippines, Dumaguete

Hamck

sssbb_me

[email protected]

Группа

Джедаи

Статус

Активный

Последние сообщения ssbb

Наш форум → Книга жалоб и предложений! • 2 сентября 2015 г. 2:39

При логине вылетает 403, хотя авторизация проходит.
При логине вылетает 403, хотя авторизация проходит.
Python → Какими библиотеками для краулинга/парсинга пользуется в питошке? • 1 сентября 2015 г. 20:14

@mathete, а zombie - не headless browser?
@mathete, а zombie - не headless browser?
Python → Какими библиотеками для краулинга/парсинга пользуется в питошке? • 1 сентября 2015 г. 20:05

@mathete что такое "среда браузера"? окружение. dom, localstorage, etс. Чтобы получить html тебе не нужна среда браузера? Чтобы траверсить html тоже не нужна? Совсем нет. Только если он не генерируется через JS. А по теме. Прикинь как будет выглядеть http://zombie.js.org/ написан...

@mathete

что такое "среда браузера"?

окружение. dom, localstorage, etс.

Чтобы получить html тебе не нужна среда браузера? Чтобы траверсить html тоже не нужна?

Совсем нет. Только если он не генерируется через JS.

А по теме. Прикинь как будет выглядеть http://zombie.js.org/ написанный на питоне, сколько он будет жрать ресурсов и насколько будет тормозной. Тоже самое с вебкитом.

Есть селениуем, который жрет совсем не много ресурсов (на vps крутится парсер с 2000 потоков с селениуемом, все ок). К тому же раньше писал про phantomjs, который отлично работает из питона.

Спустя 235 сек.

Что-то я тогда и не понял, в чем плюс для обработки клиентского жс, если так же нужен headless-браузер?
Django → Подскажите инлайновый редактор текста на странице • 1 сентября 2015 г. 19:04

Вот еще: Django Addendum — Django Addendum 0.3.0 documentation [django-addendum.readthedocs.org] Django Addendum — Django Addendum 0.3.0 documentation django-addendum.readthedocs.org
Вот еще: Django Addendum — Django Addendum 0.3.0 documentation [django-addendum.readthedocs.org]

Django Addendum — Django Addendum 0.3.0 documentation

django-addendum.readthedocs.org
Django → Подскажите инлайновый редактор текста на странице • 1 сентября 2015 г. 18:57

@adw0rd вот что-то похожее по описанию django-scribbler — django-scribbler 0.5.3 documentation [django-scribbler.readthedocs.org] django-flatblocks 0.9.1 : Python Package Index [pypi.python.org] django-scribbler — django-scribbler 0.5.3 documentation ...

@adw0rd вот что-то похожее по описанию

django-scribbler — django-scribbler 0.5.3 documentation [django-scribbler.readthedocs.org]
django-flatblocks 0.9.1 : Python Package Index [pypi.python.org]

django-scribbler — django-scribbler 0.5.3 documentation

django-scribbler.readthedocs.org

django-flatblocks 0.9.1 : Python Package Index

django-flatblocks acts like django.contrib.flatpages but for parts of a page; like an editable help box you want show alongside the main content.

pypi.python.org
Django → Подскажите инлайновый редактор текста на странице • 1 сентября 2015 г. 18:52

Мне кажется, что проще будет самому запилить с тем же ckeditor. Вроде ничего сложного.
Мне кажется, что проще будет самому запилить с тем же ckeditor. Вроде ничего сложного.
Python → Какими библиотеками для краулинга/парсинга пользуется в питошке? • 1 сентября 2015 г. 18:26

@adw0rd, @mathete а вот ради интереса, как в таком случае помогает нода? ведь даже чтобы просто получить значение переменной со страницы - нужен среда браузера (phantomjs там или что ни будь такое)?
@adw0rd, @mathete а вот ради интереса, как в таком случае помогает нода? ведь даже чтобы просто получить значение переменной со страницы - нужен среда браузера (phantomjs там или что ни будь такое)?
Python → Какими библиотеками для краулинга/парсинга пользуется в питошке? • 1 сентября 2015 г. 18:17

Ладно, я не спорю, что местами может быть удобнее :)
Ладно, я не спорю, что местами может быть удобнее :)
Python → Какими библиотеками для краулинга/парсинга пользуется в питошке? • 1 сентября 2015 г. 17:58

@adw0rd, а как это будет на ноде? на сколько я знаю, то у ноды и страницы сайта совершенно разный контекст выполнения Спустя 156 сек. Да и webkit никто не отменял :)

@adw0rd, а как это будет на ноде? на сколько я знаю, то у ноды и страницы сайта совершенно разный контекст выполнения

Спустя 156 сек.

Да и webkit никто не отменял :)
Python → Какими библиотеками для краулинга/парсинга пользуется в питошке? • 1 сентября 2015 г. 17:49

@mathete, опять же что имеется ввиду под js на странице? просто кусок кода, который можно за 10 минут переписать на любой язык, или когда вся страница строится на js?
@mathete, опять же что имеется ввиду под js на странице? просто кусок кода, который можно за 10 минут переписать на любой язык, или когда вся страница строится на js?
Python → Какими библиотеками для краулинга/парсинга пользуется в питошке? • 1 сентября 2015 г. 12:48
@mathete, асинхронность да я просто из твоего предложения не понял, что было вторым. имел ввиду, что делать запросы и парсить - нет разницы, на каком языке. Так почему же тогда питон только для простеньких парсеров, не понял?
@mathete,
1. асинхронность
2. да я просто из твоего предложения не понял, что было вторым. имел ввиду, что делать запросы и парсить - нет разницы, на каком языке.
Так почему же тогда питон только для простеньких парсеров, не понял?
Python → Какими библиотеками для краулинга/парсинга пользуется в питошке? • 1 сентября 2015 г. 12:35

@mathete, питон может. с 3.4 даже в stdlib, так что это не что-то, что питон "не может" сделать. второе - это javascript? нода не рендерит жс. если про фантомы всякие, то и из питона отлично юзается. а если про сам язык, то это скорее минус (раньше был фанатом, пару лет работал в стартапе на но...

@mathete, питон может. с 3.4 даже в stdlib, так что это не что-то, что питон "не может" сделать.

второе - это javascript? нода не рендерит жс. если про фантомы всякие, то и из питона отлично юзается. а если про сам язык, то это скорее минус (раньше был фанатом, пару лет работал в стартапе на ноде, и парсеров там много было).
Python → Какими библиотеками для краулинга/парсинга пользуется в питошке? • 1 сентября 2015 г. 12:00

@mathete, а чего же дает такого нода, чего не дает питон?
@mathete, а чего же дает такого нода, чего не дает питон?
Python → Списки лучших библиотек и манов для питона • 1 сентября 2015 г. 7:37

@adw0rd, да как-то твистед под тройку фиксить не особо желание
@adw0rd, да как-то твистед под тройку фиксить не особо желание
Python → Какими библиотеками для краулинга/парсинга пользуется в питошке? • 1 сентября 2015 г. 6:04

@mathete, после ноды хочется только на питоне и краулить. Спустя 68 сек. Вообще scrapy, но оно не поддерживает тройку (из-за твистеда ofc). Поэтому сейчас играюсь со своими классами в стиле scrapy + asyncio/aiohttp.

@mathete, после ноды хочется только на питоне и краулить.

Спустя 68 сек.

Вообще scrapy, но оно не поддерживает тройку (из-за твистеда ofc). Поэтому сейчас играюсь со своими классами в стиле scrapy + asyncio/aiohttp.
Python → Списки лучших библиотек и манов для питона • 1 сентября 2015 г. 5:59

Чего же из скрапинг-фреймворком кроме grab ничего не работает на тройке? :( Спустя 136 сек. pyspider конечно, но какой-то он странный (я правильно понял, что только в админке можно писать?)

Чего же из скрапинг-фреймворком кроме grab ничего не работает на тройке? :(

Спустя 136 сек.

pyspider конечно, но какой-то он странный (я правильно понял, что только в админке можно писать?)
Браузерные плагины и приложения → Может ли приложение Chrome ловить ссылки? • 17 августа 2015 г. 16:46

@technobulka, так ты сам поставил обработчик на Trello [trello.com] Думаю, что имелись ввиду именно декстопные обработчики - браузер может запускать декстопные аппы, как это делает, например itunes в mac os. Спустя 128 сек. А, еще как вариант сделать просто расширения браузеру и общаться лока...

@technobulka, так ты сам поставил обработчик на Trello [trello.com]

Думаю, что имелись ввиду именно декстопные обработчики - браузер может запускать декстопные аппы, как это делает, например itunes в mac os.

Спустя 128 сек.

А, еще как вариант сделать просто расширения браузеру и общаться локально с аппой. Как вариант - аппа поднимает socket-сервер локальный, а браузер шлет ей. Довольно просто и без заморочек получится кроссплатформенно.

Trello

Infinitely flexible. Incredibly easy to use. Great mobile apps. It's free. Trello keeps track of everything, from the big picture to the minute de

trello.com
Браузерные плагины и приложения → Может ли приложение Chrome ловить ссылки? • 17 августа 2015 г. 16:20

В голову приходит только фейковый браузер-роутер, который ставишь как дефолтный и он дальше уже направляет url в обычный браузер или твою аппу. Можно поставлять вместе с приложением и дать функцию, что если хочется открывать ссылки на trello в приложении, то ставь вот эту штуку как дефолтный брау...
В голову приходит только фейковый браузер-роутер, который ставишь как дефолтный и он дальше уже направляет url в обычный браузер или твою аппу. Можно поставлять вместе с приложением и дать функцию, что если хочется открывать ссылки на trello в приложении, то ставь вот эту штуку как дефолтный браузер :D
Браузерные плагины и приложения → Может ли приложение Chrome ловить ссылки? • 17 августа 2015 г. 16:13

@technobulka, протокол довольно легко задать, тот же electron умеет из коробки. ну или заюзать что-то отдельное/писать под каждую платформу с нуля. Спустя 77 сек. Я вот только не совсем уверен, как ловить ссылки без участия браузера. Очевидным кажется решение Открываешь ссылку > браузер >...

@technobulka, протокол довольно легко задать, тот же electron умеет из коробки. ну или заюзать что-то отдельное/писать под каждую платформу с нуля.

Спустя 77 сек.

Я вот только не совсем уверен, как ловить ссылки без участия браузера. Очевидным кажется решение Открываешь ссылку > браузер > браузер кидает по кастомному протоколу в аппу. Но может есть способ обойти браузер
Python → Третий PyCon Russia пройдёт в Екатеринбурге 18-19 сентября • 17 августа 2015 г. 16:10

@adw0rd, доход в $. с таким курсом можно жить в России очень-очень хорошо или средне на филах :) Думаю на зиму точно останусь.

@adw0rd, доход в $. с таким курсом можно жить в России очень-очень хорошо или средне на филах :)

Думаю на зиму точно останусь.