Tag: python

scrapy – обработка нескольких типов элементов – множественные и связанные модели Django и сохранение их в базе данных в трубопроводах

У меня есть следующие модели Django. Я не уверен, что лучший способ сохранить эти взаимосвязанные объекты при сканировании в паук в базу данных в Django с использованием протоколов scrapy. Похоже, что трубопровод для скрипов был построен для обработки только одного «вида» предмета models.py class Parent(models.Model): field1 = CharField() class ParentX(models.Model): field2 = CharField() parent = […]

Как оптимизировать uWSGI приложение python + nginx на Ubuntu?

У меня есть простое приложение Flask, которое предоставляет один api. Вызов api запускает алгоритм python, который выполняет много строковых манипуляций и чтения файлов (без записи). Алгоритм занимает около 1000 мс. Я пытаюсь понять, есть ли способ оптимизировать одновременные запросы. Я запускаю один экземпляр из 4 vCPU VM. Я написал клиента, который делает запрос каждые 1000 […]

Свертывание мультииндекса DataFrame для регрессии

У меня есть Multiindexed DataFrame, содержащий объясняющие переменные df и DataFrame, содержащие переменные ответа df_Y # Create DataFrame for explanatory variables np.arrays = [['foo', 'foo', 'foo', 'bar', 'bar', 'bar'], [1, 2, 3, 1, 2, 3]] df = pd.DataFrame(np.random.randn(6,2), index=pd.MultiIndex.from_tuples(zip(*np.arrays)), columns=['X1', 'X2']) # Create DataFrame for response variables df_Y = pd.DataFrame([1, 2, 3], columns=['Y']) Я могу […]

Удаление неиспользуемых категорий в результатах серии в дублированных категориях

Итак, мы создаем серию с величиной NaN в пандах 0,17 >>> s = pd.Series(["A", "B", pd.np.nan]).astype("category") Затем мы удаляем неиспользуемые категории, которые дают следующий результат: >>> s.cat.remove_unused_categories() 0 A 1 B 2 NaN dtype: category Categories (3, object): [B, A, B] Я просмотрел код remove_unused_categories и вижу, что cat._codes возвращает [ 0 1 -1] для […]

Django OAuth Toolkit «Тип ресурса-владельца на основе пароля»

Я пытаюсь настроить OAuth2 для Django + Rest Framework с помощью Django OAuth Toolkit, и вот головоломка, которую я не могу понять при использовании типа авторизации с правами владельца на основе паролей. Я могу успешно получить access_token для того же пользователя, который зарегистрировал приложение (владельца клиента), используя: Однако, когда я пытаюсь использовать те же client_id […]

Добавление пакетов в исключения pylint

Я использую pylint со spyder, но когда я оцениваю статический анализ кода, он утверждает, что numpy не имеет каких-либо членов. Кто-нибудь знает способ добавления пакетов python в какой-то список универсальных исключений, чтобы pyline просто пропустил их? Я ударил немного кирпичной стены с Google – некоторые источники ссылаются на файл «* .rc», но я не могу […]

PyQt5: QApplication получает все больше QTimers

У меня странный эффект с приложением, встроенным в Python 3.4 с использованием PyQt5 (и использование asyncio и quamash , должно ли это иметь значение). Программа выполняет некоторые периодические действия, используя один поток и time.sleep() и один раз с помощью asyncio coroutine и asyncio.sleep() . Теперь, как только запускается одна или обе эти периодические операции, потребление […]

Прогнозирование таймсерий в Python с индексами datetime

Я пытаюсь спрогнозировать временную серию, используя SVR и GP. pandas.Series времени на самом деле являются pandas.Series с pandas.DatetimeIndex как индексы. Оба алгоритма реализованы в scikit-learn. В то время как SVR фактически соглашается прогнозировать с осью X после модификации: train_size = 100 svr = GridSearchCV(SVR(kernel='rbf', gamma=0.001), cv=5, param_grid={"C": [1e0, 1e1, 1e2, 1e3], "gamma": np.logspace(-2, 2, 5)}) […]

Многопоточность Python NLTK

Я пишу алгоритм, который идентифицирует предложения в заданном тексте, разбивает каждое предложение на слова и возвращает эти слова после некоторых валидаций. Я хочу реализовать то же самое с помощью многопоточности. Я вызываю свою функцию, которая имеет дело с каждым предложением в threading.thread() для которого она выдает ошибку: AttributeError: 'WordListCorpusReader' object has no attribute '_LazyCorpusLoader__args' Однако […]

Django 1.8: сообщение в классе не отображается

Я пишу простой сайт, используя Django 1.8.6 (Python 3.5.0) для аренды. После того, как пользователь создал ренту (используя класс CreateView ), пользователь перенаправляется на страницу индекса аренды, где должно отображаться сообщение об успешности (шаблон шаблона наследуется от base.html ). Я прочитал документацию для структуры сообщений Django и соответствующий раздел для добавления сообщений в представлениях на […]

Interesting Posts for Van-Lav

Tensorflow AttributeError: объект «NoneType» не имеет атрибута «TF_DeleteStatus»

Как извлекать значения в поле Many2one в качестве поля выбора?

В python функция является объектом?

Не удается сохранить wav из python, не может импортировать SpeechLib из comtypes.gen, что дальше?

Использование Python ConfigParser для чтения файла без имени раздела

Обнуление пользователя

Самый быстрый путь к списку дедуплирования в dict

Что может быть причиной «недопустимого значения, встречающегося в less_equal» в numpy

Python ValueError: операнды не могут транслироваться вместе с фигурами

Как избавиться от ошибки максимальной глубины рекурсии при интерактивном построении?

Последовательное получение ImportError: не удалось импортировать настройки «myapp.settings»

Класс солода Parser бросает класс не найден исключение

Обслуживание Python (Flask) REST API через HTTP2

Как вы base-64 кодируете PNG-изображение для использования в data-uri в файле CSS?

Динамически добавлять свойства к экземплярам в Python

Python - лучший язык программирования в мире.