Я работаю над кодом python, который использует механизацию для захвата данных с другого сайта. Из-за сложности веб-сайта код занимает 10-30 секунд. Он должен прокладывать себе путь через пару страниц и т. Д. Я планирую, что этот фрагмент кода называется довольно часто. Мне интересно, как лучше реализовать что-то подобное, не вызывая огромной нагрузки на сервер. Поскольку […]
Я обнаружил, что ultramysql отвечает моим требованиям. Но у него нет документа и нет двоичного пакета Windows. У меня есть программа, загруженная в интернет-загрузку и вставки mysql. Поэтому я использую gevent для решения проблемы с несколькими загрузками. После того как я загрузил веб-страницы и проанализировал веб-страницы, я могу вставить данные в mysql. Monkey.patch_all () делает […]
Я думаю, что это ошибка в моем собственном коде django, но просто хотелось убедиться. Число строк или моделей, которые у меня есть в базе данных, влияет на потребление памяти django RAM? Предположим, у нас была таблица mysql, называемая Model. Мой код django имеет только ленивые ожидания запроса в этой форме: Models.objects.filter().blah().blah()[:SOME_NUMBER] SOME_NUMBER остается постоянным, поэтому […]
На Ubuntu эта командная строка: sudo netstat -tap | grep mysql если MySQL работает, возвращается что-то вроде этого: tcp 0 0 localhost:mysql *:* LISTEN 6732/mysqld и ничего, если это не так. Я использую подпроцесс, чтобы узнать изнутри кода python, если MySQL работает, ища «LISTEN» в том, что возвращает netstat, делая это: import subprocess msqlr = […]
Я подготовил хранимую процедуру, которая работает нормально, если я делаю вызов с консоли MySQL. Но при работе в python с контроллером mysql.connector процедура ввода корректно выполняется. Однако результат не приводит к fectchall() потому что следующая ошибка: File "/home/sis1/prueba/prueba.py", line 16, in <module> reg=conn.fetchall() File "/usr/lib/pymodules/python2.7/mysql/connector/cursor.py", line 551, in fetchall raise errors.InterfaceError("No result set to fetch […]
Я пытаюсь вставить эту строку данных (я разбираю из списка кортежей) (0L, u'2012-11-06T16:23:36-05:00', 0L, None, 23759918L, u'baseline', u'0 to 100', nan, 105114L, 2009524L, True, u'charge', u'Charge') в таблицу базы данных mySQL, но у меня, похоже, проблемы с нулевым значением (NaN), потому что я получаю эту ошибку: OperationalError: (1054, "Unknown column 'nan' in 'field list'") Я […]
У меня есть этот метод django views.py который предназначен для вставки многих данных в db. Он перебирает массивы моделей и, если объект еще не находится на db, он вставлен. Вот как выглядит код: def update_my_db(request): a_models = A_Model.objects.filter(my_flag=True) for a_model in a_models: b_model_array = [] […] # this is where b_model_array gets filled for index […]
Я новичок на python, пытаясь изучить некоторые вещи, написав сценарии сервера, которые подключаются к нашим базам данных mysql и делают некоторые вещи. У меня есть python 3.3.1 и mysql 5.0.96 (сообщество). я установил соединитель mysql / python и попытался выполнить базовое соединение, используя пример кода на сайте mysql dev. вот мой простой скрипт python: #!/usr/local/bin/python3 […]
Иногда я получаю следующую ошибку в Django, которая исчезает при перезагрузке страницы, я не знаю, как ее воспроизвести. Я попытался установить wait_timeout на 12 часов в my.cnf , но ошибка снова возникла при mysqld restart , хотя это не было, когда я снова перезапустил mysqld, очень странный для меня. Traceback (most recent call last): File […]
Я хотел бы создать пользовательское поле UUID в peewee (над MySQL). В python я использую UUID как шестнадцатеричную строку, например: uuid = '110e8400-e29b-11d4-a716-446655440000' Но я хочу сохранить его в базе данных в столбце типа BINARY(16) чтобы сэкономить место. MySQL имеет встроенные методы HEX() и UNHEX() для преобразования между строкой и двоичным UNHEX() . Итак, мой […]