Я работаю над исследовательским проектом, который требует от меня обработки больших файлов csv (~ 2-5 ГБ) с 500 000 записей. Эти файлы содержат информацию о государственных контрактах (из USASpending.gov ). До сих пор я использовал скрипты PHP или Python для атаки файлов по строкам, их анализа, а затем вставлял информацию в соответствующие таблицы. Разбор умеренно […]
Мне нужно написать программу для очистки форумов. Должен ли я писать программу на Python с помощью Scrapy framework или использовать Php cURL? Также есть ли Php эквивалент Scrapy? благодаря
Хорошо, что это работает с моим Linux-сервером, но я тестирую свой веб-сайт дома на своем ПК и пытаюсь заставить php выполнить мой скрипт на языке python, и, конечно же, это WINDOWS, только путь изменяется, когда Im на моей Linux-машине. $pyscript = 'C:\\wamp\\www\\testing\\scripts\\imageHandle.py'; $python = 'C:\\Python27\\python.exe'; $filePath = 'C:\\wamp\\www\\testing\\uploads\\thumbs\\10-05-2012-523.jpeg' exec('$python $pyscript $filePath', $output, $return ); это […]
В настоящее время у меня есть клиентский сайт на Grid-сервере на MediaTemple, который скоро будет перемещен на виртуальный приватный сервер. В настоящее время он использует некоторые хаки для просачивания своих массивных почтовых отправлений с использованием заданий cron и очередей с базой данных (чтобы избежать превышения установленного предела MediaTemple). Мы не можем использовать сторонние решения (например, […]
На моем веб-сайте я храню фотографии пользователей простым способом, например: «image / user_1.jpg». Я не хочу, чтобы посетители могли просматривать изображения на моем сервере, просто пытаясь user_ids. (Например: www.mydomain.com/images/user_2.jpg, www.mydomain.com/images/user_3.jpg, так далее …) Пока у меня есть три решения: Я пытался использовать .htaccess для защиты паролем папки «images». Это помогло мне до некоторой степени, но […]
В python можно проследить все операторы, выполняемые сценарием командной строки, используя модуль трассировки . В bash вы можете сделать то же самое с set -x . У нас есть скрипт PHP, который мы запускаем из командной строки, например, обычный скрипт bash / python / perl / etc. Ничего веб-и не происходит. Есть ли способ получить […]
У меня есть страница PHP, которая имеет 1 текстовое поле и когда я нажимаю кнопку отправки. Мой SQL будет хранить это имя продукта в моей базе данных. Мой вопрос: можно ли отправить / опубликовать имя продукта, используя скрипт Python, который запрашивает значение 1, а затем использовать мою страницу PHP для отправки в мою базу данных? […]
Мне нужно извлечь данные из url, такие как название, описание и любые изображения vedios в указанном URL-адресе, как кнопка общего доступа к facebook например: http://www.facebook.com/sharer.php?u=http://www.wired.com&t=Test С уважением
Я хочу написать сценарий счетчика хитов, чтобы отслеживать образы на изображениях на веб-сайте и исходящих IP-адресах. Впечатления превышают сотни тысяч в день, поэтому счетчики будут увеличиваться много раз в секунду. Я ищу простой, самостоятельный метод (php, скрипты python и т. Д.). Я думал об использовании MySQL, чтобы отслеживать это, но я предполагаю, что есть более […]
Я с удовольствием использую материалы для своих проектов Python для развертывания. Теперь я занимаюсь большим проектом PHP и задаюсь вопросом, есть ли что-то вроде ткани для PHP?