Smart CJ для тупых :)

Скажите пожалуйста, если я подключаю внешний jquery 3.3.1 (идет вместе с бутрапом),
1) будут ли работать скрипты из текущего билда
2) можно ли исключить подключение библиотеки /scj/includes/js/jquery.js ?

Второй вопрос по рерайтам:
sitemap. Выполнил инструкции из вики.
sitemap.xml отсутствует, но есть sitemap.php
Думаю, надо прописать реврайт? Подскажите плиз, как именно?

Контент сейчас линкуется в виде
http://чего-то там/gallery/take-it-off-and-shoot/index.html

Как переписать рерайт, чтобы было
http://чего-то там/gallery/take-it-off-and-shoot.html

Последний раз редактировалось: pervect (29/06/18 в 12:37), всего редактировалось 3 раз(а)

Dr.Cox писал:

Очень много таких ошибок в логе грабера, хотя если в браузере открыть эти урлы, все ок. Откуда растут ноги таких ошибок? Код: [развернуть] Downloading img http://sponsor.com/fhg/gallys/images_content/MsJuicyAndSkyyKelly_22981/09.jpg (../tmp/8225/tmp//369068.jpg) (1704.7643470764, 0.00027012825012207) 2018-06-29 00:28:36: set ref (1704.7691631317, 0.0048201084136963) 2018-06-29 00:28:36: Can not download http://sponsor.com/fhg/gallys/images_content/MsJuicyAndSkyyKelly_22981/09.jpg (Not 200 answer (0) ) (1704.7738420963, 0.0046699047088623) 2018-06-29 00:28:36: No thumb for this video, skipping ... (1704.7739100456, 5.1021575927734E-5)

Такая же проблема с ОДНИМ споном. Остальные грабятся идеально.
Выглядит так: линк на мувик. Если открывать этот линк в браузере - ролик есть. Если всасывать грабером - Not 200 answer

Так понимаю, для начала вы рекомендуете уменьшить количество одновременно обрабатываемых позиций?

LemonS писал:

http://smartcj.com/forum/viewtopic.php?f=7&t=94898 думаю та же проблема

На серваке сейчас крутятся 2 сайта: смарт и другая CMS. В конфиге php установил rlimit_files = 10000. Дамп добавляю через Rotation - Sets, который содержит 1000 строк и все поля проверенны. Из 1000 галер стабильно ~830 это grab error.

pervect писал:

Скажите пожалуйста, если я подключаю внешний jquery 3.3.1 (идет вместе с бутрапом), 1) будут ли работать скрипты из текущего билда 2) можно ли исключить подключение библиотеки /scj/includes/js/jquery.js ? Второй вопрос по рерайтам: sitemap. Выполнил инструкции из вики. sitemap.xml отсутствует, но есть sitemap.php Думаю, надо прописать реврайт? Подскажите плиз, как именно? Контент сейчас линкуется в виде http://чего-то там/gallery/take-it-off-and-shoot/index.html Как переписать рерайт, чтобы было http://чего-то там/gallery/take-it-off-and-shoot.html

в темплейтах jquery просто что б примеры работали, конечно можно убирать


sitemap - да, можно реврайты как вам нравится. Я бы советовал прочесть базовую доку по реврайтам - однозначно пригодится еще ни раз.

pervect писал:

Такая же проблема с ОДНИМ споном. Остальные грабятся идеально. Выглядит так: линк на мувик. Если открывать этот линк в браузере - ролик есть. Если всасывать грабером - Not 200 answer Так понимаю, для начала вы рекомендуете уменьшить количество одновременно обрабатываемых позиций?

если позиции это кол-во процессов граббера то нет. Советую проверить лимит дескрипторов в системе.

Dr.Cox писал:

На серваке сейчас крутятся 2 сайта: смарт и другая CMS. В конфиге php установил rlimit_files = 10000. Дамп добавляю через Rotation - Sets, который содержит 1000 строк и все поля проверенны. Из 1000 галер стабильно ~830 это grab error.

ок, что пишет на те которые на может сграбить ?

LemonS писал:

ок, что пишет на те которые на может сграбить ?

Ну вот это и пишет post 3297948. Скинул в личку gallery_grabber.log

Dr.Cox: нет, это разные вещи.
Вот у вас написано в логе


2018-06-29 07:15:52: http://tsg.scoreuniverse.com/50plusmilfs/scenes/MistyLuv_28047_02/T…80_TFS.wmv is movie, not in gallery content type limit, skip .... (326.16401290894, 5.4121017456055E-5)
2018-06-29 07:15:52: No items was added for custom gallery (326.16412591934, 0.00010800361633301)
2018-06-29 07:15:52: Cleanup tmp folder ../tmp/9534 (326.16430902481, 0.00017690658569336)
2018-06-29 07:15:52: Setting status 'grab error' for this gallery (326.16491985321, 0.00060486793518066)

LemonS: после апдейта на некоторых сайтах слители лицухи, как восстановить?
проверил папку с скриптом, файл лицензии на месте

Код: [развернуть]

Unexpected return! WARNING! There's a problem with your SmartCJ license. Please, check scj2.lic file or contact support!

raxit: апдейт не трогает ключи поэтому сомневаюсь что после апа.

Где именно выдает ошибку и какfz именно там лицензия и прободали ли вы заливать лиц снова?

LemonS писал:

Dr.Cox: нет, это разные вещи. Вот у вас написано в логе 2018-06-29 07:15:52: http://tsg.scoreuniverse.com/50plusmilfs/scenes/MistyLuv_28047_02/T…80_TFS.wmv is movie, not in gallery content type limit, skip .... (326.16401290894, 5.4121017456055E-5) 2018-06-29 07:15:52: No items was added for custom gallery (326.16412591934, 0.00010800361633301) 2018-06-29 07:15:52: Cleanup tmp folder ../tmp/9534 (326.16430902481, 0.00017690658569336) 2018-06-29 07:15:52: Setting status 'grab error' for this gallery (326.16491985321, 0.00060486793518066)

Что за разные вещи? То что скрипт не добавляет мувики и пропускает такие галерки - вопросов нет, потому что в настройках импорта стоит лимит на картинки. Но у меня появились сомнения - не получается ли так, что если у спона FHG с микс контентом, а у меня стоит Graber Content Type Limit: Images и в Create Custom Galleries - Add only this type of content: Images. То скрипт тупо игнорит такие микс FHG, даже если там есть картинки?

И давайте дальше разбираться. Если учесть, что у спона кривые фильтры в партнерке и такие же кривые галеры, т.е. 307 галер в логе которые без картинок, аля join.bigboobbundle.com/gallery/MTAwMDI0NDUuMi44OC4zMDQuMC43MDkzNzI4LjAuMC4w. И 244 галеры с мувиками, аля join.milfbundle.com/gallery/MTAwMDI0NDUuMi4xMDMuMzY0LjAuNzA5Mjg4OS4wLjAuMA. В сумме получается 551 со статусом "Grab error" и 449 должно быть со статусом "Active". У меня по факту 169 активных и 831 с ошибкой.
Вот таких ошибок много:

Код: [развернуть]

Downloading img http://tsg.scoreuniverse.com/xlgirls/gallys/images_content/MyaBlair_33208/07.jpg (../tmp/9189/tmp//806174.jpg) (1661.6014270782, 0.079702138900757) 2018-06-29 03:47:53: Downloaded 10% (1661.8368110657, 0.23539900779724) 2018-06-29 03:47:53: Downloaded 20% (1661.9444200993, 0.10756707191467) 2018-06-29 03:47:53: Downloaded 30% (1661.9448821545, 0.00044703483581543) 2018-06-29 03:47:53: Downloaded 40% (1661.9451241493, 0.00023412704467773) 2018-06-29 03:47:54: Downloaded 60% (1662.0599031448, 0.11478090286255) 2018-06-29 03:47:54: Downloaded 70% (1662.0602309704, 0.00030994415283203) 2018-06-29 03:47:54: Downloaded 90% (1662.060459137, 0.00022101402282715) 2018-06-29 03:47:54: Downloaded 100% (1662.0606520176, 0.00018596649169922) 2018-06-29 03:47:54: Source Size 105030 (1662.1656839848, 0.1050341129303) 2018-06-29 03:47:54: Make thumb ../tmp/9189/tmp//806174.jpg (1662.1659309864, 0.00023007392883301) 2018-06-29 03:47:54: Creating thumb ../tmp/9189/tmp//55956.jpg.tmp.jpg -> ../tmp/9189/tmp//55956.jpg  (1662.1661961079, 0.00025820732116699) 2018-06-29 03:47:54: Identify /usr/bin//identify -verbose ../tmp/9189/tmp//55956.jpg.tmp.jpg (1662.16634202, 0.00013899803161621) 2018-06-29 03:47:54: IM detect size  (1662.1669361591, 0.00059390068054199) 2018-06-29 03:47:54: Error image size at ../tmp/9189/tmp//55956.jpg.tmp.jpg (1662.1676580906, 0.00071001052856445) 2018-06-29 03:47:54: Can not make thumb (1662.1679370403, 0.00027203559875488) 2018-06-29 03:47:54: No thumb for this video, skipping ... (1662.168143034, 0.0002751350402832) 2018-06-29 03:47:54: Downloading img http://tsg.scoreuniverse.com/xlgirls/gallys/images_content/MyaBlair_33208/08.jpg (../tmp/9189/tmp//235965.jpg) (1662.1684520245, 0.00022697448730469) 2018-06-29 03:47:54: set ref (1662.1693739891, 0.00092506408691406) 2018-06-29 03:47:54: Can not download http://tsg.scoreuniverse.com/xlgirls/gallys/images_content/MyaBlair_33208/08.jpg (Not 200 answer (0) ) (1662.1699171066, 0.00053095817565918) 2018-06-29 03:47:54: No thumb for this video, skipping ... (1662.1699769497, 4.6968460083008E-5) 2018-06-29 03:47:54: Downloading img http://tsg.scoreuniverse.com/xlgirls/gallys/images_content/MyaBlair_33208/09.jpg (../tmp/9189/tmp//698263.jpg) (1662.1701879501, 0.00020694732666016) 2018-06-29 03:47:54: set ref (1662.1707930565, 0.00060677528381348) 2018-06-29 03:47:54: Can not download http://tsg.scoreuniverse.com/xlgirls/gallys/images_content/MyaBlair_33208/09.jpg (Not 200 answer (0) ) (1662.1712400913, 0.00043296813964844) 2018-06-29 03:47:54: No thumb for this video, skipping ... (1662.1712901592, 4.1007995605469E-5) 2018-06-29 03:47:54: Downloading img http://tsg.scoreuniverse.com/xlgirls/gallys/images_content/MyaBlair_33208/10.jpg (../tmp/9189/tmp//787896.jpg) (1662.1714920998, 0.00019621849060059) 2018-06-29 03:47:54: set ref (1662.1721870899, 0.00070500373840332) 2018-06-29 03:47:54: Can not download http://tsg.scoreuniverse.com/xlgirls/gallys/images_content/MyaBlair_33208/10.jpg (Not 200 answer (0) ) (1662.1726469994, 0.00043797492980957) 2018-06-29 03:47:54: No thumb for this video, skipping ... (1662.1726989746, 4.1961669921875E-5)

Последний раз редактировалось: Dr.Cox (30/06/18 в 10:11), всего редактировалось 1 раз

Dr.Cox: давайте по очереди что бы не путать вопросы.

если стоит лимит на картинки - то да, если там не только картинки то фильтрует. Если надо микс то надо убирать фильтр при импорте. Тут все ок? переходим к сл вопросу?

LemonS писал:

если стоит лимит на картинки - то да, если там не только картинки то фильтрует.

Фильтрует каким образом: 1) пропускает миксованные фхг, т.е. вообще не грабит их; 2) пропускает мувики и грабит только картинки с таких фхг?

Последний раз редактировалось: Dr.Cox (01/07/18 в 07:55), всего редактировалось 1 раз

LemonS писал:

raxit: апдейт не трогает ключи поэтому сомневаюсь что после апа. Где именно выдает ошибку и какfz именно там лицензия и прободали ли вы заливать лиц снова?

Выдаёт ошибку, когда пытаюсь загрузить админку


ключ перезаливал, не помогло, лицуха бесплатная

raxit: в шеле если сделать
cd ....scj/admin
php index.php

все ок? тогда вопрос с пермишенами ключа, не дает апачу его читать

LemonS писал:

raxit: в шеле если сделать cd ....scj/admin php index.php все ок? тогда вопрос с пермишенами ключа, не дает апачу его читать

админы отписались:

pervect писал:

Не получается импортировать банеры в формате svg : пишет что это не картинка. Разумеется, я и руками могу прописать external link? но хотелось бы сохранить функционал ротирования банеров (с целью АВ-теста) Можно это ограничение как-то обойти и при этом сохранить функционал ротации банеров спонсора? Спасибо заранее

Добавлено в ап что бы не проверяло, теоретически не будет админ сам себе неизвестно что добавлять ..

raxit писал:

админы отписались:

Тогда не знаю, скидывайте шел, я проверю

Dr.Cox писал:

Фильтрует каким образом? Пропускает миксованные фхг, т.е. вообще не грабит их. Или пропускает мувики и грабит только картинки с таких фхг?

пропускает эти галеры.

raxit писал:

админы отписались:

Как и писало - были проблемы с ключем. Почему-то у автора не получалось скопировать файл.

Dr.Cox писал:

ИМХО будет полезно сделать так, что в "Rotation-List Thumbs" в полях "Data" отображались бы все доступные данные для тумб из полей дампов в "Rotation-Import/Sets". А сейчас выводится только часть данных, а остальное как узнать? :( Т.е. чтобы scj_unfiltered работал не только по описаниям, а например, приводя аналогию с теми же группами "Category (group)" в "Rotation-Import/Sets" и не отфильтрованными галерами, можно было зайти в "Rotation-List Thumbs", выбрать группу scj_unfiltered и все бы стало ясно - какие новые теги или группы мы могли бы добавить и т.п. smailcode54

Думал над этим вопросом и пришел к выводу что нет смысла добавлять в базу поле что б там хранить оригинальную строку - она реально редко надо, при этом если поменять базу то это надо делать новую версию (2.2) потому что дампы уже будт не совместимы, а это потянет апдейты сразу..

Поэтому пойдем более простым путем:

при добавлении галеры пишет в лог что-то вроде

2018-07-01 11:50:46: Importing gallery line: http://test.com/|http://thumb/thumb.jpg(0.019598960876465, 0.01960301399231)
2018-07-01 11:50:46: Import result: OK (0.030753135681152, 0.011148929595947)


потом если вам надо посмотреть какая была строка добавления - это всегда можно найти в логе, искать по текстовому файлу не сложно.

Обратите внимание что логи периодически обрезаются поэтому вероятно в этьом случае надо увеличить

Log files max length, lines

Ткните плз на фак, как синонимизировать слейв пошагово, если ссылки на галеры ведут на мастер. Если на слейве включаю "separate desc" и включаю синонимизацию, то соот-но и ссылки на галеры меняются, но они ведут на мастер, где ссылки то изначальные, в итоге на слейве 404 вместо галер

Johnbonjov: да, при изменении описания меняется слаг тк было бы странно типа описание "оля в душе" а слаг kolya_smotrit_football

но можно по id линковать например , как такой вариант?

1)Нарезал тумбы из мувиков.
Изменил Crop profile
Подскажите пожалуйста, как перерезать тумбы с измененным кроп профайлом (при этом, удалив старые)?

2) Планирую использовать бесконечную прокрутку. Для вывода тумб использую конструкцию <!--что-тотам_1-5--> Логично предположить что для следующей страницы в этом месте нужно что-то вида <!--что-тотам_100-105--> и так далее.
Как в темплейте указать сдвиг номеров для последующих страниц?

3) Это же тред для тупых? Тупой вопрос: нужен блок из нескольких тумб "новых", то есть материал отсортирован по порядку заполнения. Как это сделать? Нашел вариант указания конкретной даты добавления ролика. Но это не совсем то что надо.

4) Еще один тупой вопрос: как писал выше, нужна пагинация. На первой странице надо поместить отдельный блок (к примеру, тумбы NEW) которого не должно быть на последующих. В ВП есть такая хорошая конструкция:

Код:

if (!is_paged()) {      сюда код особого блока для первой страницы ; }

Есть ли что-то подобное для SCJ?

5) Создал кастом темплейт. Вроде при импорте указываю его, но почему-то все равно назначается content_custom_mov После импорта, разумеется, можно тупо переназначить. Но это лишнее движение же. Как указать при импорте роликов что надо использовать именно кастомный темплейт?

Последний раз редактировалось: pervect (02/07/18 в 11:12), всего редактировалось 2 раз(а)

pervect: а просто реграб не работает?
вообще рекроп из мувиков это немного проблема тк исходник скриншота не сохраняется и надо по новой мувик скачивать, снова делать скрины и тп