Телеграмм чат группы scrapy

Ссылка на объект vs маршаллинг

Семён Трояновский... in Scrapy

10:23пожаловаться #1

СТ

 Министерство цифрового развития, связи и массовых коммуникаций Российской Федерации (Минцифра, но также известно как Минцирк) разработало проект постановления, фактически запрещающий работу в России сервисов, использующих шифрование доменных имён — то есть, DoH (Domain over HTTPS), DoT (Domain over TLS) и eSNI... Более того, пояснительная записка предлагает и вовсе запретить TLS 1.3.

https://regulation.gov.ru/projects#npa=108513

regulation.gov.ru

Нормативные правовые акты - Официальный сайт для размещения информации о подготовке нормативных правовых актов и результатах их обсуждения

Официальный сайт для размещения информации о подготовке федеральными органами исполнительной власти проектов нормативных правовых актов и результатах их общественного обсуждения

Семён Трояновский... in Scrapy

10:40пожаловаться #2

СТ

мб с этим связана эта фигня с tls

10:41пожаловаться #3

https://regulation.gov.ru/projects#npa=108513

щаз, ага

 Министерство цифрового развития, связи и массовых коммуникаций Российской Федерации (Минцифра, но также известно как Минцирк) разработало проект постановления, фактически запрещающий работу в России сервисов, использующих шифрование доменных имён — то есть, DoH (Domain over HTTPS), DoT (Domain over TLS) и eSNI... Более того, пояснительная записка предлагает и вовсе запретить TLS 1.3.

regulation.gov.ru

кстати такое только на сайтах из рф

10:45пожаловаться #5

SoHard 🎄 in Scrapy

помню у авито, яндекса и еще чего-то были проблемы

10:46пожаловаться #6

Andrey Rahmatullin

Ссылка на объект vs маршаллинг

Теперь-то все ясно!! Возвращаясь к вопросу - судя по докам, должна быть shallow copy, то есть выдавать new? И как теперь проще всего пофиксить, чтобы было new? Не передавать через cb_kwargs?

11:30пожаловаться #7

а это что, не искусственный пример?

11:36пожаловаться #8

если реальные проблемы то хз

11:36пожаловаться #9

выключить дисковые очереди

11:36пожаловаться #10

Реальные конечно, делать мне больше нечего :) А как их выключить?

11:38пожаловаться #11

они по дефолту выключены

11:39пожаловаться #12

Ну в скрапи клауд видимо нет

11:39пожаловаться #13

а, ну там да

11:39пожаловаться #14

(поэтому же не стоит передавать в мете итемлоадеры и прочее, например)

11:40пожаловаться #15

Ага, их я тоже в cb_kwargs засунул. То есть нахрен всю архитектуру передалать, понял

11:40пожаловаться #16

ну может они уже сериализуются (или я вообще путаю)

11:42пожаловаться #17

что-то точно не сериализовывалось когда-то

11:42пожаловаться #18

Ну короче у меня получилась мега-элегантная архитектура, где я все засунул в один класс, и этот класс передавал в cb_kwargs. В этом же классе были и лоадеры. Все это из-за того, что для создания полного итема нужно несколько реквестов, и их приходится делать цепочку. А теперь все это сломалось, получается :( Это баг? Issue сделать на гитхабе?

11:50пожаловаться #19

что именно из этого баг?