sim3x

некоторые достигают вполне нехилых высот, продолжая заниматься вполне непрофильными занятиями.

тут, кагбе, все зависит от вас, а не от профессии.
я, например, лично знаком с миллионером–инвестором (никак не связанным инвестициями с айти), который все айти, связанное с его бизнесом, тянет сам потому что ему это нравится.

html_text = """
<table class="content-table">
...
</table>
"""

import lxml.html

root = lxml.html.fromstring(html_text)

header = [x.text for x in root.xpath('.//tr/th')]

for item in root.xpath('.//tr'):
    td = [x.text for x in item.xpath('.//td')]
    if td:
        print(dict(zip(header, td)))

{'Год': 'след 12m. (прогноз)', 'Дивиденд (руб.)': '83.71', 'Изм. к пред. году': '+53.2%'}
{'Год': '2019', 'Дивиденд (руб.)': '54.64', 'Изм. к пред. году': '+28.78%'}
{'Год': '2018', 'Дивиденд (руб.)': '42.43', 'Изм. к пред. году': '-16.13%'}
{'Год': '2017', 'Дивиденд (руб.)': '50.59', 'Изм. к пред. году': '+361.59%'}
{'Год': '2016', 'Дивиденд (руб.)': '10.96', 'Изм. к пред. году': '+3.59%'}
{'Год': '2015', 'Дивиденд (руб.)': '10.58', 'Изм. к пред. году': '+28.55%'}
{'Год': '2014', 'Дивиденд (руб.)': '8.23', 'Изм. к пред. году': '-4.3%'}
{'Год': '2013', 'Дивиденд (руб.)': '8.6', 'Изм. к пред. году': '+21.47%'}
{'Год': '2012', 'Дивиденд (руб.)': '7.08', 'Изм. к пред. году': '+41.04%'}
{'Год': '2011', 'Дивиденд (руб.)': '5.02', 'Изм. к пред. году': '-23.48%'}
{'Год': '2010', 'Дивиденд (руб.)': '6.56', 'Изм. к пред. году': '+48.42%'}
{'Год': '2009', 'Дивиденд (руб.)': '4.42', 'Изм. к пред. году': '-21.77%'}
{'Год': '2008', 'Дивиденд (руб.)': '5.65', 'Изм. к пред. году': '+22.83%'}
{'Год': '2007', 'Дивиденд (руб.)': '4.6', 'Изм. к пред. году': '+360%'}
{'Год': '2006', 'Дивиденд (руб.)': '1', 'Изм. к пред. году': 'n/a'}
{'Год': '2005', 'Дивиденд (руб.)': '0', 'Изм. к пред. году': '-100%'}
{'Год': '2004', 'Дивиденд (руб.)': '2', 'Изм. к пред. году': 'n/a'}

в переменные как копировать - уже сами догадаетесь...

Объединение нескольких колонок в одну, для однотипных данных. Они будут храниться в формате JSON.

JSON объёмнее плоской таблицы хотя бы из-за необходимости в хранении ключей.
И, насколько знаю, mysql пока умеет только btree. Что подходит для произвольного поиска от слова никак. Только для заранее известного критерия.

3. Партиционирование.

планирую создать новую, "горячую" таблицу с идентичной структурой.

Слово неплохое упомянуто. Осталось понять зачем всё остальное. Партицировать таблицы умеет штатно даже такая удивительная штука как mysql и очень давно.

Профилируйте где время теряете и смотрите что с данными делаете.
Озвученные цифры не впечатляют от слова совсем. Если человек хочет поиграться с разными подходами индексирования и производительностью сложных запросов - я посоветую с миллиона записей только начинать.

Типичная ошибка - пытаетесь строить аггрегаты и прочие count(*) поверх миллионов строк налету.

Его не надо создавать, он создаётся автоматически при выполнении команды django-admin startproject.

Нормальный пароль + двухфакторная авторизация = спасённый отец демократии.
И не занимайтесь фигнёй)

https://docs.djangoproject.com

Студия - это юрлицо, с которым можно заключить договор, которое не сбежит с предоплатой и не попадёт под автобус, которому можно платить банковскими переводами, с которым можно судиться. И т.д. и т.п. Разница между заказом фрилансеру и студии такая же, как между покупкой дорогущего внедорожника в салоне и у мутного незнакомого хмыря в наколках.

Ну опять это MMORPG-мышление.

Для того, чтобы решить проблему, нужно уметь решать проблему. Или отдать её тому, кто умеет её решать.
Потому что любой автоматический анализатор кода также требует понимания, какие предупреждения он выдает и почему выдает.

Код, который входит в большие проекты и/или публичен не становится от этого хорошим по волшебству. Он становится лучше только от того, что на него посмотрело больше хороших программистов, а не тех, кто научился писать hello world.

Простая публичность этого не гарантирует, а только слегка увеличивает вероятность. Именно потому, есть довольно качественные opensource проекты, а есть - глюк на глюке, несмотря на большое число участников.

Собственное умение хорошо программировать также повышает вероятность получить качественный код, как и чужое. А собственное неумение - понижает её, несмотря ни на что другое, просто по статистическим законам надёжности.

create sequence serial_number_seq minvalue 1 maxvalue 999999999;

Сделать новое число - nextval('serial_number_seq')
Гарантированно уникально. К строке, если очень хочется, можете привести сами