Dnnc config arg #585

dimakarp1996 · 2023-10-27T14:26:33Z

No description provided.

…sk-server

Release v0.1.0

Release v0.1.1

Release v0.1.2

Release v0.1.3

Release v0.1.4

Release v0.1.5

Release v0.1.6

Release v0.1.7

Release v0.1.8

Release v0.1.9

Release v0.1.10

Release v0.2.0

Release v0.2.1

Release v0.2.2

Release v0.3.0

Release v0.3.1

Release 0.4.0

Release v0.4.1

Release v0.5.0

Release v0.6.0

Release v0.6.1

Release v0.6.2

Release v0.7.0

Release v0.8.0

Release v0.9.0

… classes supported

dilyararimovna · 2023-11-07T09:39:48Z

annotators/dnnc_intents/Readme.md

@@ -0,0 +1,2 @@
+DNNC intent classifier.
+Source: https://github.com/deeppavlov/DeepPavlov/blob/master/deeppavlov/configs/classifiers/few_shot_roberta.json


другой формат ридми немного - посмотри по аналогии сделай, пожалуйста

Можно уточнить, по аналогии с чем? У разных скиллов и аннотаторов ридми разные

dilyararimovna · 2023-11-07T09:41:02Z

annotators/dnnc_intents/server.py

+
+LOGREG_DIR = "/root/.deeppavlov/downloads/logreg_files"
+try:
+    model = build_model(os.getenv("CONFIG"), download=True)


у тебя тут вроде скачивается модель. Но почему у тебя куча файликов всяких добавлено - надо убрать их и скачивать тоже

tar.gz убрал

так а pkl почему оставил? и что за огромные jso, которые даже на гитхабе не открываются? их бы тоже убрать в скачивание

dilyararimovna · 2023-11-07T09:42:42Z

annotators/dnnc_intents/utils_roberta.py

+logger = logging.getLogger(__name__)
+
+
+supported_intents = ["tell_joke", "are_you_a_bot", "meaning_of_life", "oos"]


почему это здесь? это должно быть частью конфиг файла. Ну то есть чтобы задать названия классов тоже в рамках конфига

добавил

dilyararimovna · 2023-11-07T09:46:16Z

components/2JUPwwo1SZzxuj4RXjI350.yml

+  url: http://dnnc-intents:8218/model
+dialog_formatter:
+  name: state_formatters.dp_formatters:preproc_last_human_utt_dialog
+  skill_name: dnnc_intents


это не так работает. Убери этот параметр отсюда и из пайплайн конфа

Параметр skill_name убрал. В пайплайн конфе в dnnc_intents его и нет

dilyararimovna · 2023-11-14T09:58:43Z

annotators/dnnc_intents/Dockerfile

@@ -0,0 +1,25 @@
+FROM deeppavlov/base-gpu:0.17.5
+
+RUN pip install git+https://github.com/deeppavlov/[email protected]


а базового докер образа поновее сразу нет? чтобы не переставлять, а сразу взять новый? если нет, напиши Феде запрос на такой, пожалуйста, в паблик канале слака.

dilyararimovna · 2023-11-14T10:09:08Z

annotators/dnnc_intents/server.py

+
+app = Flask(__name__)
+if os.getenv("CONFIG") == "classifier.json":
+    labels = [k.split("\t")[0] for k in open(f"{LOGREG_DIR}/classes.dict", "r").readlines()]


а почему так? почему не универсальное обращение

лучше бы было единообразное обращение в обоих случаях

плюс хочется, чтобы если человек хочет весь список доступных интентов детектить, ему не надо было все перечислять в классес, а можно было просто классес убрать и все

dilyararimovna · 2023-11-14T10:16:13Z

annotators/dnnc_intents/server.py

+
+LOGREG_DIR = "/root/.deeppavlov/downloads/logreg_files"
+try:
+    model = build_model(os.getenv("CONFIG"), download=True)


так а pkl почему оставил? и что за огромные jso, которые даже на гитхабе не открываются? их бы тоже убрать в скачивание

AndriiHura and others added 30 commits January 24, 2022 11:22

Fix requirements.txt (#84)

72842e3

fix itsdangerous requirements

a67e15c

pin itsdangerous requirements for all flask==1.1.1 servers

0f8ef0e

Merge pull request #102 from deepmipt/fix/combined-classification-fla…

6f0684a

…sk-server

Merge pull request #103 from deepmipt/dev

d237711

Release v0.1.0

Merge pull request #107 from deepmipt/dev

e990264

Release v0.1.1

Merge pull request #119 from deepmipt/dev

3208f71

Release v0.1.2

Merge pull request #123 from deepmipt/dev

ab44553

Release v0.1.3

Merge pull request #137 from deepmipt/dev

1c9a463

Release v0.1.4

Merge pull request #145 from deepmipt/dev

f8e4a59

Release v0.1.4

Merge pull request #150 from deepmipt/dev

48872a6

Release v0.1.5

Merge pull request #153 from deepmipt/dev

ed42f0c

Release v0.1.6

Merge pull request #155 from deepmipt/dev

30f290c

Release v0.1.7

Merge pull request #158 from deepmipt/dev

de510bc

Release v0.1.8

Merge pull request #165 from deepmipt/dev

ab2dcbd

Release v0.1.9

Merge pull request #174 from deepmipt/dev

525783a

Release v0.1.10

Merge pull request #177 from deepmipt/dev

7e87a36

Release v0.2.0

Merge pull request #188 from deepmipt/dev

82a19df

Release v0.2.1

Merge pull request #192 from deepmipt/dev

2b50d6d

Release v0.2.2

Merge pull request #14 from deeppavlovteam/dev

3e3dd71

Release v0.3.0

Merge pull request #201 from deeppavlov/dev

d42e1d6

Release v0.3.1

Merge pull request #206 from deeppavlov/dev

4d5cb36

Release 0.4.0

Merge pull request #216 from deeppavlov/dev

5c36b99

Release v0.4.1

Merge pull request #247 from deeppavlov/dev

2961057

Release v0.5.0

Merge pull request #248 from deeppavlov/dev

c8632e9

Release v0.6.0

Merge pull request #251 from deeppavlov/dev

e4df912

Release v0.6.1

Merge pull request #258 from deeppavlov/dev

c8dc1fa

Release v0.6.2

Merge pull request #259 from deeppavlov/dev

6a85fe4

Release v0.7.0

Merge pull request #267 from deeppavlov/dev

92b29eb

Release v0.8.0

Merge pull request #272 from deeppavlov/dev

d74eca8

Release v0.9.0

dimakarp1996 and others added 18 commits October 21, 2023 23:59

Update utils.py

422c3ae

Update utils.py

b5ae191

Update utils.py

13ff24f

Update utils.py

1698e3b

Update utils.py

e737701

codestyle still needs to pass

c433e58

codestyle

929b787

codestyle

6eb047a

hj

5866747

Old files preserved, new files added. Now logreg is in place, all 150…

9362fef

… classes supported

codestyle

03a3431

CPU-only

ffea5f7

h

0170f7c

Update server.py

ae79269

codestyle

d1cefcc

hf

4306c8c

Update server.py

c2d6d3a

analogous to dnnc_intents branch

0ad100b

dimakarp1996 changed the title ~~[WIP]Dnnc config arg~~ Dnnc config arg Oct 30, 2023

dilyararimovna requested changes Nov 7, 2023

View reviewed changes

dimakarp1996 added 8 commits November 9, 2023 13:43

Delete annotators/dnnc_intents/logreg_files.tar.gz.md5

6d18eab

Delete annotators/dnnc_intents/logreg_files.tar.gz

c3e8d83

Update 2JUPwwo1SZzxuj4RXjI350.yml

70caae1

Update Dockerfile

7a49fe2

Update docker-compose.override.yml

f9626b5

Update utils_roberta.py

09aecac

codestyle

383770c

Update Readme.md

fd65563

dilyararimovna requested changes Nov 14, 2023

View reviewed changes

dilyararimovna changed the base branch from main to dev January 22, 2024 11:07

		@@ -0,0 +1,2 @@
		DNNC intent classifier.
		Source: https://github.com/deeppavlov/DeepPavlov/blob/master/deeppavlov/configs/classifiers/few_shot_roberta.json

		logger = logging.getLogger(__name__)


		supported_intents = ["tell_joke", "are_you_a_bot", "meaning_of_life", "oos"]

		@@ -0,0 +1,25 @@
		FROM deeppavlov/base-gpu:0.17.5

		RUN pip install git+https://github.com/deeppavlov/[email protected]

Dnnc config arg #585

Are you sure you want to change the base?

Dnnc config arg #585

Conversation

dimakarp1996 commented Oct 27, 2023

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Choose a reason for hiding this comment

Uh oh!

Reviewers

Assignees

Labels

Projects

Milestone

Development

Uh oh!

5 participants