<div dir="ltr"><div dir="ltr">Hey Walter,</div><div dir="ltr"><br></div><div>Thank you for looking over the proposal. So one of the goals is to convert the Carnegie lessons into Music Blocks projects to enhance the lesson generation, which doesn't seem that complicated, it's just adding the files to the existing Chroma DB. The bigger goal is to add code generation (both block-based and JavaScript) for the music blocks. So let's say I ask for a lesson on slow bpm music. The lesson plan generator in MusicBlocks-AI would generate a lesson plan, and code generation would generate example Music Blocks code as examples in the lesson plan.<br><br></div><div>The way this works is by using an annotated music dataset (A-MAPS is a better example than the Lahk), converting the MIDI files into Music Blocks code using a script, and storing the annotations and code inside another Chroma DB. <br></div><div><br></div><div>Now lets say the user wants a lesson on slow bpm music. The LangChain agent in the FastAPI backend will determine if it needs context from the lesson plan Chroma DB and the code sample Chroma DB, which is yes in this case. The backend will query from the respective Chroma DBs reference material using ANN, and supply this to the LLM. The LLM will generate a lesson plan and code samples based on these references, and send it back to the user. Now, the user has a generated lesson plan and example Music Blocks code, which can be imported into Music Blocks.</div><div><br></div><div>Simply put, this is enhancing the capabilities of the current MusicBlocks-AI repo by enhancing lesson plan generation and adding code generation capabilities.</div><div><br></div><div>I can add further details about the process into the proposal.</div><div><br></div><div>Thanks,</div><div>Nideesh</div><br><div class="gmail_quote gmail_quote_container"><div dir="ltr" class="gmail_attr">On Fri, Mar 28, 2025 at 5:05 PM Walter Bender <<a href="mailto:walter.bender@gmail.com">walter.bender@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div>I think I largely understand all of the individual things you are mentioning in your proposal, but I am not sure I understand the end goal. Is your plan essentially to convert the Carnegie lessons into Music Blocks projects? What is the role of the Lahk dataset? What does the LLM do?</div><div><br></div><div>-walter</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, Mar 27, 2025 at 8:59 PM Nideesh Bharath Kumar <<a href="mailto:bknideesh@gmail.com" target="_blank">bknideesh@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div>Hey Music Blocks Team,</div><div><br></div><div>I would like to participate in the development of the AI Code Generation for Lesson Plans and Model Abstraction Layer. I have attached my initial proposal for review and any feedback would be greatly appreciated.</div><div><br></div><div>Thanks,</div><div>Nideesh</div></div>
_______________________________________________<br>
Sugar-devel mailing list<br>
<a href="mailto:Sugar-devel@lists.sugarlabs.org" target="_blank">Sugar-devel@lists.sugarlabs.org</a><br>
<a href="http://lists.sugarlabs.org/listinfo/sugar-devel" rel="noreferrer" target="_blank">http://lists.sugarlabs.org/listinfo/sugar-devel</a><br>
</blockquote></div><div><br clear="all"></div><br><span class="gmail_signature_prefix">-- </span><br><div dir="ltr" class="gmail_signature"><div dir="ltr"><div><font><font>Walter Bender</font></font><br><font><font>Sugar Labs</font></font></div><div><font><a href="https://www.sugarlabs.org" target="_blank"><font>https://www.sugarlabs.org</font></a></font><br><a href="http://www.sugarlabs.org" target="_blank"><font></font></a><br></div></div></div>
</blockquote></div></div>