Ross Woods, 2023, '24 with thanks to Sαbα Yαsmιn, Dαwιε ναn Vυυrεn, and Τοm Grαnοff
Major revision June-July 2024. Revised Oct. '24, Dec. '24
When can students use Chat GPT? Its benefits are generally quite ethical, but it is easy, dangerous, and unethical for students to try to get it to write essays and theses. We are now seeing new software that can detect text that was written by an AI chatbot. For any kind of educational application, the current best practice is to get permission from your supervisor or instructor before using it.
Outside academia, it is helpul for writing rough drafts, although several iterations might be necessary.
Benefits of Chat GPT
If you are writing a paper or thesis and have an area of interest, ask it for a list of research topics on that area of interest. Those topics might not be exactly what you need, but they could be very helpful.
Chat GPT can find relevant sources for a literature review, and perhaps summarize each article. It can also find data sets.
Chat GPT can break complicated topics into text that is easier to read.
Ask Chat GPT for an outline of your paper, perhaps expressed as chapters and sections, or as sections and arguments pro and contra.
Use Chat GPT to proofread your spelling and grammar.
Use Chat GPT to look for better words.
Use Chat GPT to express your work in a particular style, such as a particular kind of document or the style of a prominent author or for a particular kind of readership. It can also re-express given information from another perspective. This is helpful for several reasons:
Its default language style is quite bland.
It might adjust your vocabulary choice.
It might also improve the readablity level, which largely relates to sentence length.
It can also translate documents.
It can write or check computer code in many different programming languages.
Limitations
Chat GPT is not a subject matter specialist so can be very inaccurate in details.
Chat GPT currently only collates and re-expresses existing information to answer your question or follow your instructions, and express it coherently in written language. This has various implications:
It cannot work beyond the most recent information it was trained on.
It cannot do original research because it cannot actually analyze, identify assumptions, think critically, or explore ramifications.
Anything it says could be plagiarized.
Sometimes it creates fictional references by “collating” references, not just information.
It doesn’t always answer questions very well:
Sometimes its answers don’t make any sense.
Sometimes it can’t answer the question at all.
Sometimes it answers the question, but the answer is wrong.
Where are the boundaries for academic work?
The Australian Standard of Editing Practice (ASEP) sets explicit limits to the editor's role, and it is notable that software and proofreaders operate within these guidelines:
The editor's role is limited to language, expression, referencing, and academic style. They may help in phrasing ideas more clearly, resolving inconsistencies, fixing confusing paragraphs, and helping make argument more persuasive.
They may not write the student’s dissertation nor make changes to structure and content.
The implications are as follows:
Any usage of AI within the ASEP bounds of editing is permissible, although supervisors are entitled to know when it is used.
In dissertation and thesis programs, supervisors must be informed beforehand when it is to be used. This may include a mention in the proposal.
For any usage beyond ASEP bounds, researchers should give references to the AI program, and describe the way it was used, just the same as any other software used to analyze data.
What now? And what next?
Some AI programs can already produce first drafts of literature reviews (see below), and can already sort data into an intelligible outline, which is a rudimentary form of analysis. AI could also write annotated bibliographies.
The direction I believe AI should take for research is to become a more narrowly focussed application that is trained on a narrower range of source information (eg. reputable journal articles, monographs, and dissertations). It also needs to be specifically trained to follow some rules of academia. In particular, it needs to be able to refrain from plagiarism, and to write accurate citations, references, and bibliographies.
The irony is that every time someone points out a weakness in AI, it serves as a way for AI to overcome those weaknesses. Perhaps AI applications will become cleverer but more task-specific. This will reduce the number of mistakes and ethical-legal problems.
Could AI be applied in research?
Computers have long been used in research. The author simply cites the particlar program and reports the detailed procedure.
AI is useful in research in various ways, although perhaps not specifically Chat GPT. For example:
AI can identify patterns in data that are imperceptible to humans.
AI can process visual images and sounds.
AI can probably also convert pseudocode into working computer programs.
It is fairly easy to foresee that AI could also write methodology plans as long as the development was iterative. That is, give it a task, get the AI statement, then ask the program to improve it until it was correct.
Could AI play an even more substantial role in research? Perhaps, but it it would in many iterations. For example, you have a particular kind of complex dataset, and need an algorithm to solve the problem:
Define the problem precisely.
Define your expectations of a solution.
Design a set of inputs (data and questions) to ask AI to create an algorithm.
Add complexity to the algorithm with other scenarios.
Test the algorithm on a simulation for unanticipated results.
Get AI to generate the computer code.
Test the code for bugs.
Test the algorithm on a real case.
Revise as needed.
ChatGPT now offers Data Analyst which claims to be able to help analyze and visualize your data.
Literature reviews
AI writing aids can now write literature reviews. For example, Hyperwrite searches for relevant scholarly sources, summarizes their main points, methodologies, and findings, and organizes these summaries into a well-structured literature review. The result is a comprehensive, academically styled review with proper citations …
An AI-written literature review is helpful as a search strategy and as a way to create a possible outline.
However, AI-written literature reviews will be probably disallowed in academic research for the following reasons. First, AI writes the text, so it is the same as any other chatbot text; the researcher cannot demonstrate accountabilty for what is written. Even worse, the researcher has not actually read the articles, so he/she cannot ensure that the text is correct or even that he/she understands it. Second, AI cannot think critically, it can only collate existing works. In other words, the AI-written literature review is at best a collation, and cannot meet the requirements of a critical review.
The next stage of literature review AI is to explore their potential for writing textbooks. However, the rather basic version can already write a rough draft of textbooks as long as it gets a well-structured question. For example:
In quantitative research, when is it appropriate to use longitudinal research as a method?
Write a set of steps for how to use that method and explain each step in simple language. Include the following:
Do any particular sampling methods work best?
What data needs to be collected?
Are there any particular requirements for data-gathering tools?
What results does it produce?
What tests should a researcher use to check the validity of data?
What statistical procedures are used to analyze data?
What are the most common problems and how can a researcher avoid them?
Give at least three examples of research topics that would use this method.
Scholar GPT by awesomegpts.ai now claims to have built-in critical reading skills.
Other AI applications
Llama: https://llama.meta.com/
Specialist essay writer: https://www.perfectessaywriter.ai/
ZeroGPT claims to be reliable at detecting text written by AI: https://www.zerogpt.com/
Spinnerchief claims to be reliable at evading programs that detect text written by AI: https://blog.spinnerchief.com/.
Ross Woods, 2023, '24 with thanks to Sαbα Yαsmιn, Dαwιε ναn Vυυrεn, and Τοm Grαnοff
Major revision June-July 2024. Revised Oct. '24, Dec. '24. Dit. Respati Ajipurwo
Kapan siswa dapat menggunakan Chat GPT? Manfaatnya secara umum cukup etis, tetapi mudah, berbahaya, dan tidak etis bagi siswa untuk mencoba menggunakannya untuk menulis esai dan tesis. Kini kita melihat perangkat lunak baru yang dapat mendeteksi teks yang ditulis oleh chatbot AI. Untuk semua jenis aplikasi pendidikan, praktik terbaik saat ini adalah mendapatkan izin dari supervisor atau instruktur Anda sebelum menggunakannya.
Di luar dunai akademis, ini berguna untuk menulis draf kasar, meskipun beberapa iterasi mungkin diperlukan.
Manfaat Chat GPT
Jika Anda menulis makalah atau tesis dan memiliki suatu bidang minat, mintalah daftar topik penelitian tentang bidang minat tersebut. Topik-topik tersebut mungkin tidak sepenuhnya sesuai dengan kebutuhan Anda, tetapi bisa sangat membantu.
Chat GPT dapat menemukan sumber yang relevan untuk tinjauan pustaka, dan mungkin meringkas setiap artikel. Ia juga dapat menemukan kumpulan data.
Chat GPT dapat memecah topik rumit menjadi teks yang lebih mudah dibaca.
Mintalah garis besar makalah Anda kepada Chat GPT, mungkin dinyatakan sebagai bab dan bagian, atau sebagai bagian dan argumen pro dan kontra.
Gunakan Chat GPT untuk mengoreksi ejaan dan tata bahasa Anda.
Gunakan Chat GPT untuk mencari kata-kata yang lebih baik.
Gunakan Chat GPT untuk mengekspresikan karya Anda dalam gaya tertentu, seperti jenis dokumen tertentu atau gaya penulis terkemuka atau untuk jenis pembaca tertentu. Chat GPT juga dapat mengekspresikan kembali informasi yang diberikan dari perspektif lain. Hal ini berguna karena beberapa alasan:
Gaya bahasa default-nya cukup hambar.
Ini mungkin menyesuaikan pilihan kosakata Anda.
Ini mungkin juga meningkatkan tingkat keterbacaan, yang sebagian besar berkaitan dengan panjang kalimat.
Ia juga dapat menerjemahkan dokumen.
Ia dapat menulis atau memeriksa kode komputer dalam banyak bahasa pemrograman yang berbeda.
Keterbatasan
Chat GPT bukan ahli dalam suatu bidang tertentu, jadi rinciannya bisa jadi tidak akurat.
Chat GPT saat ini hanya mengumpulkan dan mengungkapkan kembali informasi yang ada untuk menjawab pertanyaan Anda atau mengikuti instruksi Anda, dan mengungkapkannya secara koheren dalam bahasa tertulis. Hal ini memiliki berbagai implikasi:
Ia tidak dapat bekerja melampaui informasi terbaru yang telah dilatihkannya.
Ia tidak dapat melakukan penelitian asli karena ia tidak dapat benar-benar menganalisis, mengidentifikasi asumsi, berpikir kritis, atau mengeksplorasi konsekuensi.
Apa pun yang dikatakannya dapat dijiplak.
Kadang-kadang ia menciptakan referensi fiktif dengan “mengumpulkan” referensi, bukan hanya informasi.
Itu tidak selalu menjawab pertanyaan dengan baik:
Terkadang jawabannya tidak masuk akal.
Kadang-kadang tidak dapat menjawab pertanyaan sama sekali.
Kadang-kadang menjawab pertanyaan, tetapi jawabannya salah.
Di mana batasan untuk tugas akademis?
Standar Praktik Penyuntingan Australia (ASEP) menetapkan batasan yang jelas terhadap peran penyunting, dan perlu dicatat bahwa perangkat lunak dan penyunting naskah beroperasi dalam pedoman berikut:
Peran editor terbatas pada bahasa, ekspresi, referensi, dan gaya akademis. Mereka dapat membantu dalam mengutarakan gagasan dengan lebih jelas, menyelesaikan ketidakkonsistenan, memperbaiki paragraf yang membingungkan, dan membantu membuat argumen lebih persuasif.
Mereka tidak boleh menulis disertasi siswa atau membuat perubahan pada struktur dan konten.
Implikasinya adalah sebagai berikut:
Segala penggunaan AI dalam batasan penyuntingan ASEP diperbolehkan, meskipun pembimbing berhak mengetahui kapan AI tersebut digunakan.
Dalam program disertasi dan tesis, pembimbing harus diberitahu sebelumnya kapan akan digunakan. Ini dapat mencakup penyebutan dalam proposal.
Untuk penggunaan apa pun di luar batasan ASEP, peneliti harus memberikan referensi ke program AI, dan menjelaskan cara penggunaannya, sama seperti perangkat lunak lain yang digunakan untuk menganalisis data.
Dan apa selanjutnya?
Beberapa program AI sudah dapat menghasilkan draf awal tinjauan pustaka (lihat di bawah), dan sudah dapat memilah data menjadi kerangka yang mudah dipahami, yang merupakan bentuk dasar analisis. AI juga dapat menulis bibliografi beranotasi.
Arah yang menurut saya seharusny diambil AI untuk penelitian adalah menjadi aplikasi yang lebih terfokus dan dilatih pada sumber informasi yang lebih terbatas (misalnya artikel jurnal, monograf, dan disertasi yang bereputasi baik). AI juga perlu dilatih secara khusus untuk mengikuti beberapa aturan akademis. Secara khusus, AI harus mampu menghindari plagiarisme, dan menulis kutipan, referensi, dan bibliografi yang akurat.
Ironisnya, setiap kali seseorang menunjukkan kelemahan dalam AI, hal itu menjadi cara bagi AI untuk mengatasi kelemahan tersebut. Mungkin aplikasi AI akan menjadi lebih pintar tetapi lebih spesifik terhadap tugas. Ini akan mengurangi jumlah kesalahan dan masalah etika-hukum.
Bisakah AI diterapkan dalam penelitian?
Komputer telah lama digunakan dalam penelitian. Penulis hanya mengutip program tertentu dan melaporkan prosedur terperinci.
AI berguna dalam penelitian dalam berbagai cara, meskipun mungkin tidak secara khusus Chat GPT. Misalnya:
AI dapat mengidentifikasi pola dalam data yang tidak dapat dilihat oleh manusia.
AI dapat memproses gambar visual dan suara.
AI mungkin juga dapat mengubah pseudocode menjadi program komputer yang berfungsi.
Cukup mudah untuk meramalkan bahwa AI juga dapat menulis rencana metodologi selama pengembangannya bersifat iteratif. Yaitu, memberinya tugas, mendapatkan pernyataan AI, lalu meminta program untuk memperbaikinya hingga benar.
Mungkinkah AI memainkan peran yang lebih substansial dalam penelitian? Mungkin saja, tetapi akan terjadi dalam banyak iterasi. Misalnya, Anda memiliki jenis kumpulan data kompleks tertentu, dan memerlukan algoritma untuk memecahkan masalah:
Definisikan masalahnya dengan tepat.
Tentukan harapan Anda terhadap suatu solusi.
Rancang serangkaian masukan (data dan pertanyaan) untuk diminta AI agar membuat suatu algoritma.
Tambahkan kompleksitas pada algoritma dengan skenario lain.
Uji algoritma pada simulasi untuk mendapatkan hasil yang tidak terduga.
Dapatkan AI untuk menghasilkan kode komputer.
Uji kode untuk mengetahui adanya bug.
Uji algoritma pada kasus nyata.
Revisi seperlunya.
Chat GPT sekarang menawarkan analisa data yang diklaim dapat membantu menganalisis dan memvisualisasikan data Anda.
Tinjauan Literatur
Alat bantu penulisan AI kini dapat menulis tinjauan pustaka. Misalnya, Hyperwrite mencari sumber ilmiah yang relevan, meringkas poin utama, metodologi, dan temuannya, lalu menyusun ringkasan ini menjadi tinjauan pustaka yang terstruktur dengan baik. Hasilnya adalah tinjauan komprehensif bergaya akademis dengan kutipan yang tepat.
Tinjauan pustaka yang ditulis AI berguna sebagai strategi pencarian dan sebagai cara untuk membuat kemungkinan kerangka karangan.
Namun, tinjauan pustaka yang ditulis AI kemungkinan besar tidak diperbolehkan dalam penelitian akademis karena alasan-alasan berikut. Pertama, AI menulis teksnya, jadi teksnya sama seperti teks chatbot lainnya; peneliti tidak dapat menunjukkan akuntabilitas atas apa yang ditulis. Lebih buruk lagi, peneliti belum benar-benar membaca artikelnya, jadi ia tidak dapat memastikan bahwa teksnya benar atau bahkan ia memahaminya. Kedua, AI tidak dapat berpikir kritis, ia hanya dapat menyusun karya-karya yang sudah ada. Dengan kata lain, tinjauan pustaka yang ditulis AI paling banter adalah penyusunan, dan tidak dapat memenuhi persyaratan tinjauan kritis.
Tahap selanjutnya dari tinjauan pustaka AI adalah mengeksplorasi potensinya dalam menulis buku teks. Namun, versi yang agak mendasar sudah dapat menulis draf kasar buku teks asalkan mendapat pertanyaan yang terstruktur dengan baik. Misalnya:
Dalam penelitian kuantitatif, kapan waktu yang tepat untuk menggunakan penelitian longitudinal sebagai suatu metode?
Tuliskan serangkaian langkah-langkah tentang cara menggunakan metode tersebut dan jelaskan setiap langkah dalam bahasa yang sederhana. Sertakan hal-hal berikut:
Apakah ada metode pengambilan sampel tertentu yang paling berhasil?
Data apa yang perlu dikumpulkan?
Apakah ada persyaratan khusus untuk alat pengumpulan data?
Apa hasil yang dihasilkannya?
Tes apa yang harus digunakan peneliti untuk memeriksa keabsahan data?
Prosedur statistik apa yang digunakan untuk menganalisis data?
Apa masalah yang paling umum dan bagaimana seorang peneliti dapat menghindarinya?
Berikan sedikitnya tiga contoh topik penelitian yang menggunakan metode ini.
Scholar GPT dari awesomegpts.ai sekarang mengklaim memiliki keterampilan membaca kritis bawaan.
Aplikasi AI lainnya
Llama: https://llama.meta.com/
Esai spesialis: https://www.perfectessaywriter.ai/
ZeroGPT mengklaim dapat diandalkan dalam mendeteksi teks yang ditulis oleh AI: https://www.zerogpt.com/
Spinnerchief mengklaim dapat diandalkan dalam menghindari program yang mendeteksi teks yang ditulis oleh AI: https://blog.spinnerchief.com/. TensorFlow (Ulasan) IBM Watson (Ulasan) Apache Mahout (Ulasan) OpenNN (Ulasan) Scikit-learn (Ulasan) Accord.NET (Ulasan) Torch (Ulasan)
Terima kasih kepada Goodfirms
CC BY-NC-ND
This work is released under a CC BY-NC-ND license, which means that you are free to do with it as you please as long as you (1) properly attribute it, (2) do not use it for commercial gain, and (3) do not create derivative works.
CC BY-NC-ND